大家好！上一节我们研究了一下爬虫的异常处理问题，那么接下来我们一起来看一下Cookie的使用。为什么要使用Cookie呢？Cookie，指某些网站为了辨别用户身份、进行session跟...

1.HttpURLConnection发送url请求publicclassJavaRequest{privatestaticfinalStringBASE_URL=...

让计算机程序并发的运行是一个经常被讨论的话题，今天我想讨论一下Python下的各种并发方式。并发方式线程（Thread）多线程几乎是每一个程序猿在使用每一种语言时都会首先想到用于解决并发的工具（JS程...

最近学习了用python爬取某网站电影Top250的数据，在这里记录一下。...

Python提供了丰富的内置模块（StandardLibrary），无需安装即可直接使用。以下是一些常用的内置模块及其主要功能：1.文件与系统操作...

现在越来越多的应用和互联网产品做内容的聚合，像今日头条、等等，太多的聚合应用以及不胜枚举，甚至浏览器也可以嵌入聚合的应用。互联网上拥有太多太多的数据，抓取网页的数据做数据挖掘也是最廉价的获取数据的途径...

这里大概稍微讲下，后续会每个库详细介绍，附上图片urllib-urllib库是python中一个最基本的网络请求库。可以模拟浏览器的行为，向指定的服务器发送一个请求，并可以保存服务器返回的数据。1....

以下用最简单的示例来演示爬取某小说网的类目名称。新建一个retest.py，全文代码如下，读者可以复制后直接运行。代码中我尽量添加了一些注释便于理解。需要说明的一点，该小说网站如果后续更新改版了，文中...

Python中的“with”语句：开启优雅文件操作的新篇章引言在日常开发工作中，我们经常需要与各种类型的文件打交道。无论是简单的日志记录还是复杂的文本分析，正确地打开、读取、写入以及关闭文件都是必不可...

前面我们介绍了多种请求库，如urllib、requests、Selenium、Playwright等用法，但是没有统一梳理代理的设置方法，本节我们来针对这些库来梳理下代理的设置方法。1.准备工作...