本文主要介绍requests：文件上传、cookie设置、代理设置等内容 文件上传 我们知道requests可以模拟提交一些数据。假 ...

在前几篇文中,我们了解了urllib的基本用法，但是其中确实有不方便的地方，比如处理网页验证和Cookies时，需要写Opener ...

Robots协议 Robots协议也称作爬虫协议、机器人协议，用来告诉爬虫和搜索引擎哪些页面可以抓取，哪些不可以抓取。它通 ...

前面说过，urllib库里还提供了parse这个模块，它定义了处理URL的标准接口，例如实现URL各部分的抽取、合并以及链接转换 ...

处理异常 网络不好的情况下，如果出现了异常，该怎么办呢？这时如果不处理这些异常，程序很可能因报错而终止运行，所 ...

在Python 2中，有urllib和urllib2两个库来实现请求的发送。而在Python 3中，已经不存在urllib2这个库了，统一为urllib ...

数学函数 abs('数值') 获取绝对值 divmod('被除数','除数') 获取商和余数的元组 sum(' 可迭代对象 ') 对列表 ...

状态码 说明 详情 100 继续 请求者应当继续提出请求。服务器已收到请求的一部分，正在等待其余部分 101 切换协议 ...

我们在做爬虫的过程中经常会遇到这样的情况，最初爬虫正常运行，正常抓取数据，一切看起来都是那么美好，然而一杯茶的 ...