一般来说爬虫更为常用的是requests库。 这里简单解释下我们请求一个网页信息的过程。通常我们使用浏览器请求一个网址的信息，比如www.baidu.com 在发送http之前，需要进行DNS解析即域名解析。 DNS解析:域名到IP地址的转换过程。域名的解析工作由DNS服务器完…

——让你轻松处理 URL 参数的利器 在编写 Python 网络程序时，我们经常需要和 Web 接口打交道。接口通常要求我们通过 URL 的 查询字符串（Query String） 传递参数，比如登录

前文传送门：小白学Python爬虫（1）：开篇小白学Python爬虫（2）：前置准备（一）基本类库的安装小白学Python爬虫（3）：前置准备（二）Linux基础入门小白学Python爬虫（4）：前置

本文档介绍了 Python 下载文件的各种方式，从下载简单的小文件到用断点续传的方式下载大文件。 Requests 使用 Requests 模块的 get 方法从一个 url 上下载文件，在 pyth

1.背景 1.1 初识爬虫 网络爬虫，是一种按照一定规则，自动抓取互联网信息的程序或者脚本，其本质是模拟浏览器打开网页，获取网页中我们想要的数据。常用的百度、谷歌的搜索引擎也是一个爬虫，把互联网中的数

😀 这是爬虫专栏第 「5」 篇原创 首先我们介绍一个 Python 库，叫做 urllib，利用它我们可以实现 HTTP 请求的发送，而不用去关心 HTTP 协议本身甚至更低层的实现。我们只需要指定请