shouw大人

很好的文章，大家可以按照该文章做好学习规划

从公司层面来讲，流量就是钱，减少APP的大小就显得尤为重要。从开发者层面上来讲，你掌握了这个手艺也会略显逼格满满。

PyCharm下进行Scrapy项目的调试，可以在爬虫项目的根目录创建一个main.py，然后在PyCharm设置下运行路径，那么就不用每次都在命令行运行代码，直接运行main.py就能启动爬虫了。 1、首先创建一个Scrapy项目： 在命令行输入： scrapy startp…

上一章中，我们实现了一个最基本的爬虫，但提取页面信息时使用的是正则表达式，这还是比较烦琐，而且万一有地方写错了，可能导致匹配失败，所以使用正则表达式提取页面信息多多少少还是有些不方便。 对于网页的节点来说，它可以定义id、class或其他属性。而且节点之间还有层次关系，在网页中…

爬虫开发中使用 xpath 进行页面数据匹配和获取

Python 爬虫之 Xpath 学习

Python标准库中有很多非常恶心的模块，但Python的re模块不是其中之一。虽然它已经很老了而且多年未更新，它仍是我认为的众多动态语言中最好的（正则表达式模块）。

不知道就会踩坑的特性