大家好，我是boy哥。 相信玩过爬虫的朋友都知道selenium，一个自动化测试的神器工具。写个Python自动化脚本解放双手基本上是常规的操作了，爬虫爬不了的，就用自动化测试凑一凑。 虽然selenium有完备的文档，但也需要一定的学习成本，对于一个纯小白来讲还是有些门槛的。…

这篇文章包含了爬虫思路，Spiders 逻辑，MySQL 存储，自定义模块进行存储和断点续爬。