咱们直接进入今天的主题---你真的会写爬虫吗？为啥标题是这样，因为我们日常写小爬虫都是一个py文件加上几个请求，但是如果你去写一个正式的项目时，你必须考虑到很多种情况，所以我们需要把这些功能全部模块化，这样也使我们的爬虫更加的健全。 从图上可以看到，整个基础爬虫架构分为5大类：…

之前的一篇文章 爬虫爬了下知乎上的神回复，已笑趴～ 发布后，引发了大家热烈的反响。很多朋友觉得很神奇，私下问强哥是怎么做到的，有的朋友还表示不太相信。其实爬取知乎神回复很简单，这篇文章我们就来揭晓一下背后的原理。 知乎神回复都有些什么特点呢？我们先来观察一下。 大家看出什么规律…