上次写了第二篇爬虫教程 node.js爬虫入门（二）爬取动态页面(puppeteer) 讲解了使用 puppeteer 开启无头浏览器进行动态数据的爬取，已经是一年前的事情了，之所以相隔这么久没更新是

在知乎提到python就必有一大帮人提起爬虫，咱Node JS爬虫也是非常简单的，和python相比仅仅是“异步”和“多线程”的性能对比而已。对python了解不多，故对此不做评价。 phantomjs是一个‘无壳’的chrome，具体安装方法查看phantomjs.org。p…

写过一段时间代码的同学，应该对这一句话深有体会：程序的时间利用率和空间利用率往往是矛盾的，可以用时间换空间，可以用空间换时间，但很难同时提高一个程序的时间利用率和空间利用率。 但如果你尝试使用生成器来重构你的代码，也许你会发现，在一定程度上，你可以既提高时间利用率，又提高空间利…