爬虫
2篇文章 · 0订阅
  • Node 爬虫入门
    边做边学效率更高，爬虫是node的适用场景之一，关于爬虫的另一篇文章为了验证“简书上，经验总结、资料归集类技术文章更容易上热榜”的猜想，可以做一个爬虫：爬取简书程序员专题热门文章前999篇，统计每篇文章的代码块数量（为什么是统计代码块数量，对于人来说，通过一篇文章的标题内容来判…
    Node.js
  • Node.js多进程爬虫入门
    目标锁定豆瓣日本动画排行榜前 10 页数据爬取。 根据上面分析得出的小结，配合 superagent，我们可以轻松的构建出请求。 利用 Node 提供的 cluster 模块，可以轻松创建多个子进程。 最终就是实现，比如我的 mac 是 4 核的，那么我会开 4 个子进程来进行…
    前端