爬虫
2篇文章 · 0订阅
  • 如何用axios和cheerio写爬虫
    最近想写一个爬虫脚本，查了查网上的脚本教程都是基于pyhton的比较多，而js就很少。问了问我的小伙伴js爬虫需要什么工具吗？大概需要的工具有axios,cheerio，当然也安装了node.js。 安装好了基本工具之后，我们就开始快乐coding了，axios是用来前后端交互…
    爬虫
  • Nodejs 实现定时爬虫
    前两天要帮朋友B站舰长群审核，一个个去舰长列表查找，自然不是一个程序猿的首选，把任务交给计算机让他自己做，摸鱼才是正道。理论成立开始Coding . 由于页面没有节流防抖，当前版本又只能实时爬取，等待时间较长，频繁刷新自然会触发b站的反爬虫机制，于是当前服务器ip就被风控了。 …
    爬虫
    Nodejs 实现定时爬虫