相信大家在使用puppeteer的时候会遇到各种各样的问题，比如原本在mac上跑的好好的却发现在centos/docker上遭遇各种各样的问题， 这里把我所遇到的坑跟大家说一下。 当你自己安装chromeium的时候，在启动（puppeteer.launch()）的时候需要指定…

系统环境的话在工作时使用MacOS，部署到服务器上的是Centos 7. 在MacOS上确实简单，只需要npm i puppeteer就行。安装不了有下列几条解决办法： 想象一下，打开网易云音乐，首屏会出现两个内滚动条，如果我们想看到更多的歌单，需要将滚动条下滑。 内滚动截图也…

在微信群中，经常有一些微信群主定时发送一些快报。本次将给介绍给大家一种使用自动化实现类似功能的微信机器人的方法。 网站https://news.ycombinator.com/作为专业hacker 获取信息信息的重要来源，有不少人经常访问它。今天教大家做的自动化，是通过自动化的…

原文是 Mozilla 开发者网站发布的关于 Dweb 的概念、应用及使用案例介绍的系列文章中的第三篇。 In this series we are covering projects that explore what is possible when the web bec…

希望可以从各大技术论坛抓取自己感兴趣的问题。 1. 目录结构 2. 代码设计 因为puppeteer很容易仿真用户在浏览器上的行为，所以DEMO的核心在于如何获取数据，或者说如何实现get_news方法。 以CSDN为例，如下图所示，在网页里我们可以很容易的通过原生的DOM操作…