首页
沸点
课程
数据标注
HOT
AI Coding
更多
直播
活动
APP
插件
直播
活动
APP
插件
搜索历史
清空
创作者中心
写文章
发沸点
写笔记
写代码
草稿箱
创作灵感
查看更多
登录
注册
确定删除此收藏集吗
删除后此收藏集将被移除
取消
确定删除
确定删除此文章吗
删除后此文章将被从当前收藏集中移除
取消
确定删除
编辑收藏集
名称:
描述:
0
/100
公开
当其他人关注此收藏集后不可再更改为隐私
隐私
仅自己可见此收藏集
取消
确定
nodejs爬虫
订阅
九月红橙
更多收藏集
微信扫码分享
微信
新浪微博
QQ
21篇文章 · 0订阅
奶奶都能轻松入门的 Puppeteer 教程
Puppeteer 可以做很多事情:如截图、生成 PDF、爬取网页、网页测试等,文章主要偏向于介绍如何理将 puppeteer 理解并投入使用
Playwright VS Cypress
本文将对前端自动化测试领域中最热门的两个测试框架 Playwright 与 Cypress 进行详细对比,通过代码片段与实际项目来帮大家直观的感受两个框架在各方面的基本情况。 如果你对于自动化测试还非
丢掉Selenium吧,一起玩玩Playwright
单个API可自动执行Chromium,Firefox和WebKit。 单个浏览器实例可以创建多个隔离的浏览器上下文。每个浏览器上下文都可以运行多页仿真方案
puppeteer基本用法
1、Puppeteer 简介 Puppeteer 是一个node库,由Chrome官方团队进行维护。提供了一组用来操纵Chrome的API, 通俗来说就是一个 headless chrome浏览器 (
我常用的puppeteer爬虫api
详细介绍请看gayhub,更新周期大约是一个月,本文是基于 v1.4.0写的,大致api是通用的。 本文总结了Puppeteer爬虫的主要用法。我的目标是,有了这篇文章,日常的一般爬虫使用就不需要去看官方文档了。 cnpm i -S puppeteer 用cnpm安装没有试过报…
截图的诱惑:Docker部署Puppeteer项目
系统环境的话在工作时使用MacOS,部署到服务器上的是Centos 7. 在MacOS上确实简单,只需要npm i puppeteer就行。安装不了有下列几条解决办法: 想象一下,打开网易云音乐,首屏会出现两个内滚动条,如果我们想看到更多的歌单,需要将滚动条下滑。 内滚动截图也…
基于前端神器-puppeteer搭建静态服务
近期接触到了海报渲染及生成pdf的业务需求,发现公司前端大佬搭建了一套静态化服务直接暴露出接口调用即可,简单过了一遍,里面掺杂着业务逻辑和其他功能没看太懂😂,但出于对于puppeteer的好奇,于是用了两个周末的时间自己搭建一套简单服务,本文主要目的是记录一次从0到1搭建基本…
Node: Puppeteer + 图像识别 实现百度指数爬虫
之前看过一篇脑洞大开的文章,介绍了各个大厂的前端反爬虫技巧,但也正如此文所说,没有100%的反爬虫方法,本文介绍一种简单的方法,来绕过所有这些前端反爬虫手段。 可以发现,百度指数实际上在前端做了一定的反爬虫策略。当鼠标移动到图表上时,会触发两个请求,一个请求返回一段html,一…
Puppeteer + opencv.js 自动化脚本实践经验总结(part 1)
2021 年 12 月到 2022 年 6 月期间,我一直在开发维护一个大型的 JavaScript 自动化脚本,在此项目中用到了 puppeteer 来自动操作网页,用 opencv.js 识别特定
获取市面上普遍使用的 UA
预计时间 2:00 字数 420 语言 ZH 上一个月,我所维护的 puppeteer 脚本好像被平台察觉,据说是因为大量访问都是同一个 UA,以及大量空 referer 访问导致。 目前程序是使用一