这个可能是相对比较简单、可靠的控制浏览器的进行数据爬取的方案了,AiPy+Chrome MCP,这篇文章,将详细告诉你使用方法。先看结果: 自动打开浏览器,自动输入关键词、自动搜索、自动提取商品、价格,整个过程用时仅仅3分钟:教程开始:工具:1、AiPy Pro最新版2、Chrome MCP 3、Chrome浏览器安装AiPy Pro: 从www.aipyaipy.com官网下载最新版。下载后,开始安装,安装完成启动后,免费注册登录,注册的时候填写邀请码“XOFS”。安装Chrome MCP Server:1、从github下载最新版zip压缩包,如: 地址:github.com/hangwin/mcp… 如果下载不了,可以关注我,然后给我发消息:Chrome-MCP,我会自动返回你更多地址。
2、解压:
3、手动安装Chrome扩展:chrome浏览器地址栏输入:chrome://extensions/,点击加载未打包的扩展程序,然后选择刚刚解压的文件夹,然后点击下面的选择文件夹:
此时Chrome会自动安装该扩展,安装完成后,会看到:
然后需要在cmd下执行如下命令 npm install -g mcp-chrome-bridge 成功后,然后选初始化,再连接,要确保初始化完成,连接变成已连接:
在AiPy中配置:设置 > MCP > 添加MCP:名称填:chrome-mcp-server类型填:流式HTTPURL填:http://127.0.0.1:12306/mcp开始使用:在AiPy中选择chrome mcp,然后输入提示词:
任务开始后,AiPy控制浏览器自动访问京东,自动搜索,注意,为了数据获取更可靠,请提前在你的Chrome浏览器上完成京东账号登录:
进入搜索页面:
最终AiPy自动获取到了搜索页面上的商品和价格:
要求其保存成Excel文件:
打开文件,查看结果