#日新计划# 最近看了几个不错的数据采集的mcp,比如微软开源的 playwright-mcp,让你通过AI控制一个真实的浏览器。还有亮数据的brightdata-mcp,这个专门为采集复杂网页设计,一个接口就可以请求几百个网站数据,像电商、社媒、财经等,不用自己处理反爬限制等。
还有一个简单的 fetch-mcp,它主要做简单的网页内容获取,能帮你抓取到给定URL的页面源码(通常是Markdown格式)。它很轻量,但同样不处理复杂的反爬和动态加载。
还有一个简单的 fetch-mcp,它主要做简单的网页内容获取,能帮你抓取到给定URL的页面源码(通常是Markdown格式)。它很轻量,但同样不处理复杂的反爬和动态加载。
展开
评论
1