我发现大模型让很多工作变得超级简单,但很多人并没有感知到。
比如说传统的爬虫采集,以前可能需要写python requests、scrapy脚本,还得去解析html文本,技术门槛不低,而且巨浪费时间。
但现在有了MCP、SKILL、CLI,大模型可以直接干爬虫的活,比如playwright mcp、fetch mcp、chrome mcp、puppeteer mcp等可以直接采集和解析网页,甚至各种bing、百度等搜索工具也有mcp服务。
还有Bright data的MCP和CLI功能,把采集接口集成到mcp服务里,能控制浏览器、实时浏览网页、请求谷歌搜索数据、解锁网页验证等,直接部署在cursor、vscode、codex、workbuddy里,直接聊天对话就能采集到公开的数据,几乎是零门槛。
get.brightdata.com
除了爬虫,还有数据分析、内容写作、多媒体生产都有大量的AI工具可以实现,不过很多人有信息差,看不到,不会用。
所以没事多去看看github、魔搭、huggingface这些平台很有必要,是AI学习的必由之路。
#每天一个知识点#
比如说传统的爬虫采集,以前可能需要写python requests、scrapy脚本,还得去解析html文本,技术门槛不低,而且巨浪费时间。
但现在有了MCP、SKILL、CLI,大模型可以直接干爬虫的活,比如playwright mcp、fetch mcp、chrome mcp、puppeteer mcp等可以直接采集和解析网页,甚至各种bing、百度等搜索工具也有mcp服务。
还有Bright data的MCP和CLI功能,把采集接口集成到mcp服务里,能控制浏览器、实时浏览网页、请求谷歌搜索数据、解锁网页验证等,直接部署在cursor、vscode、codex、workbuddy里,直接聊天对话就能采集到公开的数据,几乎是零门槛。
除了爬虫,还有数据分析、内容写作、多媒体生产都有大量的AI工具可以实现,不过很多人有信息差,看不到,不会用。
所以没事多去看看github、魔搭、huggingface这些平台很有必要,是AI学习的必由之路。
#每天一个知识点#
展开
评论
1