#每天一个知识点# 在GitHub看到一个用来采集数据的CLI工具-brightdata cli,它可以直接采集url、搜索引擎、站点的数据,能自动化操作浏览器,把playwright的活也干了,而且可以用ai自然语言搜索去采集数据,不需要任何明确的代码指令。

它神奇的地方在于只需要在命令行安装好cli程序后,就能通过一行指令去采集数据,然后直接导出markdown、csv格式,而且你可以用agent直接安装和使用这个cli,不需要会终端、代码,只需要说话给指令就行。

以上的功能都只需要一行代码,所以我说传统的python爬虫已经没有啥必要了。前不久出来的DeepSeek搜索其实也是类似的,找任何数据基本不用自己动手。
展开
2