基于Golang的分布式爬虫管理平台,支持Python、NodeJS、Java、Go、PHP等多种编程语言以及多种爬虫框架。Crawlab主要解决的是大量爬虫管理困难的问题,可以对成规模的爬虫项目进行有效监控管理。
github.com
MarvinZhang于2019-08-13 21:27发布的图片
MarvinZhang于2019-08-13 21:27发布的图片
MarvinZhang于2019-08-13 21:27发布的图片
MarvinZhang于2019-08-13 21:27发布的图片
MarvinZhang于2019-08-13 21:27发布的图片
MarvinZhang于2019-08-13 21:27发布的图片
MarvinZhang于2019-08-13 21:27发布的图片
MarvinZhang于2019-08-13 21:27发布的图片
MarvinZhang于2019-08-13 21:27发布的图片
4