8月8日打卡,今天阅读了《Python爬虫教程 用Celery继续搞定分布式爬虫》,通过celery实现分布式爬虫爬取豆瓣读书,celery 官方定义为分布式任务队列,核心就是通过队列来实现跨线程或者跨终端进行作业分发。
评论