my8100

赞

2

|

搜索文章

ScrapydWeb v1.4.0：支持通过 Slack, Telegram 或 Email 发送文本和监控警报

评论

点赞

用于 Scrapyd 集群管理的 ScrapydWeb 已更新至 v1.3.0

评论

点赞

ScrapydWeb 新增 reports 页面，聚合爬虫统计信息

优秀开源项目

赞过

评论

1

ScrapydWeb 现已支持取消 pending jobs

评论

点赞

正式成为 scrapy/scrapyd 开源项目开发成员，欢迎大家留言反馈问题和建议

评论

点赞

ScrapydWeb: 我的第一个 1k Star 开源项目

等人赞过

评论

4

ScrapydWeb 现已支持自定义 Run Spider 页面的 settings & arguments 默认值

评论

点赞

LogParser 现已支持 Scrapy>=1.5.2 的 telnet 认证登录（Windows 除外）

评论

点赞

时隔五年，Scrapyd 终于原生支持 basic auth

优秀开源项目

评论

点赞

6年前

时隔五年，Scrapyd 终于原生支持 basic auth

🔤English|🀄️简体中文|🔙my8100/filesIssuein2014https://github.com/scrapy/scrapyd/issues/43...

0

评论

6年前

时隔五年，Scrapyd 终于原生支持 basic auth

Issuein2014scrapy/scrapyd/issues/43Pullrequestin2019scrapy/scrapyd/pull/326试用安装：pipins...

0

评论

关注了

6年前

my8100/scrapyd-cluster-on-heroku

访问 heroku.com 注册免费账号（注册页面需要调用 google recaptcha 人机验证，登录页面也需要科学上网，访问 APP 运行页面则没有该问题），免费账...

0

评论

如何免费创建云端爬虫集群

优秀开源项目

评论

点赞

6年前

如何免费创建云端爬虫集群

访问 heroku.com 注册免费账号（注册页面需要调用 google recaptcha 人机验证，登录页面也需要科学地进行上网，访问 app 运行页面则没有该问题），...

8

1

在线体验 Scrapyd 爬虫集群

优秀开源项目

赞过

3

2

ScrapydWeb v1.2.0: 可能是最好用的定时爬虫工具?!

my8100于2019-03-12 20:37发布的图片

优秀开源项目

评论

点赞

关注了

LogParser v0.8.0 发布：一个用于定期增量式解析 Scrapy 爬虫日志的 Python 库，配合 ScrapydWeb 使用可实现爬虫进度可视化

优秀开源项目

等人赞过

评论

10

6年前

LogParser v0.8.0 发布：一个用于定期增量式解析 Scrapy 爬虫日志的 Python 库，配合 ScrapydWeb 使用可实现爬虫进度可视化

GitHub开源my8100/logparser安装通过pip:通过git:使用方法作为service运行请先确保当前主机已经安装和启动Scrapyd通过命令logpars...

1

2

个人成就

文章被点赞 65

文章被阅读 13,217

加入于

2018-10-04