刘娟娟

今天是 2019 年 8 月 20日，我启动了一个小型的倾听项目：你自学python学不下去了？你说，我听。 发在了我的朋友圈和一两个微信群。如果你想找我聊聊，请微信私聊我约时间。 找我聊的人有点多。下午，我和一位中年男士语音聊过，征得他的同意，把我们的聊天转化为这篇文章，希望…

目前准备爬取一家目标网站的公开数据，预测将累计发起 120 万次 api 请求，每个爬虫脚本都是单进程、单线程。把想要爬取的数据，按关键字段（如id）拆分多段（每段为 10000 条数据），分别安排给不同的爬虫同时爬取。这些爬虫，我称之为爬虫群。爬取到的数据我都存储在本地的my…

目前准备爬取一家目标网站的公开数据，预测将累计发起 百万次 api 请求，每个爬虫脚本都是单进程、单线程。把想要爬取的数据，按关键字段（如id）拆分多段（每段为 10000 条数据），分别安排给不同的爬虫同时爬取。这些爬虫，我称之为爬虫群。爬取到的数据我都存储在本地的mysql…

我用 python pandas 写了数据统计与分析脚本，并把计算结果用 pandas 的 to_excel() 存入到 excel 表格提交给团队。但遇到一个问题：当我的老板和同事们打开 excel 文件时，发现百分比数值无法正常显示，提示为“文本形式存储的数据”。 1、必须…

“30多岁想转行，零基础学编程，来得及吗？能找到好工作吗？”这类问题，总是反复出现。尤其是最近我受《自学是门手艺》鼓舞，也借着参与 xue.cn 的契机想要把 python 学的全面而完整，也总有朋友找我打听此类话题。 本文便是我对这类问题的看法。不过，我把它拆分为3个更细的话…

我用 python 写了一些脚本，有一些是爬虫脚本，比如爬取知乎特定话题的热门问题，有一些是定期的统计分析脚本，输出统计结果到文档中。之前我都是手动执行这些脚本，现在我希望如何这些脚本能自动定时执行。那么，windows 10 操作系统如何定时自动执行 python 脚本？ 我…

我想把我的 python 爬虫脚本设定为自动定时执行，我的设备是win10 操作系统，这将用到系统自带的计划任务功能。且我希望不管用户是否登录都要运行该定时任务，但在设置计划任务的属性时，遇到一个报错：所指定的账户名称无效。 如果仅勾选“只在用户登录时运行”，点击“确定”后直接…

我自学 python 编程并付诸实战，迄今三个月。 pandas可能是我最高频使用的库，基于它的易学、实用，我也非常建议朋友们去尝试它。——尤其当你本身不是程序员，但多少跟表格或数据打点交道时，pandas 比 excel 的 VBA 简单优雅多了。 pandas 善于处理表格…

国庆假期发生了两件小事，其一是我默默度过 35 周岁生日，其二是玩了下grafana `并在节后第一天被工程师 M 称赞：相当专业。 数月前我提交了一份数据后台需求给工程师 M，他选用和部署了 grafana 这个第三方开源的工具，仅用两三天就完成了这份需求。这效率相当快，令我…