网上有许多代理ip，免费的、付费的。大多数公司爬虫会买这些专业版，对于普通人来说，免费的基本满足我们需要了，不过免费有一个弊端，时效性不强，不稳定，所以我们就需要对采集的ip进行一个简单的验证。 本文主要针对西刺代理，这个网站很早之前用过，不过那个时候它还提供免费的api，现在…

Flask的基本语法撸了一遍，本节直接开冲，用Flask来写下抠腚男孩的后台。 1.早上定时8点执行爬虫脚本爬取新闻（删表建新表）。 2.查询当日爬取到的新闻，把觉得有意思的新闻添加到筛选池中。 3.对筛选池中的新闻进行二次筛选，在这一步可以新增或者修改筛选池新闻。 4.取筛选…

Python 做为一个脚本语言，可以很方便地写各种工具。当你在服务端要运行一个工具或服务时，输入参数似乎是一种硬需（当然你也可以通过配置文件来实现）。 如果要以命令行执行，那你需要解析一个命令行参数解析的模块来帮你做这个苦力活。 Python 本身就提供了三个命令行参数解析模块…

目前，移动开发已经处于饱和的阶段，Android开发也不如当年盛况，已经不再像前几年前那么火爆。正如一种编程语言如果经历过盛极一时，那么必然有这样的一条曲线，像我们学的正弦曲线先急速上升，然后到达顶点，然后再下降，最后再趋近一个平稳的值。 可以看到，从2016年的下半年开始，移…