网上有许多代理ip，免费的、付费的。大多数公司爬虫会买这些专业版，对于普通人来说，免费的基本满足我们需要了，不过免费有一个弊端，时效性不强，不稳定，所以我们就需要对采集的ip进行一个简单的验证。 本文主要针对西刺代理，这个网站很早之前用过，不过那个时候它还提供免费的api，现在…

当我们的确是有需要开始真正优化我们的 Python 程序的时候，我们要做的第一步并不是盲目的去做优化，而是对我们现有的程序进行分析，发现程序的性能瓶颈进而进行针对性的优化。这样才会使我们花时间和精力去做的优化获得最大的效果。

在 Python 中，使用 Datetime 是非常令人沮丧的，特别是处理不同系统上的不同地区时。这个库的存在是为了让简单的事情更简单，同时承认时间就是一个幻觉 (时区更是如此)。