在爬虫的路上，学习scrapy是一个必不可少的环节。也许有好多朋友此时此刻也正在接触并学习scrapy，那么很好，我们一起学习。开始接触scrapy的朋友可能会有些疑惑，毕竟是一个框架，上来不知从何学起。

使用urllib的request模块，我们可以方便地实现请求的发送并得到响应，本节就来看下它的具体用法。 1. urlopen() urllib.request模块提供了最基本的构造HTTP请求的方法，利用它可以模拟浏览器的一个请求发起过程，同时它还带有处理授权验证（authe…

上一篇文章提过Thread对象可以调用start join run等方法，其实当时调用start就自动调用了run。这里只不过是在新类中重写了run方法，线程调用start时就会自动执行这个run 上面代码实现10个线程抓取豆瓣top250网站10页的电影名，通过__init_…

本文主要讲解生产者消费者模式，它基于线程之间的通信。 生产者消费者模式是指一部分程序用于生产数据，一部分程序用于处理数据，两部分分别放在两个线程中来运行。 我们可以想象到，这种情况不使用并发机制（如多线程）是难以实现的。如果程序线性运行，只能做到先把所有url抓取到列表中，再遍…

本篇文章所采用的技术仅用于学习、研究，任何其他用途请自行承担后果。 12306自动查票使用到的python库主要是splinter，同时也涉及到查票的城市编码，具体的城市编码请在网络上搜索，基本格式如下： 北京北:VAP 北京东:BOP 北京: BJP 北京南:VNP 北京西:…

纯粹的编程已经不再，玩跨界，Python可以，你可以么？

这篇文章呢，就是给那些找不到 Python 项目开发教程的人，以及不知道 Python 可以开发什么的人的……

作者电脑有 4 个 CPU，因此使用 4 个线程测试是合理的 本文使用的 cpython 版本为 3.6.4 本文使用的 pypy 版本为 5.9.0-beta0，兼容 Python 3.5 语法 本文使用的 jython 版本为 2.7.0，兼容 Python 2.7 语法

决策树可能会受到高度变异的影响，使得结果对所使用的特定测试数据而言变得脆弱。根据您的测试数据样本构建多个模型（称为套袋）可以减少这种差异，但是树本身是高度相关的。