目前准备爬取一家目标网站的公开数据，预测将累计发起 百万次 api 请求，每个爬虫脚本都是单进程、单线程。把想要爬取的数据，按关键字段（如id）拆分多段（每段为 10000 条数据），分别安排给不同的爬虫同时爬取。这些爬虫，我称之为爬虫群。爬取到的数据我都存储在本地的mysql…

本文是《人脸识别完整项目实战》系列博文第3部分：程序设计篇（Python版），第1节《Python实时视频采集程序设计》，本章内容系统介绍：基于Python+opencv如何实现实时视频采集。 图像窗口显示：利用opencv的窗口对象，进行抓拍内容的显示。 等待用户输入：利用o…

之前，我曾转过一个单元测试框架系列的文章，里面介绍了 unittest、nose/nose2 与 pytest 这三个最受人欢迎的 Python 测试框架。 本文想针对测试中一种很常见的测试场景，即参数化测试，继续聊聊关于测试的话题，并尝试将这几个测试框架串联起来，做一个横向的…

题记：大二的时候发现人生苦短，所以信了拍神，开始学Python。学了大半年之后成功转行做前端了。来写个教程帮助大家入门Python。 零基础入门就得从最基本的变量，语法格式，数据类型，函数，作用域，模块等基本知识入手（有编程基础基础也得这么来） 和篮球一样，先来三步上篮： Py…

1. 为什么学习 Python Python 语言简单易懂，上手容易，随着 AI 风潮，越来越火。 2. 解释型和编译型语言的区别 编译型语言：把做好的源程序全部编译成二进制的可运行程序。然后，可直接运行这个程序。如：C，C++ （Java 有些特殊，java程序也需要编译，但…

最近在学Python，所以用Python写了这个12306抢票脚本，分享出来，与大家共同交流和学习，有不对的地方，请大家多多指正。话不多说，进入正题： 这个脚本目前只能刷一趟车的，人数可以是多个，支持选取作为类型等。 最后：就是坐等刷票结果就好了，如下图这样，就说是刷票成功了，…

使用python进行开发，Unix/Linux 的环境会更加友好，不会出现莫名其妙的bug，虽然 windows store 也发布了 Ubuntu 子系统，但是功能不够全，系统不够完善。本文全面介绍了 Ubuntu、Archlinux、Centos、Mac下安装和使用pyen…

前文传送门：小白学Python爬虫（1）：开篇小白学Python爬虫（2）：前置准备（一）基本类库的安装小白学Python爬虫（3）：前置准备（二）Linux基础入门小白学Python爬虫（4）：前置