这是全栈数据工程师养成攻略系列教程的第八期：8 爬虫 使用 urllib2 获取数据。 我们知道，Http 请求主要有 GET 和 POST 两种。对于一个 url，既可以使用浏览器去访问，也可以使用代码去请求。 Urllib2 我们主要使用的是 Python2.7 中的 urllib2，官方文档在…

nightmare 是一个基于 electron 的自动化库（意思是说它自带浏览器），用于实现爬虫或自动化测试。相较于传统的爬虫框架（scrapy/pyspider），或者 dom 操作库（cheerio/jsdom），或者基于浏览器的自动化框架（selenium/phantomjs），他的优势在于提供了一个简洁有效 的编程模型。