居然讲爬虫

爬虫和反爬虫的斗争 在学习 Selenium 之前，我们先来看下爬虫和反爬虫的斗争： 这个 Selenium 跟爬虫到底有什么渊源呢？ Selenium 可以便捷的获取网站中动态加载的数据 便捷的实现

前面我给大家介绍了正则和xpath，接下来我们在来看一个更简单的数据解析的模块Beautiful Soup Beautiful Soup是python的一个库，最主要的功能是从网页抓取数据,官方解释如

上面我们提到了正则表达式来提取页面的数据，但是有的小可爱可能觉得，正则有亿点点的难用，有没有更简单一点的数据提取方式呢？ 接下来就给大家介绍一款相对比较简单的数据提取的方式Xpath 为什么要学习XP

我们前面说到如何用requests模块来发送请求，获取响应。那获取到的响应数据，所有的都是我们想要的吗？ 肯定是有一些数据是我们不想要的，那这个时候我们就要提取出我们想要的数据。 简单的来说，数据解析

爬虫方向的知识是十分碎片化的，我们在写爬虫针对的各种各样的网站，每个网站用到的反爬技术可能都不一样，所以我们面对不同的网站要有不同的解决方案。 首先我们来聊聊为什么要学习爬虫？ 大家都知道我们现在是大

requests模块作为爬虫中最常用的一个模块，我们必须要拿捏它。 requests模块我会给大家分享以下的知识点 requests的简单使用 发送带header的请求 发送带参数的请求 发送POST