本文是看到一粉丝的一个开源项目，目前只是完成了部分面试题的搜集，需要大家一起努力完成该项目。本篇只是部分Python基础的面试题。 Python 是一门开源的解释性语言，相比 Java C++ 等语言，Python 具有动态特性，非常灵活。 Python 有 6 种内置的数据类…

想开发网页爬虫，发现被反爬了？想对 App 抓包，发现数据被加密了？不要担心，使用 Airtest 开发 App 爬虫，只要人眼能看到，你就能抓到，最快只需要2分钟，兼容 Unity3D、Cocos2dx-*、Android 原生 App、iOS App、Windows Mob…

首先打开控制台正常登录一次，可以很快找到登录的 API 接口，这个就是模拟登录 POST 的链接。 我们的最终目标是构建 POST 请求所需的 Headers 和 Form-Data 这两个对象即可。 继续看Requests Headers信息，和登录页面的 GET 请求对比发…

Flask的基本语法撸了一遍，本节直接开冲，用Flask来写下抠腚男孩的后台。 1.早上定时8点执行爬虫脚本爬取新闻（删表建新表）。 2.查询当日爬取到的新闻，把觉得有意思的新闻添加到筛选池中。 3.对筛选池中的新闻进行二次筛选，在这一步可以新增或者修改筛选池新闻。 4.取筛选…

字体反爬也就是自定义字体反爬，通过调用自定义的字体文件来渲染网页中的文字，而网页中的文字不再是文字，而是相应的字体编码，通过复制或者简单的采集是无法采集到编码后的文字内容的。 现在貌似不少网站都有采用这种反爬机制，我们通过猫眼的实际情况来解释一下。 这是什么鬼，关键信息全是乱码…

爬虫最大的敌人之一是什么？没错，验证码！[Geetest]作为提供验证码服务的行家，市场占有率还是蛮高的。遇到Geetest提供的滑动验证码怎么破？ 一种方法是分析它的js加密方法，通过大量抓包分析找到它的返回参数，直接自动生成需要的参数即可，这种方法工程量大一些，并且官方js…