点评网的反爬设置在我们爬取点评网页的时候给我们造成了不小的障碍。在网页上我们看到的是这样的 网页上可以看到这家餐厅有1405条评论，人均387。但在分析页面源码的时候，我们却看不到网页上的数字，看到是这样的代码 点评网对数字做了处理，一些数字的信息像评论条数、人均、评分等都做了…

字体反爬也就是自定义字体反爬，通过调用自定义的字体文件来渲染网页中的文字，而网页中的文字不再是文字，而是相应的字体编码，通过复制或者简单的采集是无法采集到编码后的文字内容的。 现在貌似不少网站都有采用这种反爬机制，我们通过猫眼的实际情况来解释一下。 这是什么鬼，关键信息全是乱码…

内容选自即将出版的《Python3 反爬虫原理与绕过实战》，本次公开书稿范围为第 6 章——文本混淆反爬虫。本篇为第 6 章中的第 3 小节 SVG 反爬虫，第 4 小节《用前考虑清楚，伤敌一千自损八百的字体反爬虫》已发，其余小节将逐步放送。 SVG 是用于描述二维矢量图形的一…

此刻的我正坐在工位上，看着面前的某网站爬虫代码，陷入了回忆。 这是零工作经验的我入职这家公司以来接到的第一个项目，从零开始写一个爬虫。 既不是在爬虫系统上添加功能，也不是给祖传代码填坑。 我给了自己4、5天时间。 基于程序员必备的搜索技能，我迅速的在github上找到了一个相似…

本文将会讲到具体的做法。做法分为两种：第一种是在Airtest的IDE中控制手机。第二种是在Python代码里面控制远程手机。 无论使用哪种方式，要远程控制手机，就需要首先把手机上的adb端口打开。这一步必需先用USB线把手机连上电脑。 其中的端口号48887你可以自行设定为其…