阅读 50

移动端Python爬虫--1

将学习哪些东西

1 学会uiautomator2对移动端设备进行操控
2 学会抓包利器使用
3 学会利用python编写移动端自动化抓取脚本
4 学会通过atxserver2监控多台移动设备
5 学会将数据存储到elasticsearch数据库
6 学会通过kibana进行大数据可视化分析展示
复制代码

学习这些技能之后能做什么

1 数据分析

2 用户画像

3 统计系统

4 商业竞争
复制代码

对于我们来说

1 技能提升

2 面试必备
复制代码

面试的时候问

1 如何抓取app应用数据

2 抓取过哪些app应用数据

3 多设备如何抓取app应用数据

4 设备如何进行监控的

5 抓包工具是如何使用的

6 抓取到的数据是如何进行可视化分析的
复制代码

APP数据好抓吗

1、简单

app里面的数据比web端更容易抓取,反爬虫也没那么强,大部分也都是http/https协议,返回的数据类型大多数是json

复制代码

2 、困难

1 可能需要适当的反编译,分析出加密算法并抓取到信息
2 、可能加固,需要脱壳,然后反编译,分析出加密算法并抓取到信息
3、需要破解通过各式各样的签名,证书,设备绑定等方法,找到隐藏加密算法
复制代码

爬虫工程师技术储备

1 Python爬虫开发经验

2 java开发基础

3 android开发基础

4 app逆向

5 app脱壳

6 破解加密算法


复制代码

uiautomator2

1.png

2.png

文章分类
后端
文章标签