将学习哪些东西
1 学会uiautomator2对移动端设备进行操控
2 学会抓包利器使用
3 学会利用python编写移动端自动化抓取脚本
4 学会通过atxserver2监控多台移动设备
5 学会将数据存储到elasticsearch数据库
6 学会通过kibana进行大数据可视化分析展示
学习这些技能之后能做什么
1 数据分析
2 用户画像
3 统计系统
4 商业竞争
对于我们来说
1 技能提升
2 面试必备
面试的时候问
1 如何抓取app应用数据
2 抓取过哪些app应用数据
3 多设备如何抓取app应用数据
4 设备如何进行监控的
5 抓包工具是如何使用的
6 抓取到的数据是如何进行可视化分析的
APP数据好抓吗
1、简单
app里面的数据比web端更容易抓取，反爬虫也没那么强，大部分也都是http/https协议，返回的数据类型大多数是json
2 、困难
1 可能需要适当的反编译，分析出加密算法并抓取到信息
2 、可能加固，需要脱壳，然后反编译，分析出加密算法并抓取到信息
3、需要破解通过各式各样的签名，证书，设备绑定等方法，找到隐藏加密算法
爬虫工程师技术储备
1 Python爬虫开发经验
2 java开发基础
3 android开发基础
4 app逆向
5 app脱壳
6 破解加密算法
