岗位职责: 1.发挥创造性思维,解决数据采集与应用难题; 2.与数据产品经理紧密配合,分析挖掘数据的价值;维护数据模块,确保数据更新快、准、全; 3.参与数据采集、统计分析、监控等相关系统架构设计和研发; 任职资格: l、本科以上学历,计算机相关专业,熟悉操作系统(多线程、多进程)、计算机网络编程、数据结构与算法等基础知识;、 2、2年以上Linux环境下常用语言(C/C++/JAVA/Python)开发经验,熟练使用常用Linux 命令; 3、2年以上大规模网页爬虫开发经验,熟悉浏览器原理、前端JS、AJAX; 4、深入了解前端JS反爬,能解决前端动态JS混淆问题; 5、深入了解非逆向、非侵入式手机APP采集方法;熟悉了解容器化编排技术(swarm/k8s/mesos);、 6、熟练使用一门以上脚本语言(Python/Javascript); 7、熟练使用一种以上的数据库(Mongodb/HBase/MySQL);