职位描述
岗位职责:
1. 发挥创造性思维,解决数据采集与应用难题;
2. 与数据产品经理紧密配合,分析挖掘数据的价值;
3. 维护数据模块,确保数据更新快、准、全;
4. 参与数据采集、统计分析、监控等相关系统架构设计和研发;
任职资格:
1、本科以上学历,计算机相关专业,熟悉操作系统(多线程、多进程)、计算机网络编程、数据结构与算法等基础知识;
2、2年以上Linux 环境下常用语言(C/C++/JAVA/Python)开发经验,熟练使用常用 Linux 命令;
3、2年以上大规模网页爬虫开发经验,熟悉浏览器原理、前端 JS、AJAX;
4、深入了解前端JS反爬,能解决前端动态 JS 混淆问题;
5、深入了解非逆向、非侵入式手机APP采集方法;
6、熟悉了解容器化编排技术(swarm/k8s/mesos);
7、熟练使用一门以上脚本语言(Python/Javascript);
8、熟练使用一种以上的数据库(Mongodb/HBase/MySQL);