返回

爬虫开发工程师

12-20k·14薪广州 / 经验不限 / 本科
其他类
发布于 2025-03-12 02:06

职位描述

岗位职责: 1. 发挥创造性思维,解决数据采集与应用难题; 2. 与数据产品经理紧密配合,分析挖掘数据的价值; 3. 维护数据模块,确保数据更新快、准、全; 4. 参与数据采集、统计分析、监控等相关系统架构设计和研发; 任职资格: 1、本科以上学历,计算机相关专业,熟悉操作系统(多线程、多进程)、计算机网络编程、数据结构与算法等基础知识; 2、2年以上Linux 环境下常用语言(C/C++/JAVA/Python)开发经验,熟练使用常用 Linux 命令; 3、2年以上大规模网页爬虫开发经验,熟悉浏览器原理、前端 JS、AJAX; 4、深入了解前端JS反爬,能解决前端动态 JS 混淆问题; 5、深入了解非逆向、非侵入式手机APP采集方法; 6、熟悉了解容器化编排技术(swarm/k8s/mesos); 7、熟练使用一门以上脚本语言(Python/Javascript); 8、熟练使用一种以上的数据库(Mongodb/HBase/MySQL);