爬虫工程师
招聘类别:社会招聘 工作性质:全职 薪资范围:面议
工作地点:海淀区
职位类型:研发类
岗位职责
- 负责开发分布式网络爬虫系统,进行多平台信息的抓取和分析;
- 把握网络爬虫核心技术研究方向,研究优化算法,提升爬虫系统的稳定性、可扩展性;
- 负责公司数据仓库平台的 ETL 分析、设计、开发工作
任职要求
- 全日制本科及以上学历,计算机相关专业,2年以上爬虫相关经验;
- 熟悉 Linux 平台开发,精通 Java 编程;熟悉分布式系统、多线程;
- 熟悉MySQL、Redis、Kafka、ES、Spark;
- 深度参与至少一个“分布式爬虫系统”的架构设计;
- 良好的代码习惯,扎实的数据结构和算法功底,以及项目优化经验;
- 精通爬虫与反爬技术、http底层协议及爬虫原理,浏览器模拟抓取、APP抓取等技术;
- 有app逆向经验优先
与我联系
有意向可联系wangdong014@ke.com或lihaoqiang001@ke.com并附上简历,期待您的加入!
全部评论
(1) 回帖