首页 > 【贝壳社招】爬虫工程师
头像
慕小神
编辑于 2020-07-30 20:08
+ 关注

【贝壳社招】爬虫工程师

爬虫工程师

  • 招聘类别:社会招聘         工作性质:全职        薪资范围:面议

  • 工作地点:海淀区

  • 职位类型:研发类

  • 岗位职责

  1. 负责开发分布式网络爬虫系统,进行多平台信息的抓取和分析;
  2. 把握网络爬虫核心技术研究方向,研究优化算法,提升爬虫系统的稳定性、可扩展性;
  3. 负责公司数据仓库平台的 ETL 分析、设计、开发工作
  • 任职要求

  1. 全日制本科及以上学历,计算机相关专业,2年以上爬虫相关经验;
  2. 熟悉 Linux 平台开发,精通 Java 编程;熟悉分布式系统、多线程;
  3. 熟悉MySQL、Redis、Kafka、ES、Spark;
  4. 深度参与至少一个“分布式爬虫系统”的架构设计;
  5. 良好的代码习惯,扎实的数据结构和算法功底,以及项目优化经验;
  6. 精通爬虫与反爬技术、http底层协议及爬虫原理,浏览器模拟抓取、APP抓取等技术;
  7. 有app逆向经验优先

全部评论

(1) 回帖
加载中...
话题 回帖

推荐话题

相关热帖

近期热帖

历年真题 真题热练榜 24小时
技术(软件)/信息技术类
查看全部

近期精华帖

热门推荐