职位:高级爬虫工程师
【职责描述】
1. 分布式爬虫开发
2. 负责爬虫算法/反爬策略/代理IP优化研究及落地实施,提高爬取实时性、成功率
3. 对抓取后的数据进行清洗、存储等,并持续优化平台
4. 负责爬虫自动化平台的开发和持续优化
【任职要求】
1. 熟悉常用的爬虫技术及架构,具有一定的反爬分析对抗能力,2年及以上爬虫经验
2. 有大型电商/直播/社媒/本地生活平台爬取经验,Android/iOS14逆向破解经验者优先
3. 熟练使用Scrapy、Redis、MongoDB、Mysql、Git
4. 熟悉Linux开发环境,熟悉Python
5. 熟悉Selenium、Pyppeteer
【公司介绍】
1. 金融/咨询领域大数据分析先行者,富有竞争力的职业发展与薪酬福利保障
2. 多行业多商业领域覆盖,服务各行业领先客户和金融机构
3. 精尖的数据分析/算法/工程师团队,发展空间大,团队氛围好
全部评论
(0) 回帖