工作职责
1、负责现有爬虫系统的维护改进，核心技术研究、参与架构设计、系统规划；
2、负责爬虫核心算法的策略优化，提升网页抓取的效率和质量；
3、研究各种网页、微信、主流网站接口，实现多通道抓取；
4、优化爬虫数据的存储过程。
任职要求
1.全日制本科及以上学历,计算机相关专业
2. 熟悉 Python 语言熟悉网络通信、各类抓取场景的实现，熟悉开源爬虫框架如 scrapy 等，对分布式和多线程技术有一定了解
3.有相关实习项目经历优先
4. 具有较强的分析和解决问题能力，以及良好的沟通能力和协作精神，乐于接受挑战
全部评论
(5) 回帖