爬虫开发工程师
【岗位职责】
1、负责网页信息和APP数据抽取、清洗、消重等工作，提升平台的抓取效率；
2、参与爬虫系统需求分析，架构设计及原型实现；
3、参与爬虫后台相关系统的开发及维护；
4、完成其他相关工作任务;
【任职要求】
1、计算机及相关专业本科及以上学历，有开发工作经验优先；
2、熟悉面向对象编程思想，熟悉DrissionPage、Scrapy等爬虫框架，了解JAVA/.NET语言；
3、了解爬虫原理，熟悉常见的反爬虫技术，并掌握一定的反爬虫对抗技术，有爬虫相关项目开发经验者优先；
4、具备良好的问题定位分析能力，有良好的编码习惯和撰写文档习惯。