注：劳动合同签订中科闻歌下属主体子公司-湖南语亦云科技有限公司（非劳务派遣或外包岗位）
工作职责：
1.负责公司采集平台(数据采集/调度/管理等模块)的需求分析、架构设计、功能开发与持续维护优化。
2.负责 采集/爬取相关程序的设计、开发、性能调优与问题排查。
3.参与分布式服务的设计与部署，提升系统的稳定性、扩展性与高可用能力,。
4.优化采集链路的调度策略、任务容错、队列管理、数据清洗与异常监控，5.编写并维护高质量的技术文档、接口说明、设计文档与运维手册。
岗位要求：
1. 统招本科以上学历，3年以上爬虫项目经验，计算机相关专业，具备良好的计算机专业知识
2. 熟悉python语言，熟练使用 python request、xpath、BeautifulSoup、re等模块，具备扎实的编程功底，具有良好的程序设计能力；
3. 熟悉爬虫原理，熟练Scrapy、pyspider等主流爬虫框架框架，能够独立解决封账号、封IP、验证码、网页限制爬取等问题；
4. 熟悉web端、安卓端自动化采集技术；
5. 有深厚的App采集经验或网站采集经验，至少精通app逆向或web逆向一个方向，熟练掌握算法还原、rpc调用等技能；
6. 熟练使用MySQL、了解redis、Elasticsearch、kafka等技术
7. 业务理解和分析转化能力较强，富有进取精神及团队合作精神，有团队管理经验