岗位职责
1、负责爬虫策略与方案制定，爬虫系统架构设计与开发；
2、负责主流平台的数据抓取，爬虫核心算法优化，提升爬虫效率和质量；
3、进行多平台信息分析，参与企业数据建设。
岗位要求
1、2年以上经验，本科及以上学历，计算机相关专业优先；
2、有过爬虫平台化建设经验（0-1）优先；
3、精通Python语言，熟悉掌握至少一种开源爬虫框架(Scrapy、Appium、Selenium)；
4、具有海量数据爬取、解析、清洗、存储相关项目经验；
5、熟悉Linux系统环境；熟悉Mysql等数据库，有过数据库调优和海量数据存储经验者优先；
6、优秀的分析和解决问题的能力，对解决挑战性问题充满激情。