工作内容
1、参与开发和优化分布式爬虫系统；
2、负责对项目所需的网络数据进行抓取，不断提升系统自动数据抓取的水平；
3、熟悉常见反爬的技术，解决爬虫系统各类问题；
4、完成团队安排的其他工作。
岗位要求
1.2年及以上爬虫程序开发经验，熟悉Python语言;
2. 有过大规模数据抓取经验。