岗位职责：

1、针对不同的平台结构和数据特点，设计和编写高效、稳定的爬虫程序，完成对多平台多模态数据的爬取、解析和处理任务；

2、与业务等团队进行沟通协作，了解业务需求，提供数据支持和分析报告；

3、开发和优化爬虫系统，提升爬虫系统的效率和质量。

任职要求：

1、计算机相关专业；

2、熟悉常见的爬虫框架和工具，如Scrapy、Requests、BeautifulSoup等，并具有较强的编程能力；

3、熟悉HTTP协议和网站结构，熟悉常见反爬封禁策略，并具备一定反爬能力；

4、具备良好的数据清洗和处理能力，能够有效地解析爬取到的数据，并进行存储和分析；

5、具备良好的数据敏感度和分析能力，能够根据业务需求提取有效信息；

6、具有良好的沟通能力和团队协作能力，能够及时与业务等团队进行有效沟通，完成数据爬取任务；

7、有良好的学习能力和自我驱动能力，能够不断学习新知识和技术，提升工作效率和质量。