岗位职责（外包用工）
1. 负责设计、开发和维护高效稳定的Python爬虫系统，抓取指定网站或接口的数据
2. 优化爬虫性能，深入研究并突破各类反爬机制，确保数据抓取的准确性和及时性
3. 对抓取的数据进行清洗、存储和处理，为后续数据分析提供支持
4. 监控爬虫运行状态，及时处理异常情况并优化系统稳定性
5. 应用机器学习与AI技术提升爬虫智能化水平
6. 使用Docker等容器技术实现爬虫系统的快速部署和扩展
任职要求：
1. 本科及以上学历，计算机相关专业，5年以上Python爬虫开发经验
2. 精通Python语言，熟悉Scrapy、Requests、BeautifulSoup等爬虫框架和库
3. 熟悉HTTP协议、HTML/CSS/JavaScript，精通各类反爬机制及应对策略
4. 熟悉MySQL、MongoDB等数据库，具备数据清洗和处理能力
5. 了解机器学习与AI技术在实际爬虫项目中的应用
6. 熟练使用Docker等容器化技术进行系统部署