岗位内容:
1. 负责爬虫系统的设计和开发，实现高效稳定的数据采集和分析处理。
2. 进行数据清洗、去重、格式化等操作，确保数据质量满足业务需求。
3. 优化爬虫程序，提高爬取效率和成功率，降低误差率以及被封禁的风险。
4. 开发自动化测试脚本，保证爬虫系统的稳定性和可靠性。

任职要求:
1. 熟悉掌握 Python 语言，了解 HTTP 协议及常见的反爬虫算法。
2. 熟悉办公软件。
3. 熟悉数据库，如 MySQL