职位：Python 爬虫工程师
岗位职责
1. 负责编写和优化用于处理和分析数据的 Python 程序，确保数据的准确性和完整性，并进行存量数据分析、业务数据爬取及监控等相关工作；
2. 根据业务需求，设计和开发辅助工具，具备应对反爬机制的能力，提升网页抓取的效率和质量。
3. 设计并实现爬虫策略和防屏蔽规则，确保高效、可靠的数据获取。
4. 开发和整合 API，从数据库获取并整合前端所需内容。
5. 独立解决开发过程中遇到的各种技术问题。
岗位要求
1. 本科及以上学历，2 年以上 Python 开发经验；
2. 有大型爬虫开发经验，单个数据源采集量超过万条以上优先；
3. 有网站建设经验优先，Python 或 Node 优先；
4. 有产品思维优先。