职位描述
岗位职责:
-
负责设计、开发和维护高效、稳定的web,app,小程序等平台的爬虫程序，采集各类结构化和非结构化数据。处理反爬机制，优化爬虫策略，确保数据采集的成功率与效率。
-
主导RPA流程的设计与实现，自动化处理重复性高、规则性强的业务流程，负责后续自动化项目的维护与二次开发。
-
与产品、数据、运维等团队协作，确保数据采集及自动化流程满足业务需求。
-
编写技术文档、维护开发文档及使用说明，确保项目可持续迭代与可维护性。
-
跟进前沿技术趋势，积极探索并将最新的AI能力融入数据采集与自动化流程中，推动技术创新。
岗位要求：
-
计算机科学、软件工程、数据科学等相关专业，本科及以上学历优先。
-
精通Python，熟悉掌握（scrapy,selenium,rpc,rpa,drissionpage）等主流爬虫框架，有分布式爬虫（如Scrapy-Redis）项目经验。
-
熟悉常见RPA工具，并有实际项目落地经验。
-
熟悉各类反爬策略及应对方案，能独立解决复杂抓取问题。
-
具备优秀的分析问题和解决问题的能力，良好的团队协作精神。
-
了解数据合规、安全与隐私保护要求。
以担保或任何理由索取财物，扣押证照，均涉嫌违法，请提高警惕