职位描述
中高级python爬虫工程师
岗位职责:
1 根据业务需求,分析目标网站/APP的数据结构,设计高效、稳定、可扩展的爬虫架构和数据采集方案。
2 了解处理各种反爬虫机制(如JS逆向、验证码、行为检测等)。
3 将清洗后的数据存储到数据库(如PostgreSQL, MongoDB,OSS等)。
4 编写清晰的技术文档,包括爬虫文档、接口文档等。
任职要求:
2年以上爬虫开发经验
精通Python开发
精通JS逆向工程、验证码处理
熟悉Linux开发部署
熟悉web自动化(selenium/Playwright/DrissionPage)
做过分布式数据采集、APP逆向者优先
以担保或任何理由索取财物,扣押证照,均涉嫌违法,请提高警惕