岗位职责：

"1.负责行业内（包括海外）主流电商平台、短视频平台的数据采集系统开发与优化，确保高效、稳定的数据抓取能力；

2.设计并优化反爬虫策略，提升突破验证码、IP封锁、行为检测等防护机制的能力，提升爬虫稳定性；

3.持续跟进最新爬虫技术、反爬策略及电商数据生态，优化爬虫框架，提升系统可维护性与可扩展性。"

任职要求：

"1.电商行业经验必需：具备完整的电商数据采集经验，熟悉行业内（包括海外）主流电商平台的数据结构、API规则及反爬策略；

2.熟悉移动端数据抓取（包括逆向分析、脱壳），熟练掌握 Apktool、dex2jar、JD-GUI、Frida、IDA 等工具，能独立完成电商APP的数据抓取与分析；

4.具备3年以上大规模爬虫/反爬经验，熟悉 HTTP 协议、浏览器原理、前端 JS 逆向、移动端抓包等技术，有大数据量、高并发项目经验者优先；

5.熟悉至少 Python、Java、JavaScript 其中一种，掌握开源爬虫框架（Scrapy、WebMagic、Nutch、Heritrix等），有自研爬虫框架经验者优先；

6.有丰富的反爬经验，能解决复杂验证码（图片/滑块）、账号限制、IP封锁等问题，并具备实际应对策略；"