职位详情
python逆向爬虫工程师
2.3-2.8万
四川华盛云端航空服务有限公司
成都
5-10年
本科
08-20
工作地址

成都国际科技节能大厦A座2207

职位描述
1.搭建多设备协同控制体系,通过ADB、Wi-Fi直连或USB HUB实现50+台安卓设备集群管理,支持远程
唤醒、批量投屏及状态监控
2.核心系统开发:主导海航、川航等航司APP的公开数据采集系统设计,实现航班动态、票价库存、座位
图等核心数据的实时抓取与结构化处理。
3.自动化流程构建:模拟用户端操作(查询、登录、下单、支付、出票),开发全链路自动化脚本,覆盖
APP端及Web端接口调用,确保业务流程闭环。
4.安卓逆向分析:针对航司APP加固、代码混淆、动态加载等防护措施,进行反编译、脱壳、Hook调
试,破解加密参数(如Token、签名)及接口鉴权逻辑。
5.反爬对抗策略:研究航司风控规则(如IP封禁、设备指纹、行为检测),设计分布式爬虫架构,集成代
理池、设备指纹伪装、请求频率动态调控等反反爬方案。
6.数据清洗与存储:构建高效ETL流程,处理非结构化数据(如HTML、PDF),优化数据库存储方案,
支持高并发查询与实时分析。
7.系统稳定性保障:设计监控告警机制(如任务失败率、响应延迟),实现故障自动重试与人工干预预
案,保障7×24小时服务可用性。
8.跨团队协作:与产品、运营团队联动,根据业务需求迭代数据采集维度(如新增舱位等级、退改签政
策),输出数据质量报告与优化建议。
9.技术文档编写:输出系统架构设计、接口文档、逆向分析报告,确保技术资产可维护性与团队知识沉
淀。
10.前沿技术探索:研究AI辅助爬虫(如动态渲染、智能路由调度)、区块链存证等新技术在数据合规采
集中的应用。

任职资格:
1.3年以上爬虫开发经验,至少1个完整航空领域数据采集项目经验,熟悉廉价航空(如春秋、九元)或
OTA平台(携程、飞猪)数据结构者优先;
2.具备跨境数据采集经验,如顶象防护(重点考察)、处理Akamai防护、Cloudflare 5秒盾;
3.突破反爬虫,绕过反Frida调试,绕过反Root/越狱检测,绕过反VPN/代理检测,绕过证书绑定
4.精通ADB协议栈,掌握adb shell input事件注入、uiautomator控件解析等底层操作,能编写自定义
ADB插件;
5.熟悉群控系统搭建(如Scrcpy多开、雷电模拟器集群),掌握USB通断器、一拖N数据线等硬件配置;
6.精通Python/Java,熟练使用Scrapy、Selenium、Appium等框架,掌握AST反混淆、Frida Hook、
Xposed框架等逆向工具;
7.熟悉HTTP/HTTPS协议、TCP/IP抓包(Charles/Fiddler)、HTTPS证书绕过(JustTrustMe模块)、
RSA/AES加密破解;
8.具备航司APP逆向实战经验(如破解登录态维持、支付回调接口),熟悉加固壳脱壳方案;
9.熟练使用Linux环境,掌握Docker容器化部署、Redis缓存、Kafka消息队列,具备分布式系统调优经
验;
10.强问题解决能力,能独立定位并修复复杂逆向难题(如动态密钥生成、混淆代码还原);
11.熟悉航空票务业务逻辑(如舱位代码、运价规则等)

以担保或任何理由索取财物,扣押证照,均涉嫌违法,请提高警惕

立即申请