岗位职责：
1、根据业务数据需求，完成网站和APP应用的网络爬虫任务的调度、数据爬取、解析处理、入库、常见文档内容解析等日常工作；
2、对爬虫获取到的内容进行初步数据处理分析等；
3、设计爬虫策略和防屏蔽规则，提升网页和APP的抓取效率和质量；
4. 对接公司内部的数据获取需求并合理安排，保证交付内容符合需求；
任职资格;
1、本科及学历，计算机相关专业，至少2年以上数据采集工作经验；
2、熟练使用主流采集技术及框架工具，如Frida、Puppeteer、Scrapy等，实现大规模文本和音视频抓取、从事网络爬虫、网页去重、信息抽取，解析入库等工作，熟悉反爬虫、验证码识别技术；
3、掌握常见的终端逆向分析方法，包括但不限于JavaScript逆向、反混淆、反调试，APP反编译、脱壳、分析、调试等，熟练使用jadx、apktool、IDA、Frida、xposed等工具；
4、至少精通Java、Python中的一门编程语言，熟练PDF、Word、Excel等文档内容的解析工作；
5、善于沟通，工作责任心强，强烈的上进心和求知欲，具备一定的抗压能力和快速的学习能力。