职位详情
爬虫工程师 已下线
1.8-2.5万·13薪
深圳市六六六国际旅行社有限公司
深圳
3-5年
本科
08-04
工作地址

科兴科学园-A1栋602

职位描述
【岗位职责】
1、负责网页爬取、数据解析、数据提交的工作。
2、负责设计爬虫策略及反爬规则,提升数据采集效率、完整度和稳定性。
3、负责智能采集系统设计与研发,如采集任务调度,页面解析和结构化抽取。
4、负责持续跟踪分析爬虫系统的技术缺陷,对策略架构做出合理地调整和改进,提升公司相关产品与服务的竞争力。

【任职资格】
1、具备至少 3 年爬虫开发经验,能够独立承担爬虫相关工作。
2、熟悉网络协议,掌握反爬风控策略,可从协议、设备、网络指纹、行为、拟人化等多角度处理风控问题。
3、熟悉 Web 网页数据的注入与抓取,掌握逆向算法还原、协议破解以及验证码识别(如点选验证码、滑块验证码、ReCaptcha、Cloudflare 验证码等),且至少有一个成功识别并绕过验证码的案例。
4、熟练掌握 Docker、Linux、Redis 等相关技术。
5、熟练运用 JS 逆向、AST 解混淆、协议分发、Webpack 补环境、XML 与 OB 混淆、RPC 等技术手段。
6、熟练掌握 Selenium、DP 等至少一种爬虫自动化技术,熟悉 Scrapy、Feapder、Asyncio 等至少一种爬虫技术及其原理。
7、有海外网站爬取经验者优先。

【薪酬福利】
1、上班时间:9:00--18:30,午休时间为12:30--14:00,双休
2、每周定期下午茶,工作环境轻松舒适
3、享受国家法定节假日休息
4、薪资结构为固定薪资

以担保或任何理由索取财物,扣押证照,均涉嫌违法,请提高警惕

查看更多相似职位