职位描述
【岗位要求】
1.熟练掌握python语言;用过至少一种爬虫框架,如scrapy、feapder等,具备自研爬虫框架经验者优先考虑。
2.熟练掌握SQL语言及至少一种关系型数据库,熟练掌握Redis。
3.熟练掌握至少一种自动化测试框架,例如playwright、selenium、chromedp等。
4.有web系统逆向工程经验及反爬虫经验者优先考虑。
5.具备基础的运维能力。
【岗位职责】
1.参与分布式数据采集平台的架构设计与研发落地。
2.负责和产品进行需求对接,开发数据采集脚本。
3.负责现有数据采集平台和爬虫脚本的维护工作,保证数据稳定、高效的采集。
以担保或任何理由索取财物,扣押证照,均涉嫌违法,请提高警惕