【岗位职责】
1.参与分布式数据采集平台的架构设计与研发落地。
2.负责和产品进行需求对接，开发数据采集脚本。
3.负责现有数据采集平台和爬虫脚本的维护工作，保证数据稳定、高效的采集。
【任职要求】
1、本科以上学历，计算机或者软件工程等专业，三年以上开发经验。
2.熟练掌握python语言；用过至少一种爬虫框架，如scrapy、feapder等，具备自研爬虫框架经验者优先考虑。
3.熟练掌握SQL语言及至少一种关系型数据库，熟练掌握Redis。
4.熟练掌握至少一种自动化测试框架，例如playwright、selenium、chromedp等。
5.有web系统逆向工程经验及反爬虫经验者优先考虑。