1、负责各类主流电商平台数据抓取和维护； 2、设计爬虫策略和防屏蔽规则，提升网页抓取的效率和质量，解决爬虫遇到的各种反爬问题； 3、负责爬虫数据的清洗，存储等大数据开发工作； 4、与产品经理、下游团队等部门人员沟通，对外提供各种服务完成整体业务需求达成业务目标。

任职要求

1、本科及以上学历，计算机科学、数据科学相关专业背景优先； 2、2年以上经验，有大规模数据处理和复杂数据模型的经验； 3、熟练掌握编程语言，如Python、sql、海豚等； 4、具备代码调试、环境部署、任务调度等能力； 5、熟悉主流电商平台相关数据平台的操作（如生意参谋、数据银行、巨量云图等）为加分项。