岗位职责
1、数据抓取:负责对指定网站、APP的公开数据进行抓取和采集,确保数据的准确性与及时性;监控并维护现有爬虫任务,及时发现并处理因网站反爬机制变化导致的异常问题;根据实际运行情况优化爬虫策略,提升数据采集效率、稳定性和抗干扰能力。
2、数据分析:参与业务相关的数据分析、校验,为业务开展和产品研发提供有效的数据支持
岗位要求
1、计算机、软件工程、自动化等相关专业;三年以上工作经验,有电商相关工作经验优先
2、熟悉python基础语法,熟悉常用的数据库操作(如 MySQL 、Redis 、MongoDB 等)
3、熟悉SQL类语⾔与结构化数据库,了解doris等OLAP数据库优先
4、熟悉常用的数据处理和分析库,能在 Linux 环境下高效开发。
5、具备良好的沟通能力和团队协作精神,工作认真负责,有较强的问题解决能力。
※※※招聘重点:本科,至少3年工作经验;
对python熟悉,会网页爬虫,要懂一点前端 和js知识。同时对爬来的数据要会整合分析的话,一些基本的数据库语句要懂,如果会一些别的大数据分析平台加分,但是不强制要求。
工作地点:广州;
薪资范围:35K内;
面试形式:线上视频(需要电脑端,不能用手机)