职位详情
大数据工程师(爬虫)
1-1.6万
武汉万科祥盈管理服务有限公司
合肥
不限
本科
10-31
工作地址

中安创谷

职位描述
1.负责网络资源的搜集、抽取、清洗、去重、分类及过滤,构建高质量数据资源库;
2.根据业务要求,设计并实现高效的数据采集方案,确保数据的实时性和准确性;
3.协助业务部门进行数据的更新及维护,提供数据支持及解决方案
4.优化采集脚本,提升数据采集效率,解决采集过程中的反爬虫策略问题
5.参与数据采集工具的开发以及成品数据集的制作

岗位要求:
1.熟练掌握Python编程语言,具备扎实的编程基础,
2.熟悉Web前端技术
3.了解Linxu开发环境,基本掌握shell命令
4.有爬虫经验者优先

以担保或任何理由索取财物,扣押证照,均涉嫌违法,请提高警惕

立即申请