职位详情
数仓开发工程师
1-1.5万
四川翻台宝科技有限公司
成都
3-5年
大专
04-28
工作地址

IMP都汇广场2003

职位描述
岗位职责
1、负责离线/实时数仓体系建设、维护和优化;
2、基于Doris、Flink、dolphinscheduler、NIFI、kafka等组件进行数据仓库的建设;
3、与其他数仓工程师协同,确保数仓服务运行稳定,包括性能调优、调度方案优化、ETL流程优化及异常排除等;
4、负责基于flink/spark/hive/mapreduce/doris等大数据技术的数据仓库模型设计、数据探查、ETL开发、数据质量、发布部署、运维等,构建易维护、可扩展的数据仓库公共模型及面向业务场景的数据集市,支持BI分析、数据挖掘和上层应用。

任职资格
1、本科及以上学历,3年以上数据仓库工作经验;
2、精通数据仓库领域知识和数据管理技能,包括但不局限于:元数据、数据质量、数据标准、数据安全、性能调优等;
3、熟悉大数据生态圈,包括且不限于:hadoop、flume、hive、hbase、spark、flink、StarckRocks、doris、dolphinscheduler、apache nifi、kafka等大数据组件;
4、熟悉Java生态圈,包括且不限于:springboot、springcloud等生态技术
5、至少掌握1种主流数据库的开发使用,具备SQL调优能力
6、了解离线数据、实时数仓的架构,并且有过学习和实践
7、额外具备Java或Python爬虫开发经验者优先。

以担保或任何理由索取财物,扣押证照,均涉嫌违法,请提高警惕

立即申请