岗位职责:
1.核心功能模块的开发和维护:包括统一数据集成(实时、离线)、数据研发(实时、离线)、统一作业调度(调度引擎、调度编排)、数据分析(adhoc、batch、混合引擎)、数据地图(元数据采集、全链路血缘)、数据治理(数据质量评测体系,质量指标、监控告警)等。
2.数据架构设计:参与研发过程中的数据架构及存储方案设计评审,协同规划企业业务数据体系架构设计,数据领域模型建设。
3.数据标准制定:制定数据质量、数据模型、数据安全等大数据领域相关标准,并推动落地。
任职要求:
1.本科及以上学历,计算机相关专业,10年以上数据研发领域经验。
2.精通数据平台和仓库相关理论,有企业级的数据仓库建设经验,有数据治理相关经验。
3.对批流一体、数据湖、数据治理等业内前沿方向有深刻理解,有实际团队落地经验者优先。
4.熟悉大数据相关组建运维优化,如Doris、iceberg、HBase、ES、Spark、Kafka、Flink等,熟练掌握其中若干项。
5.良好的业务理解力,能从业务视角看问题,从技术角度解决业务问题。