岗位职责:
1. 参与公司数据中台、大数据平台及数据仓库的整体规划,架构设计和研发;
2. 参与建设统一的数据体系,制定并推动数据治理体系的落地;
3. 对数据采集、数据融合、数据质量、数据应用链路有深入理解,并能协助业务数据集市建设,搭建业务领域模型。
任职资格:
1. 计算机相关专业硕士学历,3年及以上相关工作经历;
2. 精通大数据技术生态相关技术(例如:Hadoop、MapReduce、Hive、Hbase等),并具备丰富的数据仓库、数据中台架构设计和实施经验,有落地的项目;
3. 从事大数据领域至少2年以上,熟悉数据仓库模型设计与ETL开发经验 ,掌握Kimbal的维度建模设计方法,具备海量数据加工处理(ETL)相关经验;
4. 有实时ETL研发经验,对分布式实时大数据处理系统有深入理解,包括但不限于Spark streaming、Flink;
5. 熟悉数据治理、数据质量管理等相关理念和方法;
6. 熟悉Kubernetes/Docker开发及原理,熟悉Kubernetes各组件的工作流程,对Kubernetes有丰富的部署调优实践经验。