1.负责数据治理工作,以及大数据平台的开发与建设;
2.负责制定大数据平台技术规范及标准,为应用的设计、开发与部署提供指导;
3.调研大数据平台相关新技术并推动落地,且能将其应用于现有系统平台。
任职要求:
1.硕士及以上学历,计算机、软件工程等相关专业优先,具备3年及以上数据仓库或数据湖工作经验;
2.精通Java语言,熟练使用SpringBoot、Mybatis、Mysql、Redis、Kafka、Elastic Search等框架与中间件;
3.具备海量数据处理经验,精通数据全链路(数据集成、存储、计算、应用、输出)的关键技术节点与建设方法;
4.熟悉Hadoop/Spark平台下的大数据技术,对数据处理架构有一定认知,熟悉Hive、Flink、ClickHouse、Doris等技术原理,并有相关开发经验;
5.有一站式数据开发平台建设经验,或熟悉其主要构成与建设方案;
6.具备数据治理相关经验,了解数据标准制定、数据质量评估指标与方法,能够参与数据治理体系的建设与落地。