职位详情
数据治理工程师
1.5-1.8万
未来国际
西安
5-10年
本科
02-28
工作地址

西安市陕西省西安市高新区茶张路1号省信息化中心大楼

职位描述
一、岗位职责

1.搭建并优化数据治理体系,制定数据标准、数据质量规则及安全策略;

2.负责多源异构数据的采集、汇聚、治理、数据标注、数据湖仓、数据分级分类建设等工作;

3.开发数据治理自动化脚本与工具,提升数据治理工作效率;

4.为行业领域项目提供数据治理技术支撑,为AI模型的训练提供高质量数据集;

编写规范的技术方案、治理报告等文档,沉淀数据治理成果。

二、任职要求

1.本科及以上学历,计算机、信息管理、统计学、大数据等相关专业;

2.具备5年及以上数据治理、数据管理经验及技术;

3.具备java、python、shell编程能力,同时具备数据处理工具、自动化脚本开发能力;

4.熟悉常见关系数据库、NoSQL数据库的元数据获取、CDC数据获取技术,具备异构多源数据治理方法和技术;

5.精通 DAMA-DMBOK、DCMM、DCAM ,能制定数据标准、元数据/主数据管理、数据质量规则与安全策略;

6.熟悉 Hadoop、Hive、Spark、Flink 等,具备数据仓库建模(维度建模)与 kettle ETL 流程设计能力;

7.有数据中台、数据湖、数仓治理经验,熟悉数据血缘分析、数据目录建设

8.具备数据分类分级、脱敏、访问控制设计能力,熟悉数据隐私保护法规与合规流程;

9.良好的文档编写能力,可输出规范的技术方案、流程文档与治理报告;

10.具备行业领域数据治理,或熟悉本体及具备行业本体建设经验者优先考虑。

以担保或任何理由索取财物,扣押证照,均涉嫌违法,请提高警惕

立即申请