职位详情
数据治理工程师(数据分析、处理)
1-1.8万
苍穹数码
北京
3-5年
本科
08-20
工作地址

中关村东升科技园-北领地B-2号楼

职位描述
岗位职责:
1、数据情况调研:
深入业务部门或系统,全面调研数据来源、类型、格式、质量、更新频率、业务含义及归属关系。
识别关键数据资产、数据痛点及潜在的数据价值点。
评估数据现状与业务需求的匹配度及差距。
2、数据清单制作与管理:
基于调研结果,系统性地编制和维护详细的数据资产清单/数据目录。
清晰记录数据名称、定义、来源系统、负责人、格式、样本、敏感级别、关联关系等关键元数据信息。
确保数据清单的准确性、完整性和及时更新。
3、数据梳理与标准化:
对收集到的原始数据进行结构化梳理,理解数据之间的逻辑关系和业务规则。
参与或主导制定数据标准、命名规范、数据字典、数据模型(概念/逻辑)。
识别并定义数据实体、属性及其业务含义,消除歧义
4、数据处理与加工:
根据入库要求和数据标准,设计并执行数据清洗、转换、整合、去重、脱敏等处理流程。
编写或使用脚本/工具(如 SQL, Python, ETL工具等)进行数据质量检查与修正。
处理数据格式转换、编码统一、值域映射等问题。
5、数据入库与集成:
负责将经过梳理和处理的规范化数据,按照目标数据平台(如数据仓库、数据湖、业务系统等)的要求,完成数据加载或集成。
设计并验证数据入库方案,确保数据准确、完整、及时地进入目标环境。
与数据库管理员、开发人员协作,解决入库过程中的技术问题。
6、流程优化与文档沉淀:
持续优化从数据调研到入库的全流程工作方法和效率。
撰写清晰、规范的技术文档、操作手册和总结报告,包括数据调研报告、数据清单说明、数据处理逻辑、入库方案等。
参与数据治理相关活动,如数据质量管理、元数据管理等。

任职要求:
1、必备技能与经验:
(1)3年以上数据管理、数据分析、数据治理或相关领域工作经验。
(2)深刻理解数据资源体系建设的核心环节与流程,具备独立完成或主导从数据情况调研 -> 数据清单制作 -> 数据梳理 -> 数据处理 -> 数据入库全流程项目的成功经验。
(3)精通数据调研方法论,能有效与业务和技术人员沟通,挖掘数据需求与现状。
(4)熟练掌握数据清单/数据目录的制作与管理,对元数据管理有扎实基础。
(5)熟练使用 SQL 进行复杂数据查询、操作和验证。
(6)精通数据清洗、转换、整合等常用技术。
(7)熟悉关系型数据库(如 MySQL, PostgreSQL, SQL Server, Oracle 等)的基本原理和操作,了解数据仓库/数据湖概念。
(8)优秀的逻辑思维能力、结构化思维能力和细节把控能力,能够处理复杂、混乱的原始数据。
(9)出色的文档撰写能力,能清晰、规范地描述数据和处理逻辑。
加分项:
1、有复杂数据治理项目实践经验,熟悉数据标准、数据质量、数据管理等。
2、了解数据建模(ER/维度建模)基础知识。
3、有特定行业(如部队、政府、等)数据资源建设经验。
教育背景:
计算机科学、信息技术、统计学、信息管理或相关专业本科及以上学历。

以担保或任何理由索取财物,扣押证照,均涉嫌违法,请提高警惕

为您推荐更多相似职位
立即申请