岗位职责:
1、分析客户业务场景,设计定制化数据治理框架,制定数据标准、主数据管理策略及数据质量规则。
2、主导公司数据治理平台产品的部署、配置和集成,打通客户业务系统数据孤岛。
3、完成平台安装、测试及上线,展示数据治理成果(如数据资产目录、血缘分析报告)。
4、优化平台性能,提升数据处理效率,支持客户实时数据分析需求。
5、设计数据从采集到销毁的全周期策略,建立客户数据资产目录并跟踪血缘关系。
6、实施数据清洗、标准化及脱敏操作,修复历史数据质量问题(如重复记录、字段缺失)。
7、协调客户IT、业务部门推进治理落地,向非技术人员传递治理价值(如降本增效、合规风控)。
8、组织数据治理培训,提升客户数据意识及平台操作能力。
9、确保客户数据符合GDPR等法规,设计数据安全策略(访问控制、加密)并执行审计。
任职要求:
1、熟练使用数据治理平台完成数据采集、数据治理、数据开发、数据共享交换、数据安全等工作;
2、熟悉数据仓库设计理论,掌握ODS、STD、DWD、DM分层设计方法,独立建设主题库、专题库;
3、掌握数据标准、数据质量、元数据、数据模型、数据血缘等数据治理相关实战知识;
4、了解数据治理需求分析、数据建模、数据开发;
5、了解多项大数据处理/分析相关的工具/框架,如Hadoop、Hive、Spark、kafka、HBase、Presto等;
6、熟练ETL数据清洗流程,熟悉ETL开发工具与平台,能基于数据治理平台开展数据ETL工作;
7、熟练使用Spark、Flink计算引擎开发离线作业和实时作业;
8、熟练使用平台开发API接口服务;
9、掌握数据安全分级分类、数据加密、数据脱敏、敏感数据识别等技能;
10、掌握数据可视化工具的使用,基于平台配置数据源、数据集、仪表盘和数据大屏;