职位描述
工作职责:
1.负责实时数据技术框架建设,基于离线/实时计算技术实现业务数据的计算和应用;
2.负责FlinkSQL的流计算任务的查询优化、运行时优化、问题诊断等;
3.负责Flink等流计算引擎的调度优化、执行优化,支撑高吞吐、大状态作业稳定运行
4.深入理解业务场景,与业务部门合作,推动实时计算在公司落地;
5.研究最新的实时数据技术发展和实践,并推动在公司内部实践和落地。
6.构建数据模型、ETL流程、数据清洗规则及数据校验逻辑,支持企业主数据(如客户、产品、供应商等)的统一管理
7.开发和优化MDM系统核心功能模块(如数据匹配、合并、去重、版本控制等)
8.实现MDM系统与ERP、CRM、MOM、PLM、BI等业务系统的数据集成,确保主数据在多系统间的实时同步与共享
9.参与制定数据治理策略,设计数据质量监控机制,解决数据冲突和异常问题,支持主数据标准化流程的落地,推动数据治理体系的完善。
10.持续优化MDM系统的数据处理性能,提升高并发场景下的响应效率;设计数据安全方案,确保敏感主数据的加密、权限控制和合规性
任职资格:
1、本科及以上学历,软件工程专业优先,学校综合表现和成绩中上以上
2、学习能力强,对新技术保持热情,责任心强,具有团队意识,良好的沟通能力,性格开朗。
3、了解1种数据库的开发及使用,例如:MySQL、Oracle、SQL Server 等
4、了解1种编程语言,例如:Java 、Python、C#等
5、熟悉使用Excel、Word等办公软件,有一定的文档编写能力。
6、了解过hadoop组件的优先,例如:Hive,Impala,Flink、HDFS、Yran
以担保或任何理由索取财物,扣押证照,均涉嫌违法,请提高警惕