职位详情
大数据仓库工程师
5000-10000元
河北鹏鹄信息科技有限公司
石家庄
3-5年
本科
10-31
工作地址

环球智汇中心-C座西塔23楼

职位描述
职责:
  1. 根据业务和算法需求设计数仓分层模型,建立 ODS、DWD、DWS、ADS 数据仓库分层体系,设计多模态融合的主题数据库。
  2. 编写Flink、Spark任务实现批流一体数据清洗、聚合与指标计算,构建全链路数据血缘标签体系。
  3. 掌握Doris、Hive等数据仓库,制定数据存储分区及冷热分离策略,保障数据查询性能与效率。
  4. 掌握java、python等编程语言,负责数据中台核心模块的后端开发与优化。

任职要求:

  • 本科及以上学历,计算机或相关专业背景,3 年以上数据仓库建模与开发经验,熟悉 Kimball 维度建模理论与数据仓库分层方法论。
  • 精通 SQL 及性能优化,具备大规模数据查询的性能调优经验,熟练掌握 Hive、Doris、ClickHouse等数据仓库,理解其适用场景与核心技术原理。
  • 深入理解 ODS→DWD→DWS→ADS 数据分层架构与数据处理流程,具备数据血缘追踪、数据质量管理与数据资产化落地经验。
  • 熟练掌握 Java 、Python、Scala等编程语言,具备数据中台核心模块的后端开发与优化能力。
  • 能够使用 Spark/Flink 等计算引擎进行批流一体数据处理,了解 Iceberg、Hudi 等开源表格式及列式存储技术原理与应用。

以担保或任何理由索取财物,扣押证照,均涉嫌违法,请提高警惕

立即申请