职位详情
数据库工程师-20-25K,国企外包
2-2.5万
上海信息人才服务有限公司
上海
5-10年
本科
09-11
工作地址

G60科创云廊-7号楼1

职位描述
1. 依据湖仓一体数据存算系统需求,参与大数据平台整体架构设计,确保数据采集、存储、计算,治理各环节高效协同。
2. 负责大数据平台监控及优化,保障湖仓存储、数据计算引擎等稳定运行。
3. 主导企业级数据仓库设计与研发,进行海量数据模型设计与优化,开发数据 ETL 流程,满足数据加工系统的数据处理需求。
4. 参与大数据平台核心业务功能设计与研发,包括流计算、批计算功能的开发,以及工作流管理模块的相关功能实现。
5. 跟踪行业前沿技术,解决数据中台项目中遇到的技术难题,如湖仓融合存储技术的应用优化。


1. 计算机或相关专业本科及以上学历,5 年及以上开发经验,3 年及以上大数据开发经验。
深入理解数据计算、数据建模、数据治理,数据资产,数据安全、数据服务共享、数据生命周期管理有参与数据中台项目的实战经验。
2. 熟练掌握 Hadoop、Spark、Hive、HBase、Flink 等大数据工具,熟悉 iceberg、doris 等湖仓存储引擎技术,有主导大型数据平台建设经验者优先。
3. 精通 SQL,掌握 Oracle、PostgreSQL、MySQL 等至少一种主流关系数据库。
4. 熟练使用 Java、Python 进行代码编写,熟悉 Linux 操作系统。
5. 具备实时 / 离线数据处理、数据建模、ETL 开发与设计、数据治理等经验,有数据分析、指标体系构建工作经验者优先。
6. 熟悉常见 RDBMS(如 MySQL、PGSQL),了解 StarRocks、Doris、Clickhouse、GreenPlum 等 MPP 架构 OLAP 技术。
7. 掌握 Hudi、doris 技术原理及架构设计,有实际项目开发及性能优化经验。
8.熟悉海豚调度系统以及有flink on k8s调度经验

以担保或任何理由索取财物,扣押证照,均涉嫌违法,请提高警惕

立即申请