大数据平台架构师
3-4万
南京 本科
网新数智中心北塔楼
【任职要求】
1、本科学历,大数据、计算机科学、软件工程或相关领域专业;
2、5 年以上大数据平台开发经验,有大型互联网公司数据仓库或数据湖建设经验者优先;
3、编程与计算引擎: 精通 Python、Java 或 Scala 编程语言,深入理解 JVM 原理;熟练掌握 Hadoop 生态(HDFS, Yarn, Hive),并精通 Spark 或 Flink 中至少一种主流计算引擎;
4、数据架构与建模: 熟悉数据仓库建模理论(如维度建模),掌握数据分层、数据湖、湖仓一体等架构设计思想;
5、数据存储与查询: 具备良好的 SQL 编写与优化能力,熟悉主流 OLAP 引擎(如 ClickHouse, Doris, StarRocks)及 NoSQL 数据库(如 HBase, Elasticsearch, Redis)的使用场景与调优;
6、数据管道与中间件: 掌握常用数据同步工具(如 DataX, Flink CDC),并精通消息队列 Kafka 的使用与原理;
7、基础环境与运维: 熟悉 Linux 操作系统和常用 Shell 脚本,具备大数据组件的部署、监控和问题排查能力。
以担保或任何理由索取财物,扣押证照,均涉嫌违法,请提高警惕