岗位职责

1、负责大数据平台架构规划设计、规范制定、平台优化、技术选型、新技术调研。

2、负责公司大数据平台相关数据产品的方案设计、评审及技术优化，负责关键技术模块的设计和开发。

3、制定和持续优化大数据平台相关的架构、规范与流程，包括但不限于技术方案规范、代码管理规范、部署运维规范等。

4、负责大数据平台运维，异常调查、处理，确保平台稳定高效运行。

任职要求

1、计算机相关专业，5 年以上大数据领域相关经验，对大数据技术有浓厚的兴趣。

2、具备丰富的大数据平台架构设计经验，熟悉数据采集、清洗、同步、计算、存储、应用等各个环节，熟悉离线数仓、实时数仓、数据湖、湖仓一体等架构的平台构建方法。

3、熟悉大数据集群，具有大规模集群规划实施、监控与运维工作经验，熟悉大数据常见问题及处理方法。

4、熟悉 Hadoop 大数据生态，对

Hadoop/Hive/Spark/Flink/Kafka/HBase/Redis/Hudi/Iceberg/Delta Lake/Doris/StarRocks/ClickHouse 等大数据框架的原理、配置、使用、优化等方面有一定理解和掌握，至少精通其中 1-2 种。

5、扎实的编程基础，精通 java/scala/python 其中任一开发语言，熟练掌握 jvm 性能调优和问题排查方法。

6、强烈的责任心和良好的分析问题、解决问题的能力。沟通能力强，能与周边同事友好相处，抗压能力强。