岗位职责：
1、参与数据中枢架构及其子模块的方案设计工作。
2、负责开发与业务相关的Hive、Iceberg、HBase、Kafka、Doris、MySQL等工具或接口。
3、负责子模块的详细方案设计。
4、开发大数据数据采集、数据计算Spark、Flink及对外API接口所需的微服务。
5、熟悉Hadoop集群，负责服务容器化部署及容器化管理API的开发。
任职要求：
1、精通Hadoop集群的安装、配置及深度优化。
2、熟练掌握Hive SQL，熟悉常见的关系型数据库（RDBS）、HDFS、Hive、HBase、Kafka、Kafka Connect、Redis、MongoDB、IOTDB等技术。
3、熟悉Doris、Trino、StarRocks等OLAP组件，以及Flume、Seatunnel、Canal、DataX等数据集成工具中的一种或多种。
4、熟悉Iceberg、DolphinScheduler等相关API的使用。
5、精通MySQL及SQL查询语言，具备SpringBoot、SpringCloud及相关组件的实际开发与部署经验。
6、熟练使用MyBatis/Hibernate等ORM框架，熟悉Tomcat配置及MQ/Kafka等中间件。
7、熟悉spark、flink 数据处理模型。
8、具备工作流引擎或规则引擎的使用经验。
9、熟悉容器化技术，如Docker和Kubernetes。
10、熟悉无状态服务的设计与开发方法。
11、具备单元测试开发能力，能够规范编写技术文档和开发文档。
12、要求硕士研究生学历。