岗位职责

1.负责基于 Hadoop 生态（CDH、CDP 等）的大数据平台安装、配置、升级、监控与维护，保障稳定运行与性能优化。

2.熟悉 Hadoop 核心组件（HDFS、MapReduce、YARN 等）原理，可进行故障排查。

3.熟悉 Kerberos 认证机制，保障数据安全与访问控制。

4.能够运用Java进行大数据应用程序的开发和调试。

5.配合大数据开发团队，协助部署调试，解决技术问题。

6.与其他部门沟通协作，响应业务需求，提供数据与技术支持。

岗位要求：

1.教育背景：本科及以上学历，计算机科学、软件工程、信息工程等相关专业优先。

2.工作经验：5年及以上平台运维经验，有大规模数据处理平台运维经验者优先。

3.证书：有CDP证书优先考虑。

技术技能

1.熟悉Cloudera CDH和CDP大数据平台架构，具备实际的项目部署和运维经验，熟悉平台的安装、配置、管理和优化；

2.熟悉Java编程语言，能够运用Java进行大数据应用程序的开发和调试。

3.熟悉Hadoop生态系统相关组件，如HDFS、MapReduce、YARN、Hive、HBase、Spark、Flink等，能够独立搭建和运维Hadoop集群。

4.熟悉集群安全Kerberos认证原理和实践，有在大数据平台中实施和管理Kerberos认证的经验。

5.熟悉Linux操作系统的管理和使用，能够熟练进行系统配置、进程管理、性能调优等操作。

6.熟练使用脚本语言（如Bash、Python等）进行自动化运维任务的开发，能够编写高效、可靠的脚本程序。