一、岗位职责:
1.基于华为 MRS 大数据平台开展组件的日常使用,包括但不限于Hadoop 生态链组件、spark2.X、flink、hudi、hetu 引擎、clickhouse、kafka、flume、loader、Redis 的使用维护操作。
2.基于现有业务进行MRS 平台的定制化与组件二次开发,包含离线,实时,微批等数据流架构。
3.依托 MRS 平台运维界面,完成组件服务的添加、删除、修改重启,巡检及服务规模的容量及计算资源调整等操作。需要配合平台的扩容、升级、数据迁移,组件规划等操作。
二、任职要求:中级
1、硕士及以上学历。具备华为大数据HCIP证书,1年以上大数据等相关应用、运维经验。
2、熟悉 Linux 系统,能对系统的基本问题进行分析、解决。
3、熟悉一种数据库(MySQL、Postgresql等),对数据库的常见问题进行分析、解决。
4、熟悉 Docker,对容器的常见问题进行分析、解决。
5、优秀的沟通和协作能力,能负责现场的运维相关工作。
6、熟悉安全生产相关规定并遵守。
7、具备技术文档撰写能力。
8、熟悉 Hadoop/Kafka/Impala/Hbase/zookeeper等开源产品,具备其中一种或者多种产品大规模集群运维实操经验;有华为大数据产品运维经验者优先考虑。