职位详情
大数据平台运维工程师(必须精通SQL) 已下线
1.5-1.8万
南京鼐云科技股份有限公司
北京
3-5年
本科
09-03
工作地址

数码科技广场

职位描述
岗位职责:(工作内容、职责范围)
1.负责大数据平台的规划、部署、监控、调优及日常运维,保障平台7*24小时稳定运行。
2.负责大数据平台安全运维,包括权限管理、数据脱敏、漏洞修复等安全体系建设。
3.优化计算/存储资源分配,持续提升集群资源利用率和任务执行效率。
4.配合数据开发团队进行架构设计评审,提供运维侧技术解决方案。
5.编写运维文档,制定应急预案,组织灾备演练。
6.支持项目现场的查询和统计需求。
任职要求:(如学历、专业、工作年限、技术能力、综合能力)
1.计算机相关专业本科及以上学历,2年以上大数据平台运维经验
2.精通Hadoop生态体系(HDFS/YARN/MapReduce/Hive/HBase等),熟悉Spark/Flink/Kafka等组件原理。
3.熟悉Linux系统运维,掌握Shell/Python/Go等至少一种脚本语言
4.具备大规模集群(500+节点)性能调优经验,熟悉JVM调优、网络调优、存储优化
5.熟悉Kerberos/Ranger/Sentry等大数据安全方案,具备实际运维经验
6.具备良好的故障排查能力、抗压能力和技术文档编写能力
7.有TDH大数据平台运维经验的优先

以担保或任何理由索取财物,扣押证照,均涉嫌违法,请提高警惕

查看更多相似职位