职位详情
数据平台开发工程师
2.2-3.5万
国轩高科股份有限公司
上海
5-10年
本科
01-15
工作地址

国轩高科上海总部

职位描述
1、负责大数据平台(如Hadoop、Spark、Flink、Kafka集群)的规划、部署和高可用架构设计,确保平台具备可扩展性和弹性。
2、监控集群健康状态,制定运维规范,及时处理节点故障、性能瓶颈等问题,保障平台服务稳定性。
3、对数据管道、计算和存储资源进行持续调优,平衡系统性能与成本效益,并负责集群的容量规划与扩缩容管理。
4、配置数据访问控制、加密及合规策略,落实数据质量管理、元数据管理和数据生命周期管理,防范数据风险。
5、参与私有云平台(OpenStack、VMware、K8s等)的架构设计、环境搭建和性能调优。
6、参与AI集群的部署与运维,AI应用的部署及性能调优。

要求:
1、本科及以上学历,计算机、通信或相关专业,5 年以上数据中心/云平台运维经验。
2、精通Hadoop/Spark等大数据生态组件,具备性能调优(如JVM调优、资源队列管理)和复杂故障排查能力
3、熟悉Linux系统、网络及虚拟化/容器化技术(如Docker/K8s)。
4、熟练使用Python/Java/Scala等至少一门编程语言进行开发,掌握SQL优化,并能运用自动化工具提升运维效率。
5、熟悉主流私有云平台(如 OpenStack、VMware vSphere、CloudStack)的一种或多种。
6、熟悉存储系统(SAN/NAS/分布式存储)和数据库基础运维,具备数据治理经验者优先。

以担保或任何理由索取财物,扣押证照,均涉嫌违法,请提高警惕

立即申请