岗位职责：
1.基于Kubernetes等容器技术，设计并部署大数据平台架构，确保系统的高可用性、可扩展性与稳定性。
2.推进AI平台(如MLOps、模型训练框架)与大数据栈的深度融合，支持数据科学与AI模型的高效运作与持续集成。
3.负责大数据平台的日常运维管理，包含平台监控、故障排查与性能优化，确保系统在大规模数据处理场景下的稳定性与高效性。
4.参与大数据&AI平台的POC工作，评估新技术与工具的适配性与性能推动技术创新与落地实施:
5.配合研发团队，优化数据处理流程，解决集群性能、数据处理瓶颈、存储管理等技术难题，提升平台整体效能与处理能力

任职要求：
1.计算机科学、信息技术、电子工程等相关专业本科及以上学历，具有2年以上大数据平台实施与运维经验。
熟悉大数据生态系统，熟悉Hadoop、Spark、Flink等大数据组件，至少掌握一种大数据平台的部署与实施，具备良好的架构设计能力。
3.熟练使用Airflow、DolphinScheduler等ETL工具，具备TB级数据量的ETL开发经验，熟悉数据流的优化与调度策略。
4.熟练Java、Python等至少一门编程语言，具有较强的编码能力，能够独立编写高效、可维护的代码，并具备一定的SQL调优经验。
5.熟悉Kubernetes和Docker等容器技术，具有丰富的容器化部署、管理经验。熟悉云平台(如AWS、Azure、华为云等)的运维与架构设计，具备云原生环境下的大数据平台运维经验者优先。
5.高度的责任感与工作韧性，能够在高压、快节奏的工作环境下快速高效地完成任务，主动承担跨部门、多项目支持工作。