职位详情
国企/中高级运维开发工程师
1.6-2万
中智四川经济技术合作有限公司
重庆
3-5年
大专
09-16
工作地址

金山商业中心-A座

职位描述
职位名称:中高级-运维开发工程师
主要职责
1. 平台构建与部署:
负责基于国产化硬件(如鲲鹏)和操作系统(如麒麟OS、欧拉)以及国产化中间件(如东方通相关组件)的环境下,完成数据平台相关产品的部署、配置与维护。
负责包括但不限于 Flink, Apache Doris, 小海豚调度器(DolphinScheduler), CDC工具(如Canal, Debezium), ETL工具(如DataX, Kettle) 等组件的安装、升级和高可用集群搭建。
2. 系统运维与监控:
建立并维护全面的监控告警体系(如Prometheus+Grafana),对数据平台的服务器资源、组件健康度、数据流延迟、任务调度状态等进行7x24小时监控与应急响应。
制定并执行运维规范、应急预案、容灾备份和恢复策略,保障数据平台SLA。
3. 数据集成与开发支持:
CDC/ETL运维:维护和管理CDC数据捕获管道,确保数据实时、准确地从业务库同步至数据仓库。运维和优化ETL离线同步任务。
离线开发运维:负责 小海豚调度(DolphinScheduler) 平台的日常运维,包括工作流管理、任务排错、资源调配和性能优化。
实时开发运维:负责 Apache Flink 实时计算平台的运维,包括作业部署、状态管理、资源监控与调优,协助开发团队解决运行时问题。
4. 数据仓库运维:
负责 Apache Doris 集群的运维管理,包括节点扩容、数据备份、查询性能优化、数据规范审核及权限管理。
5. 产品部署升级方案及自动化运维:
编写平台产品的部署升级方案
编写自动化脚本(Shell/Python/Ansible),实现部署、监控、巡检等任务的自动化,提升运维效率。
6. 国产化适配:
深入研究国产化软硬件环境特性,解决数据平台组件在国产化环境中遇到的兼容性、性能及稳定性问题。

任职要求
1. 必备经验与技能:
熟悉Linux操作系统,能熟练进行性能诊断、调优及故障排查。
至少熟悉以下两项技术的部署与运维:
实时计算:Apache Flink,了解其核心概念(如Checkpoint, Savepoint, State)和资源管理。
数据仓库:Apache Doris(优先)、StarRocks之一。
任务调度:小海豚调度(DolphinScheduler)。
熟悉数据集成技术:有CDC(如Debezium, Flink CDC)和ETL(如DataX, Kettle, Seatunnel)工具的实际运维经验。
熟练使用至少一种编程或脚本语言,如Shell, Python, Java。
熟悉自动化配置管理工具,如Ansible、SaltStack等。
2. 加分项:
有实际的国产化环境(鲲鹏/飞腾/龙芯 + 麒麟OS/统信UOS + 国产数据库及中间件) 运维部署经验者优先
熟悉容器化技术(Docker, Kubernetes),有在K8s上部署运维数据组件的经验。
具备良好的网络、存储知识,能分析解决复杂的网络性能问题。
3. 软技能:
具备文档编写习惯,能清晰地记录运维流程和技术方案。
具备强烈的责任心和优秀的问题分析解决能力,能承担压力。
良好的沟通能力和团队协作精神,能高效地与开发及业务部门协作。

上班时间:早上8:30-17:30,周末双休

工作地址:金山商业中心A座

薪酬福利:综合薪酬16K-20K/月、五险一金、节假日福利等

注:该岗位属第三方外包岗位,请确认后投递

以担保或任何理由索取财物,扣押证照,均涉嫌违法,请提高警惕

立即申请