职位描述
大数据运维工程师(具备公安行业经验者优先)
岗位职责:
1.负责大数据平台(包括但不限于Hadoop, HBase, Yarn, Flink, FlinkSQL, Kafka, Elasticsearch等)的部署、监控、调优和日常维护。保障大数据集群的7x24高可用性、稳定性和性能,处理各类集群告警和故障。
2.能够快速响应并处理大数据平台组件出现的各类线上问题,进行根因分析、性能瓶颈排查和故障恢复。具备深入的问题诊断能力,能通过分析日志、监控指标和系统状态定位并解决复杂技术问题。
3.了解并参与过大数据治理业务流程,包括数据接入、数据处理、数据存储(原始库、主题库等) 的全链路管理的治理,能够依据平台对客户提出的接入数据,进行探查结合实际业务需要,进行数据治理
4.熟悉数据治理核心概念,包括数据元、限定词的定义与管理。理解数据项(由数据元、限定词等组成) 的构成,并能管理和维护代码字典(或称码表),确保数据的一致性和规范性。
任职要求:
技术能力:
熟悉Hadoop、HBase、Kafka、Flink、Elasticsearch等主流大数据组件运维管理
具备扎实的Linux操作系统和网络知识,熟练使用脚本语言(Shell/Python等)进行自动化运维。
有丰富的大数据集群线上问题排查和性能调优经验。
数据治理知识:
熟悉数据治理体系,对数据生命周期管理有清晰的认识。
能够准确理解并阐述数据元、数据项、限定词、代码字典等核心概念及其在业务中的应用。
行业经验(硬性要求):
具备公安、政法或相关行业信息化/大数据平台运维经验者优先。
熟悉该领域的数据特性、业务流程和安全保密要求。
综合素质:
具备强烈的责任心和良好的团队协作精神。
拥有出色的抗压能力和应急响应能力,能高效处理紧急生产事件。
加分项:
有大型TB/PB级别大数据平台运维经验。
以担保或任何理由索取财物,扣押证照,均涉嫌违法,请提高警惕