职位详情
大数据架构师
1-1.2万
深圳市华睿信息技术有限公司
湛江
5-10年
本科
04-28
工作地址

剑麻大厦11楼

职位描述
工作职责

1、负责大数据项目整体架构规划和优化,Hadoop、Spark、Flink、Kafka等核心组件调优,包括应用架构/技术架构/物理架构和数据架构等;
2、负责指导数仓工程师进行技术验证与实现,核心技术问题的攻关,解决项目开发过程中的关键问题和技术难题;
3、根据项目业务需求,调整架构方案,撰写核心代码;
4、根据公司项目和业务发展特点,负责研究相关大数据前沿技术;
5、负责大数据项目对外技术沟通,负责营造团队技术氛围,推动技术能力的沉淀;
6、持续挑战新的技术方向,攻克大数据量,高并发,高稳定性,易用性等各种技术难点。
任职要求:

二、任职要求

1、计算机科学、软件、数学等相关专业毕业,5年以上大数据相关工作经验;
2、有丰富的大数据及服务端项目研发和架构经验;
3、精通Hadoop生态、Spark、Flink、Kafka等组件原理和业务方案调优
4、了解流式计算原理。熟悉Flink计算框架结构。
5、熟悉常用数据采集、消息转发、数据存储相关组件及技术,包括Redis/Hive/ Clickhouse/Kafka/lceberg/Presto/DolphinScheduler/ElasticSearch等。
6、精通Java等主流编程语言,熟悉JVM原理及调优,熟悉微服务,熟悉开源服务框架(如Dubbo、springcloud);
7、熟练使用Linux/Unix等操作系统,具备编写shell的能力;
8、有超PB级别大数据处理实战经验,熟悉整个大数据的完整处理流程,包括数据的采集/清洗/预处理/存储/分析挖掘和数据可视化,以及架构设计/开发/部署/自动化运维等工作;
9、有优秀的业务理解能力,能理解清楚业务并进行合理的架构设计;
10、具有较强的沟通能力,工作态度积极主动、细致、有全局观,有较强的抗压能力,良好的团队合作意识;

以担保或任何理由索取财物,扣押证照,均涉嫌违法,请提高警惕

为您推荐更多相似职位
立即申请