职位详情
大数据开发工程师
1.4-1.6万
天津一众企业管理有限责任公司
北京
3-5年
本科
09-04
工作地址

聚杰金融大厦无

职位描述
工作内容:
1.负责大数据系统和数据湖的设计、开发、搭建及性能优化,解决大数据组件技术问题;
2.基于业务需求进行数据建模及大数据作业开发,确保数据完整性致性与安全;
3.负责 Spark 和 Doris 的开发、调优及性能优化,保障批流一体作业的高效运行;
4.负责 Hadoop、Trino 等大数据组件的Flink 、Hive Kafka运维与调优,保障大数据平台7*24稳定高效运行,推动运维自动化;
5支持部门项目实施,确保安全规范,并完成相关文档记录。
岗位要求:
1、统招本科及以上学历,计算机相关专业,3年以上大数据开发经验精通 Java 和 SQL ,熱悉 Python/Shell /Scala 等至少一种开发语言熟悉常用设计模式;
2、具备扎实的 Spark 开发与调优能力,熟悉 Spark SQL、SparkStreaming 、内存管理与性能优化;
3、具备 Doris 实际项目开发与调优经验,熟悉建模设计、查询优化及高并发场景处理;
4、熟悉其他主流大数据技术(Hadoop/Flink/Hive/Kafka/Trino有华为 MRS 或 Hudi 数据湖经验者优先;
5.责任心强,具备良好的自驱力和项目管理意识,能主动思考并及时汇报项目进度与风险;

以担保或任何理由索取财物,扣押证照,均涉嫌违法,请提高警惕

立即申请