职位详情
大数据开发工程师
8000-13000元
武汉云轺智能科技有限公司
武汉
不限
硕士
10-31
工作地址

健龙果岭公元-二期

职位描述
我们正在寻找一位充满激情和才华的大数据开发工程师,加入我们的技术团队,负责构建和维护公司的大数据平台,挖掘数据价值,为业务决策和AI算法提供坚实的数据支持。
主要职责:
数据平台建设与维护: 参与大数据平台的战略规划与架构设计,负责数据采集、处理、存储、挖掘分析等核心功能的开发与优化,确保平台的高可用性和高性能。
数据处理与开发: 负责海量数据的ETL(抽取、转换、加载)流程开发,构建稳定高效的数据链路。深入理解并应用数据仓库分层架构(如ODS、DWD、DWS、ADS),进行数据模型设计、开发与维护。
数据应用与支持: 与业务、算法团队紧密合作,理解其数据需求,提供数据解决方案。为推荐系统、机器学习模型训练等AI应用场景开发和优化底层数据,挖掘数据价值。
性能优化与技术攻关: 深入底层系统与引擎(如Spark、Flink、Hive等),进行SQL查询优化、任务资源调优和集群性能调优,解决大规模数据处理中的复杂技术难题。
技术研究与应用: 关注大数据领域前沿技术,评估并推动新技术在平台的落地应用,持续提升数据处理效率和平台能力。
任职要求:
计算机、软件工程、信息技术或相关专业本科及以上学历。
精通至少一种主流编程语言(如Java、Python、Scala),具备扎实的计算机基础(操作系统、数据结构与算法、数据库等)。
熟练掌握Hadoop、Spark、Flink、Kafka、Hive等主流大数据生态组件,并有实际项目应用经验。
精通SQL开发与优化,熟悉至少一种关系型数据库(如MySQL、PostgreSQL)。
熟悉Linux操作系统,能熟练使用Shell命令进行开发和运维。
具备良好的逻辑思维能力、问题解决能力和团队协作精神,对数据有强烈的敏感度。

以担保或任何理由索取财物,扣押证照,均涉嫌违法,请提高警惕

立即申请