职位详情
大数据开发工程师
8000-15000元
株洲佳合人力资源管理有限公司
株洲
1-3年
大专
09-27
工作地址

湖南润伟智能机器有限公司156

职位描述
岗位职责:
1.负责大数据平台(如Hadoop、Spark、Flink等)的搭建、维护和优化,保障数据处理的稳定性和高效性。
2.参与数据仓库设计、ETL流程开发,实现数据的高效清洗、转换和存储。
3.开发实时/离线数据处理系统,支持业务部门的数据分析、报表及决策需求。
4.与业务团队协作,理解数据需求,设计并实现数据模型和计算逻辑。
5.解决大数据环境下的性能瓶颈问题(如数据倾斜、资源调度优化)。
6.参与数据治理工作,包括元数据管理、数据质量监控和数据安全规范制定。
任职要求:
1.学历与专业
专科及以上学历,计算机、软件工程、数据科学、数学等相关专业优先。
2.技术能力
编程基础:
熟练使用oracle、sql server、mysql等数据库,熟练使用 SQL,能编写高效查询语句,熟悉 Hive SQL/Flink SQL 者优先。
大数据技术栈:
熟悉Hadoop生态系统(HDFS/YARN/Hive/HBase)及 Spark/Flink 分布式计算框架。
了解Kafka/Pulsar 等消息队列,有实时数据处理经验者优先。
熟悉数据湖/数据仓库 技术(如Delta Lake、Iceberg、Doris)。
熟练部署和使用开源大数据组件。
其他技能:
熟悉 Linux 环境及脚本开发(Shell/Python)。
熟悉K8S、docker的部署和管理。
3.项目经验
1年以上大数据开发经验,有数据中台、实时计算系统或大规模ETL流程开发经验者优先。
应届生需具备大数据相关实习、竞赛或开源项目经验。
4.加分项
熟悉数据治理(元数据管理、数据血缘、数据安全)。
了解机器学习/深度学习 基础算法,有模型部署经验者优先。
有制造业行业大数据项目经验。
5.软技能
良好的逻辑思维和问题解决能力,能独立排查分布式系统问题。
较强的沟通能力和团队协作意识,能快速理解业务需求。
6.要有制造行业相关经验。

以担保或任何理由索取财物,扣押证照,均涉嫌违法,请提高警惕

立即申请