职位描述
岗位职责:
负责大数据平台数据湖的日常运维、监控与故障排查,保障系统稳定性;
设计、开发和优化数据湖ETL流程,支持PB级数据的高效存储与处理;
管理数据湖元数据、权限控制与生命周期,确保数据安全与合规;
优化数据平台性能,包括资源调度、存储成本控制及查询效率提升;
协同其他团队,提供可靠的数据接入与计算服务。
任职要求:
本科及以上学历,计算机相关专业;
了解Hadoop/Spark/Hive/Flink等生态组件,熟悉数据湖架构及技术栈;
熟练使用SQL/Python,具备ETL开发及性能调优能力;
熟悉Linux系统、存储(HDFS/S3)及容器化技术(Docker/K8s);
具备强问题定位能力,责任心强,良好的团队协作意识。 成都的Data, K3的, 我一会问问周期多久哈
以担保或任何理由索取财物,扣押证照,均涉嫌违法,请提高警惕