岗位职责：
1.数据管道搭建与维护,设计、开发和维护高效、可靠的数据管道（ETL/ELT）;数据处理与优化,负责数据清洗、转换、聚合与预处理，确保数据质量与一致性,
2,数据工具与平台支持,保证实时数据管道的稳定运行;数据治理与安全合规,确保数据处理过程中的安全性、合规性和治理要求满足,
3.协助分析与建模团队,与数据分析师、数据科学家密切合作，为他们提供高质量、易用的数据源和计算平台,
4.承担部分数据分析任务，可以构建分析及预测数学模型，解决客户实际问。
任职要求：
1.本科及以上学历，大数据分析、统计学、数学、计算机与科学等相关专业，年龄在35周岁以下（含）；
2.具有3年及以上大数据开发、数据工程或相关领域从业经验，有大规模数据处理与优化案例；
3.熟悉Hadoop生态体系技术，包括但不限于HDFS、MR、Yarn、Hive、HBase、ZK、Oozie、Hue、Impala、Spark、Flink；
4.熟悉java、Scala、Python、Shell中至少2门以上语言开发。
5.熟悉大数据生态中其他开源技术栈，如Doris、Greenplum、ElasticSeach、Redis、ClickHouse等；
6.对云平台（AWS、GCP、Azure）有所了解，会使用Docker、Kubernetes等容器与编排技术优先
7.业务理解能力强，学习能力强，可以较快的学习相关前沿技术并落地到公司实际业务场景；
8.良好的团队合作精神，良好的沟通能力和认真负责的工作态度；