岗位职责：
1.根据甲方要求，完成大数据调研、开发和实施工作，工作内容要求保密；

任职要求：
1.大数据、计算机、数学等相关专业本科以上学历，有大数据项目建设经验；
2.掌握java/python/SQL，并能够基于这些语言进行大数据相关任务的开发和调测；
3.具备数据仓库及数据湖的规划和架构能力（离线数仓/实时数仓/数据湖/流批一体/湖仓一体等）；
4.具备大数据引擎的配置调优能力（Hive/Spark/Flink/Paimon/Hudi/Iceberg/FlinkCDC/DataX等）；
5.具备大数据集群的部署运维能力优先（Hadoop/Spark/Flink/Presto/Trino/StarRocks/Doris/Clickhouse等）；
6.熟悉数据治理（质量，安全，资产，建模，数据交换等）体系；
7.熟悉 BI 开发相关技术，了解从 ODS 到 DW 的数据加工处理；
8.熟悉 常见ETL 工具例如 Kettle 、Sqoop 对数据进行抽取、清洗、转换和加载；