关键字：大数据迁移、Hadoop、Spark、Nifi、CDM、华为数据湖、数据仓库
主要职责：
1、负责大数据搬迁和系统集成。
2、利用华为云数据迁移工具搬迁数据仓库并进行数据核对。
3、处理海量数据，进行实时和批处理分析，支持业务需求。
4、负责Nifi作业的迁移和调测。
5、具备良好的SQL优化能力；能够完成数据比对工作，具备数据追溯并定位出问题能力。
6、参与方案调研，能够做详细的方案设计，负责分配、管理开发任务，技术攻关，代码评审等，需要有较丰富的大数据项目经验。
任职资格：
1、8年大数据开发经验，熟悉大数据相关技术栈。
2、精通kafka、fink、spark、hive等大数据组件，能够独立完成fink作业、spark作业、数据质量作业的迁移/开发，能够端到端的进行调测。能够配合业务用户完成集成测试。
3、精通apache nifi开源组件，能够独立完成Nifi作业的迁移和调测。
4、精通掌握 Java、SQL、Scala 或 Python 等语言。
5、参与方案调研，能够做详细的方案设计，负责分配、管理开发任务，技术攻关，代码评审等，需要有较丰富的大数据项目经验
6、具备良好的SQL优化能力，熟悉关系型数据库和NoSQL数据库。
7、具备大数据平台性能优化的经验。
8、优秀的沟通能力和书面表达能力。
9、熟悉华为大数据平台MRS、DataArt studio、Data Lake、Gaussdb(DWS)优先。
10、统招大专以上学历。
11、熟悉华为大数据平台MRS、DataArt studio、Data Lake、Gaussdb(DWS)优先、具备大数据迁移工作经验优先。。