关键字：华为云大数据， 大数据迁移、pysaprk、python、scala spark
主要职责：
1、负责大数据搬迁和系统集成。
2、利用华为云数据迁移工具搬迁数据仓库并进行数据核对。
3、处理海量数据，进行实时和批处理分析，支持业务需求。
4、具备良好的SQL优化能力；能够完成数据比对工作，并且在数据出错时，有能力根据数据济追溯并定位出问题脚本。
任职资格：
1、5年大数据开发经验，熟悉大数据相关技术栈。
2、精通 Hadoop、Spark、Flink、hive等大数据处理框架，python，pyspark，hive，sparksql 开发时间超过4年，能够独立完成fink、spark作业的迁移/开发，能够端到端的进行调测。
3、熟练掌握 Java、SQL、Scala 或 Python 等语言。
4、具备良好的SQL优化能力，熟悉关系型数据库和NoSQL数据库。
5、具备大数据平台性能优化的经验。
6、优秀的沟通能力和书面表达能力。
7、统招大专以上学历。
8、熟悉华为大数据平台MRS、DataArt studio、Data Lake、Gaussdb(DWS)优先、具备大数据迁移工作经验优先。