岗位职责：
1. 参与数据仓库、大数据分析平台的设计与开发；
2. 根据大数业务需求，参与业务数据模型设计；
3. 参与ETL开发，实现大数据数据采集、清洗、转换，保证数据质量；
4. 熟悉大数据仓库架构、熟悉Hadoop平台BI项目的实施流程，熟练使用hiveSql编写脚本，掌握数据倾斜的解决方法；
5. 精通hive、分析函数，熟练使用SQL完成业务需求。

岗位要求：
1. 本科及以上学历，计算机或相关专业，5年及以上大数据开发经验；
2. 深刻理解大数据平台(hadoop/spark/hbase), 具备对Hive，spark, flink, kafka，flume等相关大数据组件应用调优能力和Debug能力,有实时流处理经验；
3. 熟练Mysql、starrocks等数据库，有过数据库调优和海量数据存储经验优先；
4. 熟悉linux/shell、熟悉(python/shell)任意一种脚本语言、熟悉Java/Scala等大数据开发语言；
5. 有计算服务平台性能优化经验，有大规模分布式系统开发、维护经验，有故障处理能力。