数据开发岗位职责:
1)按照要求对上游数据进行ETL处理,抽取到大数据平台部的数据仓库中;
2)根据业务需求进行报表开发,包括后台数据库表的逻辑层处理以及前台报表页面的开发,保证高质量、高效的交付;
3)根据业务需求进行BI报表开发,处理宽表逻辑和BI前台页面的实现,保证高质量、高效的交付;
4)节假日与其他同事轮流值班,保证数据库的正常跑批;
5)参与数据仓库的优化设计,如元数据、数据权限、调度优化;
6)数据质量稽核、问题分析及处理,优化数据处理程序;
7)协助架构师完成数据仓库相关的设计与开发;
8)协助业务部门抓取、分析数据;
9)参与Hadoop集群的搭建与维护
技能要求:大数据仓库、Hadoop架构、CDH集群、hive、spark、BI系统,3年以上大数据仓库开发经验