岗位职责:
1、负责公司内部数据采集、ETL建模和定制化数据分析任务;
2、负责数据仓库架构设计、模型设计和开发;
3、负责数据仓库ETL流程开发和优化,并解决ETL相关技术问题;
4、配合数据仓库架构师完成数据仓库/数据集市ETL设计开发;
5、负责设计、开发、优化E丁L任务调度系统;
任职要求:
1、统招本科及以上学历,统计学、数学、计算机相关专业,1年以上实际数据仓库开发经验,有独立从0-1搭建数仓的经验者优先;
2、负责数据仓库ETL流程开发和优化,并解决ETL相关技术问题;
3、熟悉Spark、kafka、Hive、Flink、impala等大数据组件,具有相关系统的调优、运维、开发经验;
4、精通SQL开发,熟悉hive等分析型数据库;
5、熟练掌握kettle,datastage等调度工具中的一种;
6、有独立从0-1搭建数仓的经验者优先;