岗位职责:
1、承担大数据平台的建设及数据分析报表开发工作,负责与业务部门沟通,收集、整理、分析数据应用需求,输出数据开发PRD文档,根据PRD制定开发计划;
2、负责大数据平台的开发、运维,做好大数据平台的优化,保障大数据平台可用、好用;
3、根据业务发展及时更新大数据平台内容,配合报表开发工程师推动数据的应用;
4、跟踪运用当前最新技术,创新性提出对本专业线效率提升或发展有价值贡献的应用思路,对大数据平台的建设提出前瞻性规划意见;
5、定期对数据仓库的运维和应用情况进行跟踪总结,分析数仓应用过程中存在的问题,输出巡检报告,不断优化改进。
任职要求:
1、本科及以上学历,计算机、软件工程、信息管理等相关专业;
2、5年以上大数据平台开发及建设经验,承担过3个以上的大型数据建设项目,能独立承担数据平台的建设和优化任务,具有实时数仓建设经验,有快消行业大数据平台建设经验优先考虑;
3、熟练掌握帆软报表、观远BI等数据分析可视化工具的应用可优先考虑;
4、精通SQL语句,熟悉数据仓库Cube的建设与维护,能够对Greenplum、Doris、ClickHouse等分布式数据进行开发和性能优化;
5、掌握主流数据仓库建设理论,熟练应用常用的ETL开发和作业调度工具,能够熟练使用PowerDesigner、ERwin等建模工具进行数据建模和开发实现;
6、精通Kettle、DataX、InLong、SeaTunnel、FlinkCDC等离线、实时数据同步工具的部署、调优;
7、精通Linux操作系统日常应用,熟练掌握Python、Shell等至少一种编程语言,熟悉Java编程,能够对开源大数据组件进行二开则经验优先考虑;
8、性格开朗,善于调动其他团队配合工作,有良好的沟通协调能力,能够跨团队协同工作。