岗位职责:
1.负责数据的采集、清洗、转换和加载(ETL)等工作,确保数据的质量和一致性。
2.负责维护和优化数据平台、数据仓库等数据基础设施,确保其稳定运行和高效性能。
3.开发和维护数据服务接口,提供便捷的数据访问方式。
4.解决数据处理中的技术难题,提供技术支持。
任职要求:
1.本科及以上学历,计算机、大数据、软件工程等相关专业。
2.具备3年以上智慧城市、数字政府类项目数据治理及开发、系统设计与研发等实施经验,能够准确、全面地理解业务。
3.熟悉大数据背景下的数据治理体系架构,对数据标准管理、数据质量管理、元数据管理、数据目录管理方法有深入研究。
4.熟悉数据治理相关工具,扎实的数据分析与数据模型设计能力(SQL、统计分析、维度建模建设方法,有数据采集、数据集成、数据分析等脚本开发能力。
5.精通大数据相关技术,Hadoop(HDFS/MapReduce/Hive/HBase),Redis,Flink,Spark,Kafka等。
6.具备 Oracle、Mysql、Postgresql等一种以上数据库设计开发经验,具备良好的SQL基础和sql优化能力,熟悉国产数据库者优先。