岗位职责:
1、掌握mysql、oracle、postgresql等一种或多种数据库,会编写函数、存储过程,能进行数据库查询性能调优和常见问题处理;
2、熟悉常用etl工具,如datastage、kettle、datax,能使用工具进行数据的处理;
3、熟悉大数据相关技术,对hadoop(hdfs/mapreduce/hive/hbase)生态有所了解,了解常用数据接入组件datax、sqoop、flumen等一种或多种;
4、掌握一种或多种计算框架和消息队列:spark、flink、kafka等;
5、掌握greenplum、doris等一种或多种olap数据库,进行相关模型的设计和数据管理;
6、掌握python、java、scala等一种或多种编程语言;
7、熟悉数据需求分析、数据探查、数据模型设计、元数据管理、数据标准管理、数据质量管理等理论方法,会使用工具(powerdesigne、pdmaner)进行数据模型设计和关系图梳理;
8、具有多个数据仓库开发项目经验。熟悉数据分析展示工具,具有实际数据可视化开发项目经验;
9、具备团队协作和沟通能力,能够与其他成员沟通协作,共同推进数据工程项目;
岗位要求:
1、专科及以上学历,计算机等相关专业毕业。
2、具有5年(含)-8年相关实际工作经验。