岗位要求：
1、掌握mysql、oracle、postgresql等一种或多种数据库，会编写函数、存储过程,能进行数据库查询性能调优和常见问题处理；
2、熟悉常用etl工具，如datastage、kettle、datax，能使用工具进行数据的处理；
3、熟悉大数据相关技术，对hadoop(hdfs/mapreduce/hive/hbase)生态有所了解,了解常用数据接入组件datax、sqoop、flumen等一种或多种；
4、掌握一种或多种计算框架和消息队列：spark、flink、kafka等；
5、掌握greenplum、doris等一种或多种olap数据库，进行相关模型的设计和数据管理；掌握python、java、scala等一种或多种编程语言；熟悉数据需求分析、数据探查、数据模型设计、元数据管理、数据标准管理、数据质量管理等理论方法，会使用工具(powerdesigne、pdmaner)进行数据模型设计和关系图梳理；
6、具有多个数据仓库开发项目经验，熟悉数据分析展示工具，具有实际数据可视化开发项目经验；
7、具备团队协作和沟通能力，能够与其他成员沟通协作，共同推进数据工程项目;