职位描述
工作职责
1、熟悉大数据治理流程体系,负责相关数据质量的保障和维护;
2、负责根据业务的数据开发需求,与客户交流对接完成需求;进行数据处理和建模分析,挖掘出价值数据进行相关开发;
3、负责日常数据开发和分析工作,负责数据的接入、治理、加工和维护工作,对数据进行处理、清洗、标签、核查等;
4、有一定的问题跟踪处理经验,可以对数据处理过程中的问题进行独立的分析和解决。
任职资格
1、本科以上学历,具有3年以上数据治理/数据开发相关工作经验;
2、熟悉大数据组件,如HDFS/HIVE/SPARK/FLINK/KAFKA/ES等;熟悉各种数据库,如POSTGRES/DORIS等;了解或使用过主流厂商的数据治理工具、大数据产品;
3、熟练掌握大数据处理、数据中台和分析工具,如Java\Python、spark、hive等,具备较强的数据处理能力;
4、能够独立完成项目中与客户的需求对接、数据模型设计、数据开发、数据调度、文档编写等开发工作;
5、对数据敏感,有严谨的工作思路,较强的逻辑思维能力,良好的沟通合作能力,具备一定的数据管理能力;
6、熟练使用Java和Python(spark)者优先,具备相关证书者优先。
以担保或任何理由索取财物,扣押证照,均涉嫌违法,请提高警惕