职位详情
etl数据库开发工程师
1.4-1.8万
京北方
北京
5-10年
本科
01-19
工作地址

西山汇1

职位描述
1、负责多数据源全量/增量抽取、数据转换及分层加载等数据开发工作,满足业务需求
2、配置ETL作业自动化调度,监控运行状态,及ETL运维工作,优化故障作业并处理日常问题。
3、使用ETL工具或编程语言实现转换逻辑开发,确保业务规则准确落地,数据质量符合业务要求。
4、负责编写完善项目的技术文档,包括ETL设计文档、作业运维手册、问题排查手册、数据字典等。
5、完成项目组交办的其他工作任务。
1、3年以上ETL开发及数据处理相关工作经验,或至少参与过3个以上完整项目的设计、开发、测试及实施经验。
2、熟练使用关系型数据库,如高斯、MySQL、PostgreSQL、Greenplum等其中的一种或多种,熟悉数据库原理。
3、了解非关系型数据库,如Hive、HBase等,熟悉大数据生态相关技术(Hadoop、Spark),能处理海量数据的ETL作业开发与优化。
4、具备扎实的SQL编写能力及调优能力,熟悉Linux命令,熟练掌握Shell脚本语言,通过脚本实现ETL作业的自动化调度、日志分析、异常告警及批量数据处理。
5、具备强烈的责任心,能快速适应业务及技术架构的调整,具备独立完成ETL项目模块开发、测试及上线的能力。
具备信创项目适配开发经验者优先。

以担保或任何理由索取财物,扣押证照,均涉嫌违法,请提高警惕

立即申请