职位详情
数据应⽤开发⼯程师(中级)
1.5-1.6万
南京悦能智能科技有限公司
北京
5-10年
本科
08-06
工作地址

国家电投-C座

职位描述

岗位要求:

1.本科及以上学历,专业领域包括软件⼯程、⾃动化、计算机科学、数据分析等与数字化相关的专业。

2.⼯作经验:⾄少5年以上在⼤数据、数据中台相关领域的⼯作经验,具有能源⾏业、⽤友⼤数据平台相关经验者优先。

3.技能要求:

(1)熟练使⽤⼤数据⽣态组件(HDFS/YARN/MapReduce等),具备Spark/Flink等实时计算开发经验;

(2)熟悉⾄少⼀种关系型数据库(MySQL/Oracle)及NoSQL(HBase/Redis)等数据库技术(MPP架构),具备⼤数据平台/数据仓库/BI的系统落地经验;

(3)精通数据建模及ETL设计开发,对数据仓库、数据平台、数据分析等有深刻理解,具备丰富的海量数据加⼯处理和优化经验;

(4)具备多种⼤数据治理专业领域的知识和项⽬实战经验,包括元数据管理、数据⽬录管

理、数据标准管理、数据质量管理、数据安全管理等;

(5)熟练使⽤Java和Python/SQL语⾔中⼀种或者多种,扎实的Java基础,深⼊理解JVM原理、多线程并发、内存管理等。


工作内容:

1、负责⼤数据平台设计、开发及优化,包括但不限于Spark、Flink、Kafka、elasticsearch、flume、zookeeper等组件的搭建与调优;

2、负责数据采集、清洗、存储(HDFS/GP/MINIO等)、计算(离线/实时)及全流程开发;

3、设计⾼性能ETL流程,处理TB/PB级数据,优化数据计算效率与资源利⽤率;

4、负责数据平台的技术路线规划、设计和实施,确保平台能有效⽀持业务需求;

5、基于数据平台对平台架构、核⼼组件进⾏运⾏监控、优化指导、性能瓶颈等复杂技术问题提供解决⽅案及技术落地;

6、参与公司核⼼业务系统的Java后端开发,使⽤常⻅框架构建⾼并发、分布式服务。

以担保或任何理由索取财物,扣押证照,均涉嫌违法,请提高警惕

立即申请