岗位职责:
- 基于Hadoop、Spark、Hive等框架进行数据处理方案设计与实现，熟悉大数据平台的维护；
- 负责ETL流程的设计、开发与调度管理，使用海豚调度等工具保障数据抽取、清洗、转换、加载的高效执行；
- 运用SQL、Python等编程语言，开展数据建模、数据清洗、转换及汇聚工作，为业务提供高质量数据支持；
- 参与关系型数据库（如MySQL、PG）的设计、维护及数据交互，确保数据存储与访问的稳定性；
- 负责数据系统的日常运维，监控数据质量，及时处理数据异常，排查并解决数据处理过程中的各类问题；
- 与业务部门紧密沟通，精准理解数据需求，将业务需求转化为可行的数据处理方案，并推动落地。
任职要求:
1. 熟悉大数据处理框架（如Hadoop、Spark、Hive）及ETL工具（海豚调度、xxljob等）；
2. 掌握SQL、Python等编程语言，具备数据建模、数据清洗、转换、汇聚能力；
3. 熟练掌握关系型数据库（如MySQL、PG）等；
4. 具备系统运维能力，能处理数据异常，有数据质量监控、问题排查能力；
5.具备良好的沟通、需求理解、逻辑思维和问题解决能力，对数据敏感，有较强的责任心和团队合作精神。
6.本岗位劳动合同与第三方签订。