岗位职责

1. 负责企业级数据管道设计、搭建与性能优化，保障数据全链路高效流转。

2. 支撑大规模数据处理、清洗、建模及分析，为业务决策提供高质量数据支撑。

3. 落地数据治理相关工作，规范数据标准、监控数据质量，提升数据资产价值。

4. 基于 Spark、Databricks 完成 ETL/ELT 开发，结合 Azure 云服务实现数据组件集成与运维。

5. 践行 DevOps 思维，落地数据开发 CI/CD 自动化流程，实现任务版本管理与监控告警。

任职要求

1. 本科及以上学历，计算机、大数据等相关专业，3 年及以上大数据开发相关经验。

2. 精通 Spark 分布式计算框架、Databricks 平台操作与性能调优，有大规模数据处理实战经验。

3. 熟悉 Azure 云服务，能熟练运用 Data Lake、Data Factory 等核心数据组件。

4. 熟练使用 Python/Scala/SQL 进行数据开发，具备扎实的 ETL/ELT 开发能力。

5. 具备 DevOps 思维，熟悉 Git、Jenkins 等工具，掌握 CI/CD 自动化流程落地方法。

6. 了解数据仓库建模、数据治理相关方法论，有相关实践经验者优先。

7. 具备较强的问题分析解决能力、跨团队协作能力。