一、岗位职责
1. 任务执行：根据项目计划和设计文档，高效完成数据采集、集成、清洗、计算和存储等具体开发任务。
2. 数据开发与治理实操：
① 负责编写高质量的数据处理代码（如SQL, Spark, Flink等），解决数据打通中的具体技术问题。
② 遵循数据标准与规范进行开发，执行数据质量校验、数据血缘录入、数据安全脱敏等具体操作。
3. 数据资产与标签开发：
① 负责具体数据标签的开发、测试与运维。
② 参与数据仓库、数据模型的ETL/ELT开发，构建和维护数据资产。
4. 算法模型部署支持：协助完成算法模型的部署、对接和数据供给，监控模型所需数据 pipeline 的稳定性。
5. 数据平台使用与运维：熟练使用数据中台提供的各类数据开发工具与计算引擎，完成日常开发工作，并监控任务运行状态，及时处理故障。
6. 协作与学习：在组长指导下开展工作，积极参与团队协作，主动学习并掌握新技术与新工具。
二、技能要求
1、开发技术：熟练掌握SQL（Hive/Spark SQL）并具备优异的性能调优能力，熟悉至少一种大数据处理框架（如Spark/MapReduce/Flink）进行数据清洗与计算任务的开发。
2、数据治理实践：了解数据治理基本概念，能在日常开发中严格遵循数据标准与规范，具备数据质量稽核、数据血缘录入等实操技能。
3、工具与流程：熟练使用数据中台的数据开发平台、调度工具与版本管理工具（如Git），具备规范的数据需求对接、开发与运维能力。
4、业务理解：具备基本的业务理解能力，能将简单的业务逻辑转化为数据模型与数据处理逻辑。
5、问题解决：具备快速定位和解决日常数据任务故障、数据异常的能力。