岗位职责:
- 数据清洗与标准化:设计并实施高效的数据清洗流程;执行数据标准化任务,包括格式转换、异常值处理等,提高数据质量。
- 算法开发:深入理解业务需求,将商业逻辑转化为代码实现,设计并优化算法模型,以提升数据处理和分析的效率,为业务决策提供强有力的数据支持。
- 开发数据指标与报表, 涵盖数据开发、分析、模型训练与优化
- 数据处理自动化:构建高效的数据处理流水线,实现数据采集、清洗、存储的一体化管理,优化流程,提升处理效率。
- 大数据平台优化与维护:使用Python、Spark、SQL等工具进行大规模数据处理,优化性能,确保数据处理系统的稳定性和高效性。
技能要求:
- Python、SQL、Spark
熟练掌握 Python 进行数据清洗、分析和建模,精通 Pandas, NumPy等核心库。熟练使用 SQL,能够进行复杂的数据处理与提取。(必须)
- 熟悉LLM API 集成,RAG搭建技术,对金融市场数据有一定了解,例如万得,聚源等资讯数据;对数据仓库建设有实践经验或有一定的了解。 (加分项,非必需)
- 对大模型的应用有一定的了解和使用,有使用coze等平台开发工具或智能体经验的优先
- 教育背景:计算机科学、信息技术、数学等相关专业硕士及以上学历,具备3年以上大数据领域相关经验。
- 综合素质:
具备优秀的逻辑分析能力和系统性解决问题的能力。
具有良好的沟通能力和团队协作精神,能够将复杂的技术问题转化为清晰的业务语言。
对工作认真负责,有强烈的自驱力,乐于探索数据背后的业务价值。
工作地点: 广州天河区