职位详情
实时计算与湖仓一体架构师(金融AI方向)
2.5-4万·13薪
上海新地微融信息科技有限公司
上海
5-10年
本科
08-17
工作地址

丰盛创建大厦25楼

职位描述
岗位职责:​
​实时数据体系建设
基于Flink构建毫秒级信贷业务实时计算体系,支撑反欺诈规则计算、用户授信额度动态调整等核心场景
使用Paimon打造流批一体数据湖,实现贷款审批流水、用户还款行为等数据的低成本高效存储与回溯
基于Doris搭建OLAP实时查询平台,满足风控决策、监管报表等业务亚秒级响应需求
​AI工程化落地
与算法团队协作实现AI模型生产化部署,完成实时特征工程、在线推理服务等模块开发
开发AI模型监控系统,跟踪模型预测效果(如逾期率预测准确度)与数据漂移告警
​核心技术攻坚
主导Flink作业性能调优(反压处理、Checkpoint优化等),保障7 * 24小时信贷业务连续性
研究Flink ML Pipeline等新技术在业务中的应用,探索实时特征计算的AI化改造
​开发规范制定
制定Flink/Paimon/Doris开发规范,设计通用组件降低开发成本(如统一Connector管理框架)
建设技术知识库,主导团队技术内部分享
AI融合结合实际应用场景实现智能优化方案
调用大模型应用框架,实现模块智能优化处理,结合实际企业场景,提供最优AI开发解决策
springAI、Python、LangChain、RAG、Pinecone等技术
模型应用开发基础、RAG原理、Ollama部署、Llama3模型调试、文本流处理、向量数据库、token分词、transformer机制、向量检索、内容合成、自注意力、LLM2
全方位Java大模型对接技术,智能体、训练、微调系列方案大模型生态介绍、大模型本地化部署、本地知识库的使用、大模型Java应用框架专题、向量数据库专题、结合设计模式实现多模型无耦合动态切换等 3打通大模型开发关键环节,数据集、推理验证、模型部署、API对接
基于DeepSeek大模型与LangChain框架构建多轮对话引擎、结合RAG技术实时用户行为分析等等
​任职要求:​
本科及以上学历,10年大数据开发经验,3年以上Flink实战经验,有Flink源码研究经验优先
精通Flink SQL/DataStream API,有Flink CDC实时入湖、窗口聚合等复杂场景开发经验
熟悉Paimon表格式设计与Merge优化,有湖仓一体项目落地经验
掌握Doris Rollup预聚合、Colocate Join等优化手段,处理过百亿级数据查询优化
AI相关能力:​
springAI、Python、LangChain、RAG、Pinecone等技术
熟悉信贷业务数据链路(申请、审批、放款、催收等环节数据流转)
了解金融监管要求(数据加密、隐私计算等技术应用经验加分)

以担保或任何理由索取财物,扣押证照,均涉嫌违法,请提高警惕

立即申请