岗位职责
评测方向：
1、主导美团AI搜索策略优化的效果评估工作，能产出策略迭代效果评测报告。
2、负责产品线上数据的满意度标注，及时发现数据问题并积极反馈，对项目整体进行质控
3、结合用户需求理解，负责制定并迭代策略标准，推动产研优化和项目落地。
4、负责质检和标准培训，保障数据交付的准确性与一致性。
模型标注方向：
1、负责美团AI搜索在SFT、多模态、人格化效果的改写与评估，能产出效果评测报告。
2、深度参与大模型训练数据生产工作，重点负责模型回答结果的思考过程和回复结果的数据标注与管理，并对标注结果负责。
3、负责质检与改写标准培训，确保搜索结果的个性化精准度和一致性，提升用户体验。
4、跟进AI模型和算法在SFT与人格化改写中的应用，分析评估模型输出结果的质量与效率。
岗位基本需求
1、本科及以上学历，对大模型常见的训练流程、训练任务类型和应用场景有认知，熟悉数据处理和标注方法，有搜索产品、AI 产品标注和评测经验的优先考虑。
2、扎实的用户需求分析与理解能力，能够将评估结果与用户需求紧密结合。
3、具备良好的团队合作精神与沟通能力，能独立负责评估流程的组织与推动。
4、具备细致的工作态度，能够从细节出发保证评估工作的精准和高效。