职位描述：
1、根据业务目标参与评测方案制定、建设评估数据集，并能够站在用户视角和模型视角构建理想态答案并拆解考察点；
2、通过人工评估或自动评估的方法对模型回复效果或搜索效果进行定性和定量的评估分析，能够从全链路中进行问题拆解和分析，帮助产研侧定位问题并推动优化；
3、撰写PE或搭建workflow的方法推进评估自动化，提升团队评测效率和准确性；
岗位要求：
1、985或211本科及以上，硕士可适当放宽，有大模型相关经验优先；
在较多垂直领域有很好的涉猎，能够剖析专业、行业领域问题，输出自己的见解；
2、有较好的搜索习惯，或大模型产品使用习惯，善于站在用户视角反馈体验问题，善于结合多角度拆解问题，有竞品分析经验优先 ；
3、对数据和文字敏感，文字理解及归纳能力强且擅长数据分析者优先；
4、做事细心，较强的沟通协作能力、执行力、复盘思考以及抗压能力