1. 负责对基于LLM构建的应用进行效果和质量评估；通过与产研团队的紧密合作，制定评估标准和体系，准确分析评估效果，为模型的优化和改进提供方向；

2. 基于产研需求，完成Agent方向训练数据生产，包括但不限于协助负责人迭代标注方案及规则，完成日常数据生产，达成相关模型训练和优化效果指标；

3. 运用PE进行数据生产和过滤，了解大模型前沿训练信息，关注行业的发展方向。