岗位职责
1.负责对基于LLM构建的应用进行效果和质量评估；通过与产研团队的紧密合作，制定评估标准和体系，准确分析评估效果，为模型的优化和改进提供方向；
2. 基于产研需求，完成Agent方向训练数据生产，包括但不限于协助负责人迭代标注方案及规则，完成日常数据生产，达成相关模型训练和优化效果指标；
3. 运用PE进行数据生产和过滤，了解大模型前沿训练信息，关注行业的发展方向。
岗位基本需求
1. 基础项：优秀院校本科及以上，数理逻辑能力强，文字表达能力突出；
2. 基础项：有良好的理解与需求分析能力，能够分析理解数据核心需求与要解决的问题，能够清晰准确地解释对应原因；
3. 必须项：思维灵活，能够适应业务间的快速切换，不断学习掌握各项新的标注逻辑和方式；
4. 加分项：运用PE工作流或脚本插件等方式辅助数据生产 或 在Coze等平台搭建工作流完成AI应用0-1落地；
5. 加分项：熟悉大模型训练【预训练/SFT/RL】算法者优先，有一定的Python基础，可通过脚本处理进行数据处理。
本科以上学历（有相关agent智能体相关的项目经验（一定是标注方向或者数据清洗，智能体搭建）如果是代码算法方向的是不要的）
agent（之前的工作是否有运营逻辑在，我们这个岗位偏运营标注同时需要有相关agent的项目经验）