岗位职责
1. 负责对基于LLM构建的应用进行效果和质量评估；通过与产研团队的紧密合作，制定评估标准和体系，准确分析评估效果，为模型的优化和改进提供方向；
2. 基于产研需求，完成Agent方向训练数据生产，包括但不限于协助负责人迭代标注方案及规则，完成日常数据生产，达成相关模型训练和优化效果指标；
3. 运用PE进行数据生产和过滤，了解大模型前沿训练信息，关注行业的发展方向。
岗位基本需求
1. 基础项：优秀院校本科及以上，数理逻辑能力强，文字表达能力突出；
2. 基础项：有良好的理解与需求分析能力，能够分析理解数据核心需求与要解决的问题，能够清晰准确地解释对应原因；
3. 必须项：思维灵活，能够适应业务间的快速切换，不断学习掌握各项新的标注逻辑和方式；
4. 加分项：运用PE工作流或脚本插件等方式辅助数据生产 或 在Coze等平台搭建工作流完成AI应用0-1落地；
5. 加分项：熟悉大模型训练【预训练/SFT/RL】算法者优先，有一定的Python基础，可通过脚本处理进行数据处理。