北京
分享至
智能体装上技能检索，能力就一定提升吗？来自 Soongsil University 的一篇论文给出了不同看法。研究者指出，技能增强智能体的常规评估方式存在选择偏差，聚合后的检索增益可能掩盖检索任务本身带来的负收益。
问题被形式化为 Skill Following
论文把这一现象形式化为 Skill Following（SF）问题。简单说，就是只看整体表现，容易忽略检索环节单独拉低效果的那部分。
用 RAE 度量真实使用效果
为更准确衡量，论文提出 Retrieval-Invoked Actual-Use Effect（RAE）这一度量方法。RAE 关注的是检索被实际调用后产生的效果，而不是被聚合数字平均掉的结果。
特别声明：以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布，本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.
