给大模型下指令,回答准确率能有 96%。 让它自己决定什么时候插话? 准确率直接暴跌到 15%。 谁信? 可 Meta 实验室的一项最新基准测试,测出来的就… · @mubeitech · TwKit
@mubeitech
给大模型下指令,回答准确率能有 96%。 让它自己决定什么时候插话? 准确率直接暴跌到 15%。 谁信? 可 Meta 实验室的一项最新基准测试,测出来的就是这个结果。 他们测试的是 AI 眼镜这类主动助手。 这种设备没有提示词输入框,也没有人按回车。 全靠它自己看、自己听,自己算计什么时候开口。 被指定时机时,它检索事实的准确率高达 96%。 一旦让它自主决定该不该打断你,准确率立刻掉到 38%。 要是再让它从一整年的个人生活记忆里找依据呢? 准确率只剩下 15%。 很多人以为主动助手做不好,是模型记性太差,或者上下文太短。 其实根本不是。 教 AI "说什么",生成答案是一维的。 但教它"什么时候闭嘴、什么时候说话",是完全不同的另一个维次。 只要时机挑错,96% 的聪明立刻变成 100% 的骚扰。 在一整年的生活碎片里找对插话的瞬间? 主动助手的准确率,就卡在那个 15% 上。
曝光 526 · 评论 2 · 点赞 0 · 书签 0
查看原帖