GPT-5也会话到嘴边想不起来,谷歌测了450万次:钥匙丢了
它得先知道自己想不起来那个名字明明就在嘴边。你看到一张熟脸却死活想不起他的名字心理学给这种现象起过一个名字「舌尖现象」tip-of-the-tongue。现在谷歌在一项研究里发现GPT-5和Gemini 3也有同一种毛病。这两个模型把95%–98%的测试事实都装进了参数里。可你直接去问它们却有26%–34%的事实答不出来。开启thinking多想一会儿还剩11%–12%怎么也想不起来。大模型答不出来很多情况下真不是它大脑里没有是学过了取不出来。这项研究叫《空货架还是丢钥匙》Empty Shelves or Lost Keys?收录于ICML 2026。8月12日Google Research发博客把结果集中讲了一遍同时公开的还有一套名叫WikiProfile的基准和完整数据集。货架没空钥匙丢了模型答错题可能是两种毛病。一种是压根没学过那得往预训练里加数据、加参数另一种是学过了换个问法就调不出来那是后训练和推理环节的事。这两种问题都曾被归结为一个准确率的问题。谷歌提出的「知识画像」框架不再问「这道题答对没有」而是判断「这条事实在这个模型记忆中处于什么状态」一共划分出五种。「知识画像」把一条事实分成五种状态存入失败、回忆失败、直接回忆、借助thinking回忆、未存入却靠推理答对。同样一个错误答案在不同的状态修改方法也完全不同。怎么判断一条事实存没存进去办法是把维基原文截到答案出现之前让模型顺着写下去或者在同样的上下文后面直接发问。这两道题都不许开thinking为的是把「记住了」和「推出来的」分开。左侧测存没存进去把维基原文截断让模型补完右侧测答不答得出换措辞、换正反方向反复提问。基准叫WikiProfile一共2150条事实全部取自英文维基百科。每条事实配10道题2道测存没存进去4道让它自己答4道给选项挑。加起来21500道题。出题全交给了模型Gemini-2.5-Pro生成Google搜索逐题验证答案不唯一或题目有歧义的连带整条事实一起丢弃。最后人工再验一遍又砍掉不到2%。跑分的是13个模型覆盖Gemini 3、GPT-5、GPT-4.1和Gemma 3四个家族每个模型开关thinking各跑一遍每道题采样八次攒出约450万条回答。把一个前沿模型完整测一遍大概要花500美元。结果就是开头那组数字。在前沿模型的事实错误里「取不出来」已经压过了「没学过」成了大头。取不出来的都卡在同两个地方第一个是冷门知识。过去的主流解释是模型容量不够一些冷门事实压根没学进去。这次的数据冷门知识其实都存进去了。Gemini-3-Pro存下了94.5%的冷门事实热门事实是99.5%只差5个点。可一开口回答冷门事实就掉到63.3%热门事实还有84.7%差了21个点。存的时候几乎没差别取的时候差出四倍。冷门事实后20%与热门事实前20%对比存入率差距很小直接回忆率差距明显拉开。GPT-5的落差更大。冷门事实它存住了90.7%热门事实98.4%。可一开口冷门事实只剩下52.9%热门事实还有77.8%。将近一半的冷门事实明明躺在模型里就是调不出来。存入的时候差别不大取的时候差别很大。长尾问题的真相不是模型没见过那些冷门事实是那些知识更难被叫醒。第二个场景是反向提问你问AI汤姆·克鲁斯的妈妈是谁它答得又快又准。你反过来问这位女士的儿子是谁它就卡壳了。2023年那篇论文给它起名叫「反转诅咒」模型学会了「A是B」不会自动泛化出「B是A」。当年的解释是双向关联压根没被学进去。谷歌把同一批题改成了四选一结果马上反转。GPT-5正向问答的回忆率是82.9%反向掉到74%。可一换成给选项的识别题反向不但不比正向难13个模型里有9个反而答得更好剩下4个持平。选择题会做一换成问答题就答不出来了。同一批正反向问题四选一识别里反向不比正向难闭卷生成里反向明显更难。这说明那层关联显然是在的真正卡住的是怎么把它挖出来。作者的解释是事实被存进去的时候当时的语境、措辞和顺序也一并留在了里面。你问的方式一旦偏离训练时的样子钥匙就对不上锁。thinking的另一个身份帮它回忆WikiProfile里的题都是问一句答一句中间没有推理步骤。「Oasis第一场演出在哪个俱乐部」这种题要么记得要么不记得。按理说让模型多想一会儿也帮不上什么忙。但thinking真捞回来了。那些存进去却答不出的事实它找回了40%–65%。关键线索藏在它的偏好上那些压根没存进去的事实thinking只能捞回5%–15%。开启thinking后被找回的事实比例已存进参数的能捞回40%–65%没存进去的只有5%–15%。它不是在凭别的知识推演是在原地找钥匙。作者还顺手排除了一个更省事的解释。有人会想thinking无非是让模型答得更花八次里蒙中一次的机会变大了。真是这样的话答案应该更飘才对。实际反过来了开了thinking同一道题八次里答对的次数反而更集中。收益最大的两处恰好是前面最堵的那两处。Gemini-3-Pro的冷热门差距从21.4个点收窄到12.5个点GPT-5的正反向差距从9个点收窄到2个点。哪儿最堵它就往哪儿使劲。谷歌另一篇姊妹论文《思考以回忆》Thinking to Recall给出了机制解释一是计算缓冲那些吐出来的思考token哪怕内容本身没什么意义也在给模型争取额外的隐式算力二是事实启动模型先说出一批相关事实等于给正确答案搭了一座语义桥。这在人类认知里叫「扩散激活」spreading activation。想不起某个人的名字就先回忆他在哪家公司、留什么发型、上次见面是什么场合名字常常自己就冒出来了。摆脱「舌尖现象」的办法人和模型居然是同一套。但这种方式也有代价。同一篇论文警告如果思维链里那些中间事实是编的最终答案的幻觉概率反而更高。桥搭歪了走得越远错得越离谱。扩规模等于补货不负责配钥匙拿开源的Gemma 3家族当尺子。参数从1B涨到27B编码失败率从85%一路降到23%。规模确实在补货货架肉眼可见地被填满了。可回忆失败没有同步下降。它在剩余错误里的占比一路上升到27B时成了错误的主要构成。放到前沿模型上更极端回忆失败占了GPT-5.2全部错误的七成以上而且模型越强这个比例越高。13个模型的五种状态分布参数越大编码失败一路收缩回忆失败几乎不动。规模改善的是存了多少不是取得出多少。这并没有给scaling判死刑而是给它划了一条边界。既然存进去的比例已经摸到95%–98%的天花板那么继续加参数、加数据能换来的准确率提升正在肉眼可见地变小。下一段增益更可能来自后训练和推理时的方法也就是怎么用好已经存进去的知识。检索增强当然能补位。但作者也提醒道参数里的知识仍然关系到流畅度、响应速度和跨语境整合很难被外部检索完全替代。它得先知道自己想不起来那么什么时候该让模型多想一会儿论文把这个问题定义成了元认知也就是模型对自己状态的判断它得先意识到「我直接答不上来」才知道这道题值得开thinking多想一会儿。过去两年让模型更靠谱的默认答案是喂更多数据、堆更大参数。这项研究把话说清楚了事实层面前沿模型的货已经上架得差不多了。接下来考验的是它能不能自己把货取出来。更麻烦的是下一步它得先知道自己想不起来。原文链接GPT-5也会话到嘴边想不起来谷歌测了450万次钥匙丢了-36氪

相关新闻

2026电子档案管理系统平台排行榜及客群适配参考

2026电子档案管理系统平台排行榜及客群适配参考

电子档案平台选型的三类常见认知误区电子档案平台选型常见误区包括盲目追大牌、忽略自身需求、不看重服务保障,会直接影响落地效果。随着企业数字化转型加速,电子档案管理已成为财务合规、效率提升的核心刚需,但不少企业在选型阶段走入认知偏…

2026/8/18 11:39:46 阅读更多 →
基于云原生与IaC的物流系统架构:TerraLinkLogistics框架设计实践

基于云原生与IaC的物流系统架构:TerraLinkLogistics框架设计实践

1. 项目概述:当物流遇上“数字基建” 最近几年,但凡和供应链、物流沾边的行业,都在提一个词:数字化转型。从大型制造企业的智慧仓储,到电商平台的实时追踪,再到跨境贸易的关务协同,背后都离不开…

2026/8/18 11:39:46 阅读更多 →
Adobe-GenP 3.0 从零到一实战手册:Adobe CC 全家桶批量激活完整指南

Adobe-GenP 3.0 从零到一实战手册:Adobe CC 全家桶批量激活完整指南

Adobe-GenP 3.0 从零到一实战手册:Adobe CC 全家桶批量激活完整指南 【免费下载链接】Adobe-GenP Adobe CC 2019/2020/2021/2022/2023 GenP Universal Patch 3.0 项目地址: https://gitcode.com/gh_mirrors/ad/Adobe-GenP Adobe-GenP 3.0 是一款针对 Adobe C…

2026/8/18 11:38:45 阅读更多 →

最新新闻

雷克萨斯官方调价3.3万背后:市场逻辑、策略分析与消费者应对指南

雷克萨斯官方调价3.3万背后:市场逻辑、策略分析与消费者应对指南

1. 市场动态与价格调整的底层逻辑 最近,雷克萨斯旗下多款车型的价格调整引发了不小的市场关注,部分车型的调价幅度达到了3.3万元。对于普通消费者、潜在购车者,甚至是行业观察者而言,这不仅仅是一个简单的“降价”或“涨价”新闻。…

2026/8/18 12:48:56 阅读更多 →
【AI智能体速通】14. 面向 Agentic AI 的可视化流程建模

【AI智能体速通】14. 面向 Agentic AI 的可视化流程建模

仅仅在脑中思考工作流是不够的。 还必须把智能体如何一步一步到达目标明确画出来。 这意味着,你需要把整个过程都图示化,包括: 用户最初提出了什么请求 模型如何理解这个请求 这种理解如何映射到界面组件或系统动作上 对于企业级部署来说,工作流图不是可选项,而是部署前提…

2026/8/18 12:48:56 阅读更多 →
光标到、焦点到:X-Mouse Controls 把“焦点跟随鼠标“装进 Windows 的免费方法

光标到、焦点到:X-Mouse Controls 把“焦点跟随鼠标“装进 Windows 的免费方法

光标到、焦点到:X-Mouse Controls 把"焦点跟随鼠标"装进 Windows 的免费方法 【免费下载链接】xmouse-controls Microsoft Windows utility to manage the active window tracking/raising settings. This is known as x-mouse behavior or focus follows…

2026/8/18 12:48:56 阅读更多 →
离线电路仿真软件 CircuitJS1 Desktop Mod 快速上手手册:免费、开源、自带 200+ 示例电路

离线电路仿真软件 CircuitJS1 Desktop Mod 快速上手手册:免费、开源、自带 200+ 示例电路

离线电路仿真软件 CircuitJS1 Desktop Mod 快速上手手册:免费、开源、自带 200 示例电路 【免费下载链接】circuitjs1 Standalone (offline) version of the Circuit Simulator with small modifications based on modified NW.js. 项目地址: https://gitcode.com…

2026/8/18 12:48:56 阅读更多 →
魔兽争霸3优化终极指南:用 WarcraftHelper 一次解决宽屏拉伸、帧率锁死与地图限制

魔兽争霸3优化终极指南:用 WarcraftHelper 一次解决宽屏拉伸、帧率锁死与地图限制

魔兽争霸3优化终极指南:用 WarcraftHelper 一次解决宽屏拉伸、帧率锁死与地图限制 【免费下载链接】WarcraftHelper Warcraft III Helper , support 1.20e, 1.24e, 1.26a, 1.27a, 1.27b 项目地址: https://gitcode.com/gh_mirrors/wa/WarcraftHelper 周六晚上…

2026/8/18 12:48:56 阅读更多 →
光伏MPPT技术中粒子群算法的优化与应用

光伏MPPT技术中粒子群算法的优化与应用

1. 光伏MPPT与粒子群算法的天然契合 光伏发电系统的心脏在于最大功率点跟踪(MPPT)技术。当我在青海光伏电站第一次看到成片的太阳能板阵列时,工程师指着逆变器上跳动的功率曲线说:"这里每提升1%的转换效率,每年就…

2026/8/18 12:47:56 阅读更多 →

日新闻

告别逐帧截图:用 extract-video-ppt 快速提取视频中的 PPT 并一键导出 PDF

告别逐帧截图:用 extract-video-ppt 快速提取视频中的 PPT 并一键导出 PDF

告别逐帧截图:用 extract-video-ppt 快速提取视频中的 PPT 并一键导出 PDF 【免费下载链接】extract-video-ppt extract the ppt in the video 项目地址: https://gitcode.com/gh_mirrors/ex/extract-video-ppt 如果你还停留在"看网课 不停暂停 截图 …

2026/8/18 0:00:57 阅读更多 →
思源宋体TTF一站式上手:7个字重免费商用,从下载到上线的完整走查

思源宋体TTF一站式上手:7个字重免费商用,从下载到上线的完整走查

思源宋体TTF一站式上手:7个字重免费商用,从下载到上线的完整走查 【免费下载链接】source-han-serif-ttf Source Han Serif TTF 项目地址: https://gitcode.com/gh_mirrors/so/source-han-serif-ttf 你是不是也经历过这种时刻:设计稿里…

2026/8/18 0:00:58 阅读更多 →
华硕笔记本控制权回收指南:GHelper 如何用一个 10MB 文件替代 Armoury Crate

华硕笔记本控制权回收指南:GHelper 如何用一个 10MB 文件替代 Armoury Crate

华硕笔记本控制权回收指南:GHelper 如何用一个 10MB 文件替代 Armoury Crate 【免费下载链接】g-helper Lightweight Armoury Crate alternative for Asus laptops with nearly the same functionality. Works with ROG Zephyrus, Flow, TUF, Strix, Scar, ProArt, …

2026/8/18 0:00:59 阅读更多 →

周新闻

基于阿里云与通义千问(Qwen)构建AI应用:从模型调用到生产部署的完整实践指南

基于阿里云与通义千问(Qwen)构建AI应用:从模型调用到生产部署的完整实践指南

如果你是一名开发者,最近可能已经感受到了AI大模型正在从“玩具”变成“生产力工具”的强烈信号。从代码补全到智能Agent,从本地部署到云端API,我们正处在一个技术栈快速重构的节点。然而,面对层出不穷的模型、框架和工具&#xf…

2026/8/18 9:15:35 阅读更多 →
工业通信系统底层逻辑:04 反射——高频能量撞墙之后会发生什么?

工业通信系统底层逻辑:04 反射——高频能量撞墙之后会发生什么?

第四篇:反射——高频能量撞墙之后会发生什么? —— 你以为信号已经过去了,其实它正在回来打你 老Q的现场笔记 第五季,我们正式进入工业神经系统层。这里不再是单个设备的战斗,而是整个工厂“经脉”层面的秩序之战。从这一篇开始,你将第一次看清:看似简单的信号传播,背…

2026/8/18 9:06:28 阅读更多 →
【文章复现】非线性值迭代自适应动态规划(ADP):离散时间非线性系统的策略迭代自适应动态规划算法研究附Matlab代码

【文章复现】非线性值迭代自适应动态规划(ADP):离散时间非线性系统的策略迭代自适应动态规划算法研究附Matlab代码

✅作者简介:热爱科研的Matlab仿真开发者,擅长毕业设计辅导、数学建模、数据处理、建模仿真、程序设计、完整代码获取、论文复现及科研仿真。🍎 往期回顾关注个人主页:Matlab科研工作室👇 关注我领取海量matlab电子书和…

2026/8/18 9:04:56 阅读更多 →

月新闻

免费解锁百度网盘SVIP加速:macOS用户必备的下载提速终极指南

免费解锁百度网盘SVIP加速:macOS用户必备的下载提速终极指南

免费解锁百度网盘SVIP加速:macOS用户必备的下载提速终极指南 【免费下载链接】BaiduNetdiskPlugin-macOS For macOS.百度网盘 破解SVIP、下载速度限制~ 项目地址: https://gitcode.com/gh_mirrors/ba/BaiduNetdiskPlugin-macOS 还在为百度网盘macOS版的龟速下…

2026/8/17 18:54:37 阅读更多 →
终极ncmdump指南:3分钟实现网易云NCM音乐解密与格式转换

终极ncmdump指南:3分钟实现网易云NCM音乐解密与格式转换

终极ncmdump指南:3分钟实现网易云NCM音乐解密与格式转换 【免费下载链接】ncmdump 项目地址: https://gitcode.com/gh_mirrors/ncmd/ncmdump 还在为网易云音乐下载的NCM格式文件无法在其他播放器播放而烦恼吗?ncmdump解密工具帮你轻松解决这个困…

2026/8/17 18:55:16 阅读更多 →
HarmonyOS 应用开发《掌上英语》第81篇: 智能体卡片:为英语学习 App 打造桌面级学习助手

HarmonyOS 应用开发《掌上英语》第81篇: 智能体卡片:为英语学习 App 打造桌面级学习助手

AgentCard 智能体卡片:为英语学习 App 打造桌面级学习助手适用平台:HarmonyOS 7.0 (API 26 Beta)一、引言 HarmonyOS 7.0(API 26 Beta)新增了 AgentCard 智能体卡片能力,这是继 HMAF(鸿蒙智能体框架&#x…

2026/8/17 18:55:55 阅读更多 →