ChatGPT爱“胡说”?OpenAI揭秘:评估机制在“奖励”猜测致幻觉频发
创始人
2025-09-09 11:46:57
0次

在人工智能领域,一个长期困扰研发者的问题是模型生成的“幻觉”——那些听起来头头是道,实则毫无根据的回答。这种现象的根源,近期被一项来自OpenAI的研究揭示:问题不在于模型本身的设计缺陷,而在于评估体系对“猜测”行为的隐性奖励。

传统AI基准测试采用“非黑即白”的评分逻辑:正确答案得分,错误或回避问题均不得分。这种机制下,模型若选择承认“不确定”,其表现评分会直接下滑;而若冒险编造一个看似合理的回答,哪怕内容错误,只要碰巧匹配正确答案,就能获得高分。OpenAI的研究指出,这种评估方式实质上在“鼓励”模型进行不负责任的猜测,而非追求真实性与可靠性。

研究团队以考试场景类比:当学生面对不确定的题目时,若“空着不答”会被扣分,而“蒙一个答案”却可能得分,那么最优策略自然是“尽量猜”。大型语言模型(LLMs)的训练过程正是如此——它们被优化为“应试者”,而非“知识传递者”。OpenAI研究员直言:“模型学会的是如何通过猜测提高分数,而非如何准确表达知识边界。”

实验数据进一步验证了这一结论。在对比测试中,OpenAI的新模型GPT-5 Thinking Mini与旧版o4-Mini表现出显著差异:前者准确率22%,但52%的情况下选择“弃答”(即承认不知道);后者准确率虽略高(24%),但弃答率仅1%,错误率却高达75%。这意味着,o4-Mini更倾向于“瞎猜”,导致正确与错误回答同时增加,而GPT-5则通过提高弃答率,降低了错误信息的传播风险。

“现有评估体系的问题在于,它用准确率单一指标衡量模型,却忽视了错误回答比‘不知道’的后果更严重。”研究团队强调。例如,在医疗或金融咨询场景中,用户更需要的是可靠的信息,而非一个听起来自信但可能错误的答案。若评估标准继续奖励“侥幸猜对”,模型将逐渐依赖这种策略,最终损害用户信任。

针对这一困境,OpenAI提出的核心解决方案是调整评估逻辑:不再因模型“不回答”而惩罚,转而鼓励其表达不确定性。研究人员认为,无需重构模型架构,仅需修改评分方式——例如,对“弃答”给予一定容忍度,同时大幅降低错误回答的得分权重。这种转变旨在引导模型从“追求分数”转向“追求可信度”。

这一思路标志着AI研发方向的微妙转变。过去,行业竞相追求模型的响应速度、语言流畅度等表面指标,却忽视了“可靠性”这一根本需求。OpenAI的研究提醒,真正的挑战在于平衡“知识表达”与“谦逊态度”——让模型既能传递已知信息,又能清晰界定自身能力边界。毕竟,在需要专业建议的场景中,用户宁愿听到“我不知道”,也不愿被一个自信的谎言误导。

相关内容

杨瀚森出场时间起伏背后:开...
  杨瀚森出场时间为何从生涯新高骤降至不足五分钟?  据公开报道,...
2026-11-11 20:47:33
朱芳雨暗示不会回归广东宏远...
  朱芳雨到底会不会回归广东宏远?他本人的表态暗示了什么?  截至...
2026-11-11 20:47:20
新浪影视热点小时报丨202...
  1、金鸡奖最佳女主角高叶:尽量往前跑,做一个不被AI取代的演员...
2026-11-11 19:47:17
新浪意甲热点小时报丨202...
  1、艾特-努里推动冬窗离开曼城 尤文那不勒斯展开接洽  据瑞士...
2026-11-11 19:47:16
新浪中国足球热点小时报丨2...
  1、时隔21年,中国男足国字号重回世界大赛,落地多哈先打两场热...
2026-11-11 19:47:15
新浪科技热点小时报丨202...
  1、“我们是中国第二高端鞋类品牌!” 昂跑CEO首次回应姆巴佩...
2026-11-11 19:47:14
新浪机器人热点小时报丨20...
  1、刚被判“死刑”的具身模型,被谷歌救了?  出品|虎嗅科技组...
2026-11-11 19:47:14
新浪国乒热点小时报丨202...
  1、冠军赛国乒共88万奖金:王曼昱仅4万, 蒯曼13万  蒙彼...
2026-11-11 19:47:13
新浪NBA雷霆队热点小时报...
  1、20分大胜雷霆,西部头号搅局者!3年4200万赌对了 独狼...
2026-11-11 19:47:13

热门资讯

新浪NBA雄鹿队热点小时报丨2...   1、不要了!勇士拒接1.09亿特纳,波神合同捏手里,选秀权一寸不让  交易桌上最怕的不是价格谈不...
新浪体育热点小时报丨2026年...   1、三星杯中国军团10人挺进16强 杨鼎新将挑战申真谞  文章来源:聂卫平工作室11月11日,2...
新浪对冲基金热点小时报丨202...   1、5800多只基金怎么选?或许可以先找一个"锚"  (来源:中信建投财富管理)今年的主动权益市...
新浪科学热点小时报丨2026年...   1、钉钉子、扫“CT”、存基因!成都“古树医生”为5000多株古树看病,已繁育400余株幼苗丨封...
新浪NBA活塞队热点小时报丨2...   1、浓眉轰44分13板,然后一看记分牌,输了11分,这叫梦回鹈鹕空砍群  浓眉34分钟狂砍44分...
新浪演唱会热点小时报丨2026...   1、中国最有BGM的城市,不能只靠怀旧  作者:潘展虹编辑:朱人奉一首三十多年前的老歌,因为一场...
新浪NBA太阳队热点小时报丨2...   1、10战8负,又要给雷霆送温暖!难怪哈登小卡弃船,新双核都不靠谱  开季10战8负漏洞百出,怕...
新浪篮球热点小时报丨2026年...   1、徐静雨:不知布朗为何对塔图姆火气这么大 塔图姆哪点对不起他?  NBA常规赛,76人主场10...
新浪A股热点小时报丨2026年...   1、曹中铭:A股频现维稳 市场信心缺失是关键  在A股市场频现维稳的背后,市场信心严重不足才是关...
新浪NBA快船热点小时报丨20...   1、开季10战8负,又给雷霆送温暖!难怪哈登小卡弃船,新双核不靠谱  开季10战8负漏洞百出,怕...