首席科学家姚顺雨腾讯首篇论文：道破为何AI死活听不懂人话
创始人
2026-02-04 22:40:39
0次
快科技2月4日消息，近日，腾讯混元团队和复旦联合团队发布了首篇论文《CL-bench》。
值得一提的是，这也是姚顺雨入职腾讯首席AI科学家后，首次署名的研究论文。
他在文中提到，当前AI与真正智能之间的鸿沟，不在于知识的多少，而在于学习的能力。
一个装满知识却不会学习的AI，就像一个背了整本字典却不会写作的人，看起来博学，实则僵化。
人类并不只依赖多年前学到的死知识，而是在实时地从眼前的上下文中学习。
在这篇论文里，研究团队提到，大模型在上下文利用上，依然存在显著的能力短板。
为了衡量现有模型距离真正的“上下文学习者”还有多远，研究团队构建了CL-bench。
这是一个专门评测语言模型能否从上下文中学习新知识并正确应用的基准。
CL-bench包含由资深领域专家精心制作的500个复杂上下文、1899个任务和31607个验证标准。
CL-bench只包含一个简单但苛刻的要求：“解决每个任务要求模型必须从上下文中学习到模型预训练中不存在的新知识，并正确应用。”
通过实验发现，世界上排名前十的语言模型在CL-bench上的任务解决率平均只有17.2%。
也就是说即使是如今最强的语言模型，在上下文的利用方面仍然做得不好，甚至可以说是还不会利用上下文，从上下文中学习。
不过这也为大语言模型后续的迭代指出了一个可能的方向，强化模型从上下文中进行学习的能力。
上一篇：国际金价重回5000美元
相关内容
热门资讯
“最慢的”孩子为何让人感动
本报记者 张 驰 “1，2，3……20!”数到20时，大家欢呼了起来。在云南省文山壮族苗族自治州砚山...
女球迷怒斥罗塞尼尔：战术混乱、...
女球迷怒斥罗塞尼尔：战术混乱、尽失人心，请原地辞职！
冲击冠军！阿森纳备战联赛杯决赛...
冲击冠军！阿森纳备战联赛杯决赛赛前训练
进攻全靠越位？英国足球哥：泰山...
进攻全靠越位？英国足球哥：泰山队你长点心吧！
对阵巴列卡诺赛前 亚马尔剪了新...
对阵巴列卡诺赛前 亚马尔剪了新发型
法国央行行长维勒鲁瓦：如果通胀...
法国央行行长维勒鲁瓦：如果通胀加剧，需求将受到影响。 来源：金融界AI电报
赛前为已逝的前助教默哀 穆里尼...
赛前为已逝的前助教默哀 穆里尼奥眼眶泛红
如何看待当前中国社会心态？
社会心态指的是一段时间内弥散在整个社会或社会群体中的宏观社会心境状态，集中体现了多数社会成员共享的社...
如何认定滥用防卫权？
我在国内各地有10000多律师好友，如果你要寻找外地律师合作，请加我微信（hzm5349）,我帮你推...
原创 火...
NBA常规赛，火箭124-132不敌公牛，全场比赛全队三分41投仅11中。 据统计，火箭本月大空位三...