首席科学家姚顺雨腾讯首篇论文：道破为何AI死活听不懂人话
创始人
2026-02-04 22:40:39
0次
快科技2月4日消息，近日，腾讯混元团队和复旦联合团队发布了首篇论文《CL-bench》。
值得一提的是，这也是姚顺雨入职腾讯首席AI科学家后，首次署名的研究论文。
他在文中提到，当前AI与真正智能之间的鸿沟，不在于知识的多少，而在于学习的能力。
一个装满知识却不会学习的AI，就像一个背了整本字典却不会写作的人，看起来博学，实则僵化。
人类并不只依赖多年前学到的死知识，而是在实时地从眼前的上下文中学习。
在这篇论文里，研究团队提到，大模型在上下文利用上，依然存在显著的能力短板。
为了衡量现有模型距离真正的“上下文学习者”还有多远，研究团队构建了CL-bench。
这是一个专门评测语言模型能否从上下文中学习新知识并正确应用的基准。
CL-bench包含由资深领域专家精心制作的500个复杂上下文、1899个任务和31607个验证标准。
CL-bench只包含一个简单但苛刻的要求：“解决每个任务要求模型必须从上下文中学习到模型预训练中不存在的新知识，并正确应用。”
通过实验发现，世界上排名前十的语言模型在CL-bench上的任务解决率平均只有17.2%。
也就是说即使是如今最强的语言模型，在上下文的利用方面仍然做得不好，甚至可以说是还不会利用上下文，从上下文中学习。
不过这也为大语言模型后续的迭代指出了一个可能的方向，强化模型从上下文中进行学习的能力。
上一篇：国际金价重回5000美元
相关内容
热门资讯
新浪NBA雷霆队热点小时报丨2...
1、123-103！开拓者终结雷霆4连胜，利拉德25分，杨瀚森出战4分34秒 11月11日，N...
新浪NBA爵士队热点小时报丨2...
1、曼联拖延解雇卡里克，波切蒂诺或带队战利物浦 据《太阳报》曼联跟队记者Samuel Luck...
新浪冬奥热点小时报丨2026年...
1、冬奥冠军任子威受聘清华附中嘉兴学校短道速滑队主教练 据“清华附中嘉兴学校”微信公众号消息，...
新浪詹姆斯·哈登热点小时报丨2...
1、10战8负，又要给雷霆送温暖！难怪哈登小卡弃船，新双核都不靠谱 开季10战8负漏洞百出，怕...
新浪美股热点小时报丨2026年...
1、美股芯片股深夜爆发，美光科技暴拉超10%，中概股集体下跌，科技巨头现分化，黄金险守4000美...
新浪斯诺克热点小时报丨2026...
1、冠中冠两大夺冠热门出局，赵心童、吴宜泽和常冰玉的机会来了 北京时间11月11日凌晨，斯诺克...
新浪国足热点小时报丨2026年...
1、国足U17世界杯21人名单出炉，四将遗憾落选 FIFA官网11月11日公布了中国U17男足...
新浪AI热点小时报丨2026年...
1、打破扎克伯格纪录！三名22岁年轻人靠AI创业封神 人均身家飙至42亿美元 快科技11月12...
新浪时尚热点小时报丨2026年...
1、猫咪牵引绳选什么材质好？尼龙织带承重52.3kg完胜棉绳，3个维度避坑+FAQ ️ 尼龙织...
新浪教育热点小时报丨2026年...
1、首届预备技师班多名学生入职比亚迪 广州市公用事业技师学院举行国防先锋社、高校起点技师班开学...