张一鸣表态字节拒绝模型蒸馏,愿意牺牲短期排名,坚持原生自研大模型和长期技术突破路线
据澎湃新闻8月6日报道,在近日字节跳动的内部会议中,创始人张一鸣罕见发声,他表示,做模型要坚持长期主义、延迟满足感,而不是用别人的输出,换一时的榜单排名。
据悉,今年国内竞争对手开源模型的快速发展给字节跳动带来了更大的压力,因此才有了上述张一鸣的发声。
今年以来国内AI大模型竞争已经极为激烈,几乎每隔几天就有新模型发布,每当有一个强大的开源模型发布,字节跳动内部关于蒸馏的争论就会升温,不过张一鸣很少会在Seed团队的会议上发言,但此次明确表态,字节跳动“应该愿意为长期目标牺牲一部分短期收益”。
据了解,字节跳动内部对开源模型严禁蒸馏,甚至通过API检测等方式在内部加强相关限制,张一鸣认为,蒸馏会干扰真正意义上的长期技术突破。
据TechWeb,张一鸣这一决策的背景,是华盛顿正在加大对“模型蒸馏”行为的打压力度。
所谓蒸馏,是指利用更先进的前沿模型的输出训练自身AI模型的技术路径,它可以节省大量的训练时间和算力开销,因为开发中的新模型可以直接学习现有前沿模型的推理步骤,而不必只依赖原始和精选的训练数据。
2026年以来,美国AI公司Anthropic已接连公开点名中国四家AI公司对其Claude模型进行大规模蒸馏攻击,包括DeepSeek、月之暗面(Kimi)、MiniMax和阿里巴巴。
知情人士透露,张一鸣的这一决定,很大程度上受到字节跳动和美国政府之间因TikTok所有权而产生的复杂关系影响,在此背景下任何可能被华盛顿抓住把柄的技术行为,都可能成为压垮TikTok全球业务的最后一根稻草。
张一鸣的考量很明确,与TikTok数十亿用户的全球基本盘相比,国内大模型排行榜上几个百分点的差距根本不值得拿身家性命去赌,报道称,张一鸣也已经接受了豆包可能暂时落后于中国同行的现实。
据DoNews,张一鸣是在其他负责人谈及公司为何不会用蒸馏来抢占先机时进行了本次发言,不过虽然张一鸣表示字节跳动“应该愿意为更长期的目标牺牲一些短期收益”,但他没有详细说明这些长期目标到底是什么。
据字节员工称,字节跳动不愿意使用蒸馏,被视为其大语言模型落后于国内其他AI实验室的原因之一。
字节跳动的特殊之处还在于,它是国内主要AI公司中唯一一家大语言模型几乎全部为专有模型的企业,而其同行则专注于开源模型。
据新浪财经,字节跳动被公认为是全球AI视频生成模型的领导者,其Seedance 2.0模型今年早些时候因能生成超逼真视频而引发轰动。
不过字节跳动的旗舰大模型却并不总是出现在全球主要的大模型排行榜上,而排行榜是外界追踪模型能力的常见窗口。
客户主要通过公司的云计算平台来访问字节跳动的模型,该平台在中国的市场份额小于行业领导者阿里巴巴、华为和腾讯,这使得非客户难以评估字节跳动模型的实际水平。
字节跳动最新的大模型Seed 2.1 Pro并未出现在最受关注的大模型竞技平台Artificial Analysis上,该模型在Arena AI的Web开发编码排行榜上排名第19位,远低于其他中国模型。