可灵接入DeepSeek-R1,一手实测在此:AI视频创作,不用学写提示词了
创始人
2025-03-20 02:23:27
0

克雷西 发自 凹非寺

量子位 | 公众号 QbitAI

视频生成的当红明星可灵,也开始拥抱DeepSeek了。

现在,在可灵的图片和视频生成界面,可以直接调用R1帮忙设计提示词

量子位实测发现,哪怕只打上去一个字,也能让R1把提示词给安排得明明白白。

比如下面的这只猫猫,就是靠一个“猫”字,经过R1设计之后让可灵生成的。

具体的提示词长这样,可以说用AI创作视频,现在连提示词都不需要学了。

那么DeepSeek帮忙设计的提示词,效果究竟如何?我们接着往下看。

AI创作不用学写提示词了

对简单提示词进行扩写,是可灵接入R1最直观的作用之一。

可灵已经给DeepSeek设定好了内置提示,所以我们只需要输入想生成的内容,不需要额外指示。

通过观察R1的思考过程,可以发现它会根据我们输入的内容,生成主体及其描述、动作,场景和运镜、光影等细节补充。

并且还会根据视频生成提示词的特点进行撰写,字数也控制在合适的范围。

当然除了扩充细节之外,对于一些视频生成模型可能无法直接理解的词句,R1也能将其变成场景描述

比如成语“对牛弹琴”,如果不经优化直接当做提示词,生成效果是这样的:

内容好像确实是对着牛弹琴,但这里是一个外国人正在弹奏,看上去是一段悠闲的生活写照,很难让人直观地往成语的方向上去联想。

经过R1优化之后,提示词中开始强调了书生、古琴、茅屋这些特征。

再看效果,就显得贴近不少了:

成语之上再提高难度,那就是古诗词了,这里选择王维的《和贾舍人早朝大明宫之作》中的诗句“九天阊阁开宫殿,万国衣冠拜冕旒”。

直接输入的生成结果,基本场景还是能够正确呈现的,但总感觉诗句当中的华丽庄重没有体现出了,反而像是群演排队领盒饭。

而在理解诗意的基础之上,R1给出了这样的优化:

从运镜方式和光线来看,用优化后的提示词生成的视频的确能够更好地渲染出诗句里的恢弘之气。

继续增加难度,前面的这句诗虽然是古文,但至少是具体的场景描写,接下来就试一下不那么具体的。

这里选择岳飞《满江红》中的名句“三十功名尘与土,八千里路云和月”,R1给出了这样的提示词:

至于生成效果,还是直接看视频最直观:

最后再加试一道“外语题”,看看R1处理英文内容时能够撰写出怎样的提示词。

这里就选用泰戈尔《飞鸟集》中的著名诗句“生如夏花之绚烂,死如秋叶之静美” ,当然用的是英文原文:

let life be beautiful like summer flowers and death like autumn leaves.

从思考过程和最终得到的提示词看,R1准确识别出了这句话的中文含义,并且拆分成了两个具体场景。

效果看上去还可以,不过在时间分配上稍显得不够均衡,大部分都给了第二个镜头。

总的来说,在DeepSeek的帮助下,AI视频创作的提示词障碍基本被打破。

对于以后的AI创作者来说,可能真的要实打实地比拼创造力了。

还有视频镜头重建研究成果

产品接入DeepSeek的同时,可灵在学术研究上也发布了新成果——名为ReCamMaster的镜头重建工具。

准确地说,ReCamMaster是一个镜头可控的生成式视频再渲染框架。

它利用预训练的视频生成模型,通过巧妙而有效的视频条件注入机制,在给定源视频的情况下重新渲染出具有新相机轨迹的目标视频。

具体来说,ReCamMaster支持5类动作,每种又分为两个方向,一共是10种镜头操作。

具体的重建效果,这里直接展示最复杂的4D重建,其他效果可以到项目主页查看~

当然也可以反其道而行之,将抖动的影像重建成稳定画面:

此外作者还介绍,ReCamMaster还可以在具身智能和自动驾驶场景中,成为有效的数据增强工具。

不过ReCamMaster的模型尚未开放,想要尝试的话可以通过GitHub项目页里的表单把想生成的内容告诉作者,由作者筛选之后通过邮件回复。

该论文第一作者是浙大在读博士生白健弘,导师是胡浩基副教授,该成果是白健弘在快手实习中完成的。

快手方面,科技副总裁张迪、可灵大模型负责人万鹏飞都参与了这一项目。

浙大和快手的其他研究人员,以及香港中文大学、华中科技大学的研究人员也参与了此项目。

参考链接:

[1]https://github.com/KwaiVGI/ReCamMaster

[2]https://arxiv.org/abs/2503.11647

相关内容

从跨省务工到驱车采茶 贵州...
天眼新闻
2026-05-05 23:14:28
实拍K77上演禁区过人破门...
实拍K77上演禁区过人破门一条龙
2026-05-05 23:04:28
10人巴萨首回合告负,你觉...
10人巴萨首回合告负,你觉得他们能逆转吗?
2026-05-05 23:03:46
这年头拿个全场最佳,赛后还...
这年头拿个全场最佳,赛后还要石头剪子布?
2026-05-05 23:03:13
【人民网、央广网、中新网】...
人民网 人民网哈尔滨4月20日电 自免签政策实施以来,绥芬河锚定...
2026-04-28 12:18:31
“五一”旅行产品搜索量上涨...
随着“五一”假期临近,多地出游预订热度持续攀升。北方的新疆与南方的...
2026-04-28 12:17:42
肖克故居,嘉禾小街田村红色...
前段时间,受当地政府邀请,我和我的团队去郴州嘉禾县进行休闲农业培训...
2026-04-28 12:16:57
沈阳周边游去哪?本溪桓仁龙...
周末旅游好去处 沈阳周边适合周末旅游的地方不少,其中本溪桓仁龙祥岛...
2026-04-28 12:16:57
一家人去新疆玩7日怎么玩,...
一家人去新疆玩7日怎么玩,新疆轻松游七天六晚多少费用 带着一家人去...
2026-04-28 12:16:51

热门资讯

Anthropic推出金融AI... 财联社5月6日讯(编辑 史正丞)昨夜今晨,伴随着AI相关的利好消息层出不穷,标普500指数和纳斯达克...
开源证券:给予苏州银行买入评级 开源证券股份有限公司刘呈祥近期对苏州银行进行研究并发布了研究报告《苏州银行2025年报&2026年一...
原创 泰... 泰山会为什么解散,国家为什么必须要收拾资本巨头,资本为什么绝对不能参与政治? 答案其实很简单,因为资...
揭开食品添加剂的“神秘面纱” 一提到食品添加剂,不少人就像听到了“反派专属BGM”,下意识皱起眉头,把它和“不健康”“劣质食品”牢...
31.4万境外采购商到会再创新... 5月5日,广交会上来自惠州的一家鞋企参展商与客户洽谈。 5月5日,第139届广交会正式收官。南都记...
QFII一季度重仓银行、电子板... 人民财讯5月3日电,据证券时报·数据宝统计,截至2026年一季度末,QFII合计持有上市公司1518...
线上线下“买买买”643亿元 ... 7.7% 4月30日至5月4日,上海全市线上线下消费643亿元,同比增长7.7%。其中:线下消费36...
哈工大同学带队,乐聚机器人要I... “造机器人是我儿时就有的梦想。” 2016年,90后冷晓琨带队,几位哈工大同学来到深圳,一头扎进当时...
阿贝尔首秀:伯克希尔的变与不变 今年伯克希尔・哈撒韦股东大会,沃伦・巴菲特六十年来首次退居台下并将舞台完全交给新任CEO格雷格・阿贝...