去年在海外非常火爆的好莱坞大作《瞬息全宇宙》,由 Runway 提供了AI 技术支持。节约了大量的拍摄成本和降低了后期剪辑、特效的门槛。电影中借助 Runway 的 AI 技术实现很多过去不可想象的动作。本文所用到的工具访问地址都整理在文末哦~
到底 Runway 有多强大,小编来尝试用最近风很大的 Gen 2 来做一些短片镜头。再借助 AI 文本工具和 AI 绘图工具来实现这个宇宙大爆炸的短片,一起来看看吧!
第一步
使用 ChatsNow 生成画面情景和关键词
ChatsNow 是一个功能强大的 AI 助手,可以帮助你在浏览网页时获得智能建议和答案,提高工作和学习效率。
首先在对话框简单提出需求,点击提交按钮。没有让它提供非常专业的视频短片脚本,主打一个“快”!因为这些短句子和关键词的描述用作 AI 生成图片和视频足够了,做科幻短片就是要有更多意想不到的画面,这些都交给后面的 AI 绘图工具和视频工具去实现。

得到的回复也是很有创意和画面感的,这样能帮我们省去很多时间构思要做些什么镜头效果,直接在这里面筛选就可以啦。你也可以让 ChatsNow 给你翻译成英文,方便我们后面作图使用英文提示词的效果会更好。
另外,ChatsNow 也是有很多灵感模板选择的,更多玩法等着大家去发现和使用呢 👇

第二步
使用 DiffusionDraw 生成图片素材
接着就是使用 DiffusionDraw 生成一些镜头画面的素材啦~
我们用刚才 ChatsNow 提供的描述词输入到文本框里面,选择最近更新的 “SDXL”模型,点击生成图片,就得到下图啦。DiffusionDraw 接入 SDXL 模型之后,画面效果和细节都提升了不少。

既然 ChatsNow 的文本描述结合 DiffusionDraw SDXL 模型生成的图片效果达到了浩瀚宇宙的感觉,小编就趁热打铁继续生成更多的短片画面!



出来的效果真的大为震惊,筛选几张风格比较合适的、能引发故事联想的图片,话不多说,直接开干!
⚠️ 注意:使用图片生成视频的画面比例需要和原图一致,我们在创作图片的时候记得调整比例哦。DiffusionDraw 的高级设置是可以选择图片尺寸的。

第三步
Runway Gen2 生成视频素材

Gen 2 的主要功能有图像生成视频和文本生成视频。
图像生成视频
选择 IMAGE + DESCRIPTION,把刚才准备的图片素材拉到 Gen-2 的图片上传区域,添加描述词。点击 Generate 的按钮,等待十几秒就生成了一个 4 秒的视频啦。

图像生成视频过程

文本生成视频
图片素材不够怎么办,没关系,还有文本生成视频。
生成出来的视频可以点击 “Extend 4s” 的按钮,在原视频上延长 4 秒哦~


第四步
视频剪辑
来到视频剪辑的步骤,导入视频素材串成一个有关联性的短片。大家按照自己习惯的工具来就好了,因为最重要的部分都已经交给 DiffusionDraw 和 Runway 来完成了!

成片
哇哈哈~小编自己都不敢相信,有一天也能做出宇宙科幻短片!下面我们来欣赏成片吧 💥
工具访问地址:
ChatsNow:
DiffusionDraw:
Chrome:
https://chrome.google.com/webstore/detail/diffusiondraw-free-ai-dra/cmjfnhommnnaihollaikfdblblpmibep
Edge:https://microsoftedge.microsoft.com/addons/detail/%E5%85%8D%E8%B4%B9ai%E5%88%9B%E4%BD%9C%E7%BB%98%E5%9B%BE-stable-diffus/jjdincidkdaiikllfmodhocekajfdamp
Runway: