如何利用 Runway Gen-3 更新创建电影级人工智能视频

分类:人工智能新闻 浏览量:1067

在本视频中,我将向您演示如何使用 跑道的最新更新,创建一个由人工智能生成的美丽场景。

跑道 最近,它一直在增强其人工智能视频生成器的功能,如引用、聊天模式和草图布局等全新功能。

这些更新可以在创建一致、逼真和电影化的镜头方面发挥巨大作用。我很高兴能向你展示如何做到这一点。

让我们跳进去。

让我们探索一下《Runway》的最新功能,即参考资料和聊天模式,根据您观看本视频的时间,这两种模式可能仍处于测试阶段,但我们将使用所有这些剪辑来创建风格一致的视频,并将我们的角色放置其中。

那么,让我们开始工作吧。

首先,我们要生成图像。点击这里。如果你很久没用过《Runway》,它看起来会有点不一样,因为现在你可以看到这里有一个聊天模式按钮,我们稍后会讲到。

您还可以在一个位置上传您的参考图片,这样图片的提示就更容易控制了。

我将首先上传我们的图片。上传。然后上传我们的角色,就在这里。我还会上传我们的场景。

每生成一张图片最多可以使用三张参考图片,而且对人物和场景效果最佳。不过,你也可以更有创意一些,比如从某张图片或其视觉风格中窃取灯光之类的东西。

现在,正如你所看到的,我们的两张图片都上传到了这里。现在,它们在这里并不作为参考。它们只是上传到这里,如果你想使用它们,需要把它们调到这里,点击一下就可以了。

或者,比方说,如果这个角色对你来说非常重要,你需要反复引用它,你可以标记保存它。比方说,我要叫她朱莉娅。

这样,她就会出现在保存的标签页中。因此,您无需每次都加载这张图片。

这里是图片一,这里是朱莉娅。即使我写下 @Julia 这样的信息,也会上传她的图片,尽管我不会把她上传到这里,因为她还在保存的标签页中。

因此,让我们先来看看这条街道的实景拍摄,然后我可以向它发出指令,让它向我展示街道上的不同景色,然后你就可以点击 @image1。

这样你就可以引用这张图片了。然后我们就可以点击生成。

正如你所看到的,它在保持视觉效果方面做得相当不错。不过,这些表格的位置有些不合理。也许我们需要添加更多的背景信息。

给我看高角度的街景,作为开场镜头。

现在我们有了进展。但这些表格的定位并不可信。不过,这个看起来还挺好用的。

我也许可以在这里介绍另一个功能,那就是绘图布局。

如果我想表达我的愿景,帮助它创建街道的中心视图,我可以用这个图标来帮助它,这个图标就是草图布局。

现在,我可以使用绘图工具为街道和一些带窗户的建筑物绘制一条线。

您一定可以看出,这是巴黎的一条街道。您不需要任何高级绘画技巧。

不过,你也应该用标签来帮助它,因为你画了一些布局草图,希望它能照着做。但你可以用标签帮助它理解你画的东西。

我可以点击这里的标签,然后写上道路。然后,我可以点击这里的建筑物标签。我将在建筑物这里做同样的操作。我还会在这里写上道路。

然后点击 "导出草图",我们将在此帮助下进行下一轮操作。

虽然它没有按照我们的提示操作,但我大概知道问题出在哪里。我没有提示图片二作为参考。

让我看看 @image2 在街上的高角度居中视角。图片一作为背景拍摄。

如你所见,现在情况好了一些。这里还有我们的树。实际上,是几棵。

当我不喜欢其中的任何一个,但设置又非常合适时,我会让它再产生一次,然后我会挑选最好的。如果没有,我可能会选择这个。

接下来,我们将继续创建我们的场景。我可以去掉这个草图。我不再需要它了,因为我想把我们的角色放在这个镜头里。

因此,给我看 @Julia 就能调出这张图片,即使它没有上传到这里。

显示朱莉娅在巴黎街头的咖啡馆 @image1 生成。

现在,这幅画更有创意了。树也更明显了。实际上,我很喜欢这张照片。因此,我将用它作为我们的开场镜头。

让我们把它作为视频和广告片的开场镜头。生成。

现在,我们可以回到图像选项卡。她正在巴黎街头喝咖啡。

我认为只有这张照片的身体尺寸是正确的,但我可以接受。我可以像处理前一张图片一样。我可以让它再产生一轮,然后我会选出最好的,但我认为这应该很容易成功。

我将以紧身侧面或非肖像但侧面细节视图的方式来展示我的新作品。在巴黎街头的咖啡馆喝咖啡。让我们点击生成。

嗯,第二轮我觉得更好。但我可能漏掉了一些人。因此,我将尝试在场景中引入人物。不过,这可能比较棘手,因为这张参考图片中没有任何人物。

背景是人行道上行走的人们。点击生成。

现在你可以看到,这是我们想要的街道,我们想要的人物,她正在喝咖啡。这是一个特写镜头,非常棒。

在每一种情况下,我实际上都只是调整了其中可能存在的内容,但一致性实际上完全没有问题,因为所有的视觉效果都保持了相同的照明和调色。我认为这是一个非常实用的功能。

在这里,有我们的朱莉娅,她正在喝咖啡,后面还有人在走。

我将对这一代产品再进行一轮测试。我喜欢这个。因此,我也将把它作为视频,供大家参考。

正在喝咖啡的女子,享受这一刻。她边喝咖啡边闭上眼睛。生成。

直到这一刻,我才知道什么地方感觉不对,但如果你要拍广告,比方说,她可能不应该看镜头。

因此,我会再次使用它。给我看朱莉娅在咖啡馆里的样子,她正朝旁边看。让我们看看如何生成。

我们可以用这种方法继续调整我们的场景。但是,一旦你准备好了这样的东西,并且想要实际使用它,你就可以使用生成的图像本身作为参考。

然后,我将点击图片以作参考。它已上传到这里。我将删除 Julia 和巴黎街。

给我看用白色杯子喝咖啡的嘴唇的特写。生成。

现在我可以删除这一条了,这样我就能保持井井有条。

我大概已经有两个剪辑了。也许我会让它运行几次,直到找到最好的。

我已经在这里拍摄了一个建立镜头的图像。当然,我也可以对它进行处理,用精确的摄像机运动来提示它,但这并不是这段视频的目的。

因此,我要让她用杯子喝咖啡。这就是我要找的东西。

我可能想要嘴唇和街道的侧面特写@image1。

在生成这幅画的同时,我还想在这里生成一幅很棒的画。但她穿的是白色毛衣,我想让她穿黑色的,就像这里一样。

现在我可以选一张图片,可能就是这张。然后我就可以在聊天中使用它了。

它已在聊天中上传。现在你可以对图片进行调整或其他任何操作。而且你使用的是自己的母语。

请将她的毛衣改为黑色并确认。

这与 ChatGPT 生成图像的方法差不多。现在它完成了任务。

但您可以继续调整场景,使其符合您的实际需求。

我们来提示一下。放大一点,因为我觉得太近了。放大了,但只是一点点。因此,我会再做一轮。

再放大一些。我希望她的整个身体都出现在画面中。

它做了一些调整。不过,她被放在了另一张椅子上。不过,你大概明白了。

尽管我可能会使用第一张图片,因为它符合我对我们一起制作的广告的需求。

我也许可以更有创意一些,在路上放一辆车。在路上放一辆红色法拉利跑车。

这显然是无法使用的。但我只是想向大家介绍一下如何基于感觉和迭代来生成这种图像。

你不需要一开始就想出准确的提示,但你可以做到这一点。你也许可以根据自己的需要调整场景,然后用这张图片作为街道场景的图片参考,再把茱莉亚提示进来,这样她就会成为我们想要的角色。

您还可以将此图片作为输入添加,这样它就可以引用更多的图片。

在红色汽车前面加上黄色的兰博基尼。给她头上戴一顶棒球帽。

但你可能已经明白了如何使用它来满足你的需求。

一般来说,在《Runway》中使用参考资料、草图布局以及聊天模式来进行最初的视觉开发是一个非常好的工具,例如,我曾在其他地方,比方说在《Midjourney》中这样做,然后继续在《Runway》中让它动起来。

但现在,你可以在《Runway》中做到这一点,而且功能相当强大。

你可以看到,两辆车都在这里,她还戴着帽子。

现在,正如你所看到的,整个迭代过程都是在我们的会话中进行的,无法使用。因此,你可以轻松地使用这张图片作为参考。

你可以把这个去掉,给我看极限特写。让我看看站在黄色汽车旁边的朱莉娅 @image2。

这样你就可以玩一玩了。当你的想法莫名其妙地出现在脑海中时,就可以创造一个场景,并发挥创意。

现在,正如你所看到的,它按照我的提示做了。

但抛开有趣的部分不谈,如果我们回到最初的几代人,如果你花时间稍作调整,也许可以打磨细节,找到最适合特定场景的那张图片,你就可以让它在《天桥骄子》中直接生成 4K 高分辨率。

如果把它们组合起来,就会像这样。

在 Facebook 上XWhatsApp品趣网LinkedIn