最新AI电影制作技术到达什么水平？看看AI电影节获奖作品

霍青桐

文｜Mascha Deikova
编译｜小帧

Runway是人工智能工具开发领域的领先公司之一，他们举办的首届AI电影节评选出了获奖作品。在数百部参赛作品中，评委们挑选了十部入围作品，并公之于众。这场比赛的主要目标是表彰“站在AI电影制作最前沿的艺术与艺术家”。我们好奇地分析了获奖电影如何将不同技术融入其中：从AI生成的艺术作品到整个3D场景扫描。让我们来看看现在对任何创作者都可用的令人惊叹的新技术。

比赛要求视频时长为1到10分钟，自然，使用神经网络也是电影节评选的主要标准之一。没有严格规定必须使用哪种AI或如何将其融入电影中，因此获奖视频中所用工具的种类令人印象深刻。先进技术的使用仅占电影成功的25% 。评委还考虑了电影整体构成、原创性以及艺术信息的质量。

作为AI电影制作的一部分，使用艺术生成器


我印象最深的一部短片是Laen Sanches的《PLSTC》。基本上，这是数百幅图片的快速剪辑，这些图片展示了被塑料包裹、无法逃脱的不同海洋生物。导演使用AI艺术生成器Midjourney创作的强烈画面，通过AI工具Topaz Labs将它们放大，并稍微加以动画。通过精确选择匹配的视觉效果，他实现了一种非常明确且连贯的电影氛围。虽然没有说一个字，但信息十分清晰，令人心痛。戏剧性的古典音乐也有助于唤起深刻的情感，结果是一个小型叙事奇迹。虽然没有获得任何奖项，但绝对值得一看。


https://www.zhihu.com/video/1626534929319374848

我喜欢这个视频的创意和最终效果的美学。但重要的是要注意：我认为我们在制作电影时不应朝这个方向发展，至少目前不应如此。关于在实际项目中使用AI生成的艺术作品，有很多讨论。您应该知道，像Midjourney或Stable Diffusion这样的工具开发者会在所有可能的内容上训练他们的神经网络，而不考虑谁拥有这些内容的权利。因此，将输出结果称为自己的创作既不道德，也不公平，原创艺术家得不到认可或补偿。在我看来，将这些AI工具用于研究、情绪板或者在创意开发阶段是可以接受的。



使用类似文本提示的结果示例-Midjourney

尽管如此，还是有希望的。上周，Adobe推出了Firefly，旨在解决这个问题。AI艺术生成器承诺只使用合法和包容性的数据集。例如，开发人员在Adobe Stock图像、开放许可的素材和公共领域中的内容（版权已过期）上训练了Firefly的深度学习模型。但仍有改进的空间。一些电影制作人敦促Adobe为Stock创作者提供一个选择如何以及是否希望使用他们的素材的选项，如果愿意的话，为其提供补偿。

我认为这是下一步，但软件仍然非常新，目前还没有对外开放，需要申请测试版访问权限。




Firefly官方网站上的一些展示。图片来源：Adobe


实景3D扫描 - 从不同角度看AI电影制作


另一个吸引我注意的节日作品是银奖获得者Jake Oleson的《Given Again》。这部电影带领观众穿越美丽的日常场景，它们看起来更像是梦幻般的回忆，时间凝固。氛围独特、艺术性强，如梦似幻，但与传统叙事截然不同。最让我印象深刻的是，所有序列都是完全使用Luma AI的NeRF技术创建的。先观看它，然后我们将深入了解技术细节：


https://www.zhihu.com/video/1626535039151394816


Luma AI让您仅通过使用iPhone（11或更新版本）就可以轻松创建真实感极强、高质量的3D模型。在他们的应用程序中，您可以轻松捕捉物体、风景或整个场景（就像上面的视频示例那样），然后将其转化为详细的3D环境。关于他们的扫描最有趣的是，它们基于所谓的NeRF技术，即“神经辐射场”。简而言之，它通过深度神经网络分析从不同角度拍摄的图像或视频，学习物体的底层3D结构。然后，机器预测3D空间中每个点的颜色和外观，并可以合成高质量、极为详细的模型。

在创建3D扫描之后，您不仅可以回顾那一刻，还可以在后期制作中尝试不可能的相机动作。“Given Again”就是一个很好的例子，展示了这种AI技术如何在紧张的预算下增强电影制作。


在您的视频中使用AI基础特效


Runway的AI电影节大奖得主是Riccardo Fusetti，他的作品名为《Generation》。这是一部非常具有表现力和抽象感的作品，将现代表演与大量视觉效果和哲学旁白文本相结合。


https://www.zhihu.com/video/1626535105975091200

我不能100%确定Riccardo在这个项目中使用了哪种AI技术，但通过例如Runway的Gen-1，可以获得类似的效果。经过相当长的测试阶段，它终于向公众开放。注册后，用户可以免费试用该技术，但信用额度有限。

Gen-1的初始想法是通过参考图像或文本提示，从现有视频中生成新视频，因此可以将特定风格应用于您的片段。将简单形状（如鞋盒）变成复杂物体（如摩天大楼），或仅调整蒙版物体。为每个人提供视觉特效，不让任何人掉队。



Gen-1模式动作中的一个。图片来源：Runway

虽然听起来疯狂，但这仅仅是个开始。目前有很多研究项目正在尝试使用AI从文本中创建整部电影。我们写过谷歌的人工智能开发，例如。Runway还宣布了他们的新产品Gen-2，它应该能够从零开始制作视频。一个全新的世界正在拐角处等待着我们：既令人兴奋又令人恐惧。

通过AI工具使电影制作大众化


在电影节页面上有很多关于AI电影制作的例子。如果您对知名艺术家在这个话题上的观点感兴趣，可以观看达伦·阿罗诺夫斯基等参与者的小组讨论。


https://www.zhihu.com/video/1626535206810329088

主要讨论的是人工智能是一个非常年轻且迅速发展的领域，我们必须正确对待它。使用它的关键在于道德和将其视为创意助手，而不是取代我们的工作。与此同时，大家都认为AI有助于电影制作的大众化。新技术为独立创作者或低预算制作提供了以前无法获得的工具。

我认为这是一个重要的观点，AI电影节证实了这一点。在决赛选手中，您会看到A$AP Rocky的歌曲“Shittin’ Me”的官方音乐录影带（目前在YouTube上有650万次观看），以及Sam Lawton的小型个人作品《Expanded Childhood》，他使用自己的档案照片创建了具有错觉的AI扩展环境。

电影制作的未来


决赛选手之一——简短的解释性视频《Checkpoint》——将人们对AI应用的普遍反应与19世纪30年代画家对摄影发明的抗议进行了比较。随着时间的推移，他们学会了欣赏现代工具，甚至开始将其作为一种新的艺术形式，重新定义其目标和意义（不再必须是逼真的）。

毫无疑问，仍有许多悬而未决的问题，但人工智能的发展将影响电影制作。事实上已经如此。因此，与其抗议，我们不如考虑如何最道德、最公平地使用它。如果我们能做到这一点，AI可以增强我们的创造力，为我们向前迈进提供坚实的基础。

如果您希望提升视频团队的后期制作和交付流程，点击链接即可开启免费试用

乜仁

占位编辑

你我的生活

有什么好玩的？

巍涛

站位支持

玲珑耳朵

前排支持下

罗弘

LZ帖子不给力，勉强给回复下吧

想飞的螃蟹

谁有空~陪我聊会！

徐政

我擦！我要沙发！

千里行舟

啊啊啊啊啊啊啊啊啊啊啊

秭归橙子

垃圾内容，路过为证。