如何在 Runway 上进行口型同步

Runway 最近发布了 Gen-3 Alpha 工具,旨在将 AI 视频创作提升到一个新的水平。阅读完本指南后,您将清楚地了解如何使用 Runway 的口型同步工具,并能够确定它是否是满足您视频创作需求的正确解决方案。

作为开创性 Stable Diffusion 图像生成平台的早期开发者之一,Runway 为人工智能图像和视频创作的各个方面带来了丰富的经验。Runway 最容易使用和最受欢迎的功能之一是其音频到视频唇形同步工具。这项技术允许用户通过将唇部动作与音频输入相匹配来创建逼真的头部说话视频。无论您是内容创作者、教育工作者还是商务专业人士,此工具都提供了一系列应用程序来增强您的视频项目。

1. 登录

(图片:© Future)

登录到 跑道 如果您是第一次使用AI平台,您可以使用您的Gmail账户进行注册。

2. 浏览界面

(图片:© Future)

视频口型同步功能位于 Runway 帐户仪表板的音频菜单下 以及 3D 工具和图像和视频生成。 选择您喜欢的声音 从选项中。

用户界面的优点在于每个阶段都大量使用教程材料,这对于刚开始接触 AI 媒体之旅的初学者来说是令人放心的。

3. 输入提示

(图片:© Future)

口型同步页面本身非常简单且易于使用。 左上角是用户输入的空间。 这可以通过文本提示、上传的音频文件或动态录制音频的工具来实现。

如果您每月支付 35 美元升级到专业版计划,您甚至可以录制自己的自定义声音并与头像一起使用。

4. 选择你的声音

(图片:© Future)

我决定上传我之前创建的 AI 生成的头像,并将其与一个简短的脚本结合起来,以测试唇部动作的准确性。

有大量的声音可供选择,这可能反映了 Runway 与电影业密切合作的历史,因此每个人都可以找到自己喜欢的声音。

5. 生成视频

(图片:© Future)

一旦你完成了试镜和声音选择,接下来就是 上传脚本(或预先录制的音频片段)并按下生成按钮。

免费计划的生成速度比付费计划慢,因此您必须排队等待几分钟才能处理您的请求。 整个过程大约需要 3 到 4 分钟 取决于视频的长度和当时的服务器负载。

6. 了解信用使用情况

(图片:© Future)

文本转语音每转换为语音 50 个文本字符会使用 1 个积分,而口型同步每转换为 1 秒音频会消耗 5 个积分。

整个视频结合了两种费用,实际上意味着我的 38 秒视频使用了大约 250 个积分。每个积分价值 0.01 美元。标准计划用户每月订阅 15 美元,即可获得 625 个积分。

结果…

跳至 3.25 观看下面的最终创作。

视频生成完成后,可以在网页右侧预览效果。免费用户的每个视频都会有水印,但至少不会太难看。

实际视频效果也非常好,即使是使用上传的图像,这也让我感到惊讶。说话时嘴唇的动作很准确,甚至还有一些面部动作与之匹配。

整体效果并不完美,仍然有一点“恐怖谷”效应,但对于一般的商业需求来说已经很不错了。视频制作完成后,有许多选项可用,包括下载、重新生成、编辑脚本等元素。

这是一个快速而轻松的过程,而且结果确实是一流的,正如人们对拥有这种血统的公司所期望的那样。

Runway 和 Pika Labs 有很多相似之处,Pika Labs 是 AI 视频生成领域的另一家知名公司。事实上,Pika Labs 有一个类似的口型同步功能,它也使用了 ElevenLabs 的自然声音。市面上有很多 AI 视频生成器,其中最好的生成器可以产生令人印象深刻的效果。

今日最佳 Chromebook 优惠

1719809185
2024-07-01 04:02:05
#如何在 #Runway #上进行口型同步

Leave a Reply

Your email address will not be published. Required fields are marked *

近期新闻​

编辑精选​