亮点:
Runway的Act-One功能彻底改变了AI视频创作,让用户通过简单的输入即可快速生成表情丰富的角色动画。
第一幕通过降低技术门槛,让更多创作者探索新的叙事形式和艺术表现形式,这对于独立电影制作和数字媒体领域来说是革命性的。
第一幕擅长捕捉面部表情,准确捕捉复杂场景中演员的情感深度和表演风格。
10月23日消息,自2022年底第一批AI视频模型问世以来,AI视频技术在多方面取得了重大进展,包括提高画面的真实度、分辨率、保真度、文字提示等。与用户输入。或者视频描述的匹配程度。然而,对于许多人工智能视频创作者来说,一个长期存在的问题是如何捕捉面部表情并在人工智能生成的角色中真实地再现它们。一般情况下,AI角色的表情往往难以达到预期的自然度和准确度,限制了创作的自由度。
人工智能视频创作者面临的这一长期挑战终于有了解决方案。近日,由谷歌等巨头支持的纽约AI初创公司Runway宣布了一项革命性的新功能——“Act-One”。此功能使用户能够使用任何摄像机(包括智能手机内置的摄像机)记录自己或演员的面部表情。然后,这些表情将以极高的精度映射到人工智能生成的角色上,实现前所未有的真实感。这一创新工具的推出,无疑将给AI视频创作领域带来一场革命。
根据Runway在其博客上的最新公告,他们将从当天开始逐步推出这个免费的革命性工具。所有 Runway 用户都可以尝试第一幕。不过,只有拥有足够积分并使用过 Gen-3 Alpha 机型的用户才能使用所有功能。
Gen-3 Alpha模型具有先进的AI视频生成功能,支持从文本描述、图像或现有视频生成新内容。用户可以提供场景描述、上传静态图像或视频,甚至组合这些不同的输入元素。 Gen-3 Alpha将综合这些信息来生成满足用户需求的新视频场景。
尽管Act-One功能目前仅对少数用户开放,但AI视频创作者社区已经开始为这一创新喝彩。用户 Allen T. 在他的 X 社交媒体账户上兴奋地评论道:“这是一个游戏规则的改变者!”
Runway 最近在好莱坞电影制作方面取得了重大进展,上个月宣布与狮门影业电影制片厂建立合作伙伴关系。此次合作,双方将基于狮门影业拥有超过 20,000 部电影的庞大电影库,共同开发定制的 AI 视频生成模型。
01 简化传统上复杂且需要大量设备的创作流程
传统上,面部动画是一个复杂而乏味的过程,涉及动作捕捉设备、手工制作的面部绑定以及多个角度的参考镜头。电影爱好者在观看《指环王》系列、《阿凡达》或《猩球崛起3》等特效和动作电影的幕后制作时,可以体会到这个过程的复杂性和挑战。 。我们经常头上戴着笨重的设备。
为了准确捕捉丰富的面部表情,导演大卫·芬奇及其团队在拍摄《本杰明·巴顿奇事》时开发了新的3D建模技术。这项创新为他们赢得了奥斯卡奖。
近年来,Move等多家软件和人工智能初创公司试图减少精确动作捕捉所需的设备。 Runway 的 Act-One 允许用户轻松制作各种风格和设计的角色动画,而无需依赖动作捕捉装备或复杂的角色装备。用户只需提供一段简单的视频,表演的每一个细节——比如眼神的微妙变化、面部表情的细腻、节奏的精确控制——都可以转移到一个或多个人工智能生成的不同风格的角色上。 。这一过程极大地简化了动画制作,使创作者能够轻松地将现实世界的表演转化为虚拟角色的生动表现。
Runway在社交媒体上表示:“Act-One可以将单一视频源中的表演细节转换为不同风格的多样化角色造型和表情。”
Runway的方法为动画师、游戏开发者和电影制作人带来了显着的优势,它能够准确捕捉演员的面部表情,同时适应不同的角色设计和身体比例,创造出具有真实情感和个性的独特角色。角色提供了无限的可能性。
02 不同摄像机角度的电影真实感
Act-One 的优势在于它能够在不断变化的摄像机角度和不同焦距下创建具有电影质量的逼真图像。这一功能让创作者可以更轻松地用角色讲述情感故事。过去,这需要昂贵的设备和复杂的制造。
该工具可以准确捕捉复杂场景中演员的情感深度和独特的表演风格,甚至是最微妙的表情和动作。这项技术进步使创作者能够以创新的方式将角色带入生活,无论是真人还是动画,都开辟了更丰富的叙事可能性。
虽然 Runway 此前已经支持视频到视频的 AI 转换技术,允许用户上传自己的视频,并通过 Gen-3 Alpha 或 Gen-2 等其他早期 Runway AI 视频模型,使用 AI 效果为角色“换皮”。 ,但 Act-One 的新功能针对面部映射和效果进行了专门优化。
03 开放更广泛的视频讲故事能力
第一幕以其卓越的功能显着增强了视频讲故事的潜力。现在,只需一台普通的消费级摄像机,演员就可以扮演多个不同的角色,而第一幕可以为每个角色创造独特的表演。这项技术预示着叙事内容创作方式的一场革命,尤其是在资源往往有限的独立电影和数字媒体中,为创作者提供了前所未有的便利。
在公众人物形象安全与保护方面,Act-One与Runway其他产品一样,配备了一整套严格的安全措施。其中包括防止未经授权生成以公众人物为主角的内容,以及确保声音使用权的技术工具。
04 展望未来
随着第一幕的推出,《Runway》渴望看到艺术家、电影制作人和其他创作者将如何使用这个新工具来实现他们的想法。通过第一幕,更广泛的创作者社区可以接触到先进的动画技术,使更多的人能够探索新的故事讲述形式和艺术表现形式。
本文来自《腾讯科技》,编译:无极,36氪授权发布。