一部手机就能搞定电影级动画?Runway推出革命性AI视频生成工具

AI百科4个月前更新 快创云
76 0

Runway发布Act-One工具,视频秒变动画,风格随心切换!

  10月23日,自2022年末首批AI视频模型问世以来,AI视频技术在多个方面取得了显著进展,包括提升画面真实感、分辨率、保真度,以及与用户输入文本或视频描述的匹配度。然而,对于众多AI视频创作者而言,捕捉面部表情并在AI生成的角色中逼真再现一直是难题。通常情况下,AI角色的表情难以达到预期的自然度和精确度,限制了创作自由度。

  这一难题终于迎来解决方案。近日,得到谷歌等巨头支持的纽约AI初创企业Runway宣布了一项革命性新功能——“Act-One”。通过这项功能,用户可使用任何视频摄像头,包括智能手机内置摄像头,录制自己或演员的面部表情。随后,这些表情将以极高精确度映射到AI生成的角色上,实现前所未有的真实感。这一创新工具的推出无疑将为AI视频创作领域带来革命。

  据Runway在博客上的最新公告,他们将从当日开始逐步推出这款免费的革命性工具。所有Runway用户都可试用Act-One,但只有积分足够且使用过Gen-3 Alpha模型的用户才能使用全部功能。

  Gen-3 Alpha模型具备先进的AI视频生成能力,支持从文字描述、图片或现有视频生成新内容。用户可提供场景描述、上传静态图像或视频,甚至组合这些不同输入元素。Gen-3 Alpha会综合这些信息,生成符合用户需求的新视频场景。

  虽然Act-One功能目前仅对少数用户开放,但AI视频创作者社区已开始为这一创新欢呼。用户Allen T.在X社交媒体账户上兴奋评论道:“这简直是游戏规则的改变者!”

  Runway最近在好莱坞电影制作领域取得重大进展。上个月,该公司宣布与电影制片公司Lionsgate建立合作关系。这次合作将使双方基于Lionsgate超过2万部电影的庞大电影库,共同开发定制的AI视频生成模型。

  传统上,制作面部动画是一个既复杂又繁琐的过程,涉及动作捕捉设备、手工面部绑定和多角度参考影像。电影爱好者在观看特效和动作电影如《指环王》系列、《阿凡达》或《猩球崛起》的幕后制作时,都能感受到这一过程的复杂和挑战,影片中演员们头上常戴着笨重设备。

  为了精确捕捉丰富的面部表情,大卫·芬奇导演及其团队在制作《本杰明·巴顿奇事》时开发了全新的3D建模技术,这一创新为他们赢得奥斯卡奖。近几年,一些软件和AI初创公司如Move试图减少进行精确动作捕捉所需的设备。Runway的Act-One让用户能够轻松为各种风格和设计的角色添加动画,无需依赖动作捕捉装备或复杂的角色绑定。用户只需提供一段简单视频,就能将表演中的各个细节如眼神微妙变化、细腻面部表情以及节奏精准把握转移到一个或多个风格迥异的AI生成角色之上。这一过程极大简化了动画制作,使创作者能够轻松将现实世界的表演转化为虚拟角色的生动表现。

  Runway在社交媒体上表示:“Act-One能够将单一视频源中的表演细节转换成多样化的角色造型和风格迥异的表现形式。”这种方法为动画师、游戏开发者和电影制作人带来显著优势,能够精确捕捉演员面部表情同时适应不同的角色设计和体型比例,为创造具有真实情感和个性的独特角色提供无限可能。

  Act-One的优势在于其能在多变的摄像机角度和不同的焦距下创造出具有电影质感的真实画面。这一特性让创作者能更轻松地用角色讲述情感故事。过去这需要昂贵设备和复杂制作。该工具能精准捕捉到演员在复杂场景中的情感深度和独特表演风格即使是最微妙的神态和动作也不放过。这种技术的进步使得创作者们能以创新方式为角色注入活力无论是在真人拍摄还是动画制作中都能展现出更加丰富多彩的叙事可能。

  虽然Runway之前已支持视频到视频的AI转换技术允许用户上传自己的视频并通过Gen-3 Alpha或其他早期的Runway AI视频模型如Gen-2利用AI效果进行角色“换肤”但Act-One的新功能在面部映射和效果上做了特别优化。Act-One以其卓越的功能显著提升了视频叙事的潜力。如今仅需一台普通的消费级相机一位演员就能表演多个不同的角色而Act-One能够为每个角色创造出独一无二的表现。这项技术预示着叙事内容创作方式的革新特别是在那些通常受限于资源的独立电影和数字媒体领域它为创作者提供了前所未有的便利。

  在公众人物形象安全和保护方面Act-One与Runway其他产品一样配备了一整套严密安全措施。这些措施包括防止未授权生成包含公众人物的内容以及确保声音使用权的技术工具。随着Act-One的逐步推出Runway热切期待看到艺术家、电影制作人和其他创作者会如何利用这个新工具实现其想法。有了Act-One复杂的动画技术对于更广泛的创作者群体来说触手可及使更多的人能够探索新的故事叙述形式和艺术表达方式。(腾讯科技特约编译无忌)

© 版权声明

相关文章