暴打Sora?LTXStudio仅用文字生成一部完整电影

开心盖土 2024-04-02 09:24:49

自从OpenAI官宣Sora后,AI视频生成界万马齐喑,没一个能打。现在终于出现了一个踢馆的,LTX Studio官宣了其一站式AI视频生成工具,仅输入文本就能生成超过25秒的影片,而且不是Sora那样的无声片段,是剪辑好的包括声音和分镜头的完整微电影。

LTX Studio由 Facetune 和 Photoleap 应用程序背后的团队 Lightricks 构建,利用了许多内部和开源AI模型,使AI视频制作变得更加容易,其官方首页宣称“在一个整体平台上使用AI控制视频的各个方面,从构思到最终编辑。”在我看来,这又是一个AI改变游戏规则的时刻。

LTX Studio 是如何工作的?

LTX Studio 是个一站式生成内容平台。它允许您根据文本提示创建视频剪辑、音乐、声音效果甚至角色对话。它的突出之处在于您可以在一个界面中完成所有这些操作。

该团队利用一系列生成式人工智能工具和模型,然后将它们集成到界面中,使多镜头人工智能视频的创建变得更加容易。看来很多视频行业从业者真的要失业了。

从提示开始,例如“一个年轻人进入一个健全的治疗室。在科学家的簇拥下,穿着实验服,期待着首次通电,最终的结果。(A young man entering a sound-healing chamber.Surrounded by scientist in labcoats,anticipating the maiden power-up,eventual results.)”制作一部名为“The Chamber”关于科幻实验的短片,它会生成包含声音、角色、场景,是一部完整的短视频。

LTX Studio 何时可用?

官网已经开始登记等候名单,大概本月月底就将首次向公众开放,感兴趣的朋友赶紧了。官网链接:https://ltx.studio/

Lightricks 团队仍在开发 LTX Studio的一些最终功能,包括在镜头内控制摄像机位置和移动以及能令人印象深刻的配音。

最终的功能将更有效地将静态图像转换为 3D 场景,可以在其中移动镜头以更改相机的角度和运动,以及可以操作场景中的任何镜头。

他们还在探索对口型的能力,这一点我觉得他们是不是该找字节跳动合作一下呢。目前的对话更像是画外音,而不是电影或电视节目中看到的适时角色说话。从内部放出的一些成品看,画质还有待提高,画面细节仍然远比不上Sora。

来看看目前放出的一些完整短片。

它为什么被大家关注?

相对于目前AI视频生成工具,LTX Studio更像是一个完整的视频生成产品,从简单的文字提示开始,然后对每个元素进行非常精细的控制,最终生成一个完整的影片,而这是目前市场没有的。

Sora本身是一个底层模型,制作完整的视频还得剪辑一段段视频后配音等等。LTX Studio 产品是AI应用的下一个合乎逻辑的步骤。能够制作有趣的视频片段固然很棒,但能够制作多个剪辑、添加音乐、音效和对话,一站式AI视频生成则是一个改变游戏规则的时刻,它能让普通人成为一人电影公司。

0 阅读:1

开心盖土

简介:感谢大家的关注