声明：本文来源于微信公众号 新智元（ID:AI_era），作者：新智元，授权站长之家转载发布。

【新智元指南】Sora还没有开放，但是网友们用Runway、Pika等工具制作的电影级大片已经完成「上线」，B站西游记的浏览量几乎超过了100万！此外，Lightricks今天推出的革命性AI电影LTX生产平台 Studio，让我们自己动手DIY电影级大片。

最近，全网它掀起了人工智能视频的热潮。

各式各样的史诗大片纷纷上映，逼真的效果，震撼的场面让网友们大吃一惊。

比如B站UP主「AI疯人院」这部2024年开篇的王炸-AI版西游记动画短片，已获得近百万播放量。

网友们纷纷惊呼，一开始就惊呆了，整个感觉都是:简直绝对！

另一个名叫Shangg 由Chi的弟弟制作的AI电影「怀旧宇航员」，让无数人哭泣，直接入选今年的MIT AI电影大赛最佳影片。

那么，我们离DIYAI大片有多远呢？

虽然最近流行的Sora将视频时间延长到了史诗般的60秒，但离整部电影的时间还有很长的路要走。

然而，刚刚发布的一套人工智能工具直接实现了电影制作的整个工作流！

AI大电影「完整工作流」来了

就在刚才，以色列初创公司Lightricks正式发布了AI驱动的电影制作和编辑软件——LTX Studio。

通过文字，它可以直接生成复杂的情节，包括语音、音效、视频图片，一套完整的圆形。

联合创始人(从左到右):Itai Tsiddon、Yaron Inger、Zeev Farbman、Amit Goldstein和Nir Pochter

它包含了一套完整的导演工具，直接重新定义了视频制作的工作流！它包括自动编写脚本工具、调整多镜头场景控制工具、确保角色一致性的工具、摄像头控制、一键编辑等。

这样，制作高质量的视频就更容易了。

只要你给出初步的想法，LTX Studio可以可视化你的想法。

例如，我们的电影现在需要一个因为惊讶而放大的瞳孔。

躺在地上的女人。

未来主义房间里的一棵树被淹没了。

昏暗走廊里的一个女人。

一个恶棍。

根据您输入的prompt，LTX Studio自动创建脚本，分割多个镜头。

例如一个未来主义空间的戏剧场景，它创造了以下场景。

或者，我们需要纽约法院的场景。

有了这些分镜头，它就可以直接制作一部电影了！

自动生成的故事板将组织整个叙事和场景规划，并可以定制和控制角色和相机的角度。这种直观的体验使早期制作和粗剪更快。

而且它生成的画面内容，如演员、造型、场景等，都可以随意剪辑和更换。

例如，电影中男人背后的绿色汽车刚刚生成，我们希望它变成红色，并在一秒钟内改变你。

能不能把肌肉女变成肌肉男？一点问题都没有。

后悔了，还是想把男性角色变回女性？没问题。

在这一幕中，我们可以把女性角色周围的男人换成一个中年黑人，或者一个衣冠楚楚的绅士。

如何设计一部效果爆裂的电影片头？它会帮助你的。

公司联合创始人兼首席执行官 Zeev Farbman表示，该产品非常适合电影制作人、早期制作人和广告公司等专业人士。

「LTX Studio可以帮助电影制作人在不需要大量投资的情况下，快速构建概念故事或评估拍摄场景的不同方案。」

背后的模型

LTX Studio结合了多种人工智能技术，涵盖了创作过程中的各个环节。

其中，公司原创的文生视频模型——LongAnimateDiff，在16到64之间创建帧数的视频。

此外，该团队还发布了另一个专门用于创建32帧视频的模型。与LongAnimateDiff相比，它通常在视频质量方面表现更好。

然而，并非所有功能都依赖于人工智能技术。

对于背景音乐，公司选择了第三方音乐资产供应商，因为他们认为目前的人工智能技术无法创造出符合要求的背景音乐质量。

一大波真正的制作来了！

官方在推特上发布了一大波网友制作的视频，并分享了背后的工作流。

在赛博朋克未来的城市里，一位赏金猎人的新手之旅意外地将他卷入了一场残酷的城市帮派战争。

这一切始于他在一次事故中救了一个黑帮老板的儿子，从而引发了一系列连锁反应。

要想在法律的边缘生存，就必须迅速适应这个充满危险和诡计的世界。

，时长00:22

A rookie cyberpunk bounty hunter finds himself at the center of a city gang war after saving a mob bosses son from a rival attack. Gotta learn the rules fast if he wants to survive life on this side of the law. A crime thriller packed with hits， jealousy， and power.

Marcus，一位身经百战的角斗士，正站在竞技场地下昏暗的房间里，进行最后的检查。

图中的短剑是他在无数战斗中的忠实伴侣，每一次磨练都是对生死的考验。

当Marcus进入竞技场时，耀眼的阳光和滚烫的空气似乎预示着即将到来的战斗。

Marcus is a gladiator and in the dimly lit room beneath the arena， he prepares for battle as he checks his gladius for the last time. He steps out into the light， seeing the vast crowd in the scorching sun， he sees his opponent and softly smiles. This day belongs to him.

只有女性才能在这个因核灾难而荒凉的世界里生存下来。

他们戴上的防毒面具，不仅是在这充满毒素的空气中生存的必需品，也是他们抵抗绝望、宣扬力量的象征。

在这片满目疮痍的废墟中，他们为争夺资源、权力和自由而战。

In a world scorched by nuclear disaster， where only women survive， they wear gas masks， not just for air， but as a statement. Amidst the ruins， they fight for resources， power， and freedom. In a Mad Max inspired dystopia， witness their stylish resilience.

在一次奇妙的冒险中，一个8岁的勇敢女孩穿越时空回到了恐龙时代，却意外地发现了一个神秘的高级文明。

面对时间的紧迫，她不仅要想尽一切办法修复她的时间机器，还要揭开古代文明的秘密，把这些珍贵的知识带回现代。

An8year old girl travels back in time to see the dinosaurs and discovers an unknown advanced civilization. She must fix her time machine and bring back the secret on the civilization to the present before it's too late.

外国网民热评十大AI电影

这些天，「人工智能颠覆好莱坞」呼声越来越猛。

随着Sora人工智能视频的繁荣，网民们也使用各种人工智能视频工具制作了自己的电影级大片。

Min，外国博主 最近，Choi被选中，全网十个效果最好DIY电影预告片。

1怀旧宇航员

这部AI短片来自一个叫Shang的人 网友Chi之手。

2024年入选MIT 人工智能电影制作大赛黑客马拉松最佳影片。

Shang Chi叹了口气：AI讲故事终极武器，如果没有伟大的人工智能社区灵感，你就不可能制作这部电影。

看完之后，网友们非常感动，纷纷表示：「感谢您创造了这个美丽的故事。」

2真人版高达预告

「Dave Clark」这部高达真人概念的预告片，效果令人震惊。

采用Runway运动笔刷功能。

3足球比赛

由「The Classified Football Results」这部电影是由传奇人物James制作的 Alexander 朗读Gordon的声音。

由Midjourney和Runway制作的图片和视频。

最终幻想VII重生

这是日本网友「吉川明静」预告片《最终幻想》的制作。

「Shikoba」这个视频是由Midjourney制作的、Pixverse和Music Soundbay共同完成。

6午夜奥德赛

「Ethereal Gwirl」这部大片已经在YouTube上正式播出！

本视频由Midjourney制作、Pika、Runway、Magnific AI、Stable Diffusion和FulljourneyAI共同完成。

画质精美，情节激动人心，被网友评为「史诗级」作品。

7Levi's风广告大片

「Paul Montreal」经过全新的构思，90年代的经典Levi's广告「Creek」再创作。

Midjourney使用的工具、Runway、Artlist和Magnific AI。

许多电影摄影技术和视觉叙事艺术都应用于这一过程中。

8Absence

这个名为「Absence」这部大片讲述了一段穿越时空的因果之旅。

作者「Dustin Hollywood」Midjourney使用的工具、Runway、Topaz Labs和Magnific AI。

9产妇:AI恐怖电影预告片

作者「PZF」他说，他想创造一些与日常工作完全不同的东西，然后他也想提高他的编辑技能。

因此，他编造了一部恐怖电影「产妇」（Maternity），做了60秒的预告片。

网友说，里面的孩子盯着你的眼睛，简直令人毛骨悚然..

作者说，一开始他并不打算让视频如此黑暗，但他发现了一种非常有效的风格，找到了合适的配乐，然后就这样做了。

10犬之日

作者「Next on Now」每个人偶尔都需要自己「犬之日」。

Runway使用的工具、Midjourney和ElevenLabs。

看到这些网友的大片，你也痒吗？

Runway、像Pika这样的工具，大家一定玩得很滑。以下是LTXX的重点介绍 使用Studio。

就像之前的演示一样，它使用起来非常简单，使用起来也很容易。

我们只需要输入自己的想法，然后LTX Studio将根据这段prompt创建脚本、故事板和角色。

其中，故事板将显示分割成许多镜头的不同场景。

然后，我们可以通过输入指令来改变场景，改变风格(如动画或影视风格)、调整天气设置和更换位置。

一般来说，每个镜头的长度只有几秒钟。

借助LTX 我们可以重新命名镜头并调整Studio提供的镜头编辑器，包括视频特效、设置动作范围、摄像头角度/位移、持续时间和角色对白。

此外，我们还可以通过一个独立的角色页面来添加、删除或更改整个概念。或者， 直接上传面部清晰可见的图片，创造角色。

在这个过程中，不需要担心故事人物的一致性。

用户完成故事线的微调和镜头编辑后，就可以预览电影了。还可以导出文件与他人分享。

Waitlist现在可以申请了，试用是免费的！

3月27日正式版发布后，估计要收费。

申请地址:https://ltx.studio/

Sora仍然无人能阻挡

在人工智能视频领域，如果横向比较，现在可以肯定的是，Sora仍然无人能阻挡。

最近，国外的一个小哥哥Mickmumpitz比较了Sora和Runway Gen-2、AnimateDiff、Pika，以及LeonardoAI的生成效果。

总而言之，Sora鹤立鸡群。

接下来是固定试题:根据这张静图创建视频。

以下是四个AI视频工具的作品。

Sora和Runway是同一个prompt画的视频。

Sora和AnimateDiff是这样的。

Sora和Pika是这样的。

Sora和LeonardoAI是这样的。

以下是生成小狗的效果图对比。

以下是公路车辆的效果对比。

可以看出，与其他人工智能视频工具相比，Sora的性能要强大得多。

很难想象Sora正式上线后电影业会被颠覆成什么样子。