分享好友 健康资讯首页 健康资讯分类 切换频道

Midjourney+Gen2,7步完成「芭本海默」,引Karpathy惊呼|附实测经验

2023-09-19 15:49820

【新智元导读】7步完成「芭本海默」,电影工业2.0真的要来了吗?

在前两天芭比海默全网爆火之后,不断有网友“复现”用MidJourney+Gen-2制作电影的神技!

而一位网友更新了一个自己的教程,制作芭本海默只需7步,被Karpathy盛赞为“电影制作工业2.0”。

图片

图片

一部20秒钟,有完整剧情,包含6个分镜头的动画短片,7步完成,曹植看了都要直呼内行!

7步完成芭比海默,效果惊人

下面就给大家具体演示一下:

1.ChatGPT帮你写分镜头剧本,顺便再帮你把字幕也写好

图片

2.根据分镜头脚本,用Midjourney生成每个镜头的开始的一张图片。

图片

这里可能是7步成片中唯一一步稍微有点门槛的操作,每张图片的提示词要自己创作。

但是点击图片放大之后可以看到提示词也不是很长,有一点英语基础的朋友稍微试一下就能做到。

图片

这是短片中另外几个场景的起始图片,也全都是用Midjourney生成。

3. 为了保证短片中的场景色调一致,需要用修图软件调整一下每张图片的色调。

图片

比如短片里的色调是比较复古的风格,Midjourney生成的原图可能不符合。

用任意一款修图软件调整过后,就能让所有场景的风格比较一致了。

图片

4. 使用Gen-2让每一张照片动起来,把6张照片变为6个分镜头。

图片

5.然后用ElevenLabs生成字幕的语音。

图片

6. 然后用FinalCut Pro把动画,声音,和特效结合起来,短片就基本完成了。

图片

7. 再用Capcut添加好字幕,大功告成!

图片

实测之后发现的经验

虽然看着简单,但是亲手实测了一波后发现,没有一个清晰的规划,要想做出自己效果满意的电影,还是很不容易的。

最大的障碍在于,因为Gen-2的动画只能以某一张图随机生成,所以在涉及人脸画面的时候,畸变会比较多。

本来想做一个马老板手搓星舰的视频,但是发现人物面部的畸变太严重了,以至于每段视频只有第一帧图片是马老板本人,一秒钟之后就不知道会变成谁了。

所以如果想要用Gen-2做一个明星相关的视频,现在为止还几乎不可能。

而且这些面部畸变和人物动作时完全随机的,完全不受用户控制。

有一位网友做了一段视频,把每4秒的最后一帧截图下来让Gen-2继续生成新动画。

大概40秒之后,画面中的人物,从一开始的美漫风格的动画角色,最后几乎畸变成了雕塑。

图片

即便图片中有一些比较明显的动态提示的效果,但是Gen-2还不能理解,所以生成的效果也不一定符合你的预期。

图片

人物的动作也没有办法太好的控制,可能为了要生成一段自己满意的动画需要用同一张图尝试好长时间。

所以就目前Gen-2能实现的效果来看,还不太可能随意适应比较复杂的剧本。

所以就要求写剧本时要尽量避免近景人脸特写等场景。

但是如果未来Gen-2能够将prompt和图片完全结合起来,让图片能够跟着prompt的描述动起来,效果就会有一个巨大的飞跃。

其他的Midjourney+Gen-2的效果

大神歸藏,用Gen-2做了几个《奥本海默》中的场景,足以以假乱真。

图片

同时,他还比较了相似的场景和Pika Lab生成的区别。

图片

下图是Pika Lab的效果。

图片

除了开头这段「芭比海默」之外,很多网友也用Gen-2和Midjouney这对黄金搭档做起了动画开发的副业。

让我们来欣赏几组效果不错的动画效果演示。

图片

可以看出,在演示之中人脸的效果变形不是很大,这与实测的差异很大,很有可能是因为作者试了很多次之后找到的脸部畸变不大的效果。

图片

有网友生成了一部名人漫威角色的预告片,效果非常逼真,配上一点动画特效和光影,感觉真的像是漫威官方的作品。

图片

这是网友生成的一段恐怖电影的预告片,反而很好的利用了Gen-2人物画面畸变,增加了恐怖片的氛围感。

图片

这一段也是网友用MJ+Gen-2做的艺术感很强的视频,加上后期跟新的导演运镜特效。

图片

这是一幅用油画的静图生成的动画,虽然有一点畸变,但是效果确实不错。

参考资料:

https://twitter.com/karpathy/status/1684608881920802816

https://twitter.com/kalsonkalu/status/1684534663472087042

(举报)

举报
收藏 0
打赏 0
评论 0
上海土拍揽金90.6亿 一家不锈钢企业青山实业成最大赢家
上海第七批次土拍终于落槌。如果只看实时拍地数据,这似乎是波澜不惊的一天:上架5宗地块全部拍出,总揽金90.6亿元,没有所谓的地王地块,也没有超高溢价率的房企争夺战。但如果将视角拉远,会发现这场土拍背后,筛选出了上海楼市中两种截然不同的资本面孔。第一类,是常年参与上海土拍的各大房企们:从绿城、招商,再到华润、联发,几家企业已沉浸这片楼市多年;第二类,则是那些选择“跨界”入局的实业企业们,而本场土拍中

0评论2026-08-0569

早期项目 | 从智能喂养切入,一家创业公司想搭建母婴AI生态
作者 | 张子怡编辑 | 袁斯来母婴市场在全球拥有万亿级规模。中国的母婴消费市场规模已突破5万亿元,年均增速保持12%的稳健水平;全球母婴市场总量更是达到约2万亿美元。庞大的母婴市场背后,其智能化渗透率较低,尚不足1%。全球母婴家庭普遍面临养育压力大、成本高、信息繁杂等核心痛点,而传统母婴产品仍停留在基础功能阶段,智能化程度不足、生态割裂,无法满足新一代家庭需求。以喂奶为例,不少家庭依然采用着极为

0评论2026-08-0571

壹酒店“失败”启示录……
近日,三亚海棠湾阳光壹酒店正式撤牌,原址将引入希尔顿旗下康莱德品牌。这意味着新喜达屋在中国内地的唯一酒店黯然离场,也宣告康莱德阔别四年后重回海棠湾。为何是小众先锋的壹酒店退出,而老派奢华的康莱德归来?在存量竞争白热化的当下,业主为何要么自持、要么纷纷转向国际酒店巨头?壹酒店换牌康莱德,新喜达屋退出中国市场?近日,三亚海棠湾康莱德酒店项目悄然落地了。令人意外的是,该项目曾一度传出要换牌凯悦旗下的奢华

0评论2026-08-0574