首页 >>  正文

一键生成视频工具

来源:baiyundou.net   日期:2024-07-02

狂丸研究所,每天涨点新知识

网友对AI生成图片的各种尝试,比想象中的还要狂暴。

之前把普通照片变成二次元画风的各种AI,大家或多或少都了解过:

又或者是让AI创造一个真实的美女:

不过这些都是静态的图片,有些人则在思考能不能让AI搞出点片子来看。

近期外国知名视频特效团队Corridor就整了一个狠活儿,AI在他们手中要创作的不再是一幅画,而是要让画面组成一个完成的动画。例如下面这个片段,其实就是AI照着真人绘制的:

动画中两位王子进行了了一场惨烈的决斗,而方式竟然是「剪刀石头布」!虽然沙雕,但这画面确实够热血的:

看不出来是AI做的?可以对比一下真人镜头,简直完美同步,无缝切换:

画面干净,表情生动,没有鬼畜,甚至画风还有点经典。就好像是有一个动画团队用画笔照着现实中的人物绘制了一幅幅画面。但其实Corridor仅仅用到了四五个人,而且他们压根也都不会制作动画。

可以想象一下,AI先是让你能从0基础变成画师,现在又有可能变成动画制作者,听起来创作更加轻松自由,这就有点科幻了。

所以,他们到底是怎么做的?

整个步骤简单来说,就是先让真人演一下,然后让AI把真人视频弄成动画版本。当然这个过程说起来容易,做起来复杂。

他们使用的工具是我们之前介绍过的Stable Diffusion,关键词给到AI,根据你添加的模板,它能帮忙生成各种风格的画面。

而想做视频首先要解决的问题,就是画面的不稳定性。

因为每一帧的画面不同,AI生成的画面也会有明显差异。例如之前网友制作的「塞尔达风格侏罗纪公园」,作品已经相当流畅,但依然可以看出人物本身都在飞速变化,发型不断改变。

所以Corridor先尝试在几帧内固定了画面风格,以此来让画面大体稳定住,不要变动得太离谱。

但此时人物风格依然在不断转变,比如每张图中,角色的眼睛大小、画风都会更换,甚至有时候戴眼镜有时候不戴。

为了解决这个问题,就要用到一个固定的模型,统一画风,让AI别想太多。

于是他们用《吸血鬼猎人D》的画面对AI进行训练,使用的截图包括各种面部特写、肢体、身体等等:

这样一来,生成的画面都是以这部动画为基础,眼睛也就不会忽大忽小了。

同时还要解决一个问题,那就是脸部的细节依然不稳定,而处理这个问题的方法,就是同时训练一个演员自己的真人模型。需要演员穿上戏服,然后多角度疯狂拍照,给AI制作素材。

制作团队不仅要给AI锁定了动画的风格,同时也要锁定演员的样貌,大幅度减少生成的图片的随机性。

经过训练的AI也可以生成演员的图像,只不过手指头偶尔还是残缺的。

接着还需要继续训练,用演员的照片生成动画形象,不断迭代,最终才有了比较满意且稳定的动画形象。

在多重训练的加持下,动画的效果也就变得理想了一些,画面的统一性基本稳定下来了:

再用上视频特效技术减少闪烁,画面由此变得更加惊艳,人物的情绪饱满,动作连贯而且流畅:

再加一些漫画特效,你说这是某部动画里剪辑出来的片段都没问题。

接下来他们要给自己的动画设计故事情节与背景:「国王死了,两个王子要用石头剪刀布争夺王位」,这剧情听着都像是AI写的。

技术有了,故事脚本有了,接下来开始正式制作。例如开始配音,虽然没有画面,但几位老哥还是吼到声嘶力竭。

之后就是从网上搞一下服装,两个主演穿上就去拍戏了。

真人视频拍好就交给AI处理画面,同时加入各种细节对画面进行调整。

于是现实中的各种演出,就这样被AI一点点给动画化了。

把绿幕抠掉,人物素材就基本完成

接着还需要制作背景。于是他们直接用虚幻引擎中的素材,从素材中寻找镜头图片:

然后把图喂给AI,再生成一大堆的背景图。

接下来就是对视频的整合与进一步处理,包括镜头、衣服、光线的变化等等。

例如让背景平移,这样镜头看起来像是在旋转,动态感就有了:

人物与背景相结合,最后输出成动画:

在动画中,甚至一些微表情也能对照真人进行还原,眼角的跳动,嘴角的抽搐,真人怎么做,AI就怎么画:

石头剪刀布搞得像是放出了杀招一样,看着又尬又好玩:

这样的制作,已经完全脱离AI画图的感觉了。

这部动画在推出后目前已经有了超过200万的播放量,并引发了激烈讨论。

大多数人的观点再次认为,AI将引发新一轮的革命,要失业的感觉笼罩了不少网友。

但也有人指出,AI的成本并不比画师的工作量小。

首先,Corridor是一个极为专业的特效团队,每个人都能力出众。以前恶搞波士顿动力机器人反杀人类的视频就出自他们之手,当时很多人对此都真假难分。

所以与其说是AI生成得好,不如说他们本身就拍得好,花了两个月才有了动画的精彩演出,普通人想要这样操作还有点遥远。

同时画风也是锁死的,因为他们的动画是根据真人来制作的,所以画风也贴近写实,如果画风再夸张一点效果可能又会变得不理想。

最后争论的就是版权问题,不少画师还是很抵触自己的作品被喂给AI的。

但想要完全脱离画师制作动画也不现实,像是这次的制作就还是使用了《吸血鬼猎人D》的画面进行训练,想让AI完全自己绘制还是两个概念。

对此也有人指出,只要工具好用,动画公司会自己搞定版权,最后受伤的只有普通打工人。

话说回来,我还是对AI的成长充满期待。

生成一张图片,改变图片的风格,生成真人,又把真人变成动画,AI的玩法明显越来越多。过几天说不定语音都不用真人去录制,视频都不再用真人去拍摄。

按照这个进化趋势,以后把一部电视剧喂给AI,说不定也能轻松输出一部动画版本。一想到这里,这下不得不期待了。

(文中图片素材来源自网络)

","gnid":"9a3021508241ac7c0","img_data":[{"flag":2,"img":[{"desc":"","height":"494","title":"","url":"https://p0.ssl.img.360kuai.com/t013752f1341c5e4832.jpg","width":"1000"},{"desc":"","height":"720","title":"","url":"https://p0.ssl.img.360kuai.com/t016c823149ffd6ba58.jpg","width":"1000"},{"desc":"","height":"230","s_url":"https://p0.ssl.img.360kuai.com/t01f0fed6163c6d22ce_1.gif","title":"","url":"https://p0.ssl.img.360kuai.com/t01f0fed6163c6d22ce.gif","width":"408"},{"desc":"","height":"230","s_url":"https://p0.ssl.img.360kuai.com/t017bde99e1045a79e9_1.gif","title":"","url":"https://p0.ssl.img.360kuai.com/t017bde99e1045a79e9.gif","width":"408"},{"desc":"","height":"230","s_url":"https://p0.ssl.img.360kuai.com/t018ac6bb4d125b15ac_1.gif","title":"","url":"https://p0.ssl.img.360kuai.com/t018ac6bb4d125b15ac.gif","width":"408"},{"desc":"","height":"230","s_url":"https://p0.ssl.img.360kuai.com/t014996bd07d004d1e3_1.gif","title":"","url":"https://p0.ssl.img.360kuai.com/t014996bd07d004d1e3.gif","width":"408"},{"desc":"","height":"233","s_url":"https://p0.ssl.img.360kuai.com/t014ffa2b7ed8809ce4_1.gif","title":"","url":"https://p0.ssl.img.360kuai.com/t014ffa2b7ed8809ce4.gif","width":"300"},{"desc":"","height":"700","title":"","url":"https://p0.ssl.img.360kuai.com/t01e1eb31843f1126a3.jpg","width":"700"},{"desc":"","height":"230","s_url":"https://p0.ssl.img.360kuai.com/t019252c3b7f4fc1c8b_1.gif","title":"","url":"https://p0.ssl.img.360kuai.com/t019252c3b7f4fc1c8b.gif","width":"408"},{"desc":"","height":"200","s_url":"https://p0.ssl.img.360kuai.com/t0106a300dc57993533_1.gif","title":"","url":"https://p0.ssl.img.360kuai.com/t0106a300dc57993533.gif","width":"400"},{"desc":"","height":"284","s_url":"https://p0.ssl.img.360kuai.com/t01ff733619d30af2ab_1.gif","title":"","url":"https://p0.ssl.img.360kuai.com/t01ff733619d30af2ab.gif","width":"286"},{"desc":"","height":"494","title":"","url":"https://p0.ssl.img.360kuai.com/t0135b7cfa92e5d7d2e.jpg","width":"1000"},{"desc":"","height":"267","s_url":"https://p0.ssl.img.360kuai.com/t017d9ef470f74c51c1_1.gif","title":"","url":"https://p0.ssl.img.360kuai.com/t017d9ef470f74c51c1.gif","width":"268"},{"desc":"","height":"255","s_url":"https://p0.ssl.img.360kuai.com/t01de9187a44480197f_1.gif","title":"","url":"https://p0.ssl.img.360kuai.com/t01de9187a44480197f.gif","width":"266"},{"desc":"","height":"824","title":"","url":"https://p0.ssl.img.360kuai.com/t017aade3115b54e6d9.jpg","width":"1000"},{"desc":"","height":"508","title":"","url":"https://p0.ssl.img.360kuai.com/t01067843cd9f88f8e4.jpg","width":"1000"},{"desc":"","height":"243","s_url":"https://p0.ssl.img.360kuai.com/t01e360114bd66c8ad9_1.gif","title":"","url":"https://p0.ssl.img.360kuai.com/t01e360114bd66c8ad9.gif","width":"400"},{"desc":"","height":"230","s_url":"https://p0.ssl.img.360kuai.com/t017622ccbc1a98f262_1.gif","title":"","url":"https://p0.ssl.img.360kuai.com/t017622ccbc1a98f262.gif","width":"408"},{"desc":"","height":"230","s_url":"https://p0.ssl.img.360kuai.com/t01c45e246dbc3804ee_1.gif","title":"","url":"https://p0.ssl.img.360kuai.com/t01c45e246dbc3804ee.gif","width":"408"},{"desc":"","height":"364","title":"","url":"https://p0.ssl.img.360kuai.com/t010ca288218b89d22e.jpg","width":"1000"},{"desc":"","height":"654","title":"","url":"https://p0.ssl.img.360kuai.com/t01ca9b9a8b3d717b88.jpg","width":"1000"},{"desc":"","height":"230","s_url":"https://p0.ssl.img.360kuai.com/t0159aac082d16c606c_1.gif","title":"","url":"https://p0.ssl.img.360kuai.com/t0159aac082d16c606c.gif","width":"408"},{"desc":"","height":"230","s_url":"https://p0.ssl.img.360kuai.com/t01f2342c52c8839eb2_1.gif","title":"","url":"https://p0.ssl.img.360kuai.com/t01f2342c52c8839eb2.gif","width":"408"},{"desc":"","height":"552","title":"","url":"https://p0.ssl.img.360kuai.com/t018a544db3ad8464a1.jpg","width":"1000"},{"desc":"","height":"230","s_url":"https://p0.ssl.img.360kuai.com/t017f97778d072c0119_1.gif","title":"","url":"https://p0.ssl.img.360kuai.com/t017f97778d072c0119.gif","width":"408"},{"desc":"","height":"526","title":"","url":"https://p0.ssl.img.360kuai.com/t013c67ddb4de4c133a.jpg","width":"1000"},{"desc":"","height":"488","title":"","url":"https://p0.ssl.img.360kuai.com/t01e188b2564749b28f.jpg","width":"1000"},{"desc":"","height":"230","s_url":"https://p0.ssl.img.360kuai.com/t0110a346536cd10996_1.gif","title":"","url":"https://p0.ssl.img.360kuai.com/t0110a346536cd10996.gif","width":"408"},{"desc":"","height":"230","s_url":"https://p0.ssl.img.360kuai.com/t0172bba11f0061b232_1.gif","title":"","url":"https://p0.ssl.img.360kuai.com/t0172bba11f0061b232.gif","width":"408"},{"desc":"","height":"230","s_url":"https://p0.ssl.img.360kuai.com/t01357f10aab50de060_1.gif","title":"","url":"https://p0.ssl.img.360kuai.com/t01357f10aab50de060.gif","width":"408"},{"desc":"","height":"230","s_url":"https://p0.ssl.img.360kuai.com/t01812c6474ef78b5ee_1.gif","title":"","url":"https://p0.ssl.img.360kuai.com/t01812c6474ef78b5ee.gif","width":"408"},{"desc":"","height":"230","s_url":"https://p0.ssl.img.360kuai.com/t014da115420e3d2604_1.gif","title":"","url":"https://p0.ssl.img.360kuai.com/t014da115420e3d2604.gif","width":"408"},{"desc":"","height":"230","s_url":"https://p0.ssl.img.360kuai.com/t0175692ca4311383a5_1.gif","title":"","url":"https://p0.ssl.img.360kuai.com/t0175692ca4311383a5.gif","width":"408"},{"desc":"","height":"296","title":"","url":"https://p0.ssl.img.360kuai.com/t01ac70278939713973.jpg","width":"300"},{"desc":"","height":"230","s_url":"https://p0.ssl.img.360kuai.com/t011b29c0eca260cfe9_1.gif","title":"","url":"https://p0.ssl.img.360kuai.com/t011b29c0eca260cfe9.gif","width":"408"},{"desc":"","height":"230","s_url":"https://p0.ssl.img.360kuai.com/t01788a140fa3b26b85_1.gif","title":"","url":"https://p0.ssl.img.360kuai.com/t01788a140fa3b26b85.gif","width":"408"},{"desc":"","height":"540","title":"","url":"https://p0.ssl.img.360kuai.com/t018940e5e50d2d4f38.jpg","width":"1000"},{"desc":"","height":"492","title":"","url":"https://p0.ssl.img.360kuai.com/t01525dffd54883a391.jpg","width":"1000"},{"desc":"","height":"440","title":"","url":"https://p0.ssl.img.360kuai.com/t01aac442eb2f9fdf8a.jpg","width":"600"}]}],"original":0,"pat":"art_src_3,fts0,sts0","powerby":"hbase","pub_time":1678533540000,"pure":"","rawurl":"http://zm.news.so.com/e3b28de4dac8aa1c610272eb5934e3cd","redirect":0,"rptid":"252197b2f0bb6465","rss_ext":[],"s":"t","src":"狂丸科学","tag":[],"title":"特效大神用真人视频一键生成动画,动画师要失业了?

蔡石矩4541怎么自己制作视频.用什么软件?
那君仪17116326720 ______ PowerDirector(威力导演) V7.00.1268┊完整专业视频生成工具┊多国语言免费版 T&T ★谢绝转载★ 威力导演是一套制作CD、DVD电影作品的完全解决方案,可让使用者进行采集、编辑、选单制作、及烧录电影作品于DVD、VCD、SVCD及...

蔡石矩4541手机视频合成软件,就是把几个视频合成一个 ...
那君仪17116326720 ______ 手机上面合成视频的软件可以使用手机上面的美图秀秀来进行合成.操作方法:1、首先,打开手机,找到手机上面的美图秀秀,并点击进入2、进入到手机美图秀秀界面,选择上方的视频美化功能选项进入.3、然后再选择从手机里面选择要合成的视频添加进入,并选择开始制作.4、这样就可以将几个视频合成在一起了,然后可以选择下方的功能选项给视频添加文字或者音乐等.5、最后添加完成选择下方的对勾,制作完成,选择保存视频即可.

蔡石矩4541淘宝主图视频制作工具哪个好用? -
那君仪17116326720 ______ 淘宝主图视频制作软件都是要简单快速,最好能一个软件就搞定的,多了就很麻烦的 浪费时间的

蔡石矩4541做视频啥软件比较好?【简单实用】谁给推荐一个. -
那君仪17116326720 ______ 简单工具可以直接运行系统自带的Windows Movie Maker 路径:C:\Program Files\Movie Maker\moviemk.exe PowerDirector(威力导演) V7.00.1268┊完整专业视频生成工具┊多国语言特别版 威力导演是一套制作CD、DVD电影作品的完全解...

蔡石矩4541CRMVMixer(MV批量生成工具)v1.2.2.4官方版
那君仪17116326720 ______ CRMVMixer是一款MV视频批量制作工具,可以帮助用户批量对MV视频进行制作,可以添加视频素材,进行转场设置,字幕设置,片头显示,标题模板,内容植入等处理...

蔡石矩4541剪映怎么一键成片? -
那君仪17116326720 ______ 探索电脑版剪映的“一键成片”魔法剪映,这款深受用户喜爱的视频编辑工具,不仅提供了直观易用的界面,还隐藏着强大的“一键成片”功能.无论是想要快速套用模板,还是寻找输入文本即生成视频的神...

蔡石矩4541有没有可以自己制作视频的软件? -
那君仪17116326720 ______ 有,比如我现在用的这个在线制作的电子相册视频网站“印记工坊”不用下载软件,只要在里面选好版本,上传照片,添加音乐🎵就可以轻松制作好一款电子相册视频.

蔡石矩4541今天在电视上看到手机可以下一个软件可以制作电影特效视频,求推荐个软件 -
那君仪17116326720 ______ 1、手机版的视频编辑器软件推荐: 【乐秀视频编辑器】 一款不错的视频编辑软件,你可以在手机上轻松处理你的视频文件或者图片了.选择你的视频,添加你喜欢的效果、文字、语音以及一些有趣的素材,做出专属于你的视频文件,支持一键...

蔡石矩4541可以一键转换视频格式的软件有哪些
那君仪17116326720 ______ 可以试试这款工具:迅捷视频剪辑软件它使用起来比较简单并且支持数十种视频格式的导入.操作步骤:第一步:我们在电脑上打开该应用,选择【音视频转换功能】并导入我们的视频.如果需要转换格式的视频比较多,也不必一个一个导入进行转换哦,因为它支持批量转换的功能,所以我们直接将视频存放于一个文件夹上传就可以了.第二步:导入之后,在下方设置视频的存储位置,设置完成之后点击【立即转换】或【全部转换】,这样视频的格式就被转换为MP4啦.这种转换方法不会影响视频画质哦~

(编辑:自媒体)
关于我们 | 客户服务 | 服务条款 | 联系我们 | 免责声明 | 网站地图 @ 白云都 2024