LibTV悄悄开源破亿AI短片画布,我决定公开拆解这些1人剧组工作流
LibTV悄悄开源破亿AI短片画布,我决定公开拆解这些1人剧组工作流
来不及解释了,今天我们来拆解破亿播放的AI视频工作流!
这几天看AI视频圈的数据,我有点坐不住了都。现在全国短剧用户给干到了8.51亿,红果日活1.68 亿,一个 App 直接把爱优腾芒四大长视频平台加起来都给超了。这半年,某音上就冒出来 22 万部AI剧。国庆那阵子爆火的一句贵是贵了点但吃了不烧心就出自于AI短剧。
还有几个超牛的创作者,数据简直可怕(说不羡慕是假的。。。。)
90后王琨喆发了一条叫《过来人》的AI说唱 MV。他把杜甫、苏轼、刘邦十个古人塞进了一间光线昏暗的小酒馆,让他们围着麦克风,像老朋友喝大了一样唱自己的租房困境、职场贬谪、人生的那些难堪与窘迫。
全网播放,直接破亿。。。
还有DiDi_OK花了23天手搓了一部AI短片《牌子》,拿走某站创作大赛100万。
甚至十万个挑战这个AI综艺,我估计刷视频的都看过,我本身野兽先生的视频基本是期期都看得,这个更是plus pro max版,冰原求生,恐龙料理,星座选秀,以前得拉一整个剧组投入七八位数干的事,一个人一台电脑就能手搓,月入能有50万。。。
包括前阵子全网点赞100 万+的山东小伙恋爱韩剧首尔今天有点鲁,两集播放破亿的中式志怪剧非妖哉,还有X上很火的《中式天庭》,丧尸剧《末日山宿》,都是用LibTV做出来的,老朋友了。
🔗 liblib.tv
LibTV是直接把一些神作的完整工程画布给公开了!
这意味着,那些破亿创作者们到底用了什么提示词、怎么串联分镜、怎么保持角色一致性,全像一张巨大的建筑设计图一样摊在了这张无边画布上。
熟悉我的朋友知道,我一直很反感把某个工具捧那么高。但LibTV我们内部高频用了这么久,它解决的最重要的问题,就是把四分五裂的抽卡碎片,拼成了一条完整工作流。
前段时间我们正好刚给大家测完最新的LibTV 1.5版本的所有功能,
实测LibTV1.5五大新功能,我把1个完整剧组搬进了AI短剧工作流
它本身就拥有完成一部片子全流程创作的能力。
从最开始帮你写剧本拆镜头的TV Director,到像游戏一样专门给主角捏脸定妆、加刀疤加泪痣锁定人设的角色造型室,再到不用懂建模就能文字搭建3D场景和拿鼠标手绘画线就能控制运镜的导演台,还有为了避免面部被迁移能把实拍动作单独摘出来的深度动作捕捉,以及Seedance 2.5配套的逐帧拉片、智能引用和哪里崩了改哪里的片段重拍,全都在一张画布里打通了。
虽然不能直接在别人的画布上跑自己的作品,但把人家的分镜结构、写词思路和流程逻辑摸透之后,自己再动手去开一个新项目,效率完全是天上地下。
今天我就吸取《非妖哉》公开画布里的分镜和光影思路,结合《美妖姐姐》的反差喜剧人设,新建一个属于我们自己的工程画布,手把手再和大家一起跑一套完整的短片实测。
在 LibTV 里新建空白画布后,我自然是不想从0开始想分镜。我借鉴了《非妖哉》画布中那种先定氛围、再切景别的逻辑,直接唤醒了画布里的 TV Director。这里面有三种模式,剧本创编、导演执导、全能创作。
根据我这段时间摸索出来的经验,当你手里只有个模糊脑洞时,就用剧本创编,它会专心帮你扩写剧情和台词, 故事已经有了但不知道镜头怎么设计或者单个分镜如何优化时就用导演执导,它主要去拆解景别和运镜,至于想彻底省事的从剧本到分镜全交给它的,直接选全能创作就完事。
这次我是有了一个大概的剧情想法但没有完整剧本,所以我用的全能创作并写了一段大白话给它,
参考最近很火的《非妖哉》的中式古风志怪画风,结合《美妖姐姐麾下全是呆瓜》的人物反差,帮我做一段 30到45秒的AI短剧,剧情是在破庙里,一个绝美冷艳的狐妖姐姐正坐着闭目养神,结果镜头一转,她手底下那三个小妖精正蹲在旁边流口水抢烤红薯,一个个长得贼喜感。这时候外面突然冲进来一个道士要除妖,狐妖姐姐眼神一变,霸气护短单手施法,后排那三个小妖不仅不害怕,还在那整齐划一地递爆米花加油。
然后,TV Director知道要做的是多镜头连续叙事,所以第一反应是先去自动联网搜索《非妖哉》的中式志怪画风参考,把电影级的色彩和质感规范先加载进来。
然后反问了我三个问题,确认剧情骨架,小妖怪长什么样以及视频投放平台及适合的画幅,还推荐了适合的视频模型还有生成方式。
接着TV Director会根据我们给到的这个大概剧情做出一个总规划,以及每个分镜的撰写。
确认没有问题之后,就会直接给我们分批量产出目前这段剧情会用到的所有角色图、场景图以及道具图。这里每一张图片都是能够直接看到提示语的,可以自己进行手动修改,或者是直接和TV Director对话进行修改。
OK,怎么保证视频里的狐妖姐姐的角色一致性更强,脸部不产生偏移呢?
可以把画布中的资产用角色造型室再单独生成一个角色卡,生成出来的角色既能够保持生图模型原有图片的角色特征,我们还可以进行一些手动捏脸。比如这里我给它增加了眼影,又加了一颗泪痣。如果大家喜欢捏脸的话,这里还可以直接调整五官的大小、位置,以及脸型之类的。
再次感叹这功能完全做成了大型3D游戏的捏脸系统。。。。
最后做出来的角色卡,既能够包含角色的各个角度,面部特色以及全身镜头,还会有角色的各种表情,甚至还能关联角色银色,这样一个角色的构建就非常全面了。
接着再叫TV Director把这个角色应用到之后的分镜节点里,后面不管镜头怎么切,主角的五官细节在画面里都会保持一致,告别换脸翻车。
然后到了最核心的生成环节,直接让TV Director批量生成分镜视频就完事了。
这里主力模型我选的是Seedance 2.5,毕竟连贯性最稳,后面还能无缝接局部修片功能。
不过顺带提一句,如果大家平时自己做视频很看重性价比,或者每天有大批量的短剧镜头要做,其实也可以在模型列表里试试Wan 3.0。
我随手拿狐妖姐姐那个面部镜头用 Wan 3.0 单独跑了一版对比,
两者的成片质感差距真不大。Wan 3.0 出来的环境氛围、狐裘毛发质感、眼神里的冷淡微表情,还有古风志怪的暗部光影都非常扎实,但算力消耗上要友好很多了。
回到我们这次的片子上,
在跑第一镜的时候,我遇到了一个很刁钻的需求,镜头要先死死盯着狐妖姐姐冷酷霸气的脸,紧接着迅速向右大横摇,猛地刹车拍到旁边三个正蹲在地上流口水抢烤红薯的呆瓜小妖。
这种带着喜剧节奏感的急刹车横摇运镜,文字提示词往往很难精准描述出来,第一遍生成出来的效果是这样的。
看着其实还行,但是镜头没有大横摇,然后也没有急刹车,就导致画面的喜剧效果没那么足。
这时候就轮到到3D-BOX功能了。
说实话我是真不懂如何传统的去做三维建模,但在3D-BOX里我可以上传图片生成一个相应3D场景以及一条向右急转的横摇运镜轨迹,
它立刻生成了一段 3D 剧情预演,
拿着这个3D 轨迹预演喂给模型,跑出来的镜头机位确实更是我想要的那种感觉了。
还有一点就是在制作过程中,可能某一个镜头只有中间两秒出现了失误,放在以前,哪怕只有这 1 秒出戏,整条镜头就得废掉,你得重新花积分花时间再抽一次卡。
而我们之所以前面选 Seedance 2.5 作为主力,就是为了用上它的片段重拍,可以直接修改其中的几秒,而其他画面保持不变。
点击片段重拍,找到想要修改的时间轴,然后把指令改成小妖把红薯塞进嘴里,两只手在头顶搞笑比心。
生成出来的是这样的,确实感觉更逗了,也真正做到哪里不满意改哪里,非必要绝不整条返工。
除此之外,我们还可以利用深度动作捕捉,把想要角色做的动作做成深度视频,然后引用这个视频和小妖做这个动作的角色,
就能做出一条闪身步浪子回头摇头晃脑狗熊哆嗦毛的鬼畜花絮,而且面部不会被原视频影响,这效果别太搞笑了。。。
话又说回来,刚刚改完就能拿到我们的最终成片了。整体完成度很高,我都迫不及待想做下一集了。
从参考爆款画布的学习路径,到在自己的新画布里用TV Director编剧、角色造型室捏脸、3D-BOX 手绘运镜,再到用Wan直出与局部重拍,这一整套流程跑下来你会发现,拍一部 AI 短片已经彻底变成了一件可控可拆解的事。
角色一致性、复杂运镜调度和局部翻工这三座大山,全被平推了。
顺带提一嘴,这两天正好赶上双 11,
超多模型(包括刚才用的 Wan3.0、Kling4.0、H3)搞了一个月0积分无限畅用的活动,平时舍不得多跑几版的镜头可以趁机去薅一波。
那现在留给我们的, 有且只有一件事了,
去把你脑子里想了很久的故事,
全都拍出来吧!
@ 作者 / 卡尔
最后,感谢你看到这里👏如果喜欢这篇文章,不妨顺手给我们点赞|在看|转发|评论 📣
如果想第一时间收到推送,不妨给个星标🌟
如果你有更有趣的玩法,欢迎聊聊🤝
更多的内容正在不断填坑中……
来源:卡尔的AI沃茨 · mp.weixin.qq.com