跳到正文
黑箱之外· 来源· @BeyondTheBoxCN · X·· 2 天前精选AI 评分82
推荐理由

HairDeck 实现了从单张二次元图片到可编辑骨骼动画头发的自动化,有望大幅缩短游戏角色制作流程。

正文

一张二次元角色图片,AI 现在连会甩动的 3D 头发都能自动做出来了!

而且头发的骨骼、蒙皮也一起生成。角色转头、晃动时,发梢可以跟着摆动。

清华大学、CMU 和香港中文大学的研究团队刚刚开源了 HairDeck。我觉得这个项目很有意思,因为它解决了 AI 生成 3D 角色时一个挺麻烦的问题。

游戏和虚拟角色的头发,通常是由一片片薄薄的 3D 发片组成的。制作时需要调整每片头发的形状、位置、方向,还要制作 UV、绑定骨骼,才能让头发自然运动。

很多图生 3D 工具可以生成外观不错的头发,但输出的往往是一整块网格。想继续编辑发片、绑定骨骼、制作动画,就没那么容易了。

HairDeck 的处理方式很特别:

它把每片头发当成一个独立单元,利用扩散 Transformer 一次生成整套发片,再通过另一个模型生成控制头发运动的弹簧骨骼链,并完成蒙皮绑定。

最终得到的是真正可以继续编辑和制作动画的 3D 头发:

• 每片发片都有独立几何结构和 UV 坐标
• 自动生成头发运动所需的骨骼链
• 支持导出 GLB 模型
• 可以附加到现有虚拟角色,导出 VRM 格式
• 支持多种二次元发型,并能生成不同版本
性能也不错。研究团队在 CHARM 测试集上测得,相比此前的 CHARM 方法,生成速度快了 33 倍,几何误差降低了 44%。
我觉得 AI 角色生成接下来很值得关注的,就是这类技术。
现在让 AI 生成一个好看的 3D 人物已经越来越容易,但游戏开发者需要的是能够修改、绑定、制作动画,并融入现有工作流程的模型。
如果头发、衣服、骨骼这些最费人工的环节都能逐步自动化,未来从一张角色设计图到可用的游戏角色,制作流程可能会大幅缩短。

HairDeck 目前还不能自动生成完整的头发纹理,不过发片结构和动画骨骼已经能够自动制作。

项目开源,代码和模型权重都已发布。

https://x.com/top3dai/status/2116394288439296480/video/1

来源:黑箱之外 · x.com