
字
字节笔记本
2026年11月6日 · 约 2 分钟读完
清华给虚拟形象做头发:一张图生成发片直接进 VRM
API中转
¥120
虚拟形象最费工的部位是头发:一根根画发片、绑骨骼、调物理,美术的工作量占了角色制作的大头。清华、CMU 与香港中文大学团队的 HairDeck(838 星、Apache 2.0,arXiv 2610.40599)把这条流水线自动化了:给一张图,生成风格化发片(hair cards)与驱动它们的弹簧骨骼链,导出 GLB 网格,或者挂到虚拟形象上直接导出 VRM。

方法上是「发片即 token」:卡片 VAE 编码加条件集合扩散,一次生成整套发型;输出保留每张发片与逐片 UV 坐标,颜色模型沿每张发片预测颜色(支持双色发与配饰)。驱动侧用链式扩散模型生成弹簧骨骼,带蒙皮与 VRM 导出。迭代也勤:11 月 5 日更新彩色发片(双色发与配饰颜色随 GLB/VRM 导出)、11 月 3 日加入 Apple silicon 支持(走 MPS,不用 CUDA)、11 月 2 日加入 Windows 支持。
门槛与依赖照例要交代:Linux 与原生 Windows 需要 NVIDIA CUDA 卡、Python 3.12、PyTorch 2.8、CUDA 12.8;Mac 走 MPS;权重在 Hugging Face(hyz317/HairDeck),但 SAM 3 与 DINOv3 需要先接受许可并登录,在线演示在 HF Spaces。
和本批第一篇 Idol 对照着看正好是一对:Idol 是「一张图变 3D 物体」(静态、高斯泼溅),HairDeck 是「一张图变虚拟形象的头发」(发片、带骨骼、能动)。做 VTuber、游戏角色、虚拟主播的团队,头发的美术瓶颈现在有了开源解法;它只做头发,脸和身体还得靠别的工具。
相关文章
分享:


