什么是ClotheDreamer
ClotheDreamer是一种基于3D高斯方法的工具,用于从文本提示生成可穿戴、可立即投入生产的3D服装资产。该技术由上海大学、上海交通大学、复旦大学和腾讯优图实验室共同推出。
ClotheDreamer相关链接
项目链接:https://ggxxii.github.io/clothedreamer/
论文阅读:https://arxiv.org/pdf/2406.16815
代码地址:https://github.com/ggxxii/clothedreamer(即将开源)
ClotheDreamer功能特点介绍
文本引导生成:ClotheDreamer能够通过文本提示生成高保真度的3D服装,适用于数字化身创建。用户只需提供描述性的文本,系统便能自动生成相应的3D服装模型。
解缠结高斯分布(DCGS):采用了一种新颖的表示方法,即解缠结高斯分布(Disentangled Clothe Gaussian Splatting, DCGS),使得服装和人体模型可以分别进行优化。DCGS将穿着衣服的化身表示为一个高斯模型,但冻结了身体高斯斑点,从而实现单独的优化。
支持物理上精确的动画模拟:生成的3D服装不仅外观逼真,还能支持物理上精确的动画模拟,这对于虚拟试穿等应用场景非常重要。
多样化和个性化:ClotheDreamer支持自定义服装模板,能够实现多样化的、个性化的3D服装生成。生成的服装可以适应不同身材,并支持自动调整以确保最佳贴合度。
高保真度和重用性:该技术生成的3D服装具有高保真度,并且易于重用。这在数字化人物创建中是一个重要的优势,因为它既满足了高质量的要求,又提高了资源的利用率。
ClotheDreamer通过其先进的3D高斯方法和DCGS表示法,为用户提供了一个强大且灵活的工具,用于生成高质量、可定制的3D服装资产。