什么是MMTryon
MMTryon是由中山大学和字节智创数字人团队提出的一个虚拟试穿框架,旨在通过输入多个服装图像及指定穿法的文本指令来生成高质量的组合试穿结果。该框架不仅支持单件衣物的换装,还能处理多件衣物的组合试穿,并且能够自动将人物从背景中分离出来进行虚拟试穿。
MMTryon相关链接
项目链接:https://zhangxj59.github.io/MMTryon.github.io/
论文链接:https://arxiv.org/pdf/2405.00448
MMTryon的主要功能特点包括:
多模态多参考控制:MMTryon引入了一种新颖的多模态和多参考注意力机制,结合了来自参考图像的服装信息和来自文本指令的着装风格信息。
一键叠穿:用户只需输入几件衣服的图片和相应的穿法文本指令,即可一键生成模特试穿效果。
高质量的组合试穿结果:在量化指标和人类评估上,MMTryon超越了其他 baseline 模型,提供了卓越的试穿效果。
广泛的应用场景:虚拟换装技术在特效以及电商领域有着广泛的应用,具有较高的商业潜质与价值。
MMTryon是一个先进的虚拟试穿框架,能够满足用户对高质量、多样化服装搭配的需求,并且在实际应用中表现出色。