AniPortrait简介
AniPortrait是一款音频驱动的肖像动画合成框架,旨在根据音频和静态人脸图片生成逼真的动态视频。该产品的主要特点包括高度逼真的动画效果、音频驱动的动画合成、面部再现、头部姿势控制等。用户可以通过提供一个音频文件和一张参考的肖像图片,让AniPortrait根据音频中的语音和声音的节奏来动态地生成说话或表情变化的肖像动画。
此外,AniPortrait还支持自驱动和音频驱动的视频生成,能够生成高质量的动画,并提供灵活的模型和权重配置。AniPortrait的功能强大且具有高度灵活性,它能够基于音频和一张参考人脸照片生成高品质的动画,为用户带来丰富的观感体验。
该项目已经开源,意味着用户可以直接使用而不需要额外的成本。
AniPortrait官网:https://github.com/Zejun-Yang/AniPortrait
试玩地址:huggingface.co/spaces/ZJYang/AniPortrait_official
论文地址:arxiv.org/abs/2403.17694