阿里智能计算研究院
阿里智能计算研究院是阿里巴巴集团下属的一个研究机构,专注于人工智能和智能计算领域的研究。该研究院与中国科学技术大学合作,成立了“中国科大-阿里巴巴智能计算联合实验室”,旨在围绕国家战略方向开展人工智能、智能计算等领域的基础性、前瞻性和关键共性技术研究。研究院的研究成果包括但不限于AI角色动画项目Motionshop、生成式AI模型EMO(Emote Portrait Alive)以及角色动画技术“Animate Anyone”等。
Motionshop是一个能够将视频中的人物角色替换为3D化身的AI角色动画框架,用户上传视频后,AI能智能识别视频中的主要人物,并将其无缝转换为生动的3D化身2。EMO则是一款音频驱动的表情视频生成框架,能够根据单张图片和音频生成自然表情和动作的视频。Animate Anyone技术则是将静态图像中的角色或人物进行动态化的开源框架,该框架基于扩散模型,引入了ReferenceNet、Pose Guider姿态引导器和时序生成模块等技术。AtomoVideo是一个由高保真图像到视频生成框架,其核心技术是多粒度图像注入技术,这使得生成的视频对给定的图像具有更高的保真度。
此外,阿里巴巴智能计算研究院还推出了基于扩散的多语言视觉文本生成和编辑模型AnyText,专注于在图像中渲染准确和连贯的文本。这些研究成果展示了阿里智能计算研究院在人工智能和智能计算领域的创新能力和技术实力。