什么是PMG AI
PMG(Personalized Multimodal Generation)AI是由华为与清华大学联合开发的一项个性化多模态生成技术。该技术利用用户的历史行为和偏好,生成符合用户个性化需求的多模态内容,如表情包、T恤设计图、电影海报等。PMG技术通过关键词生成和隐向量生成提取用户偏好,实现多模态内容的生成。
此外,PMG不仅限于即时通信软件,还可以广泛应用于电商、在线广告、游戏、创作辅助等领域,生成个性化背景、人体形态、颜色、表情、角色等内容。
PMG功能特点
关键词生成:构造提示词指导大模型提取用户偏好为关键词。
隐向量生成:结合用户偏好关键词和目标项关键词,使用P-Tuning V2微调的偏差校正大模型,学习多模态生成能力。
用户偏好和目标项的平衡:通过计算个性化水平和准确度,量化衡量生成效果,并优化生成内容。
项目地址:https://github.com/mindspore-lab/models/tree/master/research/huawei-noah/PMG