Adobe推出Firefly AI视频模型的概况

一、基本情况

Adobe于2024年10月15日开始公开发布其Firefly AI视频模型，该模型能够根据文本提示生成视频内容，将与OpenAI今年早些时候推出的Sora模型展开直接竞争，同时TikTok的所有者字节跳动以及MetaPlatforms近几个月也发布了各自的视频工具，这是在众多公司纷纷涉足视频生成领域背景下Adobe的新动作。

二、Firefly AI视频模型的特点

• 基于授权内容训练
  • Firefly视频模型仅使用经过授权的内容进行训练，这使得用户在商业使用时会更加放心。确保输出结果可合法用于商业作品是Adobe面对强劲竞争对手（如OpenAI和Meta等）时，寻求差异化的战略选择。
• 创作功能多样
  • 创建与修改视频：用户可以通过文本提示创建视频或修改现有的视频内容，为创作者们提供了全新的创作空间。例如，通过Adobe PremierePro Extend功能，用户甚至可以在现有视频的基础上增加2秒钟的素材，支持720p和1080p的24帧每秒的视频格式；使用Firefly模型，用户可以根据文本和图像输入生成5秒钟的全新720p视频剪辑2。
  • 详细描述拍摄参数：用户能详细描述拍摄参数，如镜头设置、光线、颜色和氛围等，越具体的描述，生成效果越好。这些细节包括镜头类型、角色、动作、地点以及所需的美学元素。Adobe还提供了一些视频提示来帮助用户更好地利用这些功能，比如要清晰描述场景、动作和灯光效果，确保没有模糊之处。

四、Firefly与Adobe其他产品的关联

• Firefly第一个测试版本于2023年3月发布，当时主要用于文本生成图像。自发布以来，已经生成了超过130亿张图片。在推出的一年内，Firefly被带入了Photoshop、Express、Illustrator、Substance 3D等工具。

五、Adobe的整体AI战略体现

• 以创作者为中心：Adobe强调其以创作者为中心的AI使用方式，承诺只在授权内容上训练模型，并且不使用用户数据。为了增加透明度，Adobe还为AI生成内容提供了内容凭证，帮助用户了解创作的来源和过程。在Photoshop中也推出了一系列新的AI功能，体现了对创作者工作的尊重和支持