Adobe即将推出的基于生成式AI的文本转视频工具

Adobe即将推出的基于生成式AI的文本转视频工具
2024年09月12日 06:05 AI云科技汇

(爱云资讯消息)Adobe预先展示了一些即将推出的生成式AI视频工具,其中包括一个新功能,可以从静止图像中生成视频片段。这一最新预览是在软件巨头在4月份展示的正在开发的Firefly视频模型的基础上构建的,该模型将为Adobe Creative Cloud应用程序中的AI视频和音频编辑功能提供算力。

新的宣传预告展示了Firefly的文本到视频功能生成的视频片段,这是Adobe公司今年早些时候宣布的功能。该工具允许用户使用文本描述生成视频片段,并使用各种摄像机控制选项来模拟不同的摄像角度、运动和拍摄距离,以调整生成的视频片段。Firefly视频模型还展示了从特定参考图像生成视频片段的功能。Adobe公司表示,这一功能可能对制作额外的B-roll镜头或填补生产时间表中的空缺有所帮助。

如果根据示例视频来判断最终发布的效果,那么生成的视频质量与我们目前从OpenAI的Sora模型中看到的质量相当,Adobe也在将其作为Premiere Pro视频软件的第三方集成进行探索。不过,Adobe的生成式AI副总裁Alexandru Costin告诉外媒,由文本转视频和图像转视频功能生成的视频最长只有5秒。

Adobe自己的模型可能在与Sora的竞争中有一个优势,那就是Firefly由于是在公开许可、公共领域和Adobe Stock内容上进行训练的,因此被承诺是商业安全的,这可能有助于减少一些关于版权问题的困扰。

文字转视频和图像转视频功能将在今年晚些时候以独立Firefly应用程序的形式推出测试版。Adobe表示,新的Firefly视频模型最终将整合到其Creative Cloud、Experience Cloud和Adobe Express应用程序中。

Adobe还展示了一些即将推出的Premiere Pro生成扩展功能的额外片段,该功能可以像Photoshop的Generative Expand工具扩展图像背景一样扩展现有视频片段。Adobe表示,该功能也将在今年晚些时候的某个时候发布。

财经自媒体联盟更多自媒体作者

新浪首页 语音播报 相关新闻 返回顶部