旗下微信矩阵:

Sora进驻Adobe视频编辑软件,新版Premiere Pro开启AI剪辑时代

为了训练自己的AI视频模型,Adobe正在从摄影师和艺术家手里购买视频片段。
2024-04-17 11:01 · 微信公众号:量子位 梦晨 克雷西

Sora要被集成在Adobe视频剪辑软件里了。

在最新发布的Premier Pro概念演示里,Adobe展示了与OpenAI合作的探索成果:

在主镜头之外,完全由Sora生成一段B-roll辅助镜头。

除了Sora之外,其他流行AI视频工具RunwayPika也将作为可选项。

其中Runway在演示中与Sora用法类似,可以生成一段全新的辅助镜头。

Pika则可以做到将现有镜头自然延伸数秒。

需要强调的是,这些功能还处于早期预览和研究阶段,尚未透露何时发布。

与之相比,由Adobe自己的AI产品Firefly支持的功能确定性更强一些。

专业剪辑师无需离开Premiere Pro,就能轻松在视频中添加和删除物体,以及在时间轴上扩展素材

今年之内,视频剪辑工作流将正式进入AI时代。

演示拆解

Adobe这次的宣传片,主要展示了三大“功能”。

首先是向视频的局部添加对象,加入新的物体。

视频画面中,男人缓步走向女人,随后女人转身打开了一个放在汽车后备箱上的手提箱。

定睛细看,箱子里装着的是一些零散的钻石。

只要点击“添加物体”按钮,然后选择目标区域,输入提示词,原本只有少数的钻石,数量便增多了,填满了整个箱子。

并且后续画面也都发生了相应的改变,随着镜头的轻微移动,钻石也随之自然变化,完全看不出有破绽。

除了这样的“加法”,“减法”操作——删除视频中的已有物体——Premier也会做。

在智能魔法棒的加持之下,只需一点就能自动识别出整个物体,而不像是普通的魔法棒只能选择颜色相近的区域。

识别完成后,也只需一键就能完成物体的消除,相应区域的背景也会自动补全。

墙上的展板、地上的物体,都能一键去除,看不出有东西曾经存在的痕迹。

在一“加”一“减”之间,物体的替换也随之实现。

视频里的男人换上了一块新的手表,能够跟随手腕移动,视频里的其他部分则没有受到影响。

能够一键实现这些效果,确实十分强大,不过这种瞄准局部细节的操作,但更厉害的,还有视频扩展

当你发现时间线中还有所空缺,又不知道该放些什么素材时,Premiere可以直接生成内容来填补这块空白,只需一点一拖即可完成。

效果上看,可以说是无缝衔接。

最关键之处在于,所有AI生成结果对原始素材都不是破坏性的

随时可以回滚到初始版本,或在不同AI模型结果直接切换。

此外Adobe还提供了“内容凭证”功能,所有由Premiere Pro制作的视频都将清楚地表明是否使用了、以及使用了哪种AI技术。

以上种种功能尚未确定发布日期,除了将在今年内发布之外,没有透露更多信息。

另外,Adobe创意专业应用产品营销副总裁Deepa Subramaniam表示,Adobe尚未解决使用第三方AI工具所产生的收入将如何在Adobe和合作伙伴之间分配的问题。

为了训练自己的AI视频模型,Adobe正在从摄影师和艺术家手里购买视频片段。

包括表现人们日常活动、以及表达各种情绪的短片,每分钟支付2.62-7.25美元

通过这种方式,Adobe Firefly将确保AI生成内容是可安全商用的。

参考链接:

[1]https://www.youtube.com/watch?v=6de4akFiNYM

[2]https://blog.adobe.com/en/publish/2024/04/15/bringing-gen-ai-to-video-editing-workflows-adobe-premiere-pro

【本文由投资界合作伙伴微信公众号:量子位授权发布,本平台仅提供信息存储服务。】如有任何疑问,请联系(editor@zero2ipo.com.cn)投资界处理。