视频工作者的福音来了!Adobe 将生成式 AI“萤火虫” 引入视频工具
一键调色、一键配乐、一键生成分镜……还不用担心版权问题!
Adobe 又出新招了!
上个月,Adobe 刚刚宣布进军生成式 AI,和英伟达联合推出了新工具 “Firefly” (萤火虫) 。
在发布之时,Adobe 方面就表示未来还会将萤火虫引入视频剪辑工具中。
说时迟那时快,4 月 17 日,Adobe 就宣布,将很快将萤火虫引入其 Creative Cloud 视频和音频应用程序。距离首次发布还不到一个月。
虽然萤火虫工具是基于浏览器的,但 Adobe 表示它们旨在将其集成到现有的服务和软件中,其中包括 Photoshop、After Effects 和 Substance 3D Collection:
一切都是从头开始设计的,可以嵌入到……Adobe Creative Cloud、Document Cloud、Experience Cloud 和 Adobe Express。
一键调色
根据 Adobe 的演示,我们可以看到,萤火虫不仅可以使用户更轻松地编辑视频,还可以根据用户的指令生成素材、添加音乐和声音效果。
也就是说,用户只需要动动手指,通过简单地用几句话描述视频应该是什么样子,AI 就能自动帮你完工(剪辑师的头发可能有救了)。
首先,最基本的颜色校正功能,不在话下——
输入【转为金秋时节】,以及【提亮面部】,即可一键完成校色。
再者,打字生成动态文本和动态图形。
只需要输入目标素材文字,提出需求(如 “3D 金属液化”),萤火虫就能自动帮你转为平常可能耗费几个小时才能做成的动态素材:
一键剪辑
进阶版功能:自动剪辑——
通过分析视频中的文本,萤火虫可以自动选择视频中相匹配的其他画面,自动选择适当的时间轴位置,完成剪辑。
当然,这一功能的限制在于只能选择同一视频中的画面,而不能选取来自其他视频中的空镜素材。
不过这有可能在未来的版本中进行更新,因为在音频方面,萤火虫已经做到了这一点。
一键配乐
根据 Adobe 的宣传,只要输入与画面有关的关键词(如明亮、冒险、欢快的音乐),萤火虫就能自动搜索匹配需要的音乐。
此外,还能根据画面匹配相应的音效(如海浪声)。
关于这一功能,Adobe 官方骄傲地宣布,这些使用到的音频【完全原创的作品,已经符合商业使用的安全标准】。
这意味着,使用这些音乐,用户不会面临任何侵权的指控(感觉好像在阴阳某些竞争对手……)。
一键分析剧本 生成分镜
最后,也是最重磅的,剧本分析功能。
只要输入剧本,萤火虫就能自动添加特效字幕……
甚至能把分镜都画了出来,导演也解放了。
与图片版本相同的是,“萤火虫” 的功能依然主打 “创作者友好”——旨在减轻创作者的工作负担,而不是取代人去创作,还颇为贴心地解决了素材版权的问题。
正如华尔街见闻此前提及,在艺术创作者圈子里,AIGC 是一个争议极大的话题。
有些人认为它是一种可以利用的新工具,有些人则认为它是偷窃,并且会让自己的工作岌岌可危。
对于图片版权商而言,AIGC 模型未经授权就使用自己数据库里的图片,是一种侵权行为。
比如,全球最大的图库服务商之一 Getty Images,现在正和 AIGC 独角兽、Stable Diffusion 母公司 Stability AI 打官司,指控其引擎利用受版权保护的照片进行了不当的训练。
也正因如此,或许同样饱受侵权困扰的 Adobe 才推出了这样的一个工具,“誓要” 维护素材版权。
不过,可想而知的是,在保证了 “版权安全” 的前提下,Adobe 可以使用的素材必然会较 Midjourney 或 Stable Diffusion 这类竞争对手要少得多。
但除去素材方面的局限性,萤火虫在剪辑上展现的功能仍然相当强大,值得期待一波。
目前 Adobe 官方尚未公布萤火虫具体的开放时期,只是笼统地表示会在 “今年下半年”。
可以预见,当萤火虫正式开放使用后,短视频平台上的相当一部分内容,或许就是萤火虫剪辑完成的了。