AI爆火,图像及视频生产软件巨头Adobe上个月和英伟达联合推出了新工具“Firefly”(萤火虫)。据悉,Adobe Firefly是一套基于生成式AI模型的工具,可以通过文字提示来创建和转换音频、视频、插图和3D模型。如今,Adobe又宣布了一系列升级计划。该公司宣布,将很快将萤火虫引入其Creative Cloud视频和音频应用程序。新增功能将在2023年晚些时候加入Firefly的测试版程序。
Adobe表示,新增功能主要是为了帮助专业视频编辑减少他们的繁琐工作,比如提升色彩水平、插入占位图像、添加效果、自动推荐适合项目的B-roll辅助镜头(空镜头、幕后花絮或者和视频内容高度相关的联想内容)等等,编辑只需要通过文字提示告诉Firefly他们想要什么,然后让算法来完成剩下的事情。
【资料图】
目前,Firefly的功能已经覆盖了Adobe的生态系统,包括Premiere Pro、Illustrator、After Effects 和Photoshop等应用程序,不过要想体验这些功能,还需要等到测试版程序开放。
有了Firefly,能为视频工作者省去不少麻烦,只需输入指令,就能实现许多繁琐的效果。
从最基本的调色功能开始,只需输入“转为暖调”,以及“提亮面部”,即可一键完成校色。此外,还可以将目标字体或图形转为动态素材。
此外,Firefly还有“一键剪辑功能”。据悉,通过分析视频中的文本,Firefly可以自动选择视频中相匹配的其他画面,自动选择适当的时间轴位置,完成剪辑。在视频完成后,输入与视频相关的关键词(如明亮、冒险、欢快的音乐),Firefly还能为视频自动配乐。
Firefly还有剧本分析功能。只要输入剧本,Firefly就能自动添加特效字幕,甚至能把分镜画出来。
Adobe强调称,与图片版本相同的是,萤火虫的功能依然主打“创作者友好”,旨在减轻创作者的工作负担,而不是取代人去创作。
不过,需要注意的是,在保证了“版权安全”的前提下,Adobe可以使用的素材必然会较Midjourney或Stable Diffusion这类竞争对手要少得多。
在艺术创作者圈子里,AIGC是一个争议极大的话题。有些人认为它是一种可以利用的新工具,有些人则认为它是偷窃,并且会让自己的工作岌岌可危。
对于图片版权商而言,AIGC模型未经授权就使用自己数据库里的图片,是一种侵权行为。比如,全球最大的图库服务商之一Getty Images,现在正和AIGC独角兽、Stable Diffusion母公司Stability AI打官司,指控其引擎利用受版权保护的照片进行了不当的训练。
除了后期加工视频,文本转换成视频的生成式AI有望成为该领域下一个“大事件”。据“数字趋势”网站3月27日报道,仅过去7天就有5款此类AI视频生成器面世:朗韦公司的Gen-2,美易(Picsart)公司的Text2Video-Zero、Video-P2P、TemporalNet,以及中国阿里巴巴公司研发的Text-to-video。
但专家也指出,尽管文本生成视频AI有望应用于娱乐、艺术等诸多领域,但从技术到伦理道德等多方面都面临挑战。
美国麻省理工学院人工智能教授菲利普·伊索拉就表示,如果看到高分辨率的视频,人们很可能会相信它。还有专家指出,随着人工智能语音匹配的出现,以及逐渐拥有改变和创建几乎触手可及的逼真视频的能力,伪造公众人物和普通人的言行可能会造成不可估量的伤害,“潘多拉的魔盒已经打开”。
北京商报综合报道