Adobe新AI技术提升影片画质八倍,低清视频变高清

2024-04-26 14:11

Adobe最近推出的大部份新功能和实验都涉及人工智能(AI),例如Premiere Pro的“新增和删除物件”和Photoshop基于文字的图像生成。科技新闻网站The Verge报道,Adobe最新推出实验性AI功能VideoGigaGAN,号称可以将影片品质提高八倍,不会出现闪烁或变形等常见伪影问题。

Adobe新AI技术

Adobe实验性AI功能VideoGigaGAN,可提高影片画质八倍。Adobe

根据另一科技新闻网站Engadget报道,Adobe号称VideoGigaGAN击败其他其他超解析度影片成像技术(VSR),因为它避免了由生成式对抗网路(GAN)带来的常见伪影和闪烁情况,但同时增加了清晰度和细节,这是大多数其他系统无法同时完成的事。

当然,这套系统会建构弥补并不存在的细节,所以并不适合法证影片增强。但它所加入的细节看起来非常真实,例如皮肤纹路、细毛和天鹅羽毛等等。

Adobe研究人员透露,这款模型建立于一个大型图像放大器GigaGAN之上。过去VSR模型在生成结果中难以产生丰富的细节,因此Adobe结合了“时间注意力”(temporal attention,减少随时间累积的伪影)、“特征传播”(feature propagation,在不存在的部份添加细节)、“抗锯齿”(anti-aliasing)和“高频穿梭”(HF shuttle)来建立最后结果。

如果将这项功能加入像Premiere Pro或After Effects等产品,就可以容许影片制作人使低解析度的影片看起来较好,但过度使用AI美化人们一直都是具争议的操作。

虽然Adobe尚未交代是否这样做(目前剪片很短,仅以12fps播放),但NVIDIA、微软和Blackmagic Design等多家公司已在着手开发AI升级技术。


相关阅读
热门文章