Project Res-Up 可以大幅提高分辨率,并添加高光和皮肤皱褶等自然的细节,为旧视频和 GIF 注入新的活力。
Adobe 开发了一款实验性的人工智能升频工具,可以大大提高低分辨率 GIF 和视频片段的质量。这还不是一个成熟的应用程序或功能,也还不能进行 beta 测试,但如果 The Verge 看到的演示是可信的,那么它就有很大的潜力。
Adobe 的 “Project Res-Up” 使用基于扩散的上采样技术(一种生成式人工智能,可根据训练数据生成新数据)来提高视频分辨率,同时改善清晰度和细节。
Adobe 通过并排对比的方式展示了该工具如何提升视频分辨率,Adobe 从《红房子》(1947 年)中选取了一个片段,将其从 480 x 360 提升到 1280 x 960,像素总数增加了 675%。结果画面更加清晰,人工智能消除了大部分模糊,甚至增加了新的细节,如头发丝和高光。结果仍然略显不自然(许多人工智能视频和图像都是如此),但考虑到初始视频质量较低,与 Nvidia 的 TV Shield 或微软的视频超级分辨率相比,这仍然是一个令人印象深刻的飞跃。
Adobe 提供的以下片段与我在现场演示中看到的相吻合:
[左:原版,右:放大] 通过 Project Res-Up 项目运行《红房子》(1947 年)中的这一片段,可以消除大部分模糊,使人物的头发和眼睛等细节更加清晰。图片 红房子》(1947 年)/ United Artists / Adobe
另一个演示显示,一段视频被裁剪成聚焦于一头小象,升频工具同样增强了低分辨率裁剪,消除了大部分模糊,同时还增加了皮肤皱纹等小细节。看起来,该工具确实在锐化原始画面中看不到的低对比度细节。令人印象深刻的是,人工皱纹会随着动物的动作自然移动,而不会显得过于做作。Adobe 还展示了 Project Res-Up 升频 GIF,为你从 MySpace 时代就不再使用的备忘录注入新的活力。
[左:原始图像,右:放大图像] 为这头小象添加了额外的纹理,使放大后的画面看起来更加自然逼真。图片:Adobe
该项目将在今天晚些时候举行的 Adobe Max 活动的 “Sneaks” 环节中揭晓,这家创意软件巨头将在该环节中展示有可能加入 Adobe 产品阵容的未来技术和创意。这意味着你暂时还不能在家庭录像中试用 Project Res-Up,但它的功能最终可能会应用到 Adobe Premiere Pro 或 Express 等流行的编辑应用程序中。之前的 Adobe Sneaks 已作为应用程序和功能发布,如 Adobe Fresco 和 Photoshop 的内容感知工具。