(资料图片仅供参考)
Nvidia Video Super Resolution——Nvidia VSR——今天正式向公众开放。首次在 CES 2023 上预览,不要与 AMD 的 VSR(虚拟超级分辨率)混淆,Nvidia VSR 旨在为视频做它的 DLSS 技术为游戏所做的事情。好吧,有点。对于初学者,您需要 Nvidia最好的显卡之一,即 RTX 30 或 40 系列 GPU。当然,您还需要适当地设定您的期望值——例如,上面的主图是伪造和夸大的,根本不能代表 VSR。
到目前为止,每个人都应该非常熟悉深度学习和人工智能模型可以完成的一些事情。无论是使用 Stable Diffusion 的文本到图像艺术生成等,ChatGPT 回答问题和撰写文章,自动驾驶汽车,还是任何其他可能性,AI 正在成为我们日常生活的一部分。
任何了解 DLSS 的人都应该熟悉该算法的基本摘要。获取一组配对图像,每对图像包含高分辨率(和更高质量)视频帧的低分辨率和低比特率版本,并通过深度学习训练算法运行该图像,以教会网络如何理想地升级和增强将较低质量的输入帧转换为更好看的输出。当然,VSR 和 DLSS 之间存在很多差异。
首先,DLSS 直接从游戏引擎获取数据,包括当前帧、运动向量和深度缓冲区。结合之前的帧和经过训练的 AI 网络来生成放大的和抗锯齿的帧。使用 VSR,没有预先计算的深度缓冲区或运动矢量可言,因此一切都需要完全基于视频帧来完成。因此,虽然理论上 VSR 可以使用当前和之前的帧数据,但 Nvidia 似乎选择了一种纯粹的空间放大方法。但无论具体细节如何,让我们谈谈它的外观。
Nvidia 提供了一个示例视频,显示了 VSR 输出前后的情况。如果你想要原版,这里是通过双线性采样源升级的 1080p 和4K VSR 升级版本——托管在个人云端硬盘帐户上,所以我们将看看如何进行。(如果您因超过带宽上限而无法下载视频,请给我发邮件。)
X 关闭
Copyright 2015-2022 北方空净网版权所有 备案号:京ICP备2021034106号-50 联系邮箱: 55 16 53 8@qq.com