众所周知,NVIDIA的DLSS——作为引领业界的标志性图形优化技术,通过调用GPU的Tensor核心资源做图形计算,来达到提升游戏画面和帧数的效果。如果你是一个流媒体视频、电影的深度爱好者,在4K普及的今天,低分辨率的视频往往令人抓狂,那么NVIDIA有没有类似的技术,可以提升在线视频视觉体验呢?
2023年2月,NVIDIA正式发布RTX视频超分辨率 (RTX Video Super Resolution) 这一项技术,拥有GeForce RTX 40 /30 系列 GPU 用户可以利用这一项技术在浏览器上将低分辨率的在线视频内容提升4K,并与他们的显示器分辨率相匹配。
它的工作原理是使用显卡中的Tensor core单元以及深度学习网络,针对视频内容来分析每一帧,通过深度学习网络来预测目标分辨率下的残差图像;然后,残差图像被叠加到传统的图像增强上,纠正视频伪影错误并强化物体边缘再输出目标分辨率。
2023年10月,RTX视频超分辨率 (RTX Video Super Resolution)迎来了升级,RTX VSR 1.5正式发布,本次升级更侧重于视频直播方面,在过去串流游戏以及运行直播软件(如OBS)往往会导致 CPU占用率过高,而现在使用NVIDIA独立的视频编码能够保证串流顺畅进行,同时RTX 40 系列 GPU 也可以支持实时 AV1 硬件编码,相较于 H.264,可实现 40% 的编码效率提升。
网友评论