0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

AI图像放大技术的演变

工程师兵营 来源:工程师兵营 作者:工程师兵营 2023-07-04 15:20 次阅读

随着 RTX 视频超分辨率 (RTX Video Super Resolution) (VSR) 的发布,GeForce RTX GPU 将提升 PC 版 Google Chrome 和 Microsoft Edge 浏览器上视频内容的质量。

如今,近 80% 的互联网流量来自于直播视频。其中 90% 的内容在 1080p 或更低的分辨率下传输,包括斗鱼,虎牙,哔哩哔哩等热门平台上的直播视频。

然而,当观众(如 PC 用户)使用高于 1080p 分辨率的显示器时,浏览器必须缩放视频以匹配显示器的分辨率。大多数浏览器使用基础的放大技术,这导致最终的图像色彩不够亮丽或画面模糊。

通过 RTX VSR,GeForce RTX 40 和 30 系列 GPU 用户可以利用 AI 将较低分辨率的内容提升到 4K,与他们的显示器分辨率相匹配。该技术中的 AI 可消除块状的压缩伪影,提高视频的锐度和清晰度。

就像戴上有度数的眼镜可以瞬间聚焦全世界一样,RTX 视频超分辨率 (RTX Video Super Resolution) 让 GeForce RTX 40 和 30 系列 PC 的用户能以清晰的画面观看视频直播。

玩家现可通过下载最新版 GeForce Game Ready 驱动获取 RTX VSR 支持,该驱动还为《原子之心》(Atomic Heart)和 THE FINALS 封测版等新推出的全新游戏带来最佳体验。

AI 图像放大技术 (AI upscaling) 的演变

AI图像放大技术 (AI upscaling) 是将低分辨率图像转换为高分辨率图像的过程,其通过将低分辨率图像输入深度学习模型来预测生成高分辨率图像。为提升预测准确性,神经网络模型必须在不同分辨率下用无数图像进行训练。

然后,部署的 AI 模型可以为低分辨率的视频带来令人难以置信的清晰度和丰富细节,这是传统的缩放技术无法重建的。AI 模型使边缘更锐利,毛发更真实,风景更清晰。

2019年,该技术的早期版本和 SHIELD TV 同时发布。该突破改进了针对电视的串流内容,针对从480p 分辨率到 1080p 分辨率的视频流,并优化120 寸屏幕的观看体验。

由于 4K 显示器不得不拉伸低分辨率图像以适应屏幕,导致视觉效果变得模糊。使用 AI 提升直播视频质量,让低分辨率的图像无与伦比的清晰。

PC 观众通常比电视观众更靠近显示器,因此需要更高等级的处理和细化来实现图像放大。用户可在GeForce RTX 40 和 30 系列 GPU 所拥有的极其强大的 Tensor Cores AI 处理器作用下,通过 RTX VSR 开启新一代的 AI 图像放大体验。

RTX 视频超分辨率 (RTX Video Super Resolution) 如何工作

RTX VSR是 AI 图像处理的一个突破,它超越了传统的边缘检测和特征锐化技术,极大地提升直播视频内容的质量。

块状的压缩伪影是直播视频长期存在的问题。无论是服务器、客户端还是内容本身的错误,在传统的图像放大中上述问题往往被放大,给直播观众带来不太愉快的观看体验。

RTX VSR 可减少或消除因压缩视频而产生的伪影, 如块效应、边缘的振铃伪影、高频细节的消失和平坦区域的带状现象, 同时减少纹理损失。它还能锐化边缘和丰富细节。

该技术使用深度学习网络,在单次推理中进行图像放大和减少压缩伪影。该网络分析低分辨率的视频帧并预测目标分辨率下的残差图像。然后,残差图像被叠加到传统的图像增强上,纠正伪影错误并锐化边缘以匹配输出分辨率。

该深度学习网络使用不同压缩程度的内容进行训练。它学习那些在未压缩图像中不存在,但存在于低分辨率或低质量视频中的压缩伪影的类型,把这些伪影及其未压缩图像作为网络训练的参考。深度学习网络还进行广泛的视觉评估,确保生成的模型适用于几乎所有的真实世界和游戏内容。

启用 RTX VSR

RTX VSR 需要使用 GeForce RTX 40 或 30 系列 GPU,并且几乎适用于 Google Chrome 和 Microsoft Edge 浏览器中的所有视频内容。

欲使用该功能,请更新到最新的 GeForce Game Ready 驱动(现已发布),或将于 3 月份发布的下一个NVIDIA Studio 驱动。Chrome 浏览器(110.0.5481.105 或更高版本)和 Edge 浏览器(110.0.1587.56 版)近期已新增 RTX VSR 支持。

要开启该技术,请打开 NVIDIA 控制面板,并打开”调整视频图像设置”。勾选”RTX 视频增强”下的超分辨率框,并选择质量 1 到 4 中的一个等级——质量等级表示图像增强的质量并且也有赖于 GPU 性能。

审核编辑:汤梓红

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 图像
    +关注

    关注

    2

    文章

    1083

    浏览量

    40410
  • AI
    AI
    +关注

    关注

    87

    文章

    30072

    浏览量

    268331
  • 人工智能
    +关注

    关注

    1791

    文章

    46819

    浏览量

    237454
收藏 人收藏

    评论

    相关推荐

    AI图像识别摄像机

    随着科技的迅猛发展,人工智能(AI)在各个领域的应用越来越广泛,其中图像识别技术尤为引人注目。AI图像识别摄像机作为这一
    的头像 发表于 11-08 10:38 144次阅读
    <b class='flag-5'>AI</b><b class='flag-5'>图像</b>识别摄像机

    AI大模型在图像识别中的优势

    大模型借助高性能的计算硬件和优化的算法,能够在短时间内完成对大量图像数据的处理和分析,显著提高了图像识别的效率。 识别准确性 :通过深度学习和计算机视觉技术AI大模型能够自动提取
    的头像 发表于 10-23 15:01 357次阅读

    AI for Science:人工智能驱动科学创新》第二章AI for Science的技术支撑学习心得

    for Science的技术支撑”的学习心得,可以从以下几个方面进行归纳和总结: 1. 技术基础的深入理解 在阅读第二章的过程中,我对于AI for Science所需的技术基础有了
    发表于 10-14 09:16

    Freepik携手Magnific AI推出AI图像生成器

    近日,设计资源巨头Freepik携手Magnific AI,共同推出了革命性的AI图像生成器——Freepik Mystic,这一里程碑式的发布标志着AI
    的头像 发表于 08-30 16:23 1076次阅读

    图像处理器的发展历史

    图像处理器(Image Processor)的发展历史是一段充满创新与突破的历程,它伴随着计算机技术的不断进步和图像处理需求的日益增长而逐渐成熟。以下是对图像处理器发展历史的详细回顾,
    的头像 发表于 08-14 09:42 593次阅读

    图像识别技术的原理是什么

    图像识别技术是一种利用计算机视觉和机器学习技术图像进行分析和理解的技术。它可以帮助计算机识别和理解图像
    的头像 发表于 07-16 10:46 818次阅读

    图像检测与识别技术的关系

    图像检测与识别技术是计算机视觉领域的两个重要分支,它们在许多应用场景中发挥着关键作用。本文将介绍图像检测与识别技术的关系,以及它们在不同领域的应用。 一、
    的头像 发表于 07-03 14:43 527次阅读

    OpenAI发布图像检测分类器,可区分AI生成图像与实拍照片

    据OpenAI介绍,初步测试结果表明,该分类器在辨别非AI生成图像与DALL·E 3生成图像时,成功率高达近98%,仅有不到0.5%的非AI图像
    的头像 发表于 05-09 09:57 417次阅读

    浅谈AI技术在SSD控制器中的应用

    当前AI技术蓬勃发展,深度学习、强化学习等技术不断突破,使得AI图像识别、语音识别、自然语言处理等领域取得了显著成果。
    的头像 发表于 04-20 10:02 802次阅读
    浅谈<b class='flag-5'>AI</b><b class='flag-5'>技术</b>在SSD控制器中的应用

    交换机芯片架构的演变

    交换机芯片架构的演变是随着网络技术的发展和数据处理需求的增长而逐步推进的。
    的头像 发表于 03-26 15:03 674次阅读

    NanoEdge AI技术原理、应用场景及优势

    NanoEdge AI 是一种基于边缘计算的人工智能技术,旨在将人工智能算法应用于物联网(IoT)设备和传感器。这种技术的核心思想是将数据处理和分析从云端转移到设备本身,从而减少数据传输延迟、降低
    发表于 03-12 08:09

    Stability AI试图通过新的图像生成人工智能模型保持领先地位

    Stability AI的最新图像生成模型Stable Cascade承诺比其业界领先的前身Stable Diffusion更快、更强大,而Stable Diffusion是许多其他文本到图像生成
    的头像 发表于 02-19 16:03 888次阅读
    Stability <b class='flag-5'>AI</b>试图通过新的<b class='flag-5'>图像</b>生成人工智能模型保持领先地位

    图像识别技术原理 图像识别技术的应用领域

    图像识别技术是一种通过计算机对图像进行分析和理解的技术。它借助计算机视觉、模式识别、人工智能等相关技术,通过对
    的头像 发表于 02-02 11:01 2246次阅读

    图像放大后,图像中心显示在 ,图像框中心,

    大家好,视觉 显示 相机图像时,点击 放大工具放大后,如何将大图像的中心 对准图像显示框的中心,,
    发表于 01-24 15:49

    计算机视觉:AI如何识别与理解图像

    计算机视觉是人工智能领域的一个重要分支,它致力于让机器能够像人类一样理解和解释图像。随着深度学习和神经网络的发展,人们对于如何让AI识别和理解图像产生了浓厚的兴趣。本文将探讨计算机视觉中AI
    的头像 发表于 01-12 08:27 1344次阅读
    计算机视觉:<b class='flag-5'>AI</b>如何识别与理解<b class='flag-5'>图像</b>