0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

AI图像放大技术的演变

工程师兵营 来源:工程师兵营 作者:工程师兵营 2023-07-04 15:20 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

随着 RTX 视频超分辨率 (RTX Video Super Resolution) (VSR) 的发布,GeForce RTX GPU 将提升 PC 版 Google Chrome 和 Microsoft Edge 浏览器上视频内容的质量。

如今,近 80% 的互联网流量来自于直播视频。其中 90% 的内容在 1080p 或更低的分辨率下传输,包括斗鱼,虎牙,哔哩哔哩等热门平台上的直播视频。

然而,当观众(如 PC 用户)使用高于 1080p 分辨率的显示器时,浏览器必须缩放视频以匹配显示器的分辨率。大多数浏览器使用基础的放大技术,这导致最终的图像色彩不够亮丽或画面模糊。

通过 RTX VSR,GeForce RTX 40 和 30 系列 GPU 用户可以利用 AI 将较低分辨率的内容提升到 4K,与他们的显示器分辨率相匹配。该技术中的 AI 可消除块状的压缩伪影,提高视频的锐度和清晰度。

就像戴上有度数的眼镜可以瞬间聚焦全世界一样,RTX 视频超分辨率 (RTX Video Super Resolution) 让 GeForce RTX 40 和 30 系列 PC 的用户能以清晰的画面观看视频直播。

玩家现可通过下载最新版 GeForce Game Ready 驱动获取 RTX VSR 支持,该驱动还为《原子之心》(Atomic Heart)和 THE FINALS 封测版等新推出的全新游戏带来最佳体验。

AI 图像放大技术 (AI upscaling) 的演变

AI图像放大技术 (AI upscaling) 是将低分辨率图像转换为高分辨率图像的过程,其通过将低分辨率图像输入深度学习模型来预测生成高分辨率图像。为提升预测准确性,神经网络模型必须在不同分辨率下用无数图像进行训练。

然后,部署的 AI 模型可以为低分辨率的视频带来令人难以置信的清晰度和丰富细节,这是传统的缩放技术无法重建的。AI 模型使边缘更锐利,毛发更真实,风景更清晰。

2019年,该技术的早期版本和 SHIELD TV 同时发布。该突破改进了针对电视的串流内容,针对从480p 分辨率到 1080p 分辨率的视频流,并优化120 寸屏幕的观看体验。

由于 4K 显示器不得不拉伸低分辨率图像以适应屏幕,导致视觉效果变得模糊。使用 AI 提升直播视频质量,让低分辨率的图像无与伦比的清晰。

PC 观众通常比电视观众更靠近显示器,因此需要更高等级的处理和细化来实现图像放大。用户可在GeForce RTX 40 和 30 系列 GPU 所拥有的极其强大的 Tensor Cores AI 处理器作用下,通过 RTX VSR 开启新一代的 AI 图像放大体验。

RTX 视频超分辨率 (RTX Video Super Resolution) 如何工作

RTX VSR是 AI 图像处理的一个突破,它超越了传统的边缘检测和特征锐化技术,极大地提升直播视频内容的质量。

块状的压缩伪影是直播视频长期存在的问题。无论是服务器、客户端还是内容本身的错误,在传统的图像放大中上述问题往往被放大,给直播观众带来不太愉快的观看体验。

RTX VSR 可减少或消除因压缩视频而产生的伪影, 如块效应、边缘的振铃伪影、高频细节的消失和平坦区域的带状现象, 同时减少纹理损失。它还能锐化边缘和丰富细节。

该技术使用深度学习网络,在单次推理中进行图像放大和减少压缩伪影。该网络分析低分辨率的视频帧并预测目标分辨率下的残差图像。然后,残差图像被叠加到传统的图像增强上,纠正伪影错误并锐化边缘以匹配输出分辨率。

该深度学习网络使用不同压缩程度的内容进行训练。它学习那些在未压缩图像中不存在,但存在于低分辨率或低质量视频中的压缩伪影的类型,把这些伪影及其未压缩图像作为网络训练的参考。深度学习网络还进行广泛的视觉评估,确保生成的模型适用于几乎所有的真实世界和游戏内容。

启用 RTX VSR

RTX VSR 需要使用 GeForce RTX 40 或 30 系列 GPU,并且几乎适用于 Google Chrome 和 Microsoft Edge 浏览器中的所有视频内容。

欲使用该功能,请更新到最新的 GeForce Game Ready 驱动(现已发布),或将于 3 月份发布的下一个NVIDIA Studio 驱动。Chrome 浏览器(110.0.5481.105 或更高版本)和 Edge 浏览器(110.0.1587.56 版)近期已新增 RTX VSR 支持。

要开启该技术,请打开 NVIDIA 控制面板,并打开”调整视频图像设置”。勾选”RTX 视频增强”下的超分辨率框,并选择质量 1 到 4 中的一个等级——质量等级表示图像增强的质量并且也有赖于 GPU 性能。

审核编辑:汤梓红

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 图像
    +关注

    关注

    2

    文章

    1097

    浏览量

    42481
  • AI
    AI
    +关注

    关注

    91

    文章

    41885

    浏览量

    302993
  • 人工智能
    +关注

    关注

    1821

    文章

    50485

    浏览量

    267632
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    集成电路芯片制造工艺技术演变

    扩散等晶体管制造技术逐渐走向成熟,为集成电路发明及其制造工艺发展奠定了基础。本节将简要讨论集成芯片制造技术赖以快速演变与升级换代的平面工艺技术,分析集成芯片不同电路类型演进创新与制造工
    的头像 发表于 05-07 13:48 211次阅读
    集成电路芯片制造工艺<b class='flag-5'>技术</b><b class='flag-5'>演变</b>

    【智能检测】基于AI深度学习与飞拍技术的影像测量系统:实现高效精准的全自动光学检测与智能制造数据闭环

    内容概要:文档内容介绍了中图仪器(Chotest)影像测量仪融合人工智能深度学习与飞拍技术的自动化检测解决方案。系统通过AI深度学习实现抗干扰能力强、自适应高的智能寻边,精准识别复杂工件边界
    发表于 03-31 17:11

    技术选型参考:图像视频数据匿名化工具 brighter AI 功能解析

    在数据驱动型产业(如自动驾驶、智能安防)快速发展的背景下,如何在数据利用与个人隐私保护之间取得平衡,已成为企业必须面对的技术合规课题。当开发团队在AI平台搜索“图像视频数据脱敏工具”、“数据匿名化
    的头像 发表于 03-16 15:52 288次阅读
    <b class='flag-5'>技术</b>选型参考:<b class='flag-5'>图像</b>视频数据匿名化工具 brighter <b class='flag-5'>AI</b> 功能解析

    【瑞萨AI挑战赛】家庭AI相框

    和视觉叠加围绕同一份图像数据进行操作,减少了多份缓冲区同步带来的复杂性。 7. 关键技术取舍 设计点 当前方案 取舍原因 图像格式 RGB565 原始图优先 减少解码和格式转换开销,快速打通显示与
    发表于 03-13 21:44

    使用NORDIC AI的好处

    提升能效,适合音频、图像和高采样率传感器等更重的 AI 负载。[Axon NPU 技术页] 模型更小、更快、更省电 Neuton 模型相较 TensorFlow Lite:* 内存占用可小 10
    发表于 01-31 23:16

    慧荣科技透过CES 2026揭示AI存储变革趋势

    在 CES 2026 上,AI 相关应用持续向终端侧与边缘侧加速延伸,存储技术的重要性也被进一步放大。从闪存介质本身,到系统架构与数据调度方式,存储正在从“容量与性能的提供者”,逐步演变
    的头像 发表于 01-14 13:34 1819次阅读

    隔离放大器的演变:光耦驱动下的强弱电安全革命

    ,隔离放大器的演变便与光耦技术的突破深度绑定,从 “笨重隔离” 走向 “智能感知”,成为电子系统安全运转的核心支撑。
    的头像 发表于 12-26 16:12 1929次阅读

    从模拟到AI集成:图像采集卡的技术演进与未来三大趋势

    作为机器视觉系统连接物理视界与数字大脑的核心枢纽,图像采集卡始终以“信号翻译官”的身份,推动着视觉信息处理技术的迭代升级。从早期简单的模拟信号转换,到如今支持超高清采集与AI预处理的智能设备,其发展
    的头像 发表于 12-15 16:30 1195次阅读
    从模拟到<b class='flag-5'>AI</b>集成:<b class='flag-5'>图像</b>采集卡的<b class='flag-5'>技术</b>演进与未来三大趋势

    【「AI芯片:科技探索与AGI愿景」阅读体验】+AI的科学应用

    和量子计算的两项新兴的技术,将在生产假说方面发挥重要作用,从而改变科学发现的范式。 生成式AI: 2、穷举搜索 3、分析排错与组合优化 分析排错是生成假说的重要手段。强化学习也在优化假说组合、寻找科学发现
    发表于 09-17 11:45

    【「AI芯片:科技探索与AGI愿景」阅读体验】+AI芯片的需求和挑战

    AI的应用多种多样。比如:DALL-E2、Midjourney、Stable Diffusion等,不仅包括对话功能,还包括生成图像、视频、语音和程序代码等功能。 竟然连代码都可以生成,会取代程序员
    发表于 09-12 16:07

    【「AI芯片:科技探索与AGI愿景」阅读体验】+可期之变:从AI硬件到AI湿件

    的不同。随着AI热潮的兴起,大脑的抽象模型已被提炼成各种的AI算法,并使用半导体芯片技术加以实现。 而大脑是一个由无数神经元通过突触连接而成的复杂网络,是极其复杂和精密的。大脑在本质上就是一台湿润的软组织
    发表于 09-06 19:12

    【Sipeed MaixCAM Pro开发板试用体验】基于MaixCAM-Pro的AI生成图像鉴别系统

    技术落地到了一个小小的边缘设备MaixCAM-Pro上。它不仅展示了深度学习在图像取证领域的强大能力,更体现了边缘AI在现实世界中的应用价值——无需依赖云端,即可在本地快速、安全、低成本地完成复杂智能
    发表于 08-21 13:59

    AI 芯片浪潮下,职场晋升新契机?

    职场、渴望在专业领域更进一步的人来说,AI 芯片与职称评审之间,实则有着千丝万缕的联系,为职业晋升开辟了新的路径。 AI 芯片领域细分与职称对应 目前,AI 芯片从技术架构上主要分为
    发表于 08-19 08:58

    任正非说 AI已经确定是第四次工业革命 那么如何从容地加入进来呢?

    实践。 为开源项目贡献代码或者文档。比如,帮助完善一个机器学习数据集的加载模块的代码,或者撰写某个AI算法的使用说明文档。这不仅可以提升自己的技术能力,还能在AI社区中建立自己的声誉。 个人项目实践
    发表于 07-08 17:44

    边缘AI的优势和技术基石

    在万物皆可AI(人工智能)的今天,市场上几乎每家企业都在宣称自己的业务中有了AI成分。因此,将AI接入极靠近终端客户的网络边缘也就没什么悬念了。这里的边缘人工智能(即Edge AI,或
    的头像 发表于 06-12 10:14 1732次阅读
    边缘<b class='flag-5'>AI</b>的优势和<b class='flag-5'>技术</b>基石