0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

揭开超画质黑科技的 “神秘面纱”

旷视MEGVII 来源:Megvii旷视科技 作者:Megvii旷视科技 2020-11-27 11:04 次阅读

发现美并记录美,是烙印在人类血液里的本能反应。从蒙昧时代的原始人在黑暗的洞穴中画下野生动物的第一笔涂鸦开始,绘画的火花激励着一代又一代人将美记录,随着历史的巨轮滚滚向前,西方世界的绘画向着古典主义对于细节的极致追求发展,而东方文明在山水写意中感悟着天地宇宙的本心……图像,对于人类来说,既在记录现实,也是人类思想的折射与反映。

从原始到现代的图像转变

科技始终伴随着人类文明的发展,使生活更加美好与鲜活。1839年,法国人达盖尔用两个木箱拼凑出世界上第一台相机,这种全新的摄影技术,渐渐地替代了绘画,成为记录美好瞬间的全新载体。如今181年过去了,形形色色的摄影摄像设备流淌过了人们的生活,无一例外,它们都忠实的履行了自己的使命——记录生活,记录美好。

在科技纵横发展的今天,人们对于将美的瞬间停留又有了更加极致的追求——在任何环境下都可以绝对还原景物的真我本色。由此,旷视的超画质技术应运而生。超画质是一种通过高画质数码相机的成像特性,还原景物原有的细节纹理的技术,可以对画面亮度、画面对比度、画面层次感、暗场细节、色彩精准还原进行升级,从而使得画面显得通透,层次更加丰富,照片的“观感”体验更加舒服。通俗点说,超画质技术就是让相机自动对照片进行“完美PS”的过程。

如果我们用一句话来定义超画质,那就应该是:在绝对尊重画面内容的同时,又赋予画面超越基础画质的美学提升。

揭开超画质黑科技的 “神秘面纱”

为了让超画质技术能够帮助大家拍出好照片,旷视的研发人员做了相当多的尝试,开发了100多种算法,实现了不少高级功能,我们就找几个好理解的聊一聊。

|高动态范围HDR,真正实现“五彩斑斓的黑”

拍夜景的时候,常常会出现一个悖论,同一幅画面里,我们既希望远处的天空背景暗一点,又希望近处的景物亮一点,这很难“一键解决”。旷视超画质技术中的高动态范围HDR,就是来解决这一矛盾的:它能够让图像明亮的地方更亮,黑色的地方更暗,将同一个画面里的亮度、色彩度处理得“更有层次”。

五彩斑斓的夜景

HDR是High Dynamic Range的缩写,即高动态范围。所谓动态范围,是一种用数学方式来描述场景中亮度层次范围的技术术语,也就是指一幅图像中最亮处和最暗处之间的比值。人眼所能感受的亮度范围大概为1/10³—10⁶nit,瞬时对比度可达10000:1,但是传统的照片却很难达到这一比例。HDR技术能够将画面整体亮度的动态范围大幅度扩展,不只是白色,而是立体空间中的各种色彩,从而提升拍摄画面的整体色彩空间。

在夜间摄影时,黑得“五彩斑斓”将再也不是什么笑谈。而常见的过度曝光或者逆光“黑脸”照片,也可以轻松被HDR解决。一句话解释,HDR就是帮你自动调整曝光,使每一张照片都光彩动人。

|降噪技术,画质好更要有细节

简单的科普一下:降噪是干什么?就是降低噪点。啥是噪点?就是图像里面的噪声,最简单的例子就是没信号的电视中闪烁的雪花。

电视画面中的雪花就是生活中常见的图像噪点(图源:网络

图像的噪点,最主要的来源是由光的散粒噪声引起的,常见的原因就是拍摄环境不行,可能是夜太黑,也可能是光太暗。

很多经常提到的词汇其实都跟噪点有关。比如画质,画质的技术术语是“信噪比”,是电子设备信号与噪点的功率谱之比,信噪比越高,给人的直观感受就是画质越好。降噪技术其实是通过对损害图像质感的斑点、边缘进行智能处理,从而压制噪点,让我们直观地感受到画质“提升”了。

在降噪的过程中,有一个大课题就是如何避免画面细节被损坏。比如我们拍一只猫,需要体现出猫的根根胡须、蓬松毛发,在细节处理上的难度非常大,稍不小心这些细节就伴随着噪点一起被处理掉了。一般的降噪技术,对于这种复杂边缘的处理,很容易导致“涂抹感”和“油画感”,虽然提升了画质,但是却损失了画面细节,不传神。旷视的超画质“黑科技”中,降噪技术基于旷视磨炼多年的AI算法,能够最大程度地保留细节同时提升信噪比。画质提升的同时,细节也能够清晰的表现出来。

降噪处理前后的猫咪

|图像增强,更智能地给图片 “划重点”

图像增强,增强的是图像中的那些有用信息。图像增强是有目的地强调图像的整体或局部特征,将原来不清晰的图像变得清晰、或者只把某些感兴趣的特征变清晰,扩大图像中不同物体特征之间的差别,从而改善图像质量、丰富信息量、突出画面重点。

图像增强技术在我们的“美图”生活中相当常见,在拍照或者处理图片时常用的“锐化”工具,提高图像中某一部位的清晰度,让某些区域的色彩更鲜亮,这就是图像增强技术最好的体现。

图像增强技术示意(左为原图,右为增强后)

图像增强技术的难点,在于每个人对于画面内容的要求和重点的选择是不一样的,如何自动分辨每一张图片需要突出哪些局部,这对技术提出了更高的要求。旷视的图像增强算法,能够更加准确地判断图像内容中需要突出的部分,从而让拍摄者能更轻松地拍出想要的感觉。

超画质技术背后的故事

从1.0到3.0,旷视算法工程师们的魔鬼训练

在超画质技术演进的求索之路上,旷视从未停止过脚步。旷视的研发人员始终相信,AI技术与数字图像的结合,将会产生神奇的化学反应,更好地解决现实中的痛点,从而带来实际价值。于是,如何不断完美超画质技术,成为了一道摆在一众算法工程师面前的大课题。

|从0到1的头脑风暴

大约是在2018年,在一次内部会议上,一位产品经理在他的PPT中首次提出了这个概念。萌生这个想法其实并没有什么曲折离奇的故事,就是因为现有的产品和技术,无法满足大家对照片的高要求,而且在那几年,手机厂商间的硝烟主要集中在摄像头的战场,敏锐的旷视人发现了这个问题和AI领域的契合点,于是就促成了计算机AI技术和传统摄影技术的一次神奇联姻。当然,头脑风暴之后就是旷视内部一次次地论证、分析与推演,终于,在2019年超画质技术1.0正式上线,摄影技术的新革命打响了第一枪。

超画质技术下夜晚的城市

|当算法工程师化身为见习摄影师

旷视超画质团队的算法工程师在上岗之前,需要接受一场严格的“审美培训”,这是一项不可避免的挑战。我们都知道,计算机的世界本源是0和1,是严格理性的科学推演,而对美的追求,却是从艺术出发,是人类先天感性思维的升华。旷视的超画质技术所追求的,是对艺术和科技的把控加以更为严格的标准,这就要求算法工程师同时还要有相当出色的艺术修养。为了更精准地了解用户需求,紧追时尚的潮流,旷视的算法工程师们经常组团钻研相机的新功能,从实践中理解什么才是更加优质的画面体验。

辛苦钻研的旷视算法工程师

|坚持第一性原理,深挖美的本质

旷视认为,技术落地要坚持第一性原理,从本质出发。解决超画质技术也不外如是,要从手机拍照时画面亮度偏暗/过曝、噪声过大、动态范围不佳等画质问题进行根本突破。

凭借在深度学习领域的积累和Brain++平台强大的能力,旷视超画质技术团队在业内首个推出AI+CV模式超画质算法,实现了画面品质的整体提升。在不到2年的时间里,旷视超画质技术已经从1.0迭代到3.0版本。如今旷视的超画质技术,不仅提供了百余种细节功能,实现了画面细节增强、动态范围提升、降噪效果升级等全局优化,还特别新增了闭眼融合修复、天空噪声优化、挥手鬼影优化等全新功能。简单来讲,手机有了旷视超画质技术,前置后置皆美丽,亮光暗光都清晰。

原画质到超画质3.0的转变

从古至今,人类一直在尝试找到一种可以100%还原本真、定格美丽的工具,并它必须易分享、好保存,从而能够向更多人展示生活的每一刻心动瞬间。如今,旷视的超画质技术应用在50多款主流手机中,正在让这个愿望距离实现更进一步。看了这么多美丽的照片,你还不抓紧拿起手机,记录下身边美丽的瞬间?

责任编辑:lq

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 算法
    +关注

    关注

    23

    文章

    4599

    浏览量

    92617
  • 黑科技
    +关注

    关注

    14

    文章

    127

    浏览量

    37261
  • 旷视
    +关注

    关注

    0

    文章

    75

    浏览量

    6560

原文标题:聊聊旷厂黑科技 | 超画质,如何抓住最美的瞬间

文章出处:【微信号:megvii,微信公众号:旷视MEGVII】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    解读版|Air780E软件中C语言内存数组的神秘面纱

    今天我们来揭开Air780E 软件中 C 语言内存数组的神秘面纱,希望有所收获。
    的头像 发表于 11-17 10:00 129次阅读
    解读版|Air780E软件中C语言内存数组的<b class='flag-5'>神秘</b><b class='flag-5'>面纱</b>!

    艾毕胜电子全自动跟拍智能云台驱动板方案的神秘面纱

    在科技飞速发展的今天,全自动跟拍智能云台已经成为摄影、直播等领域的热门设备。而在其背后,驱动板方案则是实现其出色性能的关键所在。今天,就让我们一同来揭开全自动跟拍智能云台驱动板方案的神秘面纱
    的头像 发表于 10-09 17:29 213次阅读
    艾毕胜电子全自动跟拍智能云台驱动板方案的<b class='flag-5'>神秘</b><b class='flag-5'>面纱</b>

    用智能DAC揭开医疗报警设计的神秘面纱

    电子发烧友网站提供《用智能DAC揭开医疗报警设计的神秘面纱.pdf》资料免费下载
    发表于 09-14 10:50 0次下载
    用智能DAC<b class='flag-5'>揭开</b>医疗报警设计的<b class='flag-5'>神秘</b><b class='flag-5'>面纱</b>

    北斗卫星时钟——揭开“授时”的神秘面纱

    ,这些时间信息又是从哪里来的呢?为什么我们可以随时随地都能获取准确的时间信息?这得益于高精度的 授时服务 ,今天我们就来揭开“授时”的神秘面纱。      大家都知道我国的北斗导航卫星,是用于定位导航的。那么北斗是怎么进行定位导
    的头像 发表于 07-25 16:21 342次阅读
    北斗卫星时钟——<b class='flag-5'>揭开</b>“授时”的<b class='flag-5'>神秘</b><b class='flag-5'>面纱</b>

    xAI公司将在八月揭开其新Grok-2大语言模型的神秘面纱

    在科技界的浩瀚星空中,埃隆·马斯克的每一次发声都如同璀璨的新星,瞬间照亮前行的道路。近日,这位科技巨擘在推特上的一则简短宣告,再次将全球的目光聚焦于人工智能的前沿阵地——他的初创公司xAI即将在八月揭开其最新力作Grok-2大语言模型的神秘
    的头像 发表于 07-02 11:38 448次阅读

    揭开Pluto XZU20的神秘面纱—探寻未来紧凑而强大的FPGA解决方案

    创新成果具有挽救生命、改变生活和创造梦想的能力。现在让我们一起紧随Pluto产品发布会的步伐,揭开PlutoXZU20的神秘面纱,与我们一起探寻未来紧凑而强大的FP
    的头像 发表于 06-21 08:09 327次阅读
    <b class='flag-5'>揭开</b>Pluto XZU20的<b class='flag-5'>神秘</b><b class='flag-5'>面纱</b>—探寻未来紧凑而强大的FPGA解决方案

    揭开快充芯片的神秘面纱

    UFP芯片是一种用于USB快充技术的关键元件,它在移动设备和充电器之间进行通信和协调,以实现高效、安全、快速的充电过程。下面我们将揭开快充芯片的神秘面纱,深入探讨UFP快充芯片的工作原理和功能。
    的头像 发表于 04-15 12:51 564次阅读

    UFP芯片-揭开快充芯片的神秘面纱

    什么是UFP芯片呢? UFP芯片是快充协议芯片的一种类型,主要应用场景为无线充电器、快充电动工具、快充诱骗线等领域。它与充电端(DFP)协议芯片和双角色端(DRP)芯片共同构成了快充协议芯片的主要类型。     UFP芯片的主要功能是什么? UFP芯片,即受电端协议芯片,是快充技术中的关键组件。它的主要功能是在快充过程中,与充电端(通常是充电器或充电设备)进行通信和协商,以确保安全、高效、快速地充电。 具体来说,UFP芯片在接收到充电请
    的头像 发表于 04-13 20:00 662次阅读
    UFP芯片-<b class='flag-5'>揭开</b>快充芯片的<b class='flag-5'>神秘</b><b class='flag-5'>面纱</b>

    英伟达GTC大会将开幕 人形机器人成英伟达GTC议题

    英伟达创始人兼CEO黄仁勋将在北京时间3月19日凌晨发表主题演讲,预计他将为我们揭开新一代硬件产品的神秘面纱
    的头像 发表于 03-18 15:14 1565次阅读

    芯讯通打造了基于高通最新一代骁龙®X75和X72 5G调制解调器

    随着ChatGPT、文心一言等AIGC大模型的崛起,AI的神秘面纱逐渐被公众揭开
    的头像 发表于 03-14 10:00 1081次阅读

    Vision Board/首款ARM Cortex-M85开发板价格大公开

    第一轮24小时限时盲购,机器视觉Vision Board获得了预期的支持,我们由衷感谢所有开发者的热情参与。机器视觉Vision Board 即将开启第二轮预售,而这一次我们将揭开价格的神秘
    的头像 发表于 02-22 14:13 1158次阅读
    Vision Board/首款ARM Cortex-M85开发板价格大公开

    AQY212S光耦合器:特性和应用揭秘

    让我们深入研究AQY212S的功能和应用,揭开这款令人印象深刻的器件的神秘面纱
    的头像 发表于 01-19 16:01 1055次阅读
    AQY212S光耦合器:特性和应用揭秘

    无源滤波设计分享,揭开测温滤波电路的神秘面纱

    在使用热电偶测温模块或设计热电偶测温电路中,每个采集通道往往需要一阶甚至多阶的无源滤波电路,关于热电偶测温无源滤波电路的设计需要考虑什么因素呢?热电偶测温原理简述两种不同材料的导体A、B与采样电路串接成一个闭合回路,当热端1和冷端2处于不同的温度T、T0时,回路中就会产生热电动势EAB(T,T0)被ADC采集到。当热端和冷端的温度差发生变化时热电动势EAB(
    的头像 发表于 12-11 17:42 463次阅读
    无源滤波设计分享,<b class='flag-5'>揭开</b>测温滤波电路的<b class='flag-5'>神秘</b><b class='flag-5'>面纱</b>

    AN-501推导时钟抖动引起ADC信噪比上限,为何信号没有取有效值?

    时钟抖动引起的采样噪声为: 计算SNR为: 为何这里不像《[MT-001_cn] 揭开公式(SNR = 6.02N + 1.76dB)的神秘面纱,以及为什么我们要予以关注》文章里那样,信号用
    发表于 12-01 08:30

    揭开高性能多路复用数据采集系统面纱

    电子发烧友网站提供《揭开高性能多路复用数据采集系统面纱.pdf》资料免费下载
    发表于 11-23 10:06 0次下载
    <b class='flag-5'>揭开</b>高性能多路复用数据采集系统<b class='flag-5'>面纱</b>