0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

数字视网膜:城市大脑的升级

姚小熊27 来源:旷视科技 作者:旷视科技 2020-06-18 11:12 次阅读

近几年来,城市大脑概念可谓如火如荼。

相比于前两年大家对这一概念比较陌生,如今相信大部分读者应该都已经知道,所谓城市大脑的基本内涵,是指用公路上的大量摄像头,来识别车流、车牌和车辆,以及一些路段广场上机遇摄像头执行人脸识别和人流判断。

这些“城市之眼”收集的数据,一方面可以帮助提升城市安防的智能化水准,比如预判人群拥堵、识别交通事故与可疑车辆等等;另一方面,城市大脑的作用主要体现在和交通灯、高架桥准入闸口的互动上。通过对车辆数据的识别和判断,进而用城市大脑进行交通指挥,被广泛相信是治理城市拥堵的有效方式。

这些技术逻辑近两年被反复讨论,加之科技巨头的不断加注与宣传,很可能让大众觉得城市大脑已经非常完善,可以真正承担一座城市的“AI交通指挥官”。然而事实上并非如此,从一种产业构思到实际落地,城市大脑,或者称作智慧城市系统,还面临着非常多物理世界中客观存在的困难与障碍。尤其是城市摄像头体系本身,与后加入的AI大脑,二者其实存在着无法忽视的“代沟”。

这个问题应该如何解决,近两年也有相当多的学术讨论。比如中国工程院院士、中国计算机学会理事长,北京大学教授、博导高文提出的“数字视网膜”理念,就广为产学各界重视。在这一问题中构成了一种代表性的解题方案。

我们似乎可以从数字视网膜应运而生的现实问题,以及其发展思路中,共同探讨这样两个问题:城市的智能,距离我们究竟有多远?而如果希望拉进这个距离,目前有哪些急需开展的工作?

从这个角度思考,我们或许会发现数字视网膜既是一种学术创新,也是一个新的产业机遇。

“眼疾”未愈,城市大脑依旧幼稚

城市大脑概念,在现实执行中面临的第一个问题,也可能是最根源的问题之一,就是原本并不用于智能计算的城市摄像头,如何与AI带来的识别,甚至智能分析能力连接在一起?

这个问题涉及一个基本矛盾,就是智能发生在哪里。

今天一般的城市大脑与智慧城市项目,主要是将摄像头收集来的视频数据进行存储,从而在云端用算法就行识别和分析。

而这里就有很多矛盾滋生了出来,比如传统摄像头收集的视频数据过于庞大,清晰度也欠佳,AI算法很难识别。

即使摄像头能够提供高清数据,但由于拍摄的视频没有进行特征提取,于是从提取到识别、检索,再到推理的全链计算都必须发生在云端。这带来的数据量非常庞大,云端将承受难以负载的数据压力,从而影响识别精度与数据处理准确度。同时,把基础视频数据堆积到云端,客观上也会造成过大的延迟,很难满足交通场景里实时反应的刚性需求。

同时,城市综合体每天产生的视频数据,其本质上堪称一个“数据包袱”。这些数据存在哪?存多久?谁来看?如何检索?在海量数据面前,这些问题一一成为了城市数据管理体系的重担。

那么如果让摄像头自己具备识别能力呢?这是如今智慧城市的主要解决方案,但是由于此前的原版摄像头不便拆卸,想要加入新的识别能力就要加装一个新的摄像头。于是我们看到了拍照摄像头、人脸识别摄像头、车牌识别摄像头、车辆识别摄像头等等;在路口抬头一看,简直能激发密集恐惧症。

这些“智能摄像头”识别出的数据,本质上无法做到汇融与底层打通,而是只能各自为政。后端的AI也就只能偏听偏信,无法进行完整的交通场景分析,给出真正的“智能建议”。

那么如果让识别和推理的全套AI能力都发生在摄像头里呢?这带来的最大问题就是端侧算力不够充沛,无法支撑复杂的计算。如果在每个摄像头都加载大量AI算力和专用硬件模组,那将是一笔无法负担的成本。而且想要让AI全局化理解城市,各摄像头也必须进行全局汇总。

这样左右为难的问题,就是今天城市智能从理想到现实的差距。高文院士将之总结成“存储难,检索难,识别难和功能多样化”四个问题,并且形象地比喻为城市的“自闭症”和“弱视”。

那么如何破解城市的种种“眼疾”呢?如果也用仿生学来比喻,那就是今天城市有了云计算和AI作为大脑,也有了摄像头作为眼睛,但是二者之间缺少一样东西:视网膜。

未来城市,需要一场“数字视网膜”安装手术

哺乳动物的视网膜,可称得上一件造物主的奇瑰之作。

视网膜的一个特性,是它隐藏在大脑和双眼之间,沉默着充当人类智慧与世间万物的翻译。我们的视网膜,其实并没有传递给大脑真实的画面和色彩,而是对这些“数据”进行了优化,让我们的大脑直接处理可感可理解的视觉信息

在高文院士看来,今天城市大脑与万千摄像头之间,需要加装的就是这样一层“数字视网膜”。

当然,数字视网膜并非真的要做一种仿生视网膜的硬件,而是希望能够改变目前摄像头只能看或者单一链路识别的功能。让摄像头本身拥有一定的AI处理能力,能够对识别到的车、人、场景进行主动特征提取。

从而让摄像头上传到云端的视频数据,一路通过高效编码作为数据存储;另一路经过特征提取直接作为智能大脑的“可读物”。

这样既把识别和推理等智能计算保留在了云端,又让端侧完成了初步的智能化解析,平衡了两侧的成本与效率关系。而云大脑与摄像头的智慧结合,就是给城市安装了一层新的“数字视网膜”。

这个技术设想,是希望从计算和视频编码的可行性上,将城市的“大脑”和无数“眼睛”结合为一体。而设想想要变成现实,需要建立在端侧设备具有优化的视频编码能力,以及AI领域高强度的视频特征抽取能力。从而创造一个功能集成,能集编码和特征编码为一体的视频和图象感知系统。

换言之,软件层的创新将带给城市硬件系统更好的成本比值以及更优化的效率。与目前大多数产业方案相比,这套系统的特点在于平衡了理想目标和现实中的可执行性:摄像头完成特征抽取,云端只负责识别和推理。云计算和终端各负担一部分计算任务,合理分配算力。用更优化的视频解码技术,以及AI带来的视频特征抽取能力,让整套体系能够在有限算力与带宽条件下执行。

即便如此,给城市做一场“安装数字视网膜”的手术也并不容易。

挑战、路径与产业机遇:数字视网膜的未来棋路

想要在新兴的城市大脑技术,与中国技术庞大、种类繁杂的城市摄像头体系之间做出“智慧融合”。虽然具有强烈的必要性,以及技术可行性,但现实中还是要应对众多挑战。

比如说,数字视网膜的创新逻辑在于,用领先的视频编码标准与编码技术,换取硬件门槛的降低。而这就要求在视频编码技术和机器视觉技术上达成一系列新的突破,让数字视网膜真正“以内功赢人”。

更重要的挑战在于,数字视网膜体系,需要端侧摄像头具备相对通用化的视频处理能力,尤其是AI相关的视频特征提取能力。根据行业目前的普遍理解,这需要建立在专用芯片给摄像头提供更有针对性的AI算力基础上。这就需要一个从基础硬件到算法层,再到产业层的整体配合。

其次,必须正视的一点,是数字视网膜体系不可能朝夕功成。全国庞大的城市摄像头技术,必须逐步替换。这需要优先在现实场景中建立更多边缘技术节点,通过边缘计算来满足端侧AI算力的需求,逐渐向完全的数字视网膜体系过度。并且,如何针对已经存储的视频数据进行重新的特征抽取与识别也是个问题,这可能需要具备更优能力的视频编码软件来执行。

总而言之,我们可以看到“数字视网膜”这场城市大脑的新升级,将牵动硬件、软件与产业层的多条线索。而走到现实当中,这为今天的智慧城市、城市大脑等项目提出的第一个挑战,就是城市大脑类项目整合者、AI算法公司、智能摄像头厂商,包括芯片厂商和云计算厂商的通力合作,构筑基于数字视网膜目标的新兴产业链。

在这个命题中,今天可以看到,计算基础设施与解决方案供应商、安防硬件厂商、城市大脑项目执行者,比如阿里、腾讯、京东等互联网巨头,包括机器视觉相关的AI算法公司,都将获得新的产业机遇。

同时,如果我们将数字视网膜规划的未来城市,看作是智能城市产业的下一步,那么这个未来变化同样将为创业者打开机遇。因为其必然需要建立新的机器视觉任务开发生态,并且产业链粘合过程中,需要大量的新的企业级服务公司。

由此可见,医治城市大脑的眼疾,也是一场城市智能产业升级的开始。据了解,目前数字视网膜体系已经在多个地区与产业端口中开始了应用。从学术创新到产业突破,“智能+”时代正在构筑越来越多这样的产业升级轨迹。

让城市之眼看到未来的同时,身处城市中的我们,也应该看到未来的脚印。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 摄像头
    +关注

    关注

    59

    文章

    4837

    浏览量

    95606
  • 智能系统
    +关注

    关注

    2

    文章

    394

    浏览量

    72447
  • 视网膜
    +关注

    关注

    0

    文章

    34

    浏览量

    12777
收藏 人收藏

    评论

    相关推荐

    构建智慧城市数字孪生技术的发展之路

    基于数字孪生的智慧城市发展是一种革命性的城市转型模式,旨在将物理世界与数字世界融合,在数字平台上建立城市
    的头像 发表于 11-08 15:39 179次阅读

    张江发布首个城市级时空计算引擎,引领数字孪生城市新风向

    作为《浦东新区数字孪生城市建设三年行动计划(2023-2025年)》重点建设项目,由上海浦东软件园建设的“张江数字孪生未来之城”重磅建设成果——城市级云原生
    的头像 发表于 10-15 14:02 227次阅读
    张江发布首个<b class='flag-5'>城市</b>级时空计算引擎,引领<b class='flag-5'>数字</b>孪生<b class='flag-5'>城市</b>新风向

    路灯升级“智慧大脑” 点亮独山子的夜空智慧路灯路灯智能路灯

    路灯升级“智慧大脑” 点亮独山子的夜空智慧路灯路灯智能路灯
    的头像 发表于 10-09 13:36 236次阅读
    路灯<b class='flag-5'>升级</b>“智慧<b class='flag-5'>大脑</b>” 点亮独山子的夜空智慧路灯路灯智能路灯

    基于数字孪生的智慧城市

    智慧城市 是指利用信息和通信技术(ICT)来改善城市运行和管理的城市发展模式。数字孪生是一种数字城市
    的头像 发表于 07-16 11:34 413次阅读

    深开鸿CEO王成录专访:“燃鸿”助力城市燃气数字化、智慧化升级

    近日,深开鸿CEO王成录博士在第十届中国智慧燃气发展论坛接受采访时,深入探讨了智慧城市建设中燃气行业的痛点,并详细介绍了如何借助“燃鸿”——燃气行业开源鸿蒙智能产品和解决方案,实现城市燃气的数字
    的头像 发表于 07-11 08:33 546次阅读
    深开鸿CEO王成录专访:“燃鸿”助力<b class='flag-5'>城市</b>燃气<b class='flag-5'>数字</b>化、智慧化<b class='flag-5'>升级</b>

    建设智慧城市的要素

    基础设施:包括交通、供水、供电、通信等基础设施的优化和升级,为智慧城市数字化转型提供支撑。 2.信息与通信技术:运用物联网、大数据、人工智能等先进技术,实现城市各部门数据共享、互联互
    的头像 发表于 06-18 15:31 500次阅读
    建设智慧<b class='flag-5'>城市</b>的要素

    为什么数字孪生对于智慧城市至关重要

    随着基于物联网的技术的增长和广泛采用,数字孪生在许多行业中得到普及和部署,并成为智慧城市中不可或缺的一部分。无论是在城市规划还是资源优化中,数字孪生都可以在实施之前对计划进行模拟,在问
    的头像 发表于 06-04 11:23 591次阅读

    智慧城市的未来:数字孪生与能耗管理

    智慧城市是当今社会发展的必然趋势。传统的城市已经不能满足我们对便捷、高效、可持续发展的需求。数字技术的快速发展给智慧城市的建设提供了巨大的机遇。在这场智慧**中,
    的头像 发表于 05-07 17:47 425次阅读

    中软国际咨询携手昌平共筑“回天大脑”,探索城市智慧治理新模式

    “回天大脑”在赋能城市基层治理、社区管理和便民服务等方面成效显著,系统结合回天地区基层实际需求以“小切口”突破,持续深化应用推广。
    的头像 发表于 04-17 09:35 817次阅读
    中软国际咨询携手昌平共筑“回天<b class='flag-5'>大脑</b>”,探索<b class='flag-5'>城市</b>智慧治理新模式

    数字城市智慧楼宇解决方案

    随着城市化进程的稳步推进,楼宇智能化的脚步日益加快,加上老旧住宅的改造升级,积极推进楼宇智能化建设势在必行,加速数字城市的建设。 智慧楼宇的建设是一个涉及多领域、多业态的庞大工程,虽然
    的头像 发表于 04-16 17:03 308次阅读

    百望云与常州产业投资集团签署战略合作协议 助力万亿城市数字升级

    生产力,助力区域内产业转型,承接数字城市升级数字化的核心,是产业升级,涉及到无数行业的数字化改造与生态协同。
    的头像 发表于 03-20 13:33 349次阅读
    百望云与常州产业投资集团签署战略合作协议 助力万亿<b class='flag-5'>城市数字</b><b class='flag-5'>升级</b>

    什么是智慧城市,智慧城市包括哪些方面?

    智慧城市数字化、网络化和智能化的完美融合,通过智慧城市的建设,实现城市治理、经济和发展、居民生活的全面升级。智慧
    的头像 发表于 03-05 11:40 801次阅读
    什么是智慧<b class='flag-5'>城市</b>,智慧<b class='flag-5'>城市</b>包括哪些方面?

    分布式系统助力城市规划展厅升级,全景展示城市魅力

    随着城市化进程的加速,城市规划展厅在展示城市形象、吸引投资和促进城市发展方面扮演着越来越重要的角色。讯维分布式系统以其全景展示和智能化控制的特点,正助力
    的头像 发表于 03-04 15:55 460次阅读

    网络攻防模拟与城市安全演练 | 数字孪生

    数字化浪潮的推动下,网络攻防模拟和城市安全演练成为维护社会稳定的不可或缺的环节。基于数字孪生技术我们能够在虚拟环境中进行高度真实的网络攻防模拟,为安全专业人员提供实战经验,从而提升应对网络威胁的能力。同时,在
    的头像 发表于 02-04 10:48 663次阅读
    网络攻防模拟与<b class='flag-5'>城市</b>安全演练 | <b class='flag-5'>数字</b>孪生

    城市数字孪生导论》正式发布 数字城市智能演进由虚向实

    1月9日,第一届数字城市创谷论坛暨《城市数字孪生导论》新书发布会在上海圆满落下帷幕。来自上海市经信委、上海市杨浦区政府、华为云、同济大学、上海电信的嘉宾济济一堂,政产学研各界围绕数字
    的头像 发表于 01-11 18:22 1237次阅读
    《<b class='flag-5'>城市数字</b>孪生导论》正式发布 <b class='flag-5'>数字</b><b class='flag-5'>城市</b>智能演进由虚向实