0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

Arm物联网再发力,智能摄像头技术升级,最新Mali-C55 ISP IP有哪些高招?

21克888 来源:电子发烧友网 作者:黄晶晶 2022-06-15 14:44 次阅读

最近,Arm发布Mali-C55新一代高性能、低面积、易配置、超高清图像处理器IP,以及相应的软件和工具链,便于开发者使用和配置这些先进的图像处理能力。

据悉,瑞萨电子(Renesas)已经率先选用了Arm的Mali-C55。搭载Mali-C55的芯片跟终端设备有望在2023年面市。

Arm为何在此时推出Mali-C55ISP IP,该IP有哪些独特之处呢,Arm物联网嵌入式事业部业务拓展副总裁马健Chloe Ma向电子发烧友网等科技媒体做了详细的解读。

面向智能摄像头的Arm Mali-C55


市场数据显示,商用和消费类智能摄像头市场规模,从2021年250亿美元,有望2025 年达到450亿美元。高速增长的视觉应用正在逐渐深入各行各业,包括支持高清商务视频会议、安防/智能监控、智慧城市,乃至电池供电的可视门铃和智能猫眼等应用非常广泛。

在性能方面,Mali-C55的吞吐量高达1.2Gpix/sec,支持高达8路的多流处理。在图像处理品质方面,Mali-C55 不仅可以轻松处理8K高清,高达4800万像素分辨率,而且还显著提高了色调映射和降噪能力。


ArmMali-C55在性能大幅度提升的同时,对面积做了深度优化,Mali-C55仅用一半的芯片面积就实现了品质和性能的提升,更适用于低功耗智能终端和边缘应用,也进一步将图像处理和AI在边侧完美结合,提升了边缘AI的性能。

由于IP的模块化设计,Mali-C55 更易于配置,可以支持各种画质、性能、能耗、面积的组合,能够触及更多的用例。与此同时,Mali-C55 也更易于整合,包括与ML加速器整合实现边缘智能终端上本地视频数据处理,以及通过标准的AXI和AHB接口,与现有的Arm Cortex-A和Cortex-M系列的CPU进行无缝对接。

Chloe Ma分析,高可配置性方面,客户和合作伙伴们可以根据他们的目标应用所需要的特性和功能对Mali-C55 以及其他芯片上的IP 做一些精准配置,这样更能实现低延时、低能耗、面积优化的设计。

高可配置性的好处显而易见,比如在安防监控领域,室外的摄像头成像经常会受到光线、天气和物体移动速度等因素的影响。借助 Mali-C55 增强的色调映射和降噪能力,人脸和物体识别就会更加精确,并且在车辆以时速 120.7 公里的速度行驶的情况下,也能做到比较准确的车牌识别。

智能家居领域,可视门铃经常是电池供电,所以对能耗的要求特别高,Mali-C55 的低面积、低能耗特性,使智能可视门铃产品更耐用,并且能够更准确地根据人脸识别的结果进行开锁。

“Arm 作为智能摄像头领域的领先 IP 提供商,我们的Cortex-A 系列CPU 基本上占据了较大的市场份额。未来智能摄像头除了包含基本的CPU 之外,也会更多地使用ISP 和ML 加速器,通常我们的一些NPU 或者通用GPU、ISP 等IP 都会逐渐地在现有或者下一代芯片中得到应用,用于从图像中提取更多有用的信息。对于实现高效的系统设计而言,拥有可针对此类活动所需要的数据类型和处理进行匹配的ISP是非常重要的。”Chloe Ma说道。

总之,随着智能摄像头的应用更加广泛,行业朝着更高分辨率和更复杂的图像处理方向发展,ISP 的性能也成为支持更高计算工作负载的非常关键的组件。Mali-C55 正是为了满足这些趋势的要求所设计的。

去年10月Arm物联网全面解决方案 (Arm Total Solutions for IoT)发布,今年4月底更新。这将是Arm面向客户应用,简化芯片开发,加速IoT产品设计的主要产品上市途径。后续每个推出的解决方案,都会包括Arm Corstone 子系统的参考设计,Arm 虚拟硬件和诸如Project Cassini 和Project Centauri 的生态计划和软件实现。据介绍,最新的Mali-C55 也不例外,未来推出的智能视觉全面解决方案,将包括这款最新的Mali-C55 ISP,使机器视觉更加敏锐。

Arm在物联网领域看到的机会


在物联网领域,Arm将以全面解决方案 (Total Solutions for IoT) 的产品方式协助客户因应市场需求。Chloe Ma表示,在中国的物联网领域,应用都处在世界领先水平,比如在智能视觉方面,由于中国人口密度非常大,所以在智能安防和监控方面对图像处理的画质和性能提出更高的要求。中国是一个制造业大国,智能制造等智能产业都受到大力的扶持,而智能制造需要在智能语音、智能视觉方面得到更多应用。同时,在零售领域,中国在智能化方面也处于非常领先的市场水平,如智能无人售货柜、智能无人店,以及无接触的智能购物。从 Arm的角度来看,我们会与中国本土用例进行创新的芯片和系统厂商、软件厂商、算法厂商持续进行紧密合作,推出更适用于未来趋势和中国本土用例、本土需求的更先进的产品。


具体到Arm在物联网的策略有两点:一是边缘智能,未来物联网市场的发展会从万物互联到万物智连,智能包括智能视觉、智能听觉等技术,这也是Arm的解决方案投资的焦点。二是,Arm希望能够在比较通用的市场上,如MCU、NPU市场,推出更先进的产品,使这些通用市场得到性能提升,更好地支持AI、ML等工作负载。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • ARM
    ARM
    +关注

    关注

    134

    文章

    9091

    浏览量

    367476
  • 物联网
    +关注

    关注

    2909

    文章

    44608

    浏览量

    373081
收藏 人收藏

    评论

    相关推荐

    联网系统中的视频监控解决方案_摄像头模组分析

    联网系统中使用摄像头模组的原因主要基于摄像头模组在数据采集、监控、智能分析以及增强用户体验等方面的关键作用。
    的头像 发表于 10-08 10:31 821次阅读
    <b class='flag-5'>物</b><b class='flag-5'>联网</b>系统中的视频监控解决方案_<b class='flag-5'>摄像头</b>模组分析

    什么是联网技术

    :这是联网的基础层,负责采集物理世界的各种信息。包括各类传感器(如温度传感器、湿度传感器、压力传感器等)、摄像头、RFID 标签和读写器、GPS 定位设备等。这些设备能够感知环境中的物理量、物体
    发表于 08-19 14:08

    IP地址与联网安全

    IP地址的安全问题 : ·弱密码与默认设置: 许多联网设备在出厂时设置了简单的默认密码或默认的IP地址配置。攻击者可以轻易地利用这些已知的信息入侵设备。例如,某些
    的头像 发表于 07-15 10:26 491次阅读

    升级XIAO ESP32S3 Sense的摄像头到OV5640无法自动对焦怎么处理?

    Youtube的大佬DroneBot Workshop在他的最新视频里测试 OV5640 的时候提到升级后的摄像头没法自动对焦,是不是在代码初始化的时候需要设置什么啊?貌似没有文档提到自动对焦具体
    发表于 06-28 12:33

    智能摄像头抄表器是什么?

    1.概念理解:智能摄像头抄表器智能摄像头抄表器是一种融合了人工智能
    的头像 发表于 04-24 14:14 605次阅读
    <b class='flag-5'>智能</b><b class='flag-5'>摄像头</b>抄表器是什么?

    Arm推第三代边缘AI加速器:Arm Ethos-U85

    除了Ethos-U85之外,Arm还推出了全新的联网参考设计平台Corstone-320。该平台将Arm最高性能的Cortex-M85 CPU、M
    发表于 04-16 11:09 672次阅读
    <b class='flag-5'>Arm</b>推第三代边缘AI加速器:<b class='flag-5'>Arm</b> Ethos-U85

    Hi3519A V100 4K智能IP摄像头SoC数据手册

    电子发烧友网站提供《Hi3519A V100 4K智能IP摄像头SoC数据手册.pdf》资料免费下载
    发表于 04-09 16:25 5次下载

    电梯联网AI摄像头联网时代下的智能安全新篇章与技术发展|梯云

    联网技术如日方升的今天,电梯联网AI摄像头正成为智能安全领域的一颗璀璨明珠。随着
    的头像 发表于 04-02 15:36 887次阅读

    创龙教仪基于瑞芯微3568的ARM Cortex A-55教学实验箱 适用于人工智能 传感器 联网等领域

    适用课程 Cortex-A55 ARM嵌入式实验箱主要用于《ARM 系统开发》、《ARM 应用开发》《
    发表于 03-22 14:29

    电梯数智监控摄像头,电梯了“超能力”#电梯监控 #电梯安全 #电梯联网

    联网监控摄像头
    jf_69150321
    发布于 :2024年02月27日 09:28:31

    高清网络摄像头多媒体智能

    迪文全新推出的28系列智能屏,是面向屏幕实时显示高清网络摄像头视频画面应用的产品。该系列智能屏可通过以太网或WiFi连接摄像头,可接收H.264编码RTSP协议的
    的头像 发表于 02-19 13:21 585次阅读
    高清网络<b class='flag-5'>摄像头</b>多媒体<b class='flag-5'>智能</b>屏

    详解智能座舱内部的各种摄像头

    对于车载摄像头来说,它的特点在于摄像头的安装位置,和ISP处理芯片之间的距离。在2MP以下的摄像头,一般会直接输出YUV格式的图像数据,无需额外的I
    发表于 01-16 09:53 2317次阅读
    详解<b class='flag-5'>智能</b>座舱内部的各种<b class='flag-5'>摄像头</b>

    用usb摄像头替换手机前置摄像头可以吗

    将从技术实现、可行性和使用体验三方面,探讨这个问题。 一、技术实现: USB摄像头的连接:USB摄像头通过USB接口与智能手机连接。目前,大
    的头像 发表于 01-08 14:11 2745次阅读

    【飞腾派4G版免费试用】5.智能家居之IP摄像头

    【飞腾派4G版免费试用】5.智能家居之IP摄像头 提到智能家居,大家一定不会陌生一个开源项目 ——Home Assistant ,这个项目非常强大,特别适合爱折腾的发烧友。另外因为笔者
    发表于 12-28 17:14