0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

爱芯元智推出边端侧智能SoCAX650N,让视觉更智能

爱芯元智AXERA 来源:爱芯元智AXERA 2024-05-09 14:39 次阅读

当前大模型蓬勃发展,OpenAI的Sora、ChatGPT、CLIP、DALL-E,Google的Gemini、ViT-22B,Meta的LLaMA3、DINO v2,以及其他国内外知名机构的Stable Diffusion、腾讯混元、通用千问、百度文心一言、科大讯飞星火、月之暗面Kimi等,共同塑造了AI技术的新生态。这些多模态大模型凭借其强大的多种数据处理能力,不仅能够驾驭文本、图像、音频视频等常规数据类型,还展现出对时间序列、红外、超光谱、X射线等特殊模态的融合创新,为智能体验带来了质的飞跃。

814a9072-0dba-11ef-a297-92fbcf53809c.png

在此背景下,摄像头成为连接实体世界与数字世界的关键纽带,在诸多领域中激发了摄像头应用的无限潜能:从智慧城市到智能驾驶,从工业监控到医疗影像……在人工智能计算机视觉深度学习等技术的驱动下,摄像头技术正迎来全景、多维度、智能化的黄金发展期。

近日,在北京正印科技有限公司举办的光学成像质量技术研讨会上,爱芯元智智慧IoT事业部产品副总裁吴炜受邀发表《爱芯元智AX650N 让视觉更智能》的主题演讲,深度解析边端侧智能SoC——AX650N,以其卓越性能与技术创新,为摄像头赋予更强大、更智能的视觉处理能力,助力不同行业领域的领先发展。

近几年来,随着边缘计算需求的激增,市场对边端侧SoC的功能与功耗成本如何做平衡提出了极高的要求,不仅需要SoC具备大算力、高带宽、接口丰富,还要严格控制低功耗,成本效益显著。因此,爱芯元智匠心打造出一款高算力,低功耗的智能SoC芯片——AX650N,为摄像头智能化提供最佳澎湃动力。

AX650N

AX650N:全能配置 最适合边端侧的智能SoC

AX650N搭载三核NPU,支持Transformer架构,辅以双核VDSP,赋予其强大的深度学习处理能力,能够轻松应对各类复杂视觉任务。此外,该SoC具备丰富的接口配置,支持HDMI输出、PCIe、SATA等,确保与各类设备的无缝对接。在编解码方面,AX650N支持高达8K30fps的编码和8K60fps的解码,而且可以同时并行对32路1080p30fps视频解码,为多路高清视频应用提供了强大后盾。而典型功耗仅4W,可采用被动散热设计,甚至可以直接使用PoE供电,确保了产品可以在紧凑空间内稳定、高效运行。

8198d57a-0dba-11ef-a297-92fbcf53809c.png

在NPU方面,AX650N采用全自研创新架构,将应用、算法芯片深度协同设计,针对特定场景进行深入优化,使爱芯通元NPU性能更突出,实现卓越能效比;另外,AX650N除了高效率支持CNN,还原生支持Transformer,适配以文搜图大模型CLIP、开集目标检测大模型OWL-ViT、以及SAM+lama等模型,让图像搜索更便捷,目标识别更精准,甚至让用户轻松掌握专业级图像处理技能。

81a64ee4-0dba-11ef-a297-92fbcf53809c.png

AX650N在Transformer(SwinT)模型上的性能表现遥遥领先,CNN主流网络性能同样显著超越同侪

为了方便用户更便捷地使用各种算法,爱芯元智还内置了自研AI算法,包括人形检测、车形检测、车牌检测、非机动车检测等,精准识别各类目标。除此之外,爱芯元智积极与算法生态伙伴合作,适配了12大类,超过200个细分领域算法,确保AX650N在各类项目中的快速部署与无缝应用,形成涵盖智慧园区、智慧商业、智慧电力、智慧交通、智慧体测、智慧生态、智慧工地等众多场景的行业的完整解决方案。

81abdd1e-0dba-11ef-a297-92fbcf53809c.png

AX650N凭借丰富的接口,高能耗比,助力多种产品形态,包括高算力、低功耗、小封装的智能卡;高算力、多路解码、接口丰富的智能盒;支持44、HDR10、BT.2020色域、超低延迟的分布式坐席。

爱芯元智智慧IoT事业部产品负责人卢志洪介绍,随着人工智能的落地,NPU作为关键载体,正驱动各行各业发生颠覆性革新。在传统医疗领域,爱芯元智以AX650N为核心,开发了一系列涵盖单摄、双摄以及工业内窥镜类的完整解决方案,通过深度融合AI技术与NPU算力,实现了从影像采集、智能解读到决策支持的全流程智能化升级,为现代医疗开启了“智慧之眼”,铺就通往精准、高效诊疗的新里程。

01

AI-ISP与图像识别技术提升医疗成像质量,如AI防抖、AI星光全彩、AI HDR、AI多光谱融合、AI场景增强及多传感器融合,确保优异视觉效果。

02

混合精度算力快速解析CT、MRI、X光等影像,精准识别肿瘤、骨折、血管病变,大幅提升诊断准确率与效率。

03

NPU加速深度学习模型(如卷积神经网络,CNN),实时分析影像,产出高精度分割图、病灶标记与诊断建议。

04

实现二维影像到三维模型转化,助力医生进行空间定位、手术规划及复杂结构可视化。

05

通过加速人工智能算法的运行,提高医疗数据处理效率与准确性,支撑诊断、治疗、预防、管理等环节,推动精准医疗与智能化服务。

AX650N从技术上展现了爱芯元智对自研技术的升级突破,在实际应用中也证明了智能视觉芯片的领先地位。未来,爱芯元智将继续推进技术创新,通过与各类生态合作伙伴的共同开发,AX650N会在更多智能化场景中大放异彩,推动物理世界数字化、智能化的发展。



审核编辑:刘清

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • ai技术
    +关注

    关注

    1

    文章

    1241

    浏览量

    23903
  • 爱芯元智
    +关注

    关注

    1

    文章

    59

    浏览量

    4558
  • ChatGPT
    +关注

    关注

    28

    文章

    1494

    浏览量

    5881
  • 文心一言
    +关注

    关注

    0

    文章

    122

    浏览量

    1016
  • 大模型
    +关注

    关注

    2

    文章

    1884

    浏览量

    1506

原文标题:爱芯元智AX650N:智能SoC视觉更澎湃

文章出处:【微信号:爱芯元智AXERA,微信公众号:爱芯元智AXERA】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    **十万级口语识别,离线自然说技术,智能照明懂你**

    NLP技术。该技术基于语音识别技术及NLP技术,可识别十万级别口语说法,打破传统的
    发表于 04-29 17:09

    派 Pro 开发板试用体验】基于派 Pro 开发板的警用安防智能机器人设计

    技术的可用性。 基于基于派 Pro 开发板的警用安防智能机器人设计: AX650N是一款兼具高算力与高能效比的SoC芯片,集成了八核A55 CPU,43.2TOPs@INT4或
    发表于 01-14 21:56

    智能」获千万融资 原小天才团队牵手云从科技进军银发赛道

    并行的思路,推动居家养老看护赛道全新技术的升级。2024年起,智能将携手云从科技,共同推动大模型在居家养老看护情景落地,拓展各类护理场景,特别是多模态技术,特别是人机交互在语音和视觉方面的效果呈现
    发表于 01-05 11:48

    派 Pro 开发板试用体验】+ 图像分割和填充的Demo测试

    感谢电子发烧友和智公司提供的测试机会。 自从开箱派 Pro (AXera-Pi Pro)开发板之后一直没有更新,电子发烧友的小姐姐
    发表于 12-26 11:22

    派 Pro 开发板试用体验】部署派官方YOLOV5模型

    /install/ax650/ 路径下。 其中很多案例程序,因为智能教室需要清点人数,所以选择了YOLOV5和YOLOV7_TINY face两个demo。 三、下载模型
    发表于 12-12 22:58

    派 Pro 开发板试用体验】简单开箱和系统初步体验

    非常感谢电子发烧友平台组织本次试用活动,感谢智为我们的派 Pro (AXera-Pi Pro)开发板。 一、简单开箱 拆开快递包装
    发表于 11-26 14:38

    派 Pro 开发板试用体验】智AX650N部署yolov8s 自定义模型

    智AX650N部署yolov8s 自定义模型 本博客将向你展示零基础一步步的部署好自己的yolov8s模型(博主展示的是自己训练的手写数字识别模型),本博客教你从训练模型到转化
    发表于 11-24 20:40

    派 Pro 开发板试用体验】开箱测试

    感谢电子爱好者和智公司提供的测试机会。 派 Pro (AXera-Pi Pro)搭载
    发表于 11-20 22:09

    派 Pro 开发板试用体验】篇一:开箱篇

    了丰富的外设可供用户方便地进行调试。它可帮助用户在智慧城市、智慧教育、智能创造等领域发挥更大的价值。 上图: 关于AX650N
    发表于 11-15 11:32

    派 Pro 开发板试用体验】开箱报告 + 资料准备

    使用介绍。 Sipeed Wiki 智的AX650性能还是挺强大的,8核的A53加40Tops的int4算力,还有强大的视频编解码能力和AI ISP功能,对比友商的3588完全不
    发表于 11-14 20:59

    派 Pro 开发板试用体验】开箱报告

    开发板介绍 收到了派 Pro (AXera-Pi Pro)开发板,一个高能效比智能视觉芯片 AX650N,处理器是8核64位Cortex
    发表于 11-13 13:18

    派 Pro 开发板试用体验】智能数猪项目概述

    视觉技、大数据云计算技术而研发的智能化产品。 2.服务于智能养殖、数字化生产、生物资产安全及养殖大数据运用的鹰瞳产品。 3.通过非接触远距离,无人值守智能化自主完成:集盘点、估重、体尺
    发表于 11-13 09:40

    派 Pro 开发板试用体验】+开箱初次体验

    ) M4N-Dock开发板(已安装好风扇、适配器接口) 产品基本介绍    M4N-Dock 是 Sipeed 公司推出混合精度高
    发表于 11-12 10:58

    派 Pro 开发板试用体验】开箱报告

    首先感谢智 & 电子发烧友给与的试用机会! 首先介绍下智公司(AXERA):
    发表于 11-12 00:31

    鸿蒙智联再出发,携手伙伴共赢空间智能化,创造无限可能

    呵护级剃须体验,广大男士从此告别剃须时的“切肤之痛”;“海雀智能摄像头3 4K版” 持续引领智能摄像头行业的画质迭代升级,不仅为消费者带来了臻4K影院级画质,同时针对消费者家庭安防隐私的要求,
    发表于 08-09 17:14