当前大模型蓬勃发展,OpenAI的Sora、ChatGPT、CLIP、DALL-E,Google的Gemini、ViT-22B,Meta的LLaMA3、DINO v2,以及其他国内外知名机构的Stable Diffusion、腾讯混元、通用千问、百度文心一言、科大讯飞星火、月之暗面Kimi等,共同塑造了AI技术的新生态。这些多模态大模型凭借其强大的多种数据处理能力,不仅能够驾驭文本、图像、音频、视频等常规数据类型,还展现出对时间序列、红外、超光谱、X射线等特殊模态的融合创新,为智能体验带来了质的飞跃。
在此背景下,摄像头成为连接实体世界与数字世界的关键纽带,在诸多领域中激发了摄像头应用的无限潜能:从智慧城市到智能驾驶,从工业监控到医疗影像……在人工智能、计算机视觉和深度学习等技术的驱动下,摄像头技术正迎来全景、多维度、智能化的黄金发展期。
近日,在北京正印科技有限公司举办的光学成像质量技术研讨会上,爱芯元智智慧IoT事业部产品副总裁吴炜受邀发表《爱芯元智AX650N 让视觉更智能》的主题演讲,深度解析边端侧智能SoC——AX650N,以其卓越性能与技术创新,为摄像头赋予更强大、更智能的视觉处理能力,助力不同行业领域的领先发展。
近几年来,随着边缘计算需求的激增,市场对边端侧SoC的功能与功耗成本如何做平衡提出了极高的要求,不仅需要SoC具备大算力、高带宽、接口丰富,还要严格控制低功耗,成本效益显著。因此,爱芯元智匠心打造出一款高算力,低功耗的智能SoC芯片——AX650N,为摄像头智能化提供最佳澎湃动力。
AX650N
AX650N:全能配置 最适合边端侧的智能SoC
AX650N搭载三核NPU,支持Transformer架构,辅以双核VDSP,赋予其强大的深度学习处理能力,能够轻松应对各类复杂视觉任务。此外,该SoC具备丰富的接口配置,支持HDMI输出、PCIe、SATA等,确保与各类设备的无缝对接。在编解码方面,AX650N支持高达8K30fps的编码和8K60fps的解码,而且可以同时并行对32路1080p30fps视频解码,为多路高清视频应用提供了强大后盾。而典型功耗仅4W,可采用被动散热设计,甚至可以直接使用PoE供电,确保了产品可以在紧凑空间内稳定、高效运行。
在NPU方面,AX650N采用全自研创新架构,将应用、算法与芯片深度协同设计,针对特定场景进行深入优化,使爱芯通元NPU性能更突出,实现卓越能效比;另外,AX650N除了高效率支持CNN,还原生支持Transformer,适配以文搜图大模型CLIP、开集目标检测大模型OWL-ViT、以及SAM+lama等模型,让图像搜索更便捷,目标识别更精准,甚至让用户轻松掌握专业级图像处理技能。
AX650N在Transformer(SwinT)模型上的性能表现遥遥领先,CNN主流网络性能同样显著超越同侪
为了方便用户更便捷地使用各种算法,爱芯元智还内置了自研AI算法,包括人形检测、车形检测、车牌检测、非机动车检测等,精准识别各类目标。除此之外,爱芯元智积极与算法生态伙伴合作,适配了12大类,超过200个细分领域算法,确保AX650N在各类项目中的快速部署与无缝应用,形成涵盖智慧园区、智慧商业、智慧电力、智慧交通、智慧体测、智慧生态、智慧工地等众多场景的行业的完整解决方案。
AX650N凭借丰富的接口,高能耗比,助力多种产品形态,包括高算力、低功耗、小封装的智能卡;高算力、多路解码、接口丰富的智能盒;支持44、HDR10、BT.2020色域、超低延迟的分布式坐席。
爱芯元智智慧IoT事业部产品负责人卢志洪介绍,随着人工智能的落地,NPU作为关键载体,正驱动各行各业发生颠覆性革新。在传统医疗领域,爱芯元智以AX650N为核心,开发了一系列涵盖单摄、双摄以及工业内窥镜类的完整解决方案,通过深度融合AI技术与NPU算力,实现了从影像采集、智能解读到决策支持的全流程智能化升级,为现代医疗开启了“智慧之眼”,铺就通往精准、高效诊疗的新里程。
01
AI-ISP与图像识别技术提升医疗成像质量,如AI防抖、AI星光全彩、AI HDR、AI多光谱融合、AI场景增强及多传感器融合,确保优异视觉效果。
02
混合精度算力快速解析CT、MRI、X光等影像,精准识别肿瘤、骨折、血管病变,大幅提升诊断准确率与效率。
03
NPU加速深度学习模型(如卷积神经网络,CNN),实时分析影像,产出高精度分割图、病灶标记与诊断建议。
04
实现二维影像到三维模型转化,助力医生进行空间定位、手术规划及复杂结构可视化。
05
通过加速人工智能算法的运行,提高医疗数据处理效率与准确性,支撑诊断、治疗、预防、管理等环节,推动精准医疗与智能化服务。
AX650N从技术上展现了爱芯元智对自研技术的升级突破,在实际应用中也证明了智能视觉芯片的领先地位。未来,爱芯元智将继续推进技术创新,通过与各类生态合作伙伴的共同开发,AX650N会在更多智能化场景中大放异彩,推动物理世界数字化、智能化的发展。
审核编辑:刘清
-
ai技术
+关注
关注
1文章
1266浏览量
24285 -
爱芯元智
+关注
关注
1文章
78浏览量
4830 -
ChatGPT
+关注
关注
29文章
1558浏览量
7595 -
文心一言
+关注
关注
0文章
124浏览量
1275 -
大模型
+关注
关注
2文章
2423浏览量
2640
原文标题:爱芯元智AX650N:智能SoC视觉更澎湃
文章出处:【微信号:爱芯元智AXERA,微信公众号:爱芯元智AXERA】欢迎添加关注!文章转载请注明出处。
发布评论请先 登录
相关推荐
评论