0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

Flex Logix InferX X1M边缘推理加速器

星星科技指导员 来源:嵌入式计算设计 作者:嵌入式计算设计 2022-07-11 09:56 次阅读

每种类型的边缘 AI 都有三个硬性和快速的技术要求:低功耗、小尺寸和高性能。当然,“小型”、“节能”或“高性能”的构成因用例而异,可以描述从小型微控制器到边缘服务器的所有内容,但通常您必须至少牺牲一个才能获得其他。

但是,一种可以解决从边缘云到端点的所有问题而无需牺牲的解决方案是 FPGA

几十年来,FPGA 一直用于提供低功耗、高性能的设计灵活性,无论应用程序或外形尺寸如何,但它们并不完全是用户友好的——复杂的 AI 模型和算法的不断发展加剧了这一事实。然而,在有挑战的地方通常也有机会,对于工业自动化、智慧城市、交通、医疗保健、农业和其他市场中的边缘人工智能用例,以及其他快速采用计算机视觉等功能的市场,机会以FlexLogix X1M 人工智能加速器。

Flex Logix X1M AI 加速器针对实时、高分辨率计算机视觉用例,这些用例运行基于 Yolov3、Yolov4 和 Yolov5 等模型的小批量深度学习工作负载。为了以比 NVIDIA Tesla T4、Xavier NX 或 Jetson TX2 等设备更高的每美元吞吐量提供视觉边缘推理,新的 X1M M.2 模块利用 Flex Logix 的 InferX X1 架构,将 4K INT8 MAC 内核组合成 64 个8 MB SRAM 和 4 GB 16 MTps LPDDR4X DRAM 支持 x 64 张量处理器阵列。

鉴于板载内存,X1M AI 加速器本身支持 PCI Express Gen 3 或 4 的 x2 通道作为主机总线协议。PCIe 支持不仅促进了张量阵列与内存和存储中的数据或模型之间的高速数据传输,还能够符合 M.2 2280 B+M 关键外形规格规格,尺寸为 22 mm (W) x 80 毫米(长)x 17 毫米深(包括散热器)。

X1M AI 加速器的大小与口香糖差不多,消耗的功率也比时钟收音机多一点,它真正占据了技术功率-性能尺寸维恩图的中心

InferX X1M 边缘推理加速器正在运行

该平台的张量阵列使其能够处理具有数百层、数十个并行通道和多种算子类型的深度神经网络,与 GPU 不同,它可以应用于批量小至 1 的百万像素图像。

尽管展示了 ASIC 的性能特征,但 InferX X1M 拥有 FPGA 独有的能力。其中包括可重新配置的数据路径,允许设备硬件适应新的和不同的模型技术,即使在现场部署之后也是如此。从本质上讲,这使这些设备能够面向未来。

重要的是,用户无需了解硬件开发语言或手动重新编程 FPGA 比特流即可访问这些功能以及控制逻辑等其他功能。这要归功于为用户提供对低级平台控制功能和监控功能的内部访问以及可用于应用程序配置或模型部署的外部访问的 API

此外,开放神经网络交换 (ONNX) 格式的兼容性允许 InferX X1M 工具以最佳方式自动将框架中表示的任何模型映射到 X1 加速器。

该解决方案支持在 Windows 和 Linux 操作环境中进行开发。

Flex Logix InferX X1M 加速器入门

除了上面列出的好处之外,InferX X1M 加速器的最大优势可能在于它使边缘 AI 和计算机视觉 OEM 和系统集成商不必设计自己的定制板。这些 M.2 模块设计用于在 0ºC 至 50ºC 的温度范围和 10% 至 90% 的相对非冷凝湿度范围内可靠地运行,所有这些都具有竞争力的成本。

审核编辑:郭婷

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • asic
    +关注

    关注

    34

    文章

    1206

    浏览量

    120864
  • 神经网络
    +关注

    关注

    42

    文章

    4785

    浏览量

    101280
  • AI
    AI
    +关注

    关注

    87

    文章

    31858

    浏览量

    270681
收藏 人收藏

    评论

    相关推荐

    AN207 GD32G5x3三角函数加速器TMU的使用说明

    电子发烧友网站提供《AN207 GD32G5x3三角函数加速器TMU的使用说明.pdf》资料免费下载
    发表于 01-21 17:30 0次下载
    AN207 GD32G5<b class='flag-5'>x</b>3三角函数<b class='flag-5'>加速器</b>TMU的使用说明

    EE-436:使用ADSP-SC59x/2159x高性能FIR/IIR加速器

    电子发烧友网站提供《EE-436:使用ADSP-SC59x/2159x高性能FIR/IIR加速器.pdf》资料免费下载
    发表于 01-07 14:12 0次下载
    EE-436:使用ADSP-SC59<b class='flag-5'>x</b>/2159<b class='flag-5'>x</b>高性能FIR/IIR<b class='flag-5'>加速器</b>

    STM32N647X0 高性能 Arm Cortex-M55 MCU、800MHz、4.2MB SRAM、Neural-ART 加速器 600 GOPS、NeoChrom GPU

    主要优点 在 MCU 上实现高性能边缘 AI 嵌入式专有神经处理单元 ST Neural-ART 加速器。 ® Arm Cortex-M55® 内核,频率为 800 MHz,是迄今为止最高
    的头像 发表于 12-30 11:18 946次阅读
    STM32N647<b class='flag-5'>X</b>0 高性能 Arm Cortex-<b class='flag-5'>M</b>55 MCU、800MHz、4.2MB SRAM、Neural-ART <b class='flag-5'>加速器</b> 600 GOPS、NeoChrom GPU

    从版本控制到全流程支持:揭秘Helix Core如何成为您的创意加速器

    加速器
    龙智DevSecOps
    发布于 :2024年11月26日 13:42:47

    IBM与AMD携手部署MI300X加速器,强化AI与HPC能力

    近日,据外媒最新报道,国际商业机器公司(IBM)与超威半导体公司(AMD)已正式宣布达成一项重要合作。双方将携手在IBM Cloud上部署AMD的Instinct MI300X加速器,这一创新
    的头像 发表于 11-21 11:07 332次阅读

    IBM将在云平台部署AMD加速器

    IBM与AMD近期宣布了一项重要合作协议,根据协议,IBM将在其云平台上部署AMD Instinct MI300X加速器。这一举措旨在提升企业客户在生成式AI模型方面的性能和能效,进一步推动AI技术的创新与应用。
    的头像 发表于 11-19 16:24 293次阅读

    IBM与AMD携手将在IBM云上部署AMD Instinct MI300X加速器

    近日,全球领先的科技企业IBM与AMD共同宣布了一项重要合作。双方计划在IBM云上部署AMD的Instinct MI300X加速器服务,以满足企业客户对于高性能和高效能AI模型的需求。 据悉,这项
    的头像 发表于 11-19 11:03 542次阅读

    ADI收购Flex Logix,强化数字产品组合

    近日,全球领先的半导体公司ADI(Analog Devices, Inc.)宣布完成了对美国创新企业Flex Logix的收购。Flex Logix是一家专注于可重构计算技术的公司,为
    的头像 发表于 11-12 14:17 490次阅读

    今日看点丨ADI收购eFPGA公司Flex Logix;业界首款!湖北发布高性能车规级芯片DF30

    1. ADI 收购eFPGA 公司Flex Logix   设计可重构AI芯片的美国创企Flex Logix的官网显示,该公司已将其技术资产
    发表于 11-11 11:26 676次阅读

    AMD助力HyperAccel开发全新AI推理服务

    ( LLM )的推理,此类模型通常具有数十亿个参数,例如 OpenAI 的 ChatGPT 和 Meta 的 Llama 3 等 Llama LLM。其 AI 芯片名为时延处理单元( LPU ),是专门用于 LLM 端到端推理的硬件加速
    的头像 发表于 09-18 09:37 531次阅读
    AMD助力HyperAccel开发全新AI<b class='flag-5'>推理</b>服务<b class='flag-5'>器</b>

    “白地板”方案,智算中心加速器

    明德源能白地板方案,智算中心加速器
    的头像 发表于 06-21 11:54 866次阅读

    Arm推动生成式AI落地边缘!全新Ethos-U85 AI加速器支持Transformer 架构,性能提升四倍

    电子发烧友网报道(文/黄晶晶)在嵌入式领域,边缘与端侧AI推理需求不断增长,Arm既有Helium 技术使 CPU 能够执行更多计算密集型的 AI 推理算法,也有Ethos 系列 AI 加速器
    的头像 发表于 04-16 09:10 4769次阅读
    Arm推动生成式AI落地<b class='flag-5'>边缘</b>!全新Ethos-U85 AI<b class='flag-5'>加速器</b>支持Transformer 架构,性能提升四倍

    Hailo获1.2亿美元新融资,首发AI加速器Hailo-10,助力边缘设备实现生成式人工智能

    引入边缘计算领域,为行业发展注入新动力。 边缘人工智能处理的领先芯片制造商Hailo近日宣布C轮融资再获1.2亿美元投资。与此同时,Hailo还推出创新型Hailo-10高性能生成式人工智能(GenAI)
    的头像 发表于 04-03 11:57 399次阅读

    三星电子瞄准边缘计算市场,计划2025年推出AI加速器芯片Mach-1

    据了解,Mach-1芯片在推理过程中所需的内存带宽相比现有设计有大幅降低,降幅高达0.125倍,这一显著优化使其在边缘计算领域的应用更具优势。
    的头像 发表于 03-22 14:30 1345次阅读

    Tenstorrent将为日本LSTC新型边缘2纳米AI加速器开发芯片

    加拿大AI芯片领域的初创公司Tenstorrent与日本尖端半导体技术中心(LSTC)达成了一项多层次合作协议。根据协议内容,LSTC将采用Tenstorrent的世界级RISC-V架构和芯片IP来开发其新型边缘2纳米人工智能加速器
    的头像 发表于 02-28 10:49 791次阅读