0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

IBM开发新芯片为AI提速:消除片外内存,灵感来自大脑

传感器专家网 来源:澎湃新闻 作者:澎湃新闻 2023-10-23 15:43 次阅读

IBM研发的北极点(NorthPole)处理器芯片可避开访问外部存储器,提高计算能力,节约能源。

美国加利福尼亚州圣何塞的IBM研究人员开发了一种以大脑为灵感的计算机芯片,这款北极点处理器芯片消除了频繁访问外部存储器的需要,在图像识别任务中比现有架构更快,能源消耗更少。这表明计算和内存可以大规模集成。相关研究10月19日发表在《科学》杂志。

北极点芯片采用神经推理结构,由简单计算单元组成的多层阵列通过编程来识别数据中的模式。底层接收数据,例如图像中的像素;每一个连续的层检测日益复杂的模式,并将信息传递给下一层;顶层输出结果,例如可以表示图像含有猫、汽车或其他物体的可能性。

在传统冯·诺伊曼架构下,计算和存储分离。传统计算机芯片可以有效处理计算,但每次计算时仍然需要使用被称为RAM的外部存储器。因此不管处理器运行多快、性能多好,每次执行运算时都需要把数据从存储器搬到处理器中,数据处理完再搬回到存储器。在以数据为主的AI计算之下,冯·诺伊曼架构的“存储墙”和“功耗墙”挑战凸显。论文合著者、IBM计算机工程师达门德拉·莫达(Dharmendra Modha)表示,他曾估计在这种架构上模拟人类大脑可能需要12个核反应堆的能源输出。

而北极点芯片使存储单元在物理上尽可能接近计算单元中的计算元件。北极点芯片由256个计算单元组成,每个计算单元都有内存,通过消除片外内存,将计算与片上内存交织在一起。这些计算单元以一种网络连接在一起,这种网络的灵感来自于人类大脑皮层之间的白质连接。

在不使用最先进工艺的情况下,北极点芯片能耗是使用最先进技术的人工智能芯片的1/5。论文作者估计,如果北极点芯片设计采用最先进的制造工艺,其效率将是目前设计的25倍。论文提到,“在ResNet50基准图像分类网络上,相对于使用类似12纳米技术工艺的GPU, 北极点实现了每瓦FPS(每秒传输帧数)的能量度量高25倍,每个晶体管FPS的空间度量高5倍,延迟时间度量低22倍。”

不过,据《自然》杂志报道,即使是北极点芯片224兆内存对于大型语言模型来说也是不够的,比如聊天机器人ChatGPT这样的语言模型,即使在最精简的版本中也要占用几千兆的数据。而且该芯片只能运行预先编程的神经网络,这些神经网络需要在单独的机器上提前训练。但论文作者表示,北极点芯片架构可能在速度关键型应用中有用,比如自动驾驶汽车。

审核编辑 黄宇

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 芯片
    +关注

    关注

    456

    文章

    51157

    浏览量

    427073
  • 内存
    +关注

    关注

    8

    文章

    3052

    浏览量

    74306
  • AI
    AI
    +关注

    关注

    87

    文章

    31494

    浏览量

    270243
收藏 人收藏

    评论

    相关推荐

    IBM携手欧莱雅开发首个可持续化妆品AI模型

    的关键洞察,帮助欧莱雅使用可持续的原材料,从而减少能源和材料浪费。双方将开发定制的AI 基础模型,以显著提高欧莱雅研发与创新团队的能力,助力公司在各类化妆品和全球范围内进一步提升业绩和消费者满意度。这一基于化妆品配方的基础模型
    的头像 发表于 01-21 09:22 237次阅读

    SK海力士增产HBM DRAM,应对AI芯片市场旺盛需求

    SK海力士今年计划大幅提升其高带宽内存(HBM)的DRAM产能,目标是将每月产能从去年的10万增加至17万,这一增幅达到了70%。此举被视为该公司对除最大客户英伟达,其他领先人工
    的头像 发表于 01-07 16:39 296次阅读

    SK海力士新设AI芯片开发与量产部门

    韩国存储芯片巨头SK海力士于近日宣布,巩固其在人工智能(AI)内存领域的领先地位,公司决定在年度组织调整中新增两个专门部门,专注于下一代AI
    的头像 发表于 12-06 10:56 368次阅读

    AI提速,墨云藏境系列DDR5实测体验

    自大语言模型ChatGPT问世以来,人工智能(AI)技术迎来了爆发式增长。在被誉为AI应用元年的2024年中,与AI相关的软、硬件产品不断创新推出,影响力也正逐渐渗透至各行各业及日常生
    的头像 发表于 10-30 14:13 243次阅读
    <b class='flag-5'>为</b><b class='flag-5'>AI</b><b class='flag-5'>提速</b>,墨云藏境系列DDR5实测体验

    IBM推出高性能AI模型Granite 3.0

    在近日举行的IBM年度TechXchange大会上,IBM正式推出了其最先进的AI模型家族——Granite 3.0。这款旗舰级语言模型代表了IBM
    的头像 发表于 10-28 17:39 506次阅读

    IBM Cloud将部署英特尔Gaudi 3 AI芯片

    近日,科技巨头IBM与英特尔宣布了一项重大合作计划,双方将共同在IBM Cloud平台上部署英特尔最新的Gaudi 3 AI芯片,预计该服务将于2025年初正式上线。此次合作标志着两家
    的头像 发表于 09-03 15:52 425次阅读

    IBM进入中国市场四十年,携手共赢新的AI时代

    中国合作伙伴招募负责人罗昕、IBM 中国合作伙伴技术支持负责人徐建光从企业战略、渠道政策、全栈技术和应用场景等维度,IBM 校友” 们重新介绍了“今天的 IBM”,并分享了新的
    的头像 发表于 08-16 11:22 769次阅读

    IBM助力图灵新智算构建全能AI平台

    和watsonx.governance,以及 IBM 企业级 AI 数字助理软件 watsonx Assistant 和 AI 文档理解与分析软件 Watson Discovery, 构建全能的
    的头像 发表于 08-02 14:53 643次阅读

    请问如何使用SRAM?

    Hi , 在项目中,我们需要增加SRAM,型号是IS62WVS5128GALL 大小是512kb,请问你们是否支持此IC,能否提供驱动或者demo?
    发表于 06-25 08:01

    来自IBM THINK 2024 的六大启示

    如何让AI从试点走向规模应用,真正惠及企业 北京2024年6月19日 /美通社/ -- 汇聚全球5000多位商业、技术领导人,以及IBM行业客户、合作伙伴的IBM THINK大会,两周前在美国波士顿
    的头像 发表于 06-19 22:17 424次阅读

    Rapidus与IBM合作研发小芯片封装技术

    在半导体行业的新浪潮中,Rapidus Corporation与IBM携手合作,共同开发芯片(chiplet)封装的量产技术。此次合作旨在推动高性能半导体封装技术的创新与发展。
    的头像 发表于 06-06 09:13 463次阅读

    AI芯片哪里买?

    AI芯片
    芯广场
    发布于 :2024年05月31日 16:58:19

    IBM向全球企业转型顾问推出新的AI服务平台—Consulting Advantage

    为了协助 IBM 咨询团队持续客户交付一致性的高品质、可复制、高效的咨询顾问服务,日前,IBM 向全球 16万 IBM 企业转型顾问推出新的 AI
    的头像 发表于 04-12 09:25 689次阅读

    开发者手机 AI - 目标识别 demo

    。 NNRt host 实现了NNRt HDI接口功能,通过对接底层AI芯片接口上层应用提供NPU硬件推理的能力。 功能实现 JS从相机数据流获取一张图片,调用Native的接口进行目标识别的处理
    发表于 04-11 16:14

    IBM在watsonx上提供开源的Mistral AI模型

    上最新的开源模型,watsonx 提供企业就绪的人工智能开发平台、数据存储和治理功能 IBM(纽约证券交易所代码:IBM)近日宣布,由 Mistral AI 公司
    的头像 发表于 03-12 19:10 1361次阅读