0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

Microchip CEO博文《AI将如何重新定义数据中心?》

Microchip微芯 来源:Microchip 作者:Microchip 2023-12-11 14:50 次阅读

AI已经存在了一段时间,其影响也相当巨大。生成式AI刚开始崭露头角,对于其如何颠覆世界的种种预言已经迅速成为热门话题,影响之深广,令人深思。

这项技术已经对数据中心产生了重大影响。基于必须在云端训练和运行的模型的大小,生成式AI的基础设施需求预计将比早期AI模型高出10到100倍。事实上,所有数据中心基础设施都受到这一趋势的影响,包括电力、HVAC网络和物理布局。数据中心将如何扩展规模以适应呈指数级增长的生成式AI大型语言模型?

生成式AI的成功可能取决于半导体行业对以下几个方面的关注,一是先进的AI处理器,二是如何存储和处理所有这些数据,最后是确保数据中心散热更佳、更高效且更安全。

我们已经解决了这类问题,以便数据中心运营商能够为5G、云服务和新一代的AI/ML应用提供支持。我们的单片机、存储器、PCIe开关、安全解决方案和其他产品提供了各种解决方案,以应对从连接AI处理卡到优化数据访问、存储、安全和保护等一系列AI挑战,同时提供必要的带宽、端口密度和连接能力,从而处理不断增加的流量。

类似的挑战也适用于数据中心和本地服务器中的生成式AI,其应对难度也进一步放大。生成式AI似乎也存在一种途径,能够扩展到物联网应用中的网络边缘,如患者监测和汽车交通违规检测。有些人认为,如果生成式AI产生的海量数据必须在云端而不是在边缘处理,那么这些应用便无法取得成功。

如今的边缘AI解决方案可能为生成式AI提供了一种路线图。语音识别系统和AI摄像头等计算机视觉产品可在边缘提供许多优势,包括消除网络延迟和将隐私控制权交还给用户。它们有助于降低功耗,因为只有在检测到不规则的变化后才会将视频流传输到云端,而不是像“傻瓜”摄像头那样连续不断地传输。可以预计,未来的边缘设备也会采用这种方案。

但是,将生成式AI引入到边缘将比引入传统AI更加困难。由于数据量更大,电力问题将变得更具挑战性。硬件需求将远远超过传统AI所需,并且解决方案还需要为智能边缘的电池供电、深度嵌入式设备提供必要的安全性和其他独特功能。

我们已经关注到这些挑战。例如,我们正在探索如何利用当前的Wi-Fi设备实现串行端口到生成式AI的桥接。在这种情况下,生成式AI并非在边缘实现,而是通过8位单片机的UART访问。单片机会产生一个实时传感器数据穿插其中的预定义提示语,将其发送到生成式AI解决方案,然后根据回答采取行动。目前,尚不明确端点能否在边缘独立运行生成式AI而不回调至数据中心,但我们正处于创新的早期阶段。

与我们服务的任何市场一样,Microchip的目标是尽可能简化解决行业中一些最基本的系统设计挑战。这包括提供丰富的产品组合,以便客户能够采用全面系统解决方案的方法实现创新。我们会帮助解决在需要新功能的成熟应用中遇到的挑战,同时也为长期的安全性、保护性和可靠性要求提供支持。针对生成式AI等最新的新兴技术,我们也会采取同样的做法,这些技术描绘了令人期待的未来,但在兑现承诺之前,这些技术仍然面临着相同的基本系统设计挑战。


声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • microchip
    +关注

    关注

    52

    文章

    1493

    浏览量

    117445
  • 数据中心
    +关注

    关注

    16

    文章

    4613

    浏览量

    71864
  • AI
    AI
    +关注

    关注

    87

    文章

    29611

    浏览量

    267902
  • 生成式AI
    +关注

    关注

    0

    文章

    476

    浏览量

    443

原文标题:CEO博文《AI将如何重新定义数据中心?》

文章出处:【微信号:MicrochipTechnology,微信公众号:Microchip微芯】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    单片机中宏定义重新定义数据类型(typedef)区别

    单片机中宏定义重新定义数据类型(typedef)区别,并且各自的优势(初学单片机)eg:#define SKY unsigned chartypedef unsigned char SKY
    发表于 08-27 20:21

    数据中心太耗电怎么办

    ​​​​​​摘要:其实对于节能,传统技术也是做了“十二分”的努力。但是在技术不断演进的情况下,传统节能技术还是存在问题,如何破?本文分享自华为云社区《数据中心节能?来试试华为NAIE数据中心节能技术
    发表于 06-30 06:27

    数据中心是什么

    数据中心是什么:数据中心是全球协作的特定设备网络,用来在因特网络基础设施上传递、加速、展示、计算、存储数据信息。数据中心大部分电子元件都是由低直流电源驱动运行的。
    发表于 07-12 07:10

    什么是数据中心

    数据中心是企业用来容纳其关键业务应用程序和信息的物理设施。随着它们的发展,重要的是要长期考虑如何保持它们的可靠性和安全性。什么是数据中心数据中心通常被称为单个事物,但实际上它们由许多技...
    发表于 09-15 06:46

    通过高压创新重新定义电源管理

    通过高压创新重新定义电源管理,感兴趣的可以瞧一瞧。
    发表于 11-16 15:22 1次下载
    通过高压创新<b class='flag-5'>重新定义</b>电源管理

    微软部署水下数据中心重新定义“水冷”

    多年来,微软一直致力于水下数据中心的研究。早在2015年,该公司就在加州推出了水下数据中心原型。现在这个水下数据中心包含12排电脑,总共有864台服务器,它将由一条连接欧洲海洋能源中心
    发表于 07-14 10:47 820次阅读

    重新定义ADC在无线领域的角色

    重新定义ADC在无线领域的角色
    发表于 05-26 16:23 1次下载
    <b class='flag-5'>重新定义</b>ADC在无线领域的角色

    现代工作负载正在重新定义下一代数据中心

    目前数据中心容纳了全球约三分之一的数据。2020年的数据量大约是20ZB,预计到2025年都将保持15-20%的年增长率。数据中心面临的挑战不仅包括需要支持海量的
    的头像 发表于 06-21 14:15 788次阅读

    通过高压创新 重新定义电源管理

    通过高压创新 重新定义电源管理
    发表于 11-02 08:16 0次下载
    通过高压创新 <b class='flag-5'>重新定义</b>电源管理

    边缘计算如何重新定义 IIoT 应用程序

    边缘计算如何重新定义 IIoT 应用程序
    的头像 发表于 01-03 09:45 705次阅读
    边缘计算如何<b class='flag-5'>重新定义</b> IIoT 应用程序

    AI2.0时代,工业视觉正被重新定义

    【工业实践干货分享】AI2.0时代,工业视觉正被重新定义
    的头像 发表于 04-12 13:40 1193次阅读
    <b class='flag-5'>AI</b>2.0时代,工业视觉正被<b class='flag-5'>重新定义</b>

    软件定义数据中心

    电子发烧友网站提供《软件定义数据中心.pdf》资料免费下载
    发表于 08-10 16:10 0次下载
    软件<b class='flag-5'>定义</b><b class='flag-5'>数据中心</b>

    AI化革命:大厂如何重新定义数据中心的未来

    人工智能应用通常需要大规模的高性能计算资源,包括GPU和TPU等加速器。因此,数据中心需要具备足够的计算能力来支持这些应用的训练和推理。这意味着数据中心需要更多的服务器和更强大的网络基础设施,以确保高性能计算任务能够顺畅执行。
    的头像 发表于 10-10 16:29 792次阅读
    <b class='flag-5'>AI</b>化革命:大厂如何<b class='flag-5'>重新定义</b><b class='flag-5'>数据中心</b>的未来

    墨芯人工智能CEO王维:需要重新定义和设计AI计算机

    AI时代,我们需要重新定义和设计AI计算机。仅依靠硅基的摩尔定律,2年翻一倍的线性增长的算力供给远不能满足指数级增长的需求问题。
    的头像 发表于 01-12 11:12 998次阅读

    AI时代,我们需要怎样的数据中心AI重新定义数据中心

    超过60%的中国企业计划在未来12至24个月内部署生成式人工智能。AI、模型的构建,将颠覆数据中心基础设施的建设、运维和运营。一个全新的数据中心智能化时代已经拉开序幕。
    发表于 07-16 11:33 578次阅读
    <b class='flag-5'>AI</b>时代,我们需要怎样的<b class='flag-5'>数据中心</b>?<b class='flag-5'>AI</b><b class='flag-5'>重新定义</b><b class='flag-5'>数据中心</b>