0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

优化引擎和控制器,加速AI火箭

电子工程师 来源:未知 作者:李倩 2018-08-31 10:48 次阅读

你学过指数吗?恐怕没几个人会对这个问题说 “No”。那么,你对指数式发展有什么样的认识?这个问题回答起来也许就没那么容易了。然而,指数式发展实实在在地就在我们身边、在我们手上发生。不相信吗?看看你的手机

1965年,英特尔的创始人之一戈登·摩尔提出了“摩尔定律”。半个世纪以来,“摩尔定律”一直推动着人类社会不断向前进步。现在技术带来的便利,是半个世纪以前的人不能想象的。这正是因为“摩尔定律”在数学本质上是一个指数式发展定律,它指明了计算设备的计算能力将以指数式发展前进。

(图片来源:https://iq.intel.com/millennials-marching-to-the-quickening-metronome-of-moores-law/关键词为:Moore law)

指数式发展之所以难以认识,是因为一开始它的发展速度相对缓慢,甚至是难以察觉的,然而突破某个阶段之后,它就会以人力难以想象的速度飞升。就像一艘火箭,点火后的前五秒,它的速度并不快,可一旦马力全开,强大的引擎加上高动能的燃料,足以让火箭在几分钟内飞上蓝天,遨游太空。

目前,人工智能技术的发展,可以说正处在火箭的点火和准备加速阶段。在大众媒体上,AI相关的新闻比比皆是。在技术领域中,处理器算法的演进同样日新月异,公共云服务商UCloud和英特尔一起,在这方面携手取得了诸多进展。

▌优化引擎和控制器,加速AI火箭

UCloud实验室研发总监、创新产品线总监叶理灯指出:“人工智能有三个要素——数据、算法、计算能力。有一个理论叫’火箭理论’,就是説如果把人工智能当火箭的话,那么数据是火箭的原料,计算能力就是引擎,算法就是引擎的控制器。”

为了帮助初创企业、传统企业AI转型, UCloud推出了UCloud AI在线服务UAI-Inference,并以英特尔至强处理器E5产品家族作为这艘火箭的引擎,利用该处理器产品家族强大的可扩展性完成弹性部署,既能获得高性能,还降低了成本以及用户的TCO。

(图片来源: https://iq.intel.com/making-genomic-healthcare-available-to-everyone/关键词为 cloud computing)

在英特尔至强处理器这架引擎中,还集成了一套AVX浮点计算指令集,它有增强的数据重排能力,可以更有效地存储、读取数据。叶理灯和他的团队发现:在UCloud提供的公共云服务中,很多虚拟云主机仅仅用到简单指令集,而没有发挥AVX的强大能力。因此,他们和英特尔的工程师一起,在算法层面,利用各个虚拟机中此前未能“物尽其用”的英特尔AVX能力,借助其优势和特性,优化它在UCloud AI在线服务中的应用表现,满足AI在线服务的计算需求。AI在线服务时延成功降低到数百毫秒,完全满足UCloud用户的实际应用需求。

UAI-Inference还和英特尔合作,使用了性能更佳的AI框架——面向英特尔架构优化的Caffe框架,从而更好地支持英特尔至强处理器产品家族和至强融核TM处理器产品家族,其中集成最新版本的英特尔数学核心函数库2017,能更高效地利用英特尔AVX处理能力。

一系列测试结果表明,借助面向英特尔架构优化的Caffe框架,测试系统的执行时间从最初的37秒缩短至优化后的3.6秒,整体执行性能提高了10倍以上。UAI-Inference的AI在线服务效率得到了极大跃升。

换句话说,UCloud和英特尔一起,将UAI-Inference的引擎和其控制器的能力充分发挥出来,助推这架火箭飞得越来越快。

(原文链接: https://iq.intel.com/artificial-intelligence-teaching-machines-to-learn-like-humans/关键词 Caffe框架)

▌解决两大难题,把企业送上AI火箭

众多企业深知搭上AI火箭的重要性,但如果要自己搭建相关系统,却面临两大难题:

不熟悉AI系统的设计、部署和运维,AI系统需要多维度的巨大投入,一旦选型失败,就会面临高昂的成本损失。

即便初始选型正确,AI仍会带来巨大成本开支,侵蚀企业的总体TCO。

这两大难题正是UAI-Inference想要解决的痛点。基于大规模分布式计算平台,它提供了“两步走”时的部署模式。用户先按照UCloud提供的SDK工具包完成相关准备工作,打包完成任务的在线部署后,就能使用UAI-Inference的PaaS平台完成自动化的管理和维护,同时还保证了平台数据的安全性。

叶理灯说:“UAI-Inference给用户带来的最大优势,就是省去了部署时的大量繁琐工作,让用户可以将宝贵资源聚焦在自身业务上。”

(图片来源: https://iq.intel.com/artificial-intelligence-teaching-machines-to-learn-like-humans/ 关键词: Artificial Intelligence machine )

现在,UAI-Inference已经可以在图像识别、机器学习等多个AI领域满足企业用户的需求。一些人脸表情识别应用的实践检验证明:基于英特尔AVX支持的UAI-Inference,完全具备了与传统方案相媲美的能力,成效出色。“我们的目标是帮助用户像使用云主机、云存储这些成熟的云产品一样使用AI在线服务。”叶理灯说。

当火箭进入太空之后,进入失重状态的宇航员可以在火箭中自由漂浮。有朝一日,AI这架火箭也必将让人类从很多繁琐的劳动中解放出来,让我们自由自在,享受更多自由。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 控制器
    +关注

    关注

    112

    文章

    15547

    浏览量

    173511
  • 摩尔定律
    +关注

    关注

    4

    文章

    624

    浏览量

    78626
  • 人工智能
    +关注

    关注

    1781

    文章

    45064

    浏览量

    232452

原文标题:从摩尔定律到人工智能,指数定律释放人类潜能

文章出处:【微信号:rgznai100,微信公众号:rgznai100】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    赛灵思分享:智能引擎中所的AI引擎技术分析

    作者:Olivier Tremois(AI 引擎工具市场营销部门)和 Florent Werbrouck(赛灵思技术支持产品应用工程师) Versal ACAP 简介 Versal 自适应计算加速
    的头像 发表于 10-11 11:14 3000次阅读

    控制器加速芯片整合 大幅扩展MCU可应用场域

    进一步以基于硬体加速的数位演算法进行波形或数据再处理,形成一提升数据噪讯比(SNR)的便捷作法,数位滤波还可利用演算机制优化提供不同程度大小的滤波效果,这在于微控制器用于感测热门的心
    发表于 11-09 16:28

    Firefly支持AI引擎Tengine,性能提升,轻松搭建AI计算框架

    `Tengine 是OPEN AI LAB 为嵌入式设备开发的一个轻量级、高性能并且模块化的引擎。基于ARM平台高效的计算库实现,针对特定硬件平台的性能优化,吸取已有AI计算框架的优点
    发表于 08-13 15:58

    微型微控制器与强大的人工智能(AI)世界有什么关系

    AI设计主要参与方都是功能强大的CPU,GPU和FPGA等。微型微控制器与强大的人工智能(AI)世界有什么关系?但随着AI从云到边缘的发展,使得这一观点正在迅速改变,
    发表于 11-01 08:55

    自制火箭飞行控制器

    描述火箭飞行控制器
    发表于 07-27 06:56

    嵌入式边缘AI应用开发指南

    保驾护航。下面让我们来了解如何不借助手动工具或手动编程来选择模型、随时随地训练模型并将其无缝部署到TI处理上,从而实现硬件加速推理。图1: 边缘AI应用的开发流程第1步:选择模型边缘AI
    发表于 11-03 06:53

    利用设计网关的 IP 内核在 Xilinx VCK190 评估套件上加速人工智能应用

    结果是一个适应性强的加速器,其性能、延迟和能效超过了传统 FPGA 和 GPU 的性能、延迟和能效,适用于 AI/ML 工作负载。Versal ACAP 平台亮点适应性强的引擎:自定义内存层次结构
    发表于 11-25 16:29

    ST MCU边缘AI开发者云 - STM32Cube.AI

    STM32微控制器生成优化的C代码,无需事先安装软件。数据科学家和开发人员受益于STM32Cube.AI久经考验的神经网络优化性能,以开发边缘AI
    发表于 02-02 09:52

    基于协议控制器的DDR3访存控制器的设计及优化

    基于协议控制器的DDR3访存控制器的设计及优化_陈胜刚
    发表于 01-07 19:00 16次下载

    OPPO发布HyperBoost加速引擎 迎接全面加速时代

    10月11日,OPPO发布了全场景、系统级资源调度优化方案——OPPO Hyper Boost加速引擎。该引擎将帮助实现安卓智能手机功耗与性能表现的
    的头像 发表于 10-16 10:50 5168次阅读

    无控火箭的低成本多路点火时序控制器

    无控火箭的低成本多路点火时序控制器
    发表于 06-23 15:22 24次下载

    火箭飞行控制器开源项目

    电子发烧友网站提供《火箭飞行控制器开源项目.zip》资料免费下载
    发表于 07-25 14:17 0次下载
    <b class='flag-5'>火箭</b>飞行<b class='flag-5'>控制器</b>开源项目

    远日点火箭队飞行控制器

    电子发烧友网站提供《远日点火箭队飞行控制器.zip》资料免费下载
    发表于 07-29 10:14 0次下载
    远日点<b class='flag-5'>火箭</b>队飞行<b class='flag-5'>控制器</b>

    模型火箭发射控制器电路

    模型火箭是很好玩的东西,但如果不小心处理可能会很危险。该火箭倒计时发射控制器在发射模型火箭时非常有用,并且还为用户提供了安全性。该发射控制器
    的头像 发表于 07-02 10:35 1102次阅读
    模型<b class='flag-5'>火箭</b>发射<b class='flag-5'>控制器</b>电路

    富唯智能AI边缘控制器:工业自动化的智慧引擎

    随着工业4.0时代的到来,工业自动化成为了推动制造业转型升级的关键力量。在这样的背景下,富唯智能凭借其自主研发的AI边缘控制器,成为了工业自动化的智慧引擎,为制造业的智能化、数字化发展提供了强有力的支持。
    的头像 发表于 05-22 15:32 230次阅读
    富唯智能<b class='flag-5'>AI</b>边缘<b class='flag-5'>控制器</b>:工业自动化的智慧<b class='flag-5'>引擎</b>