0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

如何使深度学习系统在超级计算机上测试运行?

EdXK_AI_News 来源:未知 作者:胡薇 2018-09-18 16:57 次阅读

机器学习是一种人工智能技术,在商业应用中取得了前所未有的成功。但是,机器学习在科学高性能计算中应用却很有限。原因何在?高级机器学习工具不是专为大数据集设计,例如用于研究恒星和行星的工具。英特尔、美国国家能源研究科学计算中心(National Energy Research Scientific Computing Center, NERSC)及斯坦福大学的联合团队改变了这一情况。他们研发出一套深度学习系统,可在15千万亿次每秒(petaflop)的计算机上工作。通过在超级计算机科里(Cori)上测试运行,该系统表现出了处理大型数据集的能力。

在超级计算机上使用机器学习技术,科学家就能从大型复杂数据集中得到更多信息。加速器等强大仪器能产生巨型数据集。这款新软件可以让世界上最大的超级计算机将这类数据用于深度学习,得到的信息可促进地球系统建模、聚变能和天体物理学。相关研究论文“15PF的深度学习:科学数据的监督和半监督分类”文章中描述发表于《高性能计算、网络、存储和分析国际会议论文集》(Proceedings of the International Conference for High Performance Computing, Networking, Storage and Analysis)。

机器学习技术有望让科学家从加速器、光源、望远镜和计算机模拟等产生的大型复杂数据集中提取宝贵信息。虽然这些技术在多种商业应用中取得了巨大胜利,但是它们在科学的高性能计算中应用有限,因为现有工具不是为许多科学领域中发现的太字节或千兆字节级数据集而设计。

英特尔、美国国家能源研究科学计算中心及斯坦福大学的联合团队携手应对在太字节或千兆字节级数据集上应用深度学习技术所产生的问题。该团队开发出首款在15千万亿次每秒的计算机上运行的深度学习软件。该软件可执行大型科学数据集进行的大量训练运行,展现出其用于数据密集型应用的可扩展性。这些运行使用了美国国家能源研究科学计算中心超级计算机科里所有的物理和气候相关数据集。运行得到的峰值速度在11.73至15.07千万亿次每秒之间(单精度),平均持续性能为11.41至13.47千万亿次每秒。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 英特尔
    +关注

    关注

    60

    文章

    9875

    浏览量

    171374
  • 深度学习
    +关注

    关注

    73

    文章

    5485

    浏览量

    120937

原文标题:英特尔等推动深度学习与超级计算相融合

文章出处:【微信号:AI_News,微信公众号:人工智能快报】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    NVIDIA助力丹麦发布首台AI超级计算机

    这台丹麦最大的超级计算机由该国政府与丹麦 AI 创新中心共同建设,是一台 NVIDIA DGX SuperPOD 超级计算机
    的头像 发表于 10-27 09:42 372次阅读

    云端超级计算机怎么用

    云端超级计算机是一种基于云计算的高性能计算服务,它将大量计算资源和存储资源集中在一起,通过网络向用户提供按需的
    的头像 发表于 10-18 10:14 96次阅读

    信号继电器计算机系统中的应用

    信号继电器计算机系统中的应用是一个重要且复杂的领域,它作为电气控制的关键元件,计算机系统中发挥着信号转换、隔离、放大以及控制等多种作用。以下将从信号继电器的基本概念、工作原理、特性
    的头像 发表于 09-27 16:29 271次阅读

    计算机存储系统的工作原理和功能

    计算机存储系统作为计算机系统中至关重要的组成部分,其原理和功能对于理解计算机运行机制具有关键意义。以下将详细阐述
    的头像 发表于 09-26 16:42 570次阅读

    计算机系统的硬件组成和主要部件

    计算机系统的硬件组成是计算机运行的基础,它包含了多个关键部件,这些部件相互协作,共同实现计算机的各种功能。
    的头像 发表于 09-10 11:41 1472次阅读

    微处理器如何控制计算机系统

    微处理器,作为计算机系统的核心部件,承担着控制整个计算机系统运行的重要任务。它不仅是计算机的运算中心,还是控制中心,负责执行程序指令、处理数据以及协调
    的头像 发表于 08-22 14:21 433次阅读

    ARMxy ARM嵌入式计算机搭载 1 TOPS NPU支持深度学习

    ARMxy ARM嵌入式计算机BL410系列内置了1TOPS算力 NPU,它每秒可以执行高达一万亿次的浮点运算,这为复杂的图像处理和深度学习任务提供了充足的计算资源。在产品缺陷检测领域
    的头像 发表于 08-20 11:53 275次阅读
    ARMxy ARM嵌入式<b class='flag-5'>计算机</b>搭载 1 TOPS NPU支持<b class='flag-5'>深度</b><b class='flag-5'>学习</b>

    借助NVIDIA超级计算机加速量子计算发展

    科学期刊《自然》(Nature)本月早些时候发表了一项研究,通过使用 NVIDIA 驱动的超级计算机,验证了量子计算的商业化途径。
    的头像 发表于 07-25 09:55 479次阅读

    深度学习计算机视觉领域的应用

    随着人工智能技术的飞速发展,深度学习作为其中的核心技术之一,已经计算机视觉领域取得了显著的成果。计算机视觉,作为
    的头像 发表于 07-01 11:38 656次阅读

    计算机视觉的主要研究方向

    计算机视觉(Computer Vision, CV)作为人工智能领域的一个重要分支,致力于使计算机能够像人眼一样理解和解释图像和视频中的信息。随着深度
    的头像 发表于 06-06 17:17 820次阅读

    富士通使用富岳超级计算机训练LLM

    尽管富士通的富岳超级计算机不再是超级计算机500强名单中最快的机器,但它仍然是一个非常强大的系统,A64FX处理器的多功能性允许将其用于各种
    的头像 发表于 05-13 14:18 507次阅读

    计算机行业深度报告

    电子发烧友网站提供《计算机行业深度报告.pdf》资料免费下载
    发表于 03-04 10:07 0次下载

    特斯拉布法罗超级工厂投资5亿美元建造Dojo超级计算机

    霍楚尔表示,此次项目投资为5亿美元,并将同时纽约州立大学建设另一台独立的AI超级计算机。“我很荣幸地告诉大家,特斯拉将在布法罗投资5亿美元,用于其新一代超级
    的头像 发表于 01-29 10:58 380次阅读

    什么是后量子密码学?量子计算机vs经典计算机

    后量子密码学(Post-Quantum Cryptography,PQC)是经典计算机上定义和执行算法,研究量子计算机和经典计算机都无法破解的新密码
    的头像 发表于 12-19 11:42 1586次阅读

    vmware虚拟机内运行qnx4.25系统

    ,型号是cif104。 现在由于计算机不再生产,我想将该qnx4.25系统放入windows10虚拟机内运行,暂时测试运行无问题。 我现在急需解决的问题是,后面带的输入输出该如何处理,
    发表于 12-12 15:42