0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

谷歌AI预测服务已正式启动

我快闭嘴 来源:TechWeb 作者:TechWeb 2020-09-29 14:50 次阅读

谷歌宣布其人工智能平台的一个关键组成部分——人工智能预测服务已正式全面启动。该服务支持托管在主流的机器学习框架,包括TensorFlow、XGBoost和Scikit-Learn中。

AI Prediction服务充当机器学习管道的最后阶段。它在云中托管经过训练的机器学习模型,以推断新数据的目标值。部署在AI预测服务中的经过训练的模型作为REST端点公开,可以从任何支持HTTP的标准客户端调用这些端点。

AI平台预测服务基于Google Kubernetes Engine(GKE)后端,旨在通过新的硬件选项(如Google计算引擎机器类型和NVIDIA GPU)提高可靠性和灵活性。

虽然该服务基于googlekubernetes引擎,但AI预测服务隐藏了集群的供应、管理和扩展的复杂性。数据科学家和工程师可以专注于业务问题,而不是管理基础设施。

在一般可用性下,AI预测服务支持高内存和高cpu机器类型上的XGBoost和Scikit学习模型。在后台,服务根据流量和请求自动扩展和收缩基础设施。

该服务与Google云控制台和Stackdriver紧密集成,以跟踪和可视化资源指标。与模型的GPU、CPU、RAM网络利用率相关的性能指标可以深入了解性能特征。

客户可以选择通过AI Prediction服务在特定区域部署机器学习模型。Google在三个区域(us-central1、euro-west4和asia-east1)中引入了新的端点,并通过区域隔离来提高可靠性。部署在区域端点上的模型位于指定区域内,为客户提供数据局部性和所有权。

通过增加对VPC控件的支持,客户可以定义安全范围并部署仅可访问该范围内或另一个桥接范围内的资源和服务的在线预测模型。由于预测服务端点是VPC专用的,因此数据保留在专用网络内,而不必遍历公共互联网。

通过AI Prediction服务部署和公开的模型支持在线和批处理推理。在线预测经过优化,可最大程度地减少服务预测的延迟,而批处理预测,则可以优化处理作业中的大量实例。与立即发送结果的在线预测不同,批处理预测将推理输出写入存储在Google Cloud Storage存储桶中的文件中。

谷歌一直在大力投资人工智能平台即服务(PaaS)产品。它整合和扩充了包括cloudml引擎在内的各种服务。通过与GKE和Kubeflow的紧密集成,该服务已经发展成为一个支持数据准备、转换、培训、模型管理、部署和推理的端到端平台。
责任编辑:tzh

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • gpu
    gpu
    +关注

    关注

    28

    文章

    4701

    浏览量

    128705
  • AI
    AI
    +关注

    关注

    87

    文章

    30146

    浏览量

    268413
  • 人工智能
    +关注

    关注

    1791

    文章

    46858

    浏览量

    237557
  • 机器学习
    +关注

    关注

    66

    文章

    8377

    浏览量

    132407
收藏 人收藏

    评论

    相关推荐

    谷歌任命原Character.AI首席执行官为Gemini联合技术负责人

    近日,谷歌宣布了一项重要人事任命,原Character.AI的联合创始人兼首席执行官诺姆·沙泽尔(Noam Shazeer)重返谷歌,并将担任其人工智能新项目“Gemini”的联合技
    的头像 发表于 08-26 11:06 474次阅读

    谷歌展示AI新功能,古尔曼表示苹果落后至少2到3年

    8月19日,据报道,谷歌在本月初的新品发布会上推出全新AI技术的Pixel 9系列智能手机,引来媒体热议。彭博社记者马克·古尔曼观展后,发表了“不经意的感叹声”:看完谷歌新科技,人们不禁会怀疑苹果在
    的头像 发表于 08-19 15:39 498次阅读

    谷歌Pixel 9系列AI功能抢眼,苹果被指AI领域落后

    引发了业界的广泛讨论。彭博社知名记者马克·古尔曼更是直言不讳,指出苹果在AI技术方面相较于谷歌落后至少两到三年。
    的头像 发表于 08-15 15:31 544次阅读

    谷歌发布革命性AI天气预测模型NeuralGCM

    在科技与自然科学的交汇点上,谷歌公司于7月23日宣布了一项重大突破——全新的人工智能天气预测模型NeuralGCM。这一创新成果不仅融合了机器学习的前沿技术,还巧妙结合了传统气象学的精髓,其研究成果已在国际权威科学期刊《Nature》上发布,引起了业界的广泛关注。
    的头像 发表于 07-23 14:24 455次阅读

    荣耀新品将搭载谷歌AI功能,提升生成式AI体验

    荣耀于5月22日宣布,将在新款智能手机上集成谷歌AI功能,实现生成式AI体验。此外,新机还将得到谷歌服务的支持。
    的头像 发表于 05-23 08:51 449次阅读

    两小时“吼出”121次AI谷歌背后埋伏着Open AI的幽灵

    谷歌AI依旧不痛不痒谷歌和OpenAI的又一次对阵,刚刚落幕了。北京时间5月14日凌晨,OpenAI发布端到端多模态AI大模型GPT-4o,酷似科幻电影《Her》的
    的头像 发表于 05-19 08:05 391次阅读
    两小时“吼出”121次<b class='flag-5'>AI</b>,<b class='flag-5'>谷歌</b>背后埋伏着Open <b class='flag-5'>AI</b>的幽灵

    谷歌发布多模态AI新品,加剧AI巨头竞争

    在全球AI竞技场上,谷歌与OpenAI一直稳居领先地位。近日,谷歌在I/O开发者大会上掀起了一股新的技术浪潮,发布了多款全新升级的多模态AI产品。
    的头像 发表于 05-16 09:28 418次阅读

    软银集团“AI革命”开始启动

    日本软银集团会长孙正义启动AI革命”,计划利用AI半导体技术引领行业变革。该集团将AI半导体作为关键突破口,并计划将业务扩展至数据中心、
    的头像 发表于 05-14 10:59 436次阅读

    NVIDIA和谷歌云宣布开展一项新的合作,加速AI开发

    NVIDIA 和谷歌云宣布开展一项新的合作,以帮助全球初创企业加速创建生成式 AI 应用和服务
    的头像 发表于 04-11 14:03 469次阅读

    使用NVIDIA Triton推理服务器来加速AI预测

    这家云计算巨头的计算机视觉和数据科学服务使用 NVIDIA Triton 推理服务器来加速 AI 预测
    的头像 发表于 02-29 14:04 547次阅读

    谷歌AI大模型Gemma全球开放使用

    谷歌公司近日宣布,其全新的AI大模型Gemma现已在全球范围内开放使用。这一重要举措不仅彰显了谷歌AI领域的领先地位,还为其在全球范围内的竞争力增添了新
    的头像 发表于 02-28 18:12 1096次阅读

    谷歌计划重新推出改进后的Gemini AI模型人像生成功能

    谷歌DeepMind的首席执行官德米斯·哈萨比斯在2月26日透露,公司计划在接下来的几周内重新发布其备受关注的Gemini AI模型人像生成功能。此前,由于在某些历史图像生成描述中出现了不准确的问题,谷歌
    的头像 发表于 02-28 10:17 543次阅读

    谷歌DeepMind资深AI研究员创办AI Agent创企

    近日,刚从谷歌DeepMind离职的资深AI研究员Ioannis Antonoglou宣布创办了一家名为“AI Agent”的创企。Ioannis Antonoglou常驻伦敦,此前曾担任谷歌
    的头像 发表于 02-04 10:02 746次阅读

    物理服务器对ai发展的应用

    物理服务器在AI发展中扮演着重要的角色。传统的以CPU为计算部件的服务器架构难以满足人工智能的新需求,因此,"CPU+ GPU/FPGA/ASIC"的异构计算架构成为人工智能
    的头像 发表于 12-22 09:19 428次阅读

    谷歌揭秘Gemini,AMD对峙英伟达

    今天,我们看到谷歌揭开了多模态AI模型Gemini的神秘面纱,AMD挑战英伟达在AI芯片市场的霸主地位,微软在英国AI领域的巨额投资,以及3GPP
    的头像 发表于 12-07 20:05 712次阅读