揭开智能数据的神秘面纱
2019年3月21日,雨霁风光,春分天气,千花百卉争明媚。在刚刚结束的2019华为中国生态伙伴大会上,华为各个产品线的亮点发布如百花争艳。其中新更名的华为智能数据解决方案备受关注。
2019年3月21日,华为2019生态伙伴大会,
华为员工为嘉宾讲解智能数据展台
嘉宾都在问,什么是智能数据?智能数据会为我们的行业带来什么样的改变?别着急,小I妹带你们揭开智能数据的神秘面纱。
产业和行业趋势
迈入智能时代,“三万四化”成为IT发展的主流趋势,即万物感知,万物互联,万物智能和移动化,共享化,数字化,智能化。面对更多的智能设备数量,更大的业务处理量,更复杂的业务场景。企业只有不断提高数据处理能力才能应对未来挑战。同时,个性化时代,融合数据处理能力成为提升企业竞争力的关键要素。如:精准营销场景需要处理用户信息、关系图谱、人脸识别、图像识别等数据,公交线路规划场景需要处理用户信息,地理信息,交通热力图等数据。
华为分布式、全融合的智能数据解决方案应运而生,组合多种算力,支持实时处理、多模分析、高并发等场景,帮助企业直面未来趋势与挑战。
华为智能数据解决方案
华为战略投入智能数据,通过芯片、软件架构创新提供领先的智能数据解决方案,帮助客户解决海量数据的实时处理、融合分析、协同计算等挑战,加速企业数字化与智能化进程,帮助客户实现商业成功。
华为智能数据解决方案包括两个重要部分:FusionInsight大数据解决方案和企业级分布式数据库。
华为FusionInsight大数据解决方案
快速集成结构化、半结构化和非结构化等多种数据,支持离线分析、实时流处理、实时检索、交互查询等各种数据处理能力,针对政府、金融、运营商、公共安全等数据密集型行业的客户需求,打造了敏捷、智慧、融合的大数据解决方案,让客户可以更快、更准、更稳的从各类繁杂无序的海量数据中发现价值,助力政府高效治理和企业卓越经营。
FusionInsight大数据平台包括HD数据底座、数据使能工具(DLF、RTD)与数据服务HDS,同时也包括一站式AI开发平台ModelArts,整合机器学习,深度学习和图分析能力,一键式模型发布。多源数据接入,海量结构化&非结构化数据存储;开放算法仓,无缝接入伙伴模型,保障模型安全;异构资源调度,CPU&GPU资源统一调度,容器化,细粒度资源复。
企业级分布式数据库
采用MPP(Massive Parallel Processing大规模并行处理)架构,支持行存储与列存储,提供PB级别数据量的处理能力。核心技术上跟传统数据库相比有巨大优势,可以解决行业用户的数据处理性能问题,可以为超大规模数据管理提供高性价比的通用计算平台,并可用于支撑各类数据仓库系统、BI(Business Intelli-gence)系统和决策支持系统,统一为上层应用的决策分析等提供服务。
智能数据将如何改变我们的行业?
01
极致交互式分析体验
在金融行业,对各类统计报表和用户特征数据的即席查询,是支持金融行业客户经营决策和精准营销的重要手段。但是,Hadoop传统组件的Hive&SparkSQL,比较适合于离线计算这种批处理场景,在交互查询场景资源消耗高、响应也较慢,无法满足几秒时间内完成业务灵活交互查询的诉求。
华为智能数据搭载的Elk引擎则专业面向Hadoop交互分析场景,每秒万级记录查询条件下,交互查询能够达到秒级响应(通常要求3秒以内)。同时,华为Elk引擎,支持SQL2003标准,以及OLTP/OLAP/大数据统一的SQL分析体验,从而让用户轻松实现极致性能的灵活分析体验。
02
跨地域协同分析
在集团公司和运营商场景中,集团公司总部统计分析所有子公司经营数据,运营商客户进行大数据平台和数仓平台的融合分析。跨集群及跨数据源的协同计算,在目前的应用呈现明显的增长趋势。面对这种需要跨源、甚至跨地域的协同分析场景,传统方式可能需要进行大量的数据迁移,将跨源、跨地域的数据搬迁到一起,然后再进行融合分析。这种方式,需要花费大量的时间和资源来进行数据迁移,工作量大,效率也很低。
华为提供的协同计算引擎Pollux,支持GaussDB、Hive、Spark集群的跨源、跨数据中心数据统一访问,以及SQL算子的计算下推,从而实现数据免迁移的情况下完成跨源跨集群数据的协同计算,大幅提升用户的分析体验和效率,实现跨中心融合分析从天到秒~小时级的时效提升。
03
统一的数据集成和治理
政府行业目前的IT水平较薄弱,但由于各个委办局数据类型多,导致数据集成、数据开发、数据治理难度加大。华为数据湖工厂DLF,可以为客户提供一个一站式数据集成、数据开发、数据治理的平台,从而降低大数据应用开发门槛和业务开发难度,降低运维管理复杂度。通过使用DLF,用户可以一站式建设数仓,无需切换多个工具;用户可以管理多种大数据服务,实现跨服务的作业开发;用户还可以在线对SQL/Shell/Python等脚本进行编辑调试,并通过拖拽方式进行复杂工作流编排,轻松实现任务的调度和运维管理。
04
软硬协同,提供最优性能算力组合
软硬协同是将软件能力和硬件能力协同适配,实现业务能力最优的重要手段。华为有着丰富的软硬件技术积累,既有着全国第一的大数据软件平台,也有国内领先的智能计算和存储产品线,特别是19年年初发布的基于鲲鹏920芯片的泰山服务器,更是将ARM服务器的能力推向了一个新的高度。
华为智能数据解决方案,充分发挥华为软硬件技术积累深厚的优势,通过软硬协同技术适配ARM多核服务器,发挥ARM在大数据处理中的天然优势,性能优于同等规格X86 CPU 30%。同时软硬结合实现数据透明加密,加密性能相较软件加密提升300%。除此之外,热数据加速技术、内存加速技术以及RDMA技术,提升数据访问性能50%等等。这些技术的实施,大幅提升了华为智能数据解决方案的能力,也能够更好的为用户提供服务。同时智能数据解决方案也支持通用X86架构的部署,并且支持ARM和X86的跨集群混合部署。
05
专业化的服务能力,保障项目成功实施
华为智能数据提供从咨询规划、大数据工程服务、大数据管理服务到运营优化的专业服务。同时还提供客户培训与认证,使得客户能力得以传递,人才能力得以发展。未来还将提供详尽的二次开发课程与信息服务平台,帮助合作伙伴更好使用华为平台。
成功实践和业界认可
华为智能数据解决方案已在超过60个国家成功商用,用友1500+商用客户和500+合作伙伴。
01
华为智能数据解决方案助力工商银行打造新一代融合数仓
基于通用X86开放架构的分布式数据库平台实现软硬件解耦,在保护投资的同时提供面向未来架构演进的能力,全并行计算框架带来30%以上的性能提升;支持在线扩容,扩容时间较之前缩短75%;融合架构实现多源数据统一存储分析,全面支撑工商银行未来大数据发展趋势与需求。
02
重庆大数据,助力智慧重庆建设
华为参与重庆市的社会公共信息资源共享平台建设,截至2018年底共享平台已汇聚60个市级部门超过200亿条大数据资源,支撑政务服务、人力社保、市场监管、应急管理、精准脱贫、全域旅游等领域超过200个应用系统建设,累计数据共享使用条数超过40亿条,全面助力智慧重庆建设。
◐2017年IDC MarketScape中国大数据管理平台厂商评估领导者象限第一。
◐2018年IDC MarketScape中国政务大数据领导者象限第一。
◐华为智能数据解决方案连续3年入围Gartner MagicQuadrant for Data Management Solutions for Analytics,中国区厂商排名第一。
-
数字化
+关注
关注
8文章
8774浏览量
61885 -
大数据
+关注
关注
64文章
8896浏览量
137511 -
万物互联
+关注
关注
1文章
223浏览量
14136
原文标题:华为智能数据,当春乃“发声”!
文章出处:【微信号:gh_6ee649e83ee2,微信公众号:华为云与计算】欢迎添加关注!文章转载请注明出处。
发布评论请先 登录
相关推荐
评论