揭开智能数据的神秘面纱!智能数据会为我们的行业带来什么样的改变?

电子说

1.3w人已加入

描述

揭开智能数据的神秘面纱

2019年3月21日,雨霁风光,春分天气,千花百卉争明媚。在刚刚结束的2019华为中国生态伙伴大会上,华为各个产品线的亮点发布如百花争艳。其中新更名的华为智能数据解决方案备受关注。

2019年3月21日,华为2019生态伙伴大会,

华为员工为嘉宾讲解智能数据展台

嘉宾都在问,什么是智能数据?智能数据会为我们的行业带来什么样的改变?别着急,小I妹带你们揭开智能数据的神秘面纱。

产业和行业趋势

迈入智能时代,“三万四化”成为IT发展的主流趋势,即万物感知,万物互联,万物智能和移动化,共享化,数字化,智能化。面对更多的智能设备数量,更大的业务处理量,更复杂的业务场景。企业只有不断提高数据处理能力才能应对未来挑战。同时,个性化时代,融合数据处理能力成为提升企业竞争力的关键要素。如:精准营销场景需要处理用户信息、关系图谱、人脸识别、图像识别等数据,公交线路规划场景需要处理用户信息,地理信息,交通热力图等数据。

华为分布式、全融合的智能数据解决方案应运而生,组合多种算力,支持实时处理、多模分析、高并发等场景,帮助企业直面未来趋势与挑战。

华为智能数据解决方案

华为战略投入智能数据,通过芯片、软件架构创新提供领先的智能数据解决方案,帮助客户解决海量数据的实时处理、融合分析、协同计算等挑战,加速企业数字化与智能化进程,帮助客户实现商业成功。

华为智能数据解决方案包括两个重要部分:FusionInsight大数据解决方案和企业级分布式数据库。

华为FusionInsight大数据解决方案 

快速集成结构化、半结构化和非结构化等多种数据,支持离线分析、实时流处理、实时检索、交互查询等各种数据处理能力,针对政府、金融、运营商、公共安全等数据密集型行业的客户需求,打造了敏捷、智慧、融合的大数据解决方案,让客户可以更快、更准、更稳的从各类繁杂无序的海量数据中发现价值,助力政府高效治理和企业卓越经营。

FusionInsight大数据平台包括HD数据底座、数据使能工具(DLF、RTD)与数据服务HDS,同时也包括一站式AI开发平台ModelArts,整合机器学习,深度学习和图分析能力,一键式模型发布。多源数据接入,海量结构化&非结构化数据存储;开放算法仓,无缝接入伙伴模型,保障模型安全;异构资源调度,CPU& GPU资源统一调度,容器化,细粒度资源复。

企业级分布式数据库

采用MPP(Massive Parallel Processing大规模并行处理)架构,支持行存储与列存储,提供PB级别数据量的处理能力。核心技术上跟传统数据库相比有巨大优势,可以解决行业用户的数据处理性能问题,可以为超大规模数据管理提供高性价比的通用计算平台,并可用于支撑各类数据仓库系统、BI(Business Intelli-gence)系统和决策支持系统,统一为上层应用的决策分析等提供服务。

智能数据将如何改变我们的行业?

01

极致交互式分析体验

在金融行业,对各类统计报表和用户特征数据的即席查询,是支持金融行业客户经营决策和精准营销的重要手段。但是,Hadoop传统组件的Hive& SparkSQL,比较适合于离线计算这种批处理场景,在交互查询场景资源消耗高、响应也较慢,无法满足几秒时间内完成业务灵活交互查询的诉求。

华为智能数据搭载的Elk引擎则专业面向Hadoop交互分析场景,每秒万级记录查询条件下,交互查询能够达到秒级响应(通常要求3秒以内)。同时,华为Elk引擎,支持SQL 2003标准,以及OLTP/OLAP/大数据统一的SQL分析体验,从而让用户轻松实现极致性能的灵活分析体验。

02

跨地域协同分析

在集团公司和运营商场景中,集团公司总部统计分析所有子公司经营数据,运营商客户进行大数据平台和数仓平台的融合分析。跨集群及跨数据源的协同计算,在目前的应用呈现明显的增长趋势。面对这种需要跨源、甚至跨地域的协同分析场景,传统方式可能需要进行大量的数据迁移,将跨源、跨地域的数据搬迁到一起,然后再进行融合分析。这种方式,需要花费大量的时间和资源来进行数据迁移,工作量大,效率也很低。

华为提供的协同计算引擎Pollux,支持GaussDB、Hive、Spark集群的跨源、跨数据中心数据统一访问,以及SQL算子的计算下推,从而实现数据免迁移的情况下完成跨源跨集群数据的协同计算,大幅提升用户的分析体验和效率,实现跨中心融合分析从天到秒~小时级的时效提升。

03

统一的数据集成和治理

政府行业目前的IT水平较薄弱,但由于各个委办局数据类型多,导致数据集成、数据开发、数据治理难度加大。华为数据湖工厂DLF,可以为客户提供一个一站式数据集成、数据开发、数据治理的平台,从而降低大数据应用开发门槛和业务开发难度,降低运维管理复杂度。通过使用DLF,用户可以一站式建设数仓,无需切换多个工具;用户可以管理多种大数据服务,实现跨服务的作业开发;用户还可以在线对SQL/Shell/Python等脚本进行编辑调试,并通过拖拽方式进行复杂工作流编排,轻松实现任务的调度和运维管理。

04

软硬协同,提供最优性能算力组合

软硬协同是将软件能力和硬件能力协同适配,实现业务能力最优的重要手段。华为有着丰富的软硬件技术积累,既有着全国第一的大数据软件平台,也有国内领先的智能计算和存储产品线,特别是19年年初发布的基于鲲鹏920芯片的泰山服务器,更是将ARM服务器的能力推向了一个新的高度。

华为智能数据解决方案,充分发挥华为软硬件技术积累深厚的优势,通过软硬协同技术适配ARM多核服务器,发挥ARM在大数据处理中的天然优势,性能优于同等规格X86 CPU 30%。同时软硬结合实现数据透明加密,加密性能相较软件加密提升300%。除此之外,热数据加速技术、内存加速技术以及RDMA技术,提升数据访问性能50%等等。这些技术的实施,大幅提升了华为智能数据解决方案的能力,也能够更好的为用户提供服务。同时智能数据解决方案也支持通用X86架构的部署,并且支持ARM和X86的跨集群混合部署。

05

专业化的服务能力,保障项目成功实施

华为智能数据提供从咨询规划、大数据工程服务、大数据管理服务到运营优化的专业服务。同时还提供客户培训与认证,使得客户能力得以传递,人才能力得以发展。未来还将提供详尽的二次开发课程与信息服务平台,帮助合作伙伴更好使用华为平台。

成功实践和业界认可

华为智能数据解决方案已在超过60个国家成功商用,用友1500+商用客户和500+合作伙伴。

01

华为智能数据解决方案助力工商银行打造新一代融合数仓

基于通用X86开放架构的分布式数据库平台实现软硬件解耦,在保护投资的同时提供面向未来架构演进的能力,全并行计算框架带来30%以上的性能提升;支持在线扩容,扩容时间较之前缩短75%;融合架构实现多源数据统一存储分析,全面支撑工商银行未来大数据发展趋势与需求。

02

重庆大数据,助力智慧重庆建设

华为参与重庆市的社会公共信息资源共享平台建设,截至2018年底共享平台已汇聚60个市级部门超过200亿条大数据资源,支撑政务服务、人力社保、市场监管、应急管理、精准脱贫、全域旅游等领域超过200个应用系统建设,累计数据共享使用条数超过40亿条,全面助力智慧重庆建设。

◐2017年IDC MarketScape中国大数据管理平台厂商评估领导者象限第一。

◐2018年IDC MarketScape中国政务大数据领导者象限第一。

◐华为智能数据解决方案连续3年入围Gartner MagicQuadrant for Data Management Solutions for Analytics,中国区厂商排名第一。

打开APP阅读更多精彩内容
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉

全部0条评论

快来发表一下你的评论吧 !

×
20
完善资料,
赚取积分