HCP的功能采用性能优化可更好地支持新一代非结构化数据工作负载

电子说

1.2w人已加入

描述

这里的“对象”指的是对象存储,互联网、云服务商应用比较广泛,行业企业用户相对陌生,行业用户普遍习惯使用NAS而不是对象存储。

与NAS相比,对象存储给人的印象应该是便宜,这在海量数据爆炸式增长的今天,对象存储的优势让人心动。但是也并没有想象中的“婚姻”美满,因为行业企业应用习惯架构在NAS平台上,对接对象存储就需要做出改变,这并不容易。

对于行业企业用户来说,NAS也并非长久之计。随着数据积累以及数据爆炸式增长,NAS存储和管理的文件数量指数级增长,当达到一定规模时,如上亿或者几十亿文件,就会出现性能断崖式下跌,因为NAS机头处理能力会成为瓶颈。

有没有更好的解决方案呢?

NAS/对象搭配 干活不累

分布式NAS是最容易想到的方案,但是技术比较复杂,成本也比较高。

Hitachi公司旗下数字基础架构和解决方案公司Hitachi Vantara,以HCP产品为核心,与分布式NAS领先厂商WekaIO(Weka)合作,对外提交端到端DFS和对象存储解决方案,提供了解决问题的新思路。

新的解决方案对数据进行冷热分层,热数据保存在全闪存高性能存储节点,温冷数据可以保存在S11、S31等大容量对象存储节点,实现数据在不同性能的节点间自由流动。数据以对象的方式保存,享有对象存储的价格优势,对于上层应用,可以通过WekaIO(Weka)支持NAS应用。

与市场上常见的对象存储方案相比,专业的HCP产品,容量密度更高,可以在4U机架空间内提供1.7PB存储容量。根据Hitachi Vantara提供的数据,用HCP构建S3对象存储服务,I/O性能(吞吐量)可以提升3.4倍,成本可以降低34%,这还没有计算数据中心机架空间、电力、计算资源节省带来的效益。

Hitachi Vantara对外也支持纯软件方案,实现了软硬件的解耦。

Hitachi Vantara中国区首席技术官吴卫平指出:Hitachi Vantara与Weka的全球OEM合作将会以高性能、NVMe原生、并行的文件系统增强Hitachi Vantara的产品组合,这一文件系统将会与HCP对象存储紧密耦合。这种高性能的NAS解决方案能广泛适用于各行各业的人工智能、机器学习和分析应用程序。

“HCP的此次功能扩展采用性能优化的全闪存HCP节点,可更好地支持新一代非结构化数据工作负载。这些增强的功能可帮助客户在Amazon Simple Storage Service协议上实现与以往相比3.4倍的吞吐率,并降低多达34%的成本。” 吴卫平说。

用对象支撑起新天地

对象存储的价值,也并不依赖分布式NAS。

如今是多云的时代,以AWS S3对象存储服务为代表,为用户提供多种选择已成为主流趋势。Hitachi Vantara HCP这样的专业存储解决方案可以用来构建对象存储平台,构建私有云对象存储,但这需要用户运维和管理私有云平台。

对象存储适用于数据备份、文件共享等应用场景。

以内部文件共享为例,企业可以构建类似云盘这样的服务。文件被保存在云盘,支持企业员工共享和移动办公。但从企业管理、合规需求来看,企业首先考虑的一是文件使用权限管理,二是数据的安全可靠,如防止黑客入侵、对数据进行篡改。与勒索病毒相比,这种数据篡改手段更加隐蔽、不易察觉,造成的影响和危害也更为巨大。

采用对象存储平台,借助哈希256算法,用户可以自行对数据进行加密保护。加密保护后的数据,可以防止篡改,同时因为没有办法进行二次加密,因而可以抵御勒索病毒的困扰。

吴卫平指出:很多用户希望采用S3等公有云服务。在这种情况下,用户可以考虑把元数据(索引数据)以及加密后的公钥存储在本地HCP,将海量数据保存在云平台。一来可以享用公有云平台的廉价,同时也不失去对于数据的管控。未来,当用户因为成本的原因,需要对数据进行迁移的时候,主动权完全掌握在用户自己的手里,不会完全受制于云服务商。

小结

从SAN到NAS再到对象存储,存储技术的创新是随数据规模的变化而不断发展的。各种形态的存储产品并不是简单的替代关系,每一次新的存储形态出现都是为了解决不断出现的新问题,就像NAS比SAN在技术上更适合文件的共享与存储,但并不会完全替代SAN;SAN仍然是数据库等结构化数据的首选,同时仍然可用于存储少量的文件类数据。

当用户的非结构化数据达到一定规模,或者文件数据达到一定量级的时候,对象存储需求将是自然而然的事情。男大当婚,女大当嫁,合理的人生目标和规划,将是幸福美满的保护神!

早日选择对象存储,防患于未然!
       责任编辑:pj

打开APP阅读更多精彩内容
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉

全部0条评论

快来发表一下你的评论吧 !

×
20
完善资料,
赚取积分