新数据时代,对象存储驶入快车道

原标题:新数据时代,对象存储驶入快车道

当网盘、跑游戏、做备份、存视频……云数智趋势下,对象存储过得风生水起,从BAT的公有云到企业私有云都有出镜。IDC中国SDS市场数据显示,2018年对象存储增长率超过150%,2019Q1对象存储在中国SDS市场占据19.6%的份额,实现了“very fast”的增长。

IDC:2019Q1对象存储在中国SDS市场占19.6%市场份额

对象存储(Object Storage Service,OSS),也叫基于对象的存储,是一种解决和处理离散单元的方法,可提供基于分布式系统之上的对象形式的数据存储服务。对象存储和我们经常接触到的块和文件系统等存储形态不同,它提供RESTful API数据读写接口及丰富的SDK接口,并且常以网络服务的形式提供数据的访问。简单理解,对象存储类似酒店的代客泊车。顾客(前端应用)把车钥匙交给服务生,换来一张收据(对象的标识符)。顾客不用关心车(数据)具体停在哪个车位,这样省事儿、省时间。

对象存储,在云数智驱动下高速发展

早些年,传统数据中心主要是烟囱式架构,系统扩展性较差加上过去硬盘容量偏小、价格偏高,企业主要用存储保存关键数据,对象存储一直不温不火。在新数据时代,传统数据中心向云计算、大数据、人工智能转变,越来越多的应用和企业在使用新的存储形态,“对象存储”这个词变得炙手可热。

在云计算领域,公有云服务商都不约而同支持对象存储。百度云通过对象存储提供数据分发、备份、分析等服务并支持单文件最大5TB的文本、多媒体、二进制等任何类型的数据存储;阿里云使用对象存储的RESTful API接口,可以提供在互联网任何位置存储和访问数据;Amazon S3使用对象存储提供空间租赁服务等等。

行业企业也在推进对象存储解决方案,用它进行数据备份、分级存储和数据归档。浪潮存储给远程医疗、媒资图片抓取、电信云存储、高校网盘等行业新应用都提供了对象存储。比如,某视频公司采用对象存储构建视频云存储方案,在提供“6个9”的可靠性的同时,支撑前端以容器方式提供了丰富的微服务,实现分钟级集群组装与部署,秒级弹性反应。又如,河南省人力资源和社会保障厅采用S3协议的对象存储,承载全省电子档案,满足约80万终端的并发上传需求。

可以说,对象存储作为新的存储类型,技术不断升级、应用规模日益扩大。Gartner预测,到 2021年,80%的企业数据将存储在包括对象存储在内的横向扩展存储系统中。

对象存储 有什么了不起?

作为新数据时代的新存储形态,相比SAN和NAS,对象存储有哪些优势?这可能是很多IT人关心的话题。要揭开这个谜题,可以从这几种存储形态的系统结构、数据管理、数据访问等维度进行探索。

SAN、NAS、对象存储对比

对比对象存储与SAN和NAS的差别,不难看出对象存储的核心优势所在:对象存储直接提供API给应用使用,采用扁平化的结构管理所有桶(Bucket)和对象。每个桶和对象都有一个全局唯一的ID,根据ID可快速实现对象的查找和数据的访问。对象存储支持基于策略的自动化管理机制,使得每个应用可根据业务需要动态地控制每个桶的数据冗余策略、数据访问权限控制及数据生命周期管理。正是这些优势使得对象存储具备极致的扩展和极易的数据管理,在新数据时代如鱼得水。

浪潮对象存储:极致特性+高级功能

当然,对象存储实现起来并非轻而易举,在技术特性、软件功能上需要不断打磨。作为全球前五的存储厂商,浪潮存储在存储新技术、新应用上不断加大投入,3年研发投入超10亿元。这种在产品创新上的“死磕”,使得浪潮存储在对象存储的技术创新方面别具优势。

浪潮AS13000G5的对象存储功能

浪潮超大规模数据中心级分布式存储平台AS13000G5可提供对象存储服务,具备极致可靠、极致性能、极致安全、极易管理四大极致特性。在此基础上,还提供了诸多高级特性。这就好比一栋建筑,不光要地基打得牢、房子盖得结实,还要在装修上下功夫,符合入住者的个性化需求。

面向对象存储,浪潮AS13000G5开发了大量高级特性。一是小对象聚合。浪潮对象存储针对海量小文件场景,通过小对象聚合,节约HDD的磁盘IO,提升存储效率。二是读Cache加速。在卡口图片、AI计算场景,通过读Cache加速提升数据读取效率。三是元数据检索。在存储系统内集成索引引擎,实现根据对象元数据多条件模糊检索对象的技术,有效地提升了海量非结构化数据中“大海捞针”的效率。四是企业级WORM,满足企业客户数据的法规性要求,结合应用特点,灵活设置宽限期和保护期。此外,还有异地容灾、存储OS加固、桶策略配置等等。对象存储技术的不断迭代升级,让浪潮对象存储进入用户视野,服务行业智慧转型。

“浪潮存储走的是软硬件一体化的形式,统一交付给用户一个方案。浪潮AS13000G5提出了‘5+X’的说法,用一个软件栈融合包括对象在内的五种形态数据,在此基础上希望把整个分布式存储生态做好。我们会跟很多原生的分布式应用做高度的融合部署,当交付给用户的时候就是一体化的方案”。浪潮分布式存储产品总监赵帅如是说。

事实上,“5+X”是浪潮超大规模数据中心级分布式存储平台AS13000G5的最大特色。软件层上,AS13000G5融合文件、对象、块、HDFS、数据库协议5种服务协议及X种融合平台。硬件层融合机架式、高密式、机柜式、多节点式、边缘式5种硬件形态及X种硬件配置,可充分释放AS13000G5的潜能,实现容量按需扩展、性能按需供给、服务按需定义。

百搭新场景:网盘、备份、大数据分析、视频云

除了对象存储技术上的领先,浪潮AS13000G5在对象存储的“场景化”方面也走在了行业前列。

在备份归档场景,浪潮对象存储功能可提供低成本、高可靠的存储资源,根据备份和归档需求不同,可以选择不同类型的存储使用,优化TCO。

在上传和下载比较频繁的网盘场景,浪潮对象存储功能可随用户数据量的提高而自动扩容,较高的并发能够避免访问时延长或者服务不可用的情况出现。

在视频云场景,浪潮对象存储功能契合了视频领域RESTful API、过期删除特性和一次写入多次读取的需求场景。

在大数据分析场景,浪潮对象存储功能可与Hadoop大数据应用配合使用,根据需求调整规模和提高创新速度,帮助企业管理大数据。

如今,浪潮超大规模数据中心级分布式存储平台AS13000G5的对象存储功能已在河南移动云存储、安徽电信云存储、某医院远程医疗、某互联网云业务等项目中有了积累与沉淀。

IDC预测,未来5年,对象存储在中国SDS市场的增长率都将是最高的。可以说,进入新数据时代,云数智应用场景越来越丰富,数据规模像“滚雪球”一样在扩大,对象存储的优势将进一步放大,驶入发展快车道。

极客网企业会员

免责声明:本网站内容主要来自原创、合作伙伴供稿和第三方自媒体作者投稿,凡在本网站出现的信息,均仅供参考。本网站将尽力确保所提供信息的准确性及可靠性,但不保证有关资料的准确性及可靠性,读者在使用前请进一步核实,并对任何自主决定的行为负责。本网站对有关资料所引致的错误、不确或遗漏,概不负任何法律责任。任何单位或个人认为本网站中的网页或链接内容可能涉嫌侵犯其知识产权或存在不实内容时,应及时向本网站提出书面权利通知或不实情况说明,并提供身份证明、权属证明及详细侵权或不实情况证明。本网站在收到上述法律文件后,将会依法尽快联系相关文章源头核实,沟通删除相关内容或断开相关链接。

2019-08-17
新数据时代,对象存储驶入快车道
百度云通过对象存储提供数据分发、备份、分析等服务并支持单文件最大5TB的文本、多媒体、二进制等任何类型的数据存储;阿里云使用对象存储的RESTful API接口,可以提供在互联网任何位置存储和访问数据

长按扫码 阅读全文