过去十年里,数字经济的蓬勃发展,不仅带来了数据爆炸性增长,也让数据的重要性日渐突显。
如果说数据存储是数字经济发展的数字底座,那么分布式存储就是底座中基石,不可或缺。当下,中国分布式存储产业化已经初具规模,中国信通院调查数据显示,2021年中国分布式存储市场规模达到178亿元,年增速44%;预计未来三年,市场仍将保持40%以上的增长率。
面对如此高速增长的市场,华为、戴尔科技、浪潮、曙光、XSKY、杉岩数据等多家企业都积极加入其中。那么,分布式存储市场近年来为何获得越来越多用户认可?中国分布式存储市场存在着哪些重要趋势?中国分布式存储市场产业化如何走向一条健康、良性的发展之路?
近日,首届分布式存储产业发展论坛正式召开,来自产、学、研和用多方代表齐聚一堂,共商分布式存储产业发展新机遇与新路径。会上,分布式存储产业方阵(DSIA)还正式发布了《分布式存储发展白皮书》。从本次论坛上,我们或能对分布式存储未来趋势见微知著。
分布式存储为何备受青睐
近年来,繁荣的数字经济、千行百业的数字化转型,让数据存储市场持续增长。其中,分布式存储更是以远超市场平均增长的速度获得各界极大关注。那么,哪些因素驱动了分布式存储在数据存储市场中一枝独秀?
首先,从长远趋势看,数字经济将成为社会经济发展的新引擎,其繁荣发展必然带来数据的爆炸性增长。IDC预测,到2025年,中国的数据量将增长到48.6ZB,80%是非结构化数据,并且将成为全球最大的数据圈。而且非结构化数据的增长速度远超结构化数据,这让擅长处理、存储非结构化数据的分布式存储如鱼得水。
其次,从应用场景趋势看,随着5G等基础设施建设的完善,像自动驾驶、智慧交通、智能制造、智慧港口、智慧矿山等新应用场景开始大量涌现,这些新应用、新场景在基础设施层普遍基于分布式架构,并且融合了大数据、AI、物联网等技术,同时还会持续产生海量数据,非常适合采用分布式存储来存储和处理数据。
第三,从政策导向上看,在中国市场,随着数字化转型的深入,各行各业都在鼓励分布式相关技术的应用与部署,这无疑会在基础设施层推动分布式存储的普及与应用。目前,金融、电信、政务、制造等多个行业均已经加大了分布式存储的采购,未来这种趋势还会持续。
例如,央行金融科技委员会在《金融科技发展规划(2022—2025年)》明确金融数字化转型的八大任务,其中就包括建设分布式架构的先进基础设施,推动国内大批金融机构加速进行分布式架构改造,将大量应用迁移和部署到分布式存储之上。
可以说,从长远趋势、应用现状和政策导向等方面看,分布式存储深入到千行百业的基础设施层已是大势所趋,其扩展性、高性能、开发性等特性与用户数字化转型的基础设施建设需求高度契合,也铸就了产业化的基础。
分布式存储这些趋势一定要知道
首先,分布式存储产品形式和交付形态会出现重要趋势,即软硬一体机的方式将成为市场的绝对主流和用户首选。
众所周知,分布式存储领域产品形态多样,主要有商业软件+专用硬件、商业软件+通用硬件、开源软件+通用硬件三种形态,可以为用户提供丰富的选择。但应用场景发展到现阶段,应用规模、应用复杂性早已今非昔,采用分布式存储纯软件+通用硬件的方式逐渐很难适应用户在部署、性能、管理、服务等方面的需求。
这是因为,分布式存储纯软件+通用硬件的方式,不仅需要对软硬件兼容适配、部署、性能调优、管理等方面花费大量精力,遇到问题也很难判断是哪方的责任,不利于问题的快速解决,可能会严重影响到业务。
而分布式存储一体机采用特定设计或针对性优化的存储硬件,通过软硬协同实现端到端的高可靠、高性能、高扩展以及一体化的运维能力,则彻底降低了分布式存储在部署、管理和服务等方面的复杂性,全面满足用户需求,逐渐在市场中脱颖而出,成为用户选择分布式存储的首选。
《分布式存储发展白皮书》的数据也印证了这一趋势。《白皮书》数据透露,2021年中国分布式存储市场规模已达百亿元级,其中一体机形态占比高达91%。
其次,分布式存储在扩展性、性能、多协议支持、可靠性和开发性等方面的优势,使得其适配应用场景的潜力巨大,随着新应用、新场景日渐丰富,必然会带来大量的数据存储需求,而分布式存储有望加速获得更多应用。
《分布式存储发展白皮书》也总结出当前分布式存储适用的九大典型应用场景,既包括虚拟化/云计算、电子票据、医疗影像等传统应用场景,也覆盖了HPC、大数据分析、AI、工业互联网等新应用场景。
例如,像精准医学领域的基因测序,智慧交通领域的自动驾驶,能源领域的勘探,类脑科学研究、媒体动画制作等场景,都属于典型的HPC场景,这些场景负载类型多样、应用复杂、容量需求走向EB级、性能要求极高,而分布式存储对于混合负载的支持,以及多协议的互通、高扩展性等特性,使得其在上述场景中能够充分发挥自身优势,对业务提供极好的数据存储保障。
第三,分布式存储技术迎来架构、硬件、软件和数据管理将迎来一次全面变革。面向HPC、大数据分析和AI等新应用、新场景时,分布式存储逐渐走在了创新的最前沿,从架构等层面进行针对性的创新,从满足新应用的需求。例如,面向混合负载、多协议互通、支持全闪化的分布式存储架构已经成为华为等厂商力推的发展方向。
比如,大数据分析场景愈发普遍,大数据分析发展到如今,计算与存储分离、解耦成为大势所趋,计算、存储资源按需配置有利于降低整体TCO,这就要求分布式存储能够支持存算分离,一套存储同时支持HDFS、文件、对象等多协议的访问,以及流式入湖、统一元数据等。
《白皮书》也认为,分布式存储在架构、硬件、软件、数据管理和绿色节能等方面依然有着众多可以创新与突破的领域,业界厂商聚焦这些领域的创新,不仅有望推动分布式存储产品、技术的演进,更利于整个产业的长远发展。
总体来看,中国分布式存储市场规模达到百亿级之后,的确为市场注入了前所未有的创新活力,进一步推动了产品架构与技术的创新,但产业化的健康发展之路,依然存在着不小挑战,亟待各界形成共识。
产业化提速:这些因素不可忽略
当前,中国分布式存储的产业化已经初具规模,为今后的长远、健康发展打下了坚固基础,但要想让产业化提速、获得更健康的发展,还需要产学研用各界力量从产业发展环境、技术创新与突破、产业标准等方面进一步完善。
例如,国家今年完成了全国一体化大数据中心体系总体布局设计,正式启动了东数西算工程。数据存储无疑在东数西算工程中的重头戏。针对东数西算工程及之后一系列应用,分布式存储产业各界需要尽快形成共识,积极融入其中,充分发挥分布式存储的作用与价值。
另外,分布式存储面向全闪化的架构重构、专用数据处理芯片、安全可信、非结构化数据缩减等关键技术都极具挑战,考验着分布式存储厂商从软件到硬件的全栈设计和研发能力,需要各大分布式存储厂商能够在技术创新方面持续投入和取得突破,,打造出具有世界级竞争力的产品。
又如,国内分布式存储标准体系依然处于起步阶段,缺乏完整的体系化引领和指导,需要产、学、研、用各方协同,加速强化标准体系的顶层规划设计,建立高质量的技术要求和产品规范,保证产业的良性发展。
林林总总,中国分布式存储产业迎来了前所未有的发展良机,繁荣的数字经济和广阔的应用场景使得分布式存储在中国市场大有可为。而随着分布式存储产业方阵(DSIA)的成立,产业标准和评测体系有望加速落地,而各大企业加大创新力度,也有望为市场带来更多活力。
免责声明:此文内容为第三方自媒体作者发布的观察或评论性文章,所有文字和图片版权归作者所有,且仅代表作者个人观点,与极客网无关。文章仅供读者参考,并请自行核实相关内容。投诉邮箱:editor@fromgeek.com。
免责声明:本网站内容主要来自原创、合作伙伴供稿和第三方自媒体作者投稿,凡在本网站出现的信息,均仅供参考。本网站将尽力确保所提供信息的准确性及可靠性,但不保证有关资料的准确性及可靠性,读者在使用前请进一步核实,并对任何自主决定的行为负责。本网站对有关资料所引致的错误、不确或遗漏,概不负任何法律责任。任何单位或个人认为本网站中的网页或链接内容可能涉嫌侵犯其知识产权或存在不实内容时,应及时向本网站提出书面权利通知或不实情况说明,并提供身份证明、权属证明及详细侵权或不实情况证明。本网站在收到上述法律文件后,将会依法尽快联系相关文章源头核实,沟通删除相关内容或断开相关链接。