数字化时代下,大数据平台已成为组织重要的基础设施,存储着众多核心业务数据。为更好地保障大数据平台海量数据安全,爱数于9月2日成功举办以“不止于快”为主题的大数据平台保护方案神盾会(二),爱数方案专家、技术专家以及生态合作伙伴齐聚一堂,共同探讨大数据平台保护方案及技术实现手段,以助力各行业客户实现大数据平台高效、经济、安全、全面的数据保护。
数多无策:大数据平台保护亟需新方案
大数据平台逐渐成为组织中的核心业务系统,承载着关键业务的运行,如金融行业的“千人千面”、医疗行业通过大数据分析实现疫情的精准防控等。一旦大数据平台宕机,组织中诸多核心业务将无法开展,造成的损失巨大。因此,大数据平台保护将成为每个行业IT建设中的重中之重。
然而,作为现代化的工作负载,大数据平台由于数据量多、节点多、组件多等特点,导致其保护之路道阻且长:
PB级数据,如何在有限的备份窗口内完成备份
海量大数据备份副本长时间保留,如何降低成本?
如何确保备份数据的安全存储与合规保留?
如何实现精准备份和异构版本兼容?
不止于快:AnyBackup大数据平台保护方案
基于大数据平台保护的各种挑战,爱数AnyBackup推出了大数据平台保护方案,凭借重复数据删除、永久增量、多节点并发备份恢复、表粒度备份恢复、数据一致性保障等多种技术的加持,AnyBackup可为PB级、百节点集群规模的大数据平台提供更高效、更经济、更安全、更全面的保护。
更高效:AnyBackup提供永久增量备份,相比于传统方案,备份效率提升96倍以上;
更经济:结合重复数据删除&永久增量备份,备份存储资源可节约90%;
更安全:凭借不可变存储技术,实现备份数据防篡改,加固了勒索病毒的最后一道防线,在数据安全存储的基础上,AnyBackup还支持基于磁带、云存储等多种介质的归档方式,符合合规性需求;
更全面:AnyBackup也充分考虑到大数据平台生态的丰富性,能够全面兼容主流大数据平台及其组件,并支持异构版本之间的数据恢复。
技术解码:AnyBackup大数据平台保护方案实现原理
结合IDC发布的中国大数据平台市场份额报告,以及Gartner发布的Hadoop发行版市场指南中的供应商介绍,可以发现,Hadoop已经成为当前国内使用最广泛的大数据平台。
Hadoop生态体系是以Hadoop作为平台的应用框架,框架中各应用组件相互兼容,组成的一个独立的应用体系。其中,HDFS 和 MapReduce是其基础核心,而Hive和HBase则是最重要且使用最广泛的应用组件。
基于此,AnyBackup大数据平台保护方案中,最为核心的一个版块便是面向Hadoop的HDFS、Hive和HBase来提供数据保护。
AnyBackupHDFS数据保护方案
HDFS作为分布式文件系统,承担了存储Hadoop的海量数据的任务。由于节点多、数据量多、数据种类多、价值密度低等特点,HDFS保护往往存在备份时间长、存储成本高等难题。
AnyBackup提供的HDFS数据保护方案,可根据客户需求将代理部署在HDFS集群中或集群外,从而实现性能保障或减少主机资源占用的目的。AnyBackup备份时可结合增量比对算法,实现数据的增量备份和永久增量备份。无论HDFS的副本数是多少,AnyBackupHDFS数据保护方案仅备份一个副本的数据,节约存储资源占用。此外,AnyBackupHDFS数据保护方案支持文件目录按需过滤,灵活缩减备份数据源,进一步提升了备份效率并降低了存储成本。
AnyBackupHive数据保护方案
Hive作为构建在Hadoop平台之上的数据仓库工具,是Hadoop平台最大数据量的应用组件。然而,因自身架构需要,Hive的元数据和数据分离存储,这给备份时如何保障数据一致性提出了新挑战。同时由于Hive可兼容多种关系型数据库作为其Metastore(元数据库),数据保护方案如何适配不同关系型数据库也十分重要。
AnyBackupHive数据保护方案无需停机,在线即可实现Hive海量数据的备份,有效解决了备份数据一致性的问题。同时,AnyBackup提供的方案可忽略具体的Metastore关系型数据库选型,从而实现所有的HiveMetastore的全面适配。
AnyBackupHBase数据保护方案
HBase作为分布式存储系统,为Hadoop平台提供了海量数据实时访问的能力。由于HBase管理着海量数据,且支持基于RegionSever的水平扩展和基于HDFS存储扩展的特性,如何高效经济地实现对HBase数据的保护,也是需要解决的难题。
AnyBackup HBase数据保护方案,支持表粒度的备份恢复,能够精准地备份恢复所需数据,在一定程度上提升了数据保护效率。值得指出的是,AnyBackup支持HBase备份副本间任意时间点的恢复,满足更高的RPO要求。
强强联合:爱数携手星环科技,共筑大数据平台安全壁垒
星环科技是全球领先的企业级大数据基础软件平台厂商,围绕数据全生命周期为企业提供基础软件及支持,也是经过工信部信通院测试大数据产品线最丰富的供应商。星环科技产品已在政府、金融、电力、能源、制造、教育、医疗等20多个领域落地。
爱数与星环科技强强联合,携手打造AnyBackup TDH(Transwarp Data Hub)大数据平台保护方案,以更好地服务于各行业客户。AnyBackup TDH大数据平台保护方案,可实现数据 高效、经济、安全的保护。不仅如此,爱数与星环科技已完成了兼容性测试,成功通过了双方的产品认证,能很好地保障TDH大数据平台数据安全。
AnyBackup TDH大数据平台保护方案,是爱数与星环科技凭借双方在各自优势领域的技术积累,联合打造的1+1>2的解决方案。未来,双方还将持续深入合作,以更优质的联合解决方案,更好地服务于各行业客户。
大数据与分析已成为数字化转型战略中的第一要务,如何在享受大数据带来益处的同时,保障海量数据安全,也成为组织在数字化转型过程中亟待解决的问题。AnyBackup始终以保护数据安全为使命,护航广大行业客户的数字化转型之旅。这也正是AnyBackup设计大数据平台保护方案的初心。未来,AnyBackup还将继续努力,推出更多创新的技术和解决方案,加速数字化转型之旅。
(免责声明:本网站内容主要来自原创、合作伙伴供稿和第三方自媒体作者投稿,凡在本网站出现的信息,均仅供参考。本网站将尽力确保所提供信息的准确性及可靠性,但不保证有关资料的准确性及可靠性,读者在使用前请进一步核实,并对任何自主决定的行为负责。本网站对有关资料所引致的错误、不确或遗漏,概不负任何法律责任。
任何单位或个人认为本网站中的网页或链接内容可能涉嫌侵犯其知识产权或存在不实内容时,应及时向本网站提出书面权利通知或不实情况说明,并提供身份证明、权属证明及详细侵权或不实情况证明。本网站在收到上述法律文件后,将会依法尽快联系相关文章源头核实,沟通删除相关内容或断开相关链接。 )