大数据量备份
并行重删技术是在多个不同的节点上构建指纹库,并将指纹并行分布于多个节点,采用内存级指纹库进行重删,所有指纹读写全部保存于内存中,从而提升指纹查询和处理效率,并且减少了因磁盘中指纹库增大所导致的随机IO压力。以此识别并消除数据备份过程中数据源中重复的数据,该技术适用于不同平台中的文件、数据库、虚拟机等不同应用类型的数据,可以大幅度减少需要传输的数据量,从而极大地节省数据传输带宽,解决单点性能和存储空间压力。数据安全领域的CDM是指copy data management。大数据量备份
敏感数据处理是上讯敏捷数据管理平台(ADM)产品功能模块之一,主要针对敏感数据的处理使用,提供集敏感数据自动识别、仿真处理与数据交付为一体的敏感数据管理功能,覆盖了敏感数据使用与管理的全部场景。针对敏感数据识别提供通用数据特征库,敏感数据类型包括但不限于个人身份信息、组织机构信息、资质资格证信息、金融数据信息、医疗数据信息、车辆数据信息等众多类别,支持全库与子集自动扫描识别,包括数据内容、字段类型、约束关系均可以实现自动识别,并依据类型特征加以分类;针对敏感数据的仿真处理,ADM内置大量数据算法对敏感数据进行随机化、模糊化替换,保证处理后数据的完整性、仿真性以及数据间的关联关系保持不变,支持处理结果的校验。对象存储管理上讯敏捷数据管理平台ADM产品数据库虚拟化技术是什么意思?
当前,有效的保障数据安全的方式仍然是数据备份,即企业针对生产业务的数据、文件制定备份策略生成备份数据,一旦业务数据发生丢失或损坏,则恢复备份数据提供业务访问,传统的数据备份方案并未提供数据的恢复验证手段,因此企业在发生数据丢失时,启用备份数据恢复失败的案例屡见不鲜,这也给各行业客户造成了巨大的经济损失和不良的社会影响,为满足法律的合规性要求,备份数据的恢复验证成为备份恢复解决方案的必要需求,但由于备份数据量巨大、涉及业务系统繁多、专业人员数量有限,定期的备份数据恢复验证仍然是一道难题,上讯敏捷数据备份恢复验证解决方案为备份数据的恢复验证提供了创新的技术手段,包括备份数据的分钟级快速恢复、秒级可用性验证、按计划周期性定时自动恢复验证,保障了备份数据的可恢复性与可用性。
在数据收集和使用上,通过获取一份具有应用一致性保证的“黄金副本”,分钟级虚拟化为多个副本直接挂载使用,数据使用效率明显得到提升;在数据存储和传输上,这些虚拟数据副本相对原始存储几乎不占用存储空间(约为0),且ADM产品将全部数据集中存放在统一的存储池中,既保证了数据传输流转的闭环管控,又降低了数据的存储成本;在数据加工上,数据脱离生产环境之前增设了敏感数据处理环节,保障数据公开后的隐私安全,防止核心数据泄露;在数据的提供和公开上,虚拟数据副本可用于准生产、测试环境等场景的数据交付,每一份虚拟数据都是互不影响的,并且可读可写,数据在经过变更后可标记快照,多个快照之间可以任意切换实现数据版本的管理。数据安全领域的CDM是指拷贝数据管理。
上讯敏捷数据管理平台ADM功能支持自适应源端的全局重删算法与策略,支持任务级与全局指纹库;针对文件备份提供文件粒度与块级粒度的全域重删且支持重删指纹库重建功能,支持多线程文件备份,支持海量小文件场景下的聚合策略,提供并行扫描和高速索引,从而减少需要备份的数据量、缩短备份窗口、节省备份数据传输所消耗的网络带宽以及节约备份数据存储空间;备份传输过程采用压缩加密处理,缓解网络传输的压力,增加网络抖动或短时间断链的超时容错机制,确保备份数据的安全。上讯ADM产品是集数据备份管理、备份校验管理、数据副本管理、数据脱敏管理四位一体的数据管理产品。大数据量备份
上讯敏捷数据管理平台ADM产品能对接NBU自动恢复。大数据量备份
上讯敏捷数据管理平台(ADM)的主要技术是(1)ADM内置独有的高效压缩存储池,压缩比高达3:1,存储即压缩,降低了基础数据源获取的存储成本与持续增长的副本数据存储成本。(2)ADM的数据库虚拟化技术,是通过获取一份基础数据源,快速拉起多份虚拟数据库挂载给目标业务使用,虚拟数据库拉起时几乎不占用物理存储空间,在实验室测试环境下拉起一个10TB数据量的虚拟数据库,只占用1GB左右的存储空间,明显节约了存储成本和时间周期,因此针对开发测试场景,需要对同一份数据创建N份副本数据时,存储成本节约近乎N倍。大数据量备份