数据重复存放

上讯信息敏捷数据管理平台（Agile Data Management）简称ADM，是采用基于CDM（副本数据管理）的数据库虚拟化技术，为企业上中下游数据的备份恢复、数据验证、安全***、分发交付提供的面向数据全生命周期的安全管理解决方案，在保证数据安全使用的同时，提高了数据使用效率并降低了数据存储成本。ADM由数据备份管理、备份校验管理、数据副本管理、数据脱敏管理组成，实现了数据复制容灾、数据存储管理和数据流程管理，通过自动化流程任务编排的方式实现了数据使用的成本控制、版本管理与开发利用，充分发挥了数据资产的潜在价值。ADM的高效压缩存储池显*降低了基础数据源获取的存储成本与持续增长的副本数据存储成本。数据重复存放

l应用数据一致性保障ADM主要应用原生备份接口获取具有应用一致性保障的数据，如针对Oracle，利用OracleRMAN和归档日志来保障备份数据库数据的一致性；针对VMware虚拟化，利用VMwareSnapshot技术来保障备份虚拟机数据的一致性。l事务日志同步技术支持数据库的事务日志备份，事务日志是数据库中已发生的所有修改和执行每次修改的事务的一连串记录，事务日志备份可将数据恢复到精确的故障点。例如：Oracle支持归档日志备份和删除，MySQL数据库支持redo日志备份和删除等。l文件系统数据保护ADM支持备份非结构化的文件系统。支持全量备份和长久增量备份与全量快照合成，备份策略采用定时执行备份任务，恢复策略支持细粒度恢复，**小粒度为恢复单个文件。支持跨文件系统恢复，例如恢复到EXT3、EXT4、NTFS等文件系统。目标环境ADM可实现备份数据任意时间点挂载恢复快速对恢复数据进行验证。

上讯敏捷数据管理平台适用场景：数据交付速度慢的开发测试部门企业通过交付生产数据辅助第三方业务决策，如开发/测试环境、统计分析、准业务系统环境搭建等，交付生产数据的方式是通过生成业务系统数据副本，而副本的准备通常需要几小时，甚至几天不等，严重拖延了项目进度。

备份数据的有效性验证效率低的运维部门，大部分企业对其**业务系统进行了数据备份，为了检验备份数据的有效性，以及满足相关法律法规的要求，企业对备份数据采取周期性的恢复验证；由于企业的业务系统繁多，而人员相对紧缺，验证工作需要大量重复性动作，成为企业当前面临的一大挑战。

数据副本分散存放难以管理的数据中心数据副本一旦被交付使用，就**存在于使用环境中，随着数据使用场景的日益增多，数据副本在非生产环境中逐渐累积，**分散的存放方式导致副本的辨识度不高，后续使用与销毁难度明显增大。同时，重复存放现象严重造成了存储资源的浪费。u隐私数据泄露风险高的用户无论是通过生产数据库导出，还是通过备份系统恢复，都能够直接获取到企业的**生产数据，其中包含企业内部机密数据和客户个人隐私信息，一旦发生泄露将带来严重后果，不仅影响企业的名誉，也会造成一定的经济损失。

基于CDM（CopyDataManagement，数据副本管理）技术，通过对该技术的运用，我们整合了CDM和***相关工具，实现了生产到开发测试环境的数据快速复制，以及备份数据的自动校验。通过CDM解决方案的实施，我们实现了一个平台、一站式解决数据获取、数据存储、数据构建、数据使用、数据销毁，在保证合规性基础上，以敏捷的数据全生命周期管理，更好地实现数据共享和数据利用。上讯敏捷数据管理平台可以实现以上功能，欢迎登录官网了解详情.ADM数据脱*支持敏感数据定义识别与仿真脱*，保障数据流转环节的安全性。

并行重删技术是在多个不同的节点上构建指纹库，并将指纹并行分布于多个节点，采用内存级指纹库进行重删，所有指纹读写全部保存于内存中，从而提升指纹查询和处理效率，并且减少了因磁盘中指纹库增大所导致的随机IO压力。以此识别并消除数据备份过程中数据源中重复的数据，该技术适用于不同平台中的文件、数据库、虚拟机等不同应用类型的数据，可以大幅度减少需要传输的数据量，从而极大地节省数据传输带宽，解决单点性能和存储空间压力。ADM数据副本拓扑结构有助于完善测试数据的组织关系，优化测试数据的资源分配。执行中忽略失败结果

ADM使数据存储成本倍数级节约，提升数据存储环节的效能。数据重复存放

ADM支持Oracle/MySQL/DB2/SQLServer/PostgreSQL/Informix/达梦/南大通用GBase/人大金仓KingBase/OpenGauss/MogDB/VastBase/丛云/TDSQL/OceanBase/GaussDB(forOpenGauss)/GaussDB(DWS)分布式容灾功能；支持华为云与阿里云的云服务器ECS、云数据库RDS备份恢复；***保护VMware/SmartX/浪潮/华为FC/云宏WinStack/OpenStack/浪潮云InCloudOpenStack等虚拟化平台，支持虚拟化备份和细粒度的挂载恢复，VMware备份无需在虚拟化平台或者各个虚拟机上安装客户端，只需通过VMware代理客户端连接虚拟化平台即可；支持Hadoop等大数据平台的备份恢复；支持自适应源端的全局重删算法与策略，支持任务级与全局指纹库；针对文件备份提供文件粒度与块级粒度的全域重删且支持重删指纹库重建功能，支持多线程文件备份，支持海量小文件场景下的聚合策略，提供并行扫描和高速索引，从而减少需要备份的数据量、缩短备份窗口、节省备份数据传输所消耗的网络带宽以及节约备份数据存储空间；备份传输过程采用压缩加密处理，缓解网络传输的压力，增加网络抖动或短时间断链的超时容错机制，确保备份数据的安全；数据重复存放