工商银行CDM选型

l核心专利技术—数据库虚拟化（1）ADM内置独有的高效压缩存储池，压缩比高达3:1，存储即压缩，***降低了基础数据源获取的存储成本与持续增长的副本数据存储成本。（2）ADM的数据库虚拟化技术，是通过获取一份基础数据源，快速拉起多份虚拟数据库挂载给目标业务使用，虚拟数据库拉起时几乎不占用物理存储空间，在实验室测试环境下拉起一个10TB数据量的虚拟数据库，*占用1GB左右的存储空间，明显节约了存储成本和时间周期，因此针对开发测试场景，需要对同一份数据创建N份副本数据时，存储成本节约近乎N倍。ADM主要由数据备份管理、备份校验管理、数据副本管理、数据脱*管理四大功能模块组成。工商银行CDM选型

在典型的重复数据删除技术中，根据不同的数据备份场景选择适合的重删策略与粒度方案。在确定重删策略与粒度后，会根据输入侧不同粒度（卷级、文件级、块级）的数据采取不同的数据切分策略，并依据任务级与全局指纹库提供自适应源端的全局重删算法与策略，当前支持源端块级、文件级重删和并行重删技术。源端重删是采用基于内容的可变长数据切分算法，通过对数据块进行哈希算法的***标记，即指纹（Fingerprint），在指纹库中寻找相同的指纹。如果存在相同指纹，则表示已保存了相同的数据块，ADM则不再保存此数据块，而是引用已存在的数据块，从而节省更多的备份空间。该算法还可以智能识别已修改的数据和未修改的数据，从而避免因修改数据位移而导致的未修改数据切分到新数据块中的问题，比较大限度地提升重删性能和重删率，为避免数据备份过程中冗余网络传输与存储开销，在源端设置粗粒度前置数据校验可以明显缩小备份传输过程中的数据冗余，目的在于不备份任意一个冗余数据。数据审计管理ADM数据脱*支持敏感数据定义识别与仿真脱*，保障数据流转环节的安全性。

备份是一个长期的过程，恢复往往只在事故发生后进行，且备份数据的可恢复性、可用性在很大程度上依赖于备份数据的完整性。为了保证备份数据的可用性，很多企事业单位会定期进行数据库备份的恢复演练，也就是从备份数据中恢复出一套完整的数据库。执行备份数据的恢复操作，需要备份系统管理人员或者数据库管理人员（DBA）对数据的备份恢复实现原理有深入的了解，并周期性地对备份数据进行恢复操作，以保证备份数据的可恢复性与可用性。这种长期机械性、重复性的备份、恢复及验证工作，无疑会占用DBA大量的时间和精力。在DBA界还流传着这么一句话：“故障一定会发生，只是早晚的问题！”。作为一名DBA，只有时刻记得进行备份和恢复校验，才能避免某一天事故发生时出现难以挽回的悲剧.

ADM产品数据安全***ADM平台支持静态数据脱敏（涉及数据库、格式化文件、数据库对象、消息队列等），内置104条***算法、47条敏感信息类型匹配库，覆盖个人身份信息、组织机构信息、资质资格证信息、金融数据信息、医疗数据信息、车辆数据信息等众多类别的敏感数据类型识别与仿真***。具备广义的通用型***规则，包括字符替换、随机生成、截短、加权生成、加密等；支持保留原有数据含义的仿真型***规则，支持中文字典库与编码字典库，保证姓名、身份证号、证件号、地址、组织机构代码等***后数据的有效性、可用性。提供基于数据库的库内***和基于ETL的抽取***，提供文件***添加水印功能，提供国产化操作系统的加密算法，满足用户多种***需求。ADM的副本数据管理功能通过远程数据复制保证测试数据的高可用性管理。

数据孤岛指的是数据被分散、隔离和存储在不同的系统、应用程序或部门中，使得数据之间无法有效地交流、共享或整合的情况。这些数据岛屿形成了一个个孤立的实体，难以互相连接或进行有效的数据分析。上讯敏捷数据管理平台（ADM）通过有效整合企业内各业务系统的数据，实现数据采集、存储、交付和管理的无缝对接，同时利用多项自有技术如数据库虚拟化、数据备份恢复、敏感数据脱敏等，打破了企业内数据孤岛现象，促进了数据资源的共享和高效利用.ADM内置独有的高效压缩存储池，存储即压缩。敏捷数据存储

ADM数据资源可视化管理，有效满足上中下游数据使用的政策合规。工商银行CDM选型

l应用数据一致性保障ADM主要应用原生备份接口获取具有应用一致性保障的数据，如针对Oracle，利用OracleRMAN和归档日志来保障备份数据库数据的一致性；针对VMware虚拟化，利用VMwareSnapshot技术来保障备份虚拟机数据的一致性。l事务日志同步技术支持数据库的事务日志备份，事务日志是数据库中已发生的所有修改和执行每次修改的事务的一连串记录，事务日志备份可将数据恢复到精确的故障点。例如：Oracle支持归档日志备份和删除，MySQL数据库支持redo日志备份和删除等。l文件系统数据保护ADM支持备份非结构化的文件系统。支持全量备份和长久增量备份与全量快照合成，备份策略采用定时执行备份任务，恢复策略支持细粒度恢复，**小粒度为恢复单个文件。支持跨文件系统恢复，例如恢复到EXT3、EXT4、NTFS等文件系统。工商银行CDM选型