数据抽取
敏捷数据管理平台ADM能够将上游的数据收集、存储,中游的数据处理、传输,下游的数据分发和交付全流程贯通,形成一套自动化、智能化的副本数据全生命周期管理解决方案,为银行业实现测试业务多场景的数据覆盖,实现业务版本的高质量交付和快速迭代提供了行之有效的工具。ADM的数据库虚拟化功能与GoldenDB高可用、高可靠的数据库服务相结合,为该行提供了敏捷的副本数据交付能力与灵活的副本数据管理能力,对银行测试数据管理体系的构建起到了强有力的助推作用,助力打造数字化业务增长新模式.上讯ADM产品参加2023年度数据安全优*案例评选活动取得“标准化安全产品类优*案例”证书。数据抽取
ADM产品测试数据多副本快速交付ADM是国内**早的副本数据管理(CDM)产品,采用数据库虚拟化技术对原始数据库副本(黄金副本)快速生成多个虚拟数据库作为测试数据副本,满足开发测试场景的测试数据快速供应。Ø100倍数据交付效率提升10TB的数据恢复时间由原来的小时级缩短至分钟级;Ø10倍工作效率提升在开发、测试环境中,使用者可随时对虚拟库做快照标记,快照对应着不同时间的数据版本。数据版本管理可进行任意标记的快照切换,降低数据导入或恢复产生的时间成本,大幅提升工作效率。Ø10倍存储空间节省首先内置存储池存储即压缩的机制可实现约3:1的数据存储压缩,同时交付的多个虚拟数据库由于共享于一份原始数据,因此基本不占用额外的存储空间,随着交付虚拟数据库的数量增加,节约的存储空间会成倍增加,实际应用场景中至少为用户节约10倍的存储空间。删除过期数据ADM可实现备份数据任意时间点挂载恢复快速对恢复数据进行验证。
上讯敏捷数据管理平台ADM对接用户现有集中式备份系统服务器,实现恢复服务器、数据恢复策略、数据验证策略和存储资源的集中管理,包括:(1)存储池自动准备存储空间、自动调度创建恢复服务器;(2)按照参数设置恢复策略、自动执行恢复计划、自动验证恢复数据;(3)恢复验证任务结束后,自动清理恢复环境,释放存储资源和恢复服务器资源,用于下一个恢复验证任务的使用,使整个数据备份恢复验证工作能够高效节能地循环利用,达到集中统一安全管理。
敏捷数据管理平台(ADM)由管理控制中心(Master)、数据服务节点(CDM Server)、敏感数据处理服务节点(SDM Server)、客户端(Client)组成,服务节点可通过主备节点部署实现高可用,通过灵活的横向节点扩展实现功能扩展和容量扩充,每个服务节点可以安装在物理服务器或虚拟服务器中。一个或多个客户端连接到服务节点,组成一个完整的数据管理平台,客户端负责收集数据、传输数据,服务节点负责接收数据、存储数据、敏感数据处理以及管理数据。ADM的数据远程复制主要解决数据全生命周期管理中数据传输流转的安全问题,实现数据安全跨域传输的目标。
数字化时代,企业进行数据保护,不仅希望能够实现本地数据保护,也要有灾备中心进行异地数据保护。如此,即便本地数据中心遭遇地震、火灾等重大自然灾害或人为操作失误等事故,导致本地备份数据或生产数据发生损坏或丢失时,能够通过异地数据灾备,确保数据可恢复。ADM支持通过远程复制技术,将本地数据同步到异地灾备中心,实现异地数据容灾。基于备份任务,将生产数据备份到本地的存储池,基于远程复制任务,将本地存储池中的备份数据同步到异地存储池中,从而为生产数据提供双重保护,当本地生产数据、或备份数据丢失、损坏时,通过预先设置的容灾策略,在容灾端进行应急接管。数据管理领域的CDM产品哪个厂商做得好?是否是CDB
ADM是纯国产化的CDM产品。数据抽取
通过智能定义敏感数据类型,自动发现和识别敏感数据,包括数据类型、内容、约束关系,灵活排序减少人为筛选,定位敏感数据源。丰富的算法与仿真的字典库相结合,保证处理后数据仍具有业务属性,数据表间关系仍具有业务一致性,不影响数据挖掘分析数据价值。对涉及企业、个人信息的隐私数据,包括资金财产、个人、企业隐私的对照关系进行敏感数据识别,通过内置的规则进行处理,将数据敏感部分去隐私化,但并不失去数据挖掘的价值特征,减少数据隐私泄露带来的风险和损失,甚至降低可能发生的人身伤害和违法犯罪事件。数据抽取