可重用
敏捷数据管理平台ADM能够将上游的数据收集、存储,中游的数据处理、传输,下游的数据分发和交付全流程贯通,形成一套自动化、智能化的副本数据全生命周期管理解决方案,为银行业实现测试业务多场景的数据覆盖,实现业务版本的高质量交付和快速迭代提供了行之有效的工具。ADM的数据库虚拟化功能与GoldenDB高可用、高可靠的数据库服务相结合,为该行提供了敏捷的副本数据交付能力与灵活的副本数据管理能力,对银行测试数据管理体系的构建起到了强有力的助推作用,助力打造数字化业务增长新模式.上讯信息敏捷数据管理平台为企业上中下游数据的高效使用、安全管控提供了一套综合数据安全治理解决方案。可重用
敏捷数据管理平台(Agile Data Management)简称ADM,是采用基于CDM(副本数据管理)的数据库虚拟化技术,为企业上中下游数据的备份恢复、数据验证、敏感数据处理、分发交付提供的面向数据全生命周期的安全管理解决方案,在保证数据安全使用的同时,提高了数据使用效率并降低了数据存储成本。ADM由数据备份管理、备份校验管理、数据副本管理、敏感数据处理管理组成,实现了数据复制容灾、数据存储管理和数据流程管理,通过自动化流程任务编排的方式实现了数据使用的成本控制、版本管理与开发利用,充分发挥了数据资产的潜在价值。实时反馈进度上讯ADM通过数据备份后获取到的黄金副本开启数据开发利用的创新流程,充分发挥数字资产价值。
备份是一个长期的过程,恢复往往只在事故发生后进行,且备份数据的可恢复性、可用性在很大程度上依赖于备份数据的完整性。为了保证备份数据的可用性,很多企事业单位会定期进行数据库备份的恢复演练,也就是从备份数据中恢复出一套完整的数据库。执行备份数据的恢复操作,需要备份系统管理人员或者数据库管理人员(DBA)对数据的备份恢复实现原理有深入的了解,并周期性地对备份数据进行恢复操作,以保证备份数据的可恢复性与可用性。这种长期机械性、重复性的备份、恢复及验证工作,无疑会占用DBA大量的时间和精力。在DBA界还流传着这么一句话:“故障一定会发生,只是早晚的问题!”。作为一名DBA,只有时刻记得进行备份和恢复校验,才能避免某一天事故发生时出现难以挽回的悲剧.
敏感数据处理是上讯敏捷数据管理平台(ADM)产品功能模块之一,主要针对敏感数据的处理使用,提供集敏感数据自动识别、仿真处理与数据交付为一体的敏感数据管理功能,覆盖了敏感数据使用与管理的全部场景。针对敏感数据识别提供通用数据特征库,敏感数据类型包括但不限于个人身份信息、组织机构信息、资质资格证信息、金融数据信息、医疗数据信息、车辆数据信息等众多类别,支持全库与子集自动扫描识别,包括数据内容、字段类型、约束关系均可以实现自动识别,并依据类型特征加以分类;针对敏感数据的仿真处理,ADM内置大量数据算法对敏感数据进行随机化、模糊化替换,保证处理后数据的完整性、仿真性以及数据间的关联关系保持不变,支持处理结果的校验。上讯信息敏捷数据管理平台ADM产品的数据备份模块通过虚拟挂载恢复可快速检验备份数据的可用性和有效性。
敏捷数据管理平台ADM的关键技术如下:l***数据获取方式数据获取的目的是将不同的数据源实时或者按需同步到平台内,根据不同类型的数据源,数据获取方式分为三种,保证覆盖全部数据源获取方式:①支持实时同步应用数据库;②支持按需同步关系型数据库;③支持与备份系统对接恢复数据。l核心专利技术—数据库虚拟化技术ADM内置一套数据库虚拟化管理程序,虚拟数据库是通过一份基础数据源创建的数据副本,一份基础数据源可以生成多个虚拟数据库,虚拟数据库可读可写,虚拟数据库状态可实时保存。虚拟数据库创建时间为分钟级,且不占用额外的存储空间。敏捷数据管理平台虚拟数据秒级分发,提升了环境准备效率,数据交付时间整体节约100倍以上。数据拓扑
上讯ADM产品采用副本数据管理CDM面向数据全生命周期进行数据安全管理。可重用
(1)国产化数据备份系统兼容性不足当前国产化数据保护系统对国产化数据库、文件、虚拟化平台、容器、云服务器等备份源类型兼容不***,适配过程中需要更多的时间进行功能稳定性验证。(2)数据备份恢复验证耗时耗力当前采用NetBackup等集中备份系统备份的数据需采用手动恢复数据,过程繁琐、重复度高、专业性强,耗费大量的时间和人力成本。(3)数据交付时间长不论是通过数据恢复还是数据拷贝来提供测试数据,需要几小时到几周的时间。(4)占用大量存储资源数以千计的数据副本占用大量存储资源,需要更多的维护成本。(5)数据版本回退困难开发、测试环境中,当完成一轮跑批测试或功能调试后,重置数据状态需要重新导入数据或重新恢复数据,回退数据产生的时间成本巨大。(6)数据安全风险真实数据被用于测试使用后无法及时回收和销毁,造成资源浪费,存在敏感信息泄露的安全风险。(7)敏感数据安全隐患生产数据库中存在着大量的敏感信息,传统的手工***效率低、仿真度差、***不完全,交付给测试环境后存在隐私泄漏的风险。可重用