子集抽取
ADM 构建的双重敏感数据处理模式在行业内排名靠前,在保证处理性能优势的前提下,兼容通用关系型数据库、分布式数据库、文本文件,支持不同数据库间的异构处理,支持 FTP 和 SFTP 的远程文件处理,支持即时与定时处理,支持 Windows/Linux/Unix 等操作系统平台,支持 IPV4/IPV6 网络协议,提供灵活的敏感数据处理策略参数设置及定制化开发变形规则。ADM 的敏感数据处理引擎既可以封装在敏捷数据管理流程的中间环节,也可以单独作为敏感数据处理的抽取系统,两种模式满足了当前用户对敏感数据处理的全部需求。上讯ADM产品是集数据备份管理、备份校验管理、数据副本管理、敏感数据管理四位一体的数据管理产品。子集抽取
Gartner对CDM的解释是:它从生产环境通过快照技术获取有应用一致性保证的数据,在非生产存储上生成“黄金副本”(Golden Image),这个“黄金副本”数据格式是原始的磁盘格式,可再虚拟化成多个副本直接挂载给服务器,分别用于备份恢复、容灾或开发测试。Gartner《Hype Cycle for Storage and Data Protection Technologies, 2020》报告指出,CDM技术已经度过了早期的技术讨论期,目前处于“泡沫化的低谷期”(trough of disillusionment),这从侧面说明一些客户开始在非关键性业务场景集中部署这项技术,而且Gartner也预测CDM技术将在未来5-10年内进入“实质生产的高峰期”(plateau of productivity)。仿真处理敏感数据唤醒大量沦为暗数据的备份数据,让数据备份即可用。
组织者具有数据安全发布的能力,通过建立一套统一的数据发布系统如敏捷数据管理平台ADM,规定数据发布的统一格式、数据发布的用途、以及发布者与使用者指向关系。首先根据数据发布的需求由发布者准备基准数据,然后采用技术手段进行数据一对一、一对多的关联发布,数据发布关联拓扑可实时监控,记录数据的走向和动态,便于数据发布后的监管审计,针对公开发布的数据应具备定期发现敏感数据的能力,在发布前提供变形处理,降低数据发布的安全风险。
《中华人民共和国数据安全法》中明确指出数据处理,包括数据的收集、存储、使用、加工、传输、提供、公开等。数据安全,是指通过采取必要措施,确保数据处于有效保护和合法利用的状态,以及具备保障持续安全状态的能力。当前,有效的保障数据安全的方式仍然是数据备份,即企业针对生产业务的数据、文件制定备份策略生成备份数据,一旦业务数据发生丢失或损坏,则恢复备份数据提供业务访问,传统的数据备份方案并未提供数据的恢复验证手段,因此企业在发生数据丢失时,启用备份数据恢复失败的案例屡见不鲜,这也给各行业客户造成了巨大的经济损失和不良的社会影响,为满足法律的合规性要求,备份数据的恢复验证成为备份恢复解决方案的必要需求,但由于备份数据量巨大、涉及业务系统繁多、专业人员数量有限,定期的备份数据恢复验证仍然是一道难题,上讯敏捷数据备份恢复验证解决方案为备份数据的恢复验证提供了创新的技术手段,包括备份数据的分钟级快速恢复、秒级可用性验证、按计划周期性定时自动恢复验证,保障了备份数据的可恢复性与可用性。国内较早发布CDM领域的平台型产品是上讯ADM产品。
敏捷数据管理平台ADM产品的敏感数据管理功能可实现敏感数据定义识别与仿真处理,保障数据流转环节的安全性。通过智能定义敏感数据类型,自动发现和识别敏感数据,包括数据类型、内容、约束关系,灵活排序减少人为筛选,准确定位敏感数据源。丰富的变形算法与仿真的字典库相结合,保证变形后数据仍具有业务属性,数据表间关系仍具有业务一致性,不影响数据挖掘分析数据价值。对涉及企业、个人信息的隐私数据,包括资金财产、个人、企业隐私的对照关系进行敏感数据识别,通过内置的变形规则进行处理,将数据敏感部分去隐私化,但并不失去数据挖掘的价值特征,减少数据隐私泄露带来的风险和损失,甚至降低可能发生的人身伤害和违法犯罪事件。上讯ADM为企业上中下游数据的高效使用、安全管控提供了一套综合数据安全治理解决方案。时效性管理
上讯ADM产品的灵活性体现在异构引擎可以将大数据中心数据抽取至多类型数据库,输出格式多样化。子集抽取
敏捷数据管理平台ADM产品提供一种数据闭环式流转方式,提升了数据交付效率与安全管控效能。通过部署ADM几分钟内即可创建一个数据量TB级别的虚拟数据库,进而,快速将测试数据传输到下游的开发测试环境,这一过程有效减少了下游开发测试场景中测试数据的准备时间,通常从按天计算缩短到按小时计算,时间效率提升明显,直接缩短了开发测试环境搭建工作中测试数据准备的时间。不仅数据库可以分钟级恢复,文件、操作系统和虚拟化平台的副本均可以分钟级提供,还可以进行存储级快照,快速地保留数据副本的状态,实现数据版本的保留,通过跟踪数据流向,识别使用状态,切换数据版本实现测试数据版本的快速回退,有助于对数据版本的良好管理。同时,数据副本支持时效性设置,当数据副本超出使用期限,ADM平台会自动停止使用或回收资源,实现集中统一的闭环式管理。子集抽取