Hadoop版本配置

时间:2024年09月30日 来源:

敏捷数据管理平台ADM测试数据管理场景及价值场景:测试环境是数据使用**为频繁的一个场景,涉及到数据交付、数据版本管理、数据安全管控等问题,也是数据治理**容易忽视的一个场景,做好测试数据的管理工作才会使得数据治理方案更加完善。价值:采用ADM实现测试数据管理,可以帮助用户实现测试数据的分钟级交付,提升百倍以上的数据交付能力;同时也可以帮助用户节约十倍以上的存储资源;可以帮助用户实现测试数据的版本管理,杜绝僵尸数据;同时也可以实现测试数据的集中统一管理,降低数据泄露的风险.ADM的副本数据管理功能通过远程数据复制保证测试数据的高可用性管理。Hadoop版本配置

Hadoop版本配置,上讯敏捷数据管理平台ADM

ADM产品生产数据备份恢复与异地容灾对生产数据包括数据库、文件、虚拟化平台、容器、云服务器等进行备份,对带库进行数据归档,支持长久增量备份、数据压缩存储、加密传输、重复数据删除等技术,采用挂载恢复方式,恢复时间为分钟级、恢复粒度为秒级。支持数据远程复制实现异地容灾,对备份数据进行双重保护。

ADM产品备份数据自动化恢复与有效性验证ADM可以对接备份系统如NetBackup、CommVault、NetWorker等,检索备份策略自动恢复备份数据和备份文件,完成验证输出结果。全自动化恢复验证,可以满足用户对当前备份数据的可恢复性验证、恢复后的完整性验证,覆盖备份数据和备份文件的恢复,支持虚拟挂载恢复和物理恢复双重方式。 数字经济敏捷数据管理平台ADM可解决业务系统,对备份数据进行合理利用提升备份数据使用价值。

Hadoop版本配置,上讯敏捷数据管理平台ADM

数据闭环式流转与安全管控,保证全生命周期数据资产管理ADM贯穿数据收集、数据存储、数据加工、数据传输、数据使用、数据提供、数据回收的各个环节,集中管理存储资源、服务器资源,实现闭环式自动化管理流程,统一授权和全程监控,节省大量人力资源开销,减少了数据恢复的重复性工作,自动化流程任务编排降低了人为因素导致的数据泄露风险。基于数据库虚拟化技术,ADM实现了对数据库、文件、虚拟机等副本的分钟级创建,通过存储级快照快速保留数据副本的状态,实现数据版本的保留,跟踪数据流向。同时,数据副本支持时效性设置,当数据副本超出使用期限,ADM平台会自动停止使用或回收资源,实现对数据资产的全生命周期统一管理。

l分钟级挂载恢复技术ADM压缩保存源端数据库的数据,并保留时间线,方便恢复任意时间点数据。ADM备份的全量快照为原格式,无需格式转换和IO拷贝,可直接挂载到目标主机上快速拉起应用恢复,**技术采用自研的数据库虚拟化技术通过一份数据快照作为基础数据生成黄金副本,快速挂载恢复多个虚拟副本。挂载恢复的方式**缩短了数据恢复的时间,通常业务RTO时间由小时级甚至天级,缩短到分钟级;挂载恢复降低了数据恢复所占用的存储空间,*对新写入的数据计入资源占用;由于挂载恢复速度快增加了数据恢复演练的频率,提高了备份数据有效性验证的工作效率。ADM脱*功能具备广义的通用型脱*规则,包括字符替换、随机生成、截短、加权生成、加密等。

Hadoop版本配置,上讯敏捷数据管理平台ADM

备份是一个长期的过程,恢复往往只在事故发生后进行,且备份数据的可恢复性、可用性在很大程度上依赖于备份数据的完整性。为了保证备份数据的可用性,很多企事业单位会定期进行数据库备份的恢复演练,也就是从备份数据中恢复出一套完整的数据库。执行备份数据的恢复操作,需要备份系统管理人员或者数据库管理人员(DBA)对数据的备份恢复实现原理有深入的了解,并周期性地对备份数据进行恢复操作,以保证备份数据的可恢复性与可用性。这种长期机械性、重复性的备份、恢复及验证工作,无疑会占用DBA大量的时间和精力。在DBA界还流传着这么一句话:“故障一定会发生,只是早晚的问题!”。作为一名DBA,只有时刻记得进行备份和恢复校验,才能避免某一天事故发生时出现难以挽回的悲剧.


ADM提出集云、物理、虚拟为一体的,面向结构化、非结构化、虚拟化的数据副本分发与交付管理解决方案。能源行业CDM的应用

ADM的静态数据脱*功能内置丰富的仿真脱*算法。Hadoop版本配置

数据流程管理是ADM功能模块之一,主要通过灵活配置数据流转环节实现数据管理流程的自动化作业编排,ADM采用基于画布的方式默认作业流程的起止节点,根据实际需求将数据的获取、恢复、***、传输、共享、交付、销毁等各个环节对应的任务组件灵活拖动到作业画布,组成一个完整的任务流程,各任务之间支持依赖关系、延时机制以及断点处理机制,**终实现数据管理流程任务的串联组建和并行执行,达到数据管理流程的自动化执行,协助用户将数据交付流程的各个工作环节灵活地组合起来,实现数据交付的自动化,从而摆脱人工值守,达到缩减时间成本和人力成本的目标。Hadoop版本配置

信息来源于互联网 本站不为信息真实性负责