传统的备份方案大多采用周期性的“全量备份+增量备份”策略,其增量备份大多不可持续,经过一段时间就必须执行一次全量备份。因而传统的备份方案经常面临备份窗口过大的问题,而且其增量备份数据的恢复效率相对低下,因为每个时间点的恢复都依赖于上一次全备副本和上一次全备副本后的所有增量数据,恢复操作需要进行逐个迭代恢复。此外,过期增量数据的清理操作也受限于备份副本之间的依赖关系,不一定能及时被***。而长久增量备份与全量快照合成技术,即***执行全量备份,之后只对新增或改动过的数据进行增量备份,此增量备份数据是持续的,而且每个增量备份的数据副本将自动合成为全量快照副本,便于恢复。因此,长久增量备份与全量快照合成技术能够大幅度减少备份时间,节省备份数据所需的存储空间,且提升了恢复效率。长久增量备份与全量快照合成技术适用于单个应用数据量大,执行一次完全备份比较费时费力的应用场景。若用户备份数据量小,也可使用传统的全备+增备技术方式,ADM无挂载备份能够实现此方式。上讯ADM产品能解决数据备份恢复、备份数据恢复验证、敏感数据处理、测试数据多副本快速交付等问题吗?合并抽取
敏感数据处理是上讯敏捷数据管理平台(ADM)产品功能模块之一,主要针对敏感数据的处理使用,提供集敏感数据自动识别、仿真处理与数据交付为一体的敏感数据管理功能,覆盖了敏感数据使用与管理的全部场景。针对敏感数据识别提供通用数据特征库,敏感数据类型包括但不限于个人身份信息、组织机构信息、资质资格证信息、金融数据信息、医疗数据信息、车辆数据信息等众多类别,支持全库与子集自动扫描识别,包括数据内容、字段类型、约束关系均可以实现自动识别,并依据类型特征加以分类;针对敏感数据的仿真处理,ADM内置大量数据算法对敏感数据进行随机化、模糊化替换,保证处理后数据的完整性、仿真性以及数据间的关联关系保持不变,支持处理结果的校验。供应不足上讯信息的敏捷数据管理平台ADM产品可应用于数据安全治理领域。
上讯敏捷数据管理平台ADM功能支持自适应源端的全局重删算法与策略,支持任务级与全局指纹库;针对文件备份提供文件粒度与块级粒度的全域重删且支持重删指纹库重建功能,支持多线程文件备份,支持海量小文件场景下的聚合策略,提供并行扫描和高速索引,从而减少需要备份的数据量、缩短备份窗口、节省备份数据传输所消耗的网络带宽以及节约备份数据存储空间;备份传输过程采用压缩加密处理,缓解网络传输的压力,增加网络抖动或短时间断链的超时容错机制,确保备份数据的安全。
在典型的重复数据删除技术中,根据不同的数据备份场景选择适合的重删策略与粒度方案。在确定重删策略与粒度后,会根据输入侧不同粒度(卷级、文件级、块级)的数据采取不同的数据切分策略,并依据任务级与全局指纹库提供自适应源端的全局重删算法与策略,当前支持源端块级、文件级重删和并行重删技术。源端重删是采用基于内容的可变长数据切分算法,通过对数据块进行哈希算法的***标记,即指纹(Fingerprint),在指纹库中寻找相同的指纹。如果存在相同指纹,则表示已保存了相同的数据块,ADM则不再保存此数据块,而是引用已存在的数据块,从而节省更多的备份空间。该算法还可以智能识别已修改的数据和未修改的数据,从而避免因修改数据位移而导致的未修改数据切分到新数据块中的问题,比较大限度地提升重删性能和重删率,为避免数据备份过程中冗余网络传输与存储开销,在源端设置粗粒度前置数据校验可以明显缩小备份传输过程中的数据冗余,目的在于不备份任意一个冗余数据。上讯信息的自主产品敏捷数据管理平台ADM是国内副本数据管理CDM领域的重要产品。
上讯敏捷数据管理平台ADM产品是一款企业级CDM产品,通过以数据为中心,以安全为前提,以使用为导向,以敏捷为目的的产品理念,为企业提供一套面向上中下游数据高效使用与安全管控的数据安全治理解决方案,在保证数据安全使用的同时,提高数据使用效率、降低数据存储成本。ADM产品的应用解决了数据开发利用需求下,数据使用流转环节遇到的安全性和效率问题,为企业在开发测试场景中快速供应测试数据提供了一种新的解决方案,主要应用于开发测试部门中对开发测试团队的功能测试、回归测试等具体的测试场景提供灵活的测试数据版本,通过一键切换立即调取适用于当前业务版本的数据版本,明显缩短了业务开发的测试周期.上讯ADM产品是集数据备份管理、备份校验管理、数据副本管理、数据脱敏管理四位一体的数据管理产品。数据分类
上讯信息敏捷数据管理平台ADM产品的数据备份模块通过虚拟挂载恢复可快速检验备份数据的可用性和有效性。合并抽取
ADM平台具备根据管理人员、测试需求等内容的不同进行分组划分的功能,将数据进行分组管理,从下游测试数据管理的源头管控数据资源的类别,做到从源头划分类别,使下游测试数据管理形成上游数据源----中游数据中转----下游数据目标的闭环式数据使用流程,规范化的数据流程使数据管理者成为数据的负责人,自动化的资源管理也更有效地为金融行业用户提供安全的数据管理方案。同时,ADM提供对数据流转的树状拓扑结构图,可详细了解数据的来源、所属存储池、挂载的测试服务器,以及数据快照的层级关系,方便对系统全局的数据使用结构进行预览,通过可视化的结构拓扑图,帮助用户了解下游测试网中测试数据的归属关系,完善数据流转路径,优化数据资源的合理分配,可视化功能的动态展示将助力企业向着智能化数据安全治理的方向转型。合并抽取