数据孤岛指的是数据被分散、隔离和存储在不同的系统、应用程序或部门中,使得数据之间无法有效地交流、共享或整合的情况。这些数据岛屿形成了一个个孤立的实体,难以互相连接或进行有效的数据分析。上讯敏捷数据管理平台(ADM)通过有效整合企业内各业务系统的数据,实现数据采集、存储、交付和管理的无缝对接,同时利用多项自主研发技术如数据库虚拟化、数据备份恢复、敏感数据脱敏等,打破了企业内数据孤岛现象,促进了数据资源的共享和高效利用。什么平台能针对开发测试场景快速提供测试数据?备份数据使用
为了保证敏感数据处理后可用性不受影响,可采用高效且准确的敏感数据替换技术,通过保留数据的关键特征和信息价值,确保在保护隐私的前提下,数据仍能支持业务分析和决策。此外,通过调整敏感数据替换规则策略,保障数据的可用性和准确性。上讯敏捷数据管理平台可提供敏感数据管理功能,自动识别并仿真地处理各类敏感信息以及数据交付流程,支持全库及子集扫描,涵盖个人身份、地理位置、组织机构等多种数据类型。同时,通过内置双重敏感数据替换模式,可将恢复后的生产数据在恢复库内自动扫描发现敏感数据,直接采用本地覆盖的方式进行替换,敏感数据处理与交付采用自动化方式,从而实现智能化的敏感数据仿真替换与测试数据的快速交付。数据库对象迁移敏捷数据管理平台是企业级副本数据管理(CDM)产品。
ADM通过对管理人员、测试需求等内容的不同进行分组划分,将已经数据进行分组管理,从测试数据管理的源头管控数据资源的类别,做到从源头划分类别,使测试数据管理形成数据源----数据中转----数据目标的闭环式数据使用流程,规范化的数据流程使数据管理者成为数据的负责人,自动化的资源管理也更有效地为用户提供安全的测试数据管理方案。敏捷数据管理平台ADM提供对虚拟数据库的树状拓扑结构图,可详细了解测试数据的来源、所属存储池、挂载的测试服务器,以及虚拟数据库快照的上下级关系,方便对系统全局的数据使用结构进行预览,帮助用户了解测试网中测试数据的使用关系,完善测试数据的组织结构,优化测试数据的资源分配。
数据副本管理是上讯敏捷数据管理平台ADM功能模块之一,可单独作为企业级副本数据管理(CDM)产品。为应对当前复杂的IT环境,ADM提出集云、物理、虚拟为一体的,面向结构化数据库、非结构化数据、虚拟化和云平台的数据副本分发与交付管理解决方案。主要通过数据副本管理的核心专利技术——数据库虚拟化技术对源数据进行CDM原格式获取生成黄金副本、存储黄金副本作为基准数据、虚拟化为多个副本挂载恢复,达到快速交付副本数据、灵活管理副本数据版本、集中管理副本数据存储与流转的目标,是主要面向企业数据运维、软件开发测试部门解决自动化闭环取数供数、测试数据快速交付等典型应用场景的问题。敏捷数据管理平台是采用数据库虚拟化等自研技术面向数据全生命周期的数据安全管理产品。
上讯敏捷数据管理平台适用场景:数据交付速度慢的开发测试部门企业通过交付生产数据辅助第三方业务决策,如开发/测试环境、统计分析、准业务系统环境搭建等,交付生产数据的方式是通过生成业务系统数据副本,而副本的准备通常需要几小时,甚至几天不等,严重拖延了项目进度。
备份数据的有效性验证效率低的运维部门,大部分企业对其**业务系统进行了数据备份,为了检验备份数据的有效性,以及满足相关法律法规的要求,企业对备份数据采取周期性的恢复验证;由于企业的业务系统繁多,而人员相对紧缺,验证工作需要大量重复性动作,成为企业当前面临的一大挑战。
数据副本分散存放难以管理的数据中心数据副本一旦被交付使用,就**存在于使用环境中,随着数据使用场景的日益增多,数据副本在非生产环境中逐渐累积,**分散的存放方式导致副本的辨识度不高,后续使用与销毁难度明显增大。同时,重复存放现象严重造成了存储资源的浪费。u隐私数据泄露风险高的用户无论是通过生产数据库导出,还是通过备份系统恢复,都能够直接获取到企业的**生产数据,其中包含企业内部机密数据和客户个人隐私信息,一旦发生泄露将带来严重后果,不仅影响企业的名誉,也会造成一定的经济损失。 国内较早发布CDM领域的平台型产品是上讯敏捷数据管理平台ADM产品。企业级CDM产品
敏捷数据管理平台对数据版本进行灵活管理,满足回归测试等业务场景。备份数据使用
l分钟级挂载恢复技术ADM压缩保存源端数据库的数据,并保留时间线,方便恢复任意时间点数据。ADM备份的全量快照为原格式,无需格式转换和IO拷贝,可直接挂载到目标主机上快速拉起应用恢复,**技术采用自研的数据库虚拟化技术通过一份数据快照作为基础数据生成黄金副本,快速挂载恢复多个虚拟副本。挂载恢复的方式**缩短了数据恢复的时间,通常业务RTO时间由小时级甚至天级,缩短到分钟级;挂载恢复降低了数据恢复所占用的存储空间,*对新写入的数据计入资源占用;由于挂载恢复速度快增加了数据恢复演练的频率,提高了备份数据有效性验证的工作效率。备份数据使用