通用数据特征库

上讯敏捷数据管理平台（ADM）的主要技术是（1）ADM内置独有的高效压缩存储池，压缩比高达3:1，存储即压缩，降低了基础数据源获取的存储成本与持续增长的副本数据存储成本。（2）ADM的数据库虚拟化技术，是通过获取一份基础数据源，快速拉起多份虚拟数据库挂载给目标业务使用，虚拟数据库拉起时几乎不占用物理存储空间，在实验室测试环境下拉起一个10TB数据量的虚拟数据库，只占用1GB左右的存储空间，明显节约了存储成本和时间周期，因此针对开发测试场景，需要对同一份数据创建N份副本数据时，存储成本节约近乎N倍。上讯信息敏捷数据管理平台ADM产品的数据备份模块通过数据重删可节省传输占用的网络带宽和数据存储空间。通用数据特征库

上讯敏捷数据管理平台（ADM）支持重复数据删除技术，在典型的重复数据删除技术中，根据不同的数据备份场景选择适合的重删策略与粒度方案。在确定重删策略与粒度后，会根据输入侧不同粒度（卷级、文件级、块级）的数据采取不同的数据切分策略，并依据任务级与全局指纹库提供自适应源端的全局重删算法与策略，当前支持源端块级、文件级重删和并行重删技术。源端重删是采用基于内容的可变长数据切分算法，通过对数据块进行哈希算法的标记，即指纹（Fingerprint），在指纹库中寻找相同的指纹。如果存在相同指纹，则表示已保存了相同的数据块，ADM则不再保存此数据块，而是引用已存在的数据块，从而节省更多的备份空间。该算法还可以智能识别已修改的数据和未修改的数据，从而避免因修改数据位移而导致的未修改数据切分到新数据块中的问题，较大限度地提升重删性能和重删率，为避免数据备份过程中冗余网络传输与存储开销，在源端设置粗粒度前置数据校验可以明显缩小备份传输过程中的数据冗余，目的在于不备份任意一个冗余数据。通用数据特征库上讯信息敏捷数据管理平台ADM产品的数据存储池采用压缩存储、加密传输。

敏捷数据管理平台ADM测试数据管理场景及价值场景：测试环境是数据使用**为频繁的一个场景，涉及到数据交付、数据版本管理、数据安全管控等问题，也是数据治理**容易忽视的一个场景，做好测试数据的管理工作才会使得数据治理方案更加完善。价值：采用ADM实现测试数据管理，可以帮助用户实现测试数据的分钟级交付，提升百倍以上的数据交付能力；同时也可以帮助用户节约十倍以上的存储资源；可以帮助用户实现测试数据的版本管理，杜绝僵尸数据；同时也可以实现测试数据的集中统一管理，降低数据泄露的风险.

ADM产品生产数据备份恢复与异地容灾对生产数据包括数据库、文件、虚拟化平台、容器、云服务器等进行备份，对带库进行数据归档，支持长久增量备份、数据压缩存储、加密传输、重复数据删除等技术，采用挂载恢复方式，恢复时间为分钟级、恢复粒度为秒级。支持数据远程复制实现异地容灾，对备份数据进行双重保护。

ADM产品备份数据自动化恢复与有效性验证ADM可以对接备份系统如NetBackup、CommVault、NetWorker等，检索备份策略自动恢复备份数据和备份文件，完成验证输出结果。全自动化恢复验证，可以满足用户对当前备份数据的可恢复性验证、恢复后的完整性验证，覆盖备份数据和备份文件的恢复，支持虚拟挂载恢复和物理恢复双重方式。 上讯敏捷数据管理平台ADM产品支持仿真的敏感数据处理。

数据分钟级提供，提升数据交付效率缩短开发周期通过部署ADM几分钟内即可创建一个数据量TB级别的虚拟数据库，进而，快速将测试数据传输到下游的开发测试环境，无需繁琐冗长的审核和等待，这一过程有效减少了下游开发测试场景中测试数据的准备时间，通常从以天计算缩短到以小时计算，时间效率提升明显，**缩短了开发测试时间，进而缩短产品的发布周期。（5）敏感数据定义识别与仿真***，保障数据流转环节的安全性通过智能定义敏感数据类型，自动发现和识别敏感数据，包括数据类型、内容、约束关系，灵活排序减少人为筛选，***精细定位敏感数据源。丰富的***算法与仿真的字典库相结合，保证***后数据仍具有业务属性，数据表间关系仍具有业务一致性，不影响数据挖掘分析数据价值。对涉及企业、个人信息的隐私数据，包括资金财产、个人、企业隐私的对照关系进行敏感数据识别，通过内置的***规则进行***处理，将数据敏感部分去隐私化，但并不失去数据挖掘的价值特征，减少数据隐私泄露带来的风险和损失，甚至降低可能发生的人身伤害和违法犯罪事件。基于哪些方面选择CDM产品的厂商？通用数据特征库

上讯敏捷数据管理平台ADM产品能实现敏感数据的自动化扫描发现。通用数据特征库

上讯敏捷数据管理平台ADM功能支持自适应源端的全局重删算法与策略，支持任务级与全局指纹库；针对文件备份提供文件粒度与块级粒度的全域重删且支持重删指纹库重建功能，支持多线程文件备份，支持海量小文件场景下的聚合策略，提供并行扫描和高速索引，从而减少需要备份的数据量、缩短备份窗口、节省备份数据传输所消耗的网络带宽以及节约备份数据存储空间；备份传输过程采用压缩加密处理，缓解网络传输的压力，增加网络抖动或短时间断链的超时容错机制，确保备份数据的安全。通用数据特征库