大数据平台敏感数据处理

基于CDM（CopyDataManagement，数据副本管理）技术，通过对该技术的运用，我们整合了CDM和***相关工具，实现了生产到开发测试环境的数据快速复制，以及备份数据的自动校验。通过CDM解决方案的实施，我们实现了一个平台、一站式解决数据获取、数据存储、数据构建、数据使用、数据销毁，在保证合规性基础上，以敏捷的数据全生命周期管理，更好地实现数据共享和数据利用。上讯敏捷数据管理平台可以实现以上功能，欢迎登录官网了解详情.国内较早发布CDM领域的平台型产品是上讯敏捷数据管理平台ADM产品。大数据平台敏感数据处理

混合IT环境下兼容性***的数据保护平台ADM***兼容物理服务器、虚拟化、云平台的备份源，降低因混合IT环境而需要多套数据保护方案带来的成本压力和管理复杂性。支持国产化操作系统，支持主流平台下的数据库、文件数据保护，支持主流虚拟化平台的保护，支持国产云平台的保护。通过数据库虚拟化技术快速创建副本实现对备份数据的即时挂载恢复，提供业务应急响应能力和数据快速恢复能力，挂载恢复***缩短了备份数据恢复的时间，可用于验证备份数据的有效性，直接提升了数据恢复验证的频率。同时，ADM可与第三方备份系统对接，改变传统手动编写脚本恢复数据的方式，通过设置定时策略，自动化实现备份数据恢复的有效性验证，**终，协助企业建立***高效的数据保护平台。旁路式部署上讯敏捷数据管理平台ADM产品能对接NBU直接恢复。

上讯敏捷数据管理平台（ADM）的主要技术是（1）ADM内置独有的高效压缩存储池，压缩比高达3:1，存储即压缩，降低了基础数据源获取的存储成本与持续增长的副本数据存储成本。（2）ADM的数据库虚拟化技术，是通过获取一份基础数据源，快速拉起多份虚拟数据库挂载给目标业务使用，虚拟数据库拉起时几乎不占用物理存储空间，在实验室测试环境下拉起一个10TB数据量的虚拟数据库，只占用1GB左右的存储空间，明显节约了存储成本和时间周期，因此针对开发测试场景，需要对同一份数据创建N份副本数据时，存储成本节约近乎N倍。

通过智能定义敏感数据类型，自动发现和识别敏感数据，包括数据类型、内容、约束关系，灵活排序减少人为筛选，定位敏感数据源。丰富的算法与仿真的字典库相结合，保证处理后数据仍具有业务属性，数据表间关系仍具有业务一致性，不影响数据挖掘分析数据价值。对涉及企业、个人信息的隐私数据，包括资金财产、个人、企业隐私的对照关系进行敏感数据识别，通过内置的规则进行处理，将数据敏感部分去隐私化，但并不失去数据挖掘的价值特征，减少数据隐私泄露带来的风险和损失，甚至降低可能发生的人身伤害和违法犯罪事件。上讯ADM产品的高效性体现在数据从上游生产环境到下游使用环境通过虚拟副本创建实现分钟级交付。

当前ADM支持对商业数据库、国产化数据库、文件、虚拟化平台、国产云服务器、容器等的备份恢复与容灾以及磁带库归档。***兼容Windows、Linux、Unix、统信、麒麟等各类操作系统；具体支持Oracle/MySQL/DB2/SQLServer/PostgreSQL/Informix/GoldenDB/OceanBase/OpenGauss/达梦/南大通用GBase/人大金仓KingBase/GaussDB(DWS)/MogDB/MongoDB/丛云KingWoW/TDSQL/GaussDB(forOpenGauss)/VastBase/TiDB/AntDB/磐维/海量等数据库的备份恢复与细粒度备份恢复；上讯敏捷数据管理平台ADM产品能对接NBU自动恢复。快速推进信创

数据管理领域的CDM产品哪个厂商做得好？大数据平台敏感数据处理

上讯敏捷数据管理平台ADM功能支持自适应源端的全局重删算法与策略，支持任务级与全局指纹库；针对文件备份提供文件粒度与块级粒度的全域重删且支持重删指纹库重建功能，支持多线程文件备份，支持海量小文件场景下的聚合策略，提供并行扫描和高速索引，从而减少需要备份的数据量、缩短备份窗口、节省备份数据传输所消耗的网络带宽以及节约备份数据存储空间；备份传输过程采用压缩加密处理，缓解网络传输的压力，增加网络抖动或短时间断链的超时容错机制，确保备份数据的安全。大数据平台敏感数据处理