Hadoop存储管理

上讯敏捷数据管理平台产品为非生产环境中的数据使用提供了安全性保障。ADM内置了双重敏感数据处理模式，一是通过基于虚拟数据库的方式，实现在闭环供数流程中完成敏感数据的替换；二是数据抽取方式，支持从多种数据源中灵活抽取并进行变形处理。此外，ADM能够自动发现敏感数据，智能定义敏感数据类型，并定位敏感数据源位置。结合丰富的算法和仿真字典库，ADM不仅确保变形后的数据保持业务属性，还保持了数据表间关系的业务一致性。为了集中管理数据使用流程，ADM跟踪数据流向，识别虚拟数据库的使用状态，实时拍摄快照，保留数据版本，实现了测试数据版本的快速回退，从而有助于对数据版本进行有效管理。多功能相结合确保非生产环境数据的安全使用，同时满足企业对于数据安全性和合规性的需求。上讯敏捷数据管理平台虚拟数据支持无限副本，几乎不占用额外的存储空间。Hadoop存储管理

上讯敏捷数据管理平台ADM产品解决方案优势一是对生产数据备份恢复与异地容灾，即实现传统的数据备份恢复产品的功能，帮助用户满足数据备份业务需求。通过对生产数据包括数据库、文件、虚拟化平台、容器、云服务器等进行备份，对带库进行数据归档，支持对象存储用于存储数据，支持周期性增量备份、数据压缩存储、加密传输、重复数据删除等技术，采用挂载恢复方式，恢复时间为分钟级、恢复粒度为秒级。支持数据远程复制实现异地容灾，对备份数据进行双重保护。Hadoop存储管理敏捷数据管理平台贯穿数据收集、数据存储、数据加工、数据传输、数据使用、数据提供、数据回收的各个环节。

上讯ADM敏感数据管理功能的价值优势有哪些？采用安全的方式有效降低了数据泄露风险、丰富的算法规则实现了仿真处理、自动化的处理流程满足了数据安全监管要求、数据变形后逻辑保持一致保证了数据变形后的价值属性。通过集成数据获取和变形功能，实现数据采集、数据存储、数据处理和数据分发的端到端自动化，从而降低人力成本和时间成本。彻底隔离生产业务系统进行处理任务的执行。采用数据从源端抽取、转换、加载到目标端的流程，对数据进行中间不落地的变形、替换，支持数据库子集处理，保证敏感数据管理的灵活性，适应用户多种数据使用场景。

上讯敏捷数据隐私安全处理系统SDM优势：

敏感数据识别精确高效 

通过内置敏感数据类型匹配库，对数据库的敏感数据进行智能定义扫描，保证每一条敏感记录被成功发现，避免漏扫。敏感信息的扫描识别支持全量识别、抽样识别、增量识别，灵活提升敏感数据的扫描识别效率，成功地自动选取敏感数据源。 

丰富的数据处理算法 

当前系统内置超百种算法，包括广义的通用型算法规则，如字符替换、随机生成、截短、加权生成、加密等；也包括保留原有数据属性的仿真型规则，还包括中文字典库与编码字典库，保证姓名、身份证号、证件号、地址、企业机构代码等变形后数据的有效性、可用性，同时自动处理超长字符的截断和变形后重复数据的问题。 上讯敏捷数据管理平台为企业上中下游数据的高效使用、安全管控提供了一套综合数据安全治理解决方案。

上讯敏捷数据隐私安全处理系统SDM是一款集敏感数据的定义识别、敏感数据的仿真替换与替换后数据分发为一体的静态数据隐私安全处理系统。针对敏感数据识别提供通用数据特征库，敏感数据类型包括但不限于个人身份信息、组织机构信息、资质资格证信息、金融数据信息、医疗数据信息、车辆数据信息等众多类别，支持全库与子集自动扫描识别，包括数据内容、字段类型、约束关系均可以实现自动识别，并依据类型特征加以分类；针对敏感数据的仿真替换，内置大量数据处理算法对敏感数据进行随机化、模糊化、仿真度替换，保证变形后数据的完整性、仿真性以及数据间的关联关系保持不变，具备灵活的数据抽取组合方式与自助式向导流程，有效降低数据隐私安全处理工作的复杂度。ADM是对数据的采集、传输、存储、使用、流转等关键环节进行效率和安全双重保障的数据管理平台。备份服务器

敏捷数据管理平台对数据的使用关系采用树状拓扑图的方式记录，数据使用关系实现了可视化。Hadoop存储管理

ADM数据备份功能的价值优势在于数据备份采用周期增量备份与全量快照合成的技术，保证了全量数据的时效性，通过挂载恢复的方式快速恢复数据，以验证备份数据的可恢复性、有效性，快速恢复实现了业务应急接管，保证了容灾恢复对RTO 与 RPO的高要求。传统的数据备份技术是将备份数据形成备份集，如果需要恢复则必须做Restore动作才能打开，在大数据量的情况下，Restore耗时较长、耗费资源，因此，企业通常难以验证大数据量的备份数据的可恢复性与可用性。Hadoop存储管理