数据子集处理

上讯敏捷数据管理平台（ADM）支持重复数据删除技术，在典型的重复数据删除技术中，根据不同的数据备份场景选择适合的重删策略与粒度方案。在确定重删策略与粒度后，会根据输入侧不同粒度（卷级、文件级、块级）的数据采取不同的数据切分策略，并依据任务级与全局指纹库提供自适应源端的全局重删算法与策略，当前支持源端块级、文件级重删和并行重删技术。源端重删是采用基于内容的可变长数据切分算法，通过对数据块进行哈希算法的标记，即指纹（Fingerprint），在指纹库中寻找相同的指纹。如果存在相同指纹，则表示已保存了相同的数据块，ADM则不再保存此数据块，而是引用已存在的数据块，从而节省更多的备份空间。该算法还可以智能识别已修改的数据和未修改的数据，从而避免因修改数据位移而导致的未修改数据切分到新数据块中的问题，较大限度地提升重删性能和重删率，为避免数据备份过程中冗余网络传输与存储开销，在源端设置粗粒度前置数据校验可以明显缩小备份传输过程中的数据冗余，目的在于不备份任意一个冗余数据。网络安全领域的CDM是指什么？数据子集处理

在数据收集和使用上，通过获取一份具有应用一致性保证的“黄金副本”，分钟级虚拟化为多个副本直接挂载使用，数据使用效率明显得到提升；在数据存储和传输上，这些虚拟数据副本相对原始存储几乎不占用存储空间（约为0），且ADM产品将全部数据集中存放在统一的存储池中，既保证了数据传输流转的闭环管控，又降低了数据的存储成本；在数据加工上，数据脱离生产环境之前增设了敏感数据处理环节，保障数据公开后的隐私安全，防止核心数据泄露；在数据的提供和公开上，虚拟数据副本可用于准生产、测试环境等场景的数据交付，每一份虚拟数据都是互不影响的，并且可读可写，数据在经过变更后可标记快照，多个快照之间可以任意切换实现数据版本的管理。国产化敏感数据处理上讯信息敏捷数据管理平台ADM产品支持全域重删技术，重删指纹库重建功能。

传统的备份方案大多采用周期性的“全量备份+增量备份”策略，其增量备份大多不可持续，经过一段时间就必须执行一次全量备份。因而传统的备份方案经常面临备份窗口过大的问题，而且其增量备份数据的恢复效率相对低下，因为每个时间点的恢复都依赖于上一次全备副本和上一次全备副本后的所有增量数据，恢复操作需要进行逐个迭代恢复。此外，过期增量数据的清理操作也受限于备份副本之间的依赖关系，不一定能及时被***。而长久增量备份与全量快照合成技术，即***执行全量备份，之后只对新增或改动过的数据进行增量备份，此增量备份数据是持续的，而且每个增量备份的数据副本将自动合成为全量快照副本，便于恢复。因此，长久增量备份与全量快照合成技术能够大幅度减少备份时间，节省备份数据所需的存储空间，且提升了恢复效率。长久增量备份与全量快照合成技术适用于单个应用数据量大，执行一次完全备份比较费时费力的应用场景。若用户备份数据量小，也可使用传统的全备+增备技术方式，ADM无挂载备份能够实现此方式。

上讯敏捷数据管理平台（ADM）支持多种备份类型，针对备份方式同时支持有盘挂载备份和无挂载备份（传统数据备份方式），针对备份类型同时支持全量备份、增量备份与全量快照合成、事务日志备份。ADM还支持数据备份，可保护所有应用，其保护对象覆盖文件系统、商业数据库、国产化数据库、虚拟化平台、云平台、容器等。用户通过自定义备份时间点和周期，使系统按照任务策略和计划，自动或手动发起数据备份。当数据丢失或损坏时，根据不同的场景、不同应用类型，用户可以选择灵活高效的恢复方式。数据安全领域的CDM是指副本数据管理。

ADM产品数据安全***ADM平台支持静态数据脱敏（涉及数据库、格式化文件、数据库对象、消息队列等），内置104条***算法、47条敏感信息类型匹配库，覆盖个人身份信息、组织机构信息、资质资格证信息、金融数据信息、医疗数据信息、车辆数据信息等众多类别的敏感数据类型识别与仿真***。具备广义的通用型***规则，包括字符替换、随机生成、截短、加权生成、加密等；支持保留原有数据含义的仿真型***规则，支持中文字典库与编码字典库，保证姓名、身份证号、证件号、地址、组织机构代码等***后数据的有效性、可用性。提供基于数据库的库内***和基于ETL的抽取***，提供文件***添加水印功能，提供国产化操作系统的加密算法，满足用户多种***需求。上讯信息敏捷数据管理平台ADM包括PDM、BDM、SDM、CDM四大功能模块。我国网络安全产业高质量发展

上讯ADM产品是集数据备份管理、备份校验管理、数据副本管理、数据脱敏管理四位一体的数据管理产品。数据子集处理

数据副本管理是上讯敏捷数据管理平台ADM功能模块之一，可单独作为企业级副本数据管理（CDM）产品。为应对当前复杂的IT环境，ADM提出集云、物理、虚拟为一体的，面向结构化数据库、非结构化数据、虚拟化和云平台的数据副本分发与交付管理解决方案。主要通过数据副本管理的核心专利技术——数据库虚拟化技术对源数据进行CDM原格式获取生成黄金副本、存储黄金副本作为基准数据、虚拟化为多个副本挂载恢复，达到快速交付副本数据、灵活管理副本数据版本、集中管理副本数据存储与流转的目标，是主要面向企业数据运维、软件开发测试部门解决自动化闭环取数供数、测试数据快速交付等典型应用场景的问题。数据子集处理