敏感数据处理任务作业效率

在典型的重复数据删除技术中，根据不同的数据备份场景选择适合的重删策略与粒度方案。在确定重删策略与粒度后，会根据输入侧不同粒度（卷级、文件级、块级）的数据采取不同的数据切分策略，并依据任务级与全局指纹库提供自适应源端的全局重删算法与策略，当前支持源端块级、文件级重删和并行重删技术。源端重删是采用基于内容的可变长数据切分算法，通过对数据块进行哈希算法的***标记，即指纹（Fingerprint），在指纹库中寻找相同的指纹。如果存在相同指纹，则表示已保存了相同的数据块，ADM则不再保存此数据块，而是引用已存在的数据块，从而节省更多的备份空间。该算法还可以智能识别已修改的数据和未修改的数据，从而避免因修改数据位移而导致的未修改数据切分到新数据块中的问题，比较大限度地提升重删性能和重删率，为避免数据备份过程中冗余网络传输与存储开销，在源端设置粗粒度前置数据校验可以明显缩小备份传输过程中的数据冗余，目的在于不备份任意一个冗余数据。ADM达到了快速交付副本数据、灵活管理副本数据版本、集中管理副本数据存储与流转的目标。敏感数据处理任务作业效率

测试数据版本迭代管理，提升开发测试业务的变更效率企业开发需求更新频繁，对测试环境和测试数据提出了同步变更的要求，ADM的虚拟数据库快照功能解决了测试数据版本迭代的问题，通过对数据库状态进行定时或即时的记录，保留当前虚拟数据库的状态作为测试数据版本，一旦需要调用某个版本时，只需切换到不同时间点的虚拟库快照即可，灵活实现测试数据版本的任意切换，ADM还支持创建和维护虚拟库级联快照，满足回归测试等具体应用场景，通过这一功能明显提升了开发测试效率、升级迭代效率。副本数据平台ADM的高效压缩存储池显*降低了基础数据源获取的存储成本与持续增长的副本数据存储成本。

通过部署敏捷数据管理平台ADM产品的数据副本管理模块，实现了测试数据版本迭代管理，提升了数据使用过程中的应用效率。随着移动互联网技术的不断革新，移动应用业务不断扩张，企业面临着前台业务频繁更新升级的现状，为保证既有业务稳定，需要对新提出的升级需求开展仿真测试与回归测试，因此亟需一套能够对测试环境的测试数据进行版本灵活切换的解决方案，便于测试数据版本的即时调用，迅速适应不同业务程序提供不同版本的测试数据。ADM的虚拟数据库快照功能解决了这一问题，通过对数据库状态进行定时或即时的记录，管理和维护当前虚拟数据库的数据，使用人员可以随时通过记录的虚拟数据库快照提供一个版本的测试数据，经过测试后保存当前的数据库使用状态，便于开发测试的数据版本迭代，通过这一功能明显提升了程序升级测试、版本迭代的效率.

ADM产品数据安全***ADM平台支持静态数据脱敏（涉及数据库、格式化文件、数据库对象、消息队列等），内置104条***算法、47条敏感信息类型匹配库，覆盖个人身份信息、组织机构信息、资质资格证信息、金融数据信息、医疗数据信息、车辆数据信息等众多类别的敏感数据类型识别与仿真***。具备广义的通用型***规则，包括字符替换、随机生成、截短、加权生成、加密等；支持保留原有数据含义的仿真型***规则，支持中文字典库与编码字典库，保证姓名、身份证号、证件号、地址、组织机构代码等***后数据的有效性、可用性。提供基于数据库的库内***和基于ETL的抽取***，提供文件***添加水印功能，提供国产化操作系统的加密算法，满足用户多种***需求。ADM是对数据的采集、传输、存储、使用、流转、管理等关键环节进行效率和安全双重保障的数据管理平台。

传统的备份方案大多采用周期性的“全量备份+增量备份”策略，其增量备份大多不可持续，经过一段时间就必须执行一次全量备份。因而传统的备份方案经常面临备份窗口过大的问题，而且其增量备份数据的恢复效率相对低下，因为每个时间点的恢复都依赖于上一次全备副本和上一次全备副本后的所有增量数据，恢复操作需要进行逐个迭代恢复。此外，过期增量数据的清理操作也受限于备份副本之间的依赖关系，不一定能及时被***。而长久增量备份与全量快照合成技术，即***执行全量备份，之后只对新增或改动过的数据进行增量备份，此增量备份数据是持续的，而且每个增量备份的数据副本将自动合成为全量快照副本，便于恢复。因此，长久增量备份与全量快照合成技术能够大幅度减少备份时间，节省备份数据所需的存储空间，且提升了恢复效率。长久增量备份与全量快照合成技术适用于单个应用数据量大，执行一次完全备份比较费时费力的应用场景。若用户备份数据量小，也可使用传统的全备+增备技术方式，ADM无挂载备份能够实现此方式。ADM提出集云、物理、虚拟为一体的，面向结构化、非结构化、虚拟化的数据副本分发与交付管理解决方案。文件系统

ADM数据备份管理可对数据库实时备份，实现物理恢复或挂载恢复。敏感数据处理任务作业效率

敏捷数据管理平台是国内较早发布的副本数据管理（CDM）产品，纯国产化技术自主研发，**国内CDM厂商率先应用在大型头部金融机构和运营商企业，在金融、能源、运营商、交通、物流等行业拥有***的实践。与众多银行用户建立全方位、多层次的深度合作，结合不同国产数据库的特性采用自动化的数据获取方式，为银行在国产化替换进程中解决配套的信息安全产品问题，在实现金融服务质效提升的同时，帮助银行实现数字化、智能化发展，实现国产信创的快速推进，促进以数据为关键要素的数字经济发展.敏感数据处理任务作业效率