在今年的韧性新时代·新品发布会上,爱数正式发布了 AnyBackup Family 8,从数据保护迈向业务数据生命周期管理的征途。针对备受组织关注的开发测试场景,爱数于 4 月 20 日下午举办“测试数据管理”神盾会(九),以创新方案和领先技术突破测试数据管理的重重枷锁,助力组织释放备份数据价值,以数据重塑生产力。
DevOps 催生持续测试
测试数据管理要求升级
此次活动,爱数特邀了中国信通院云大所审计与治理部副主任牛晓玲和国泰君安证券 DBA 吕楠。作为行业专家,牛晓玲和吕楠对 DevOps 背景下的测试数据管理进行了精彩分享。
数字经济时代,为满足产品的快速、高质量和持续交付,DevOps 模式应运而生。据统计,近 60% 企业已在内部推行 DevOps。DevOps 的快速落地催生了持续测试,并成为产品交付的关键环节之一。而数据作为重要的新型生产要素,测试数据管理受到国家和行业的高度重视,并在效率、安全等方面被赋予了更高要求。
在开发测试的实际应用场景中,测试数据大多是取自生产环境的真实数据,如何确保数据安全成为业界的公认难题。针对这一问题,业界应用较为广泛的主要是数据脱敏。然而,在数据脱敏过程中,跨系统脱敏一致性、耗时长、流程复杂等问题却时有发生。
传统模式下,测试数据管理举步维艰
DevOps 趋势下,组织的测试数据供数需求愈发频繁。据不完全统计,中型商业银行每年的测试数据申请需求 800 余次,供给数据量高达数十 PB,但现有供数架构在效率和成本方面却不尽人意。而测试数据管理是一个覆盖多部门、多角色的数据协同场景,不同部门、不同角色面临着不同难题。
• DBA & 备份运维人员:取数要避开业务繁忙期,但现有的 Dump 等方式效率低,加之备份数据难以直接复用,无法及时响应取数需求;
• 数据脱敏人员:数据脱敏环节效率低,数据质量参差不齐,在加上被动式响应模式,严重影响效率;
•测试管理人员:测试环境与测试数据难以复用,导致测试环境频繁重建,僵尸测试资源识别与回收难、频繁重复造数。
传统方案下,需求部门往往要提前 2 周申请,数据供给效率十分低下,并且海量巨库场景下还面临无法处理的难题。此外,冗余的数据副本、孤岛化的测试数据让成本居高不下。在数据脱敏环节,由于技术瓶颈海量数据脱敏场景下效率十分低下,加之复杂的脱敏流程,基于工单被动响应式的数据脱敏让工作效率雪上加霜。
复用备份数据,创新测试数据管理
爱数推出创新的测试数据管理方案,致力于帮助客户实现开发测试的高效协同,复用备份数据,释放数据价值。相比传统方案,爱数 AnyBackup 测试数据管理方案能够助力组织节约 63% 以上的测试数据准备时间,大幅提高效率,还能实现 10 倍以上的存储成本降低,实现降本增效目标。
• 效率提升 20 倍以上,降低对生产业务的影响:直接捕获具有应用一致性保证的生产数据副本,以单一黄金副本虚克隆出多个任意数量任意历史时间虚拟副本,并通过分钟级挂载恢复,按需、即时访问和应用虚拟副本,实现 20 倍以上效率提升,最大程度降低对业务系统的影响。
• 测试数据准备工作左移,主动式自助测试数据供给:结合即时可得的备份数据,支持标准化测试数据集的准备,从而将被动式响应转换为主动式自助测试数据供给,实现测试数据复用,节约 50% 以上重复测试数据制作的时间。
• 降低冗余化、孤岛化的测试数据存储开销 10 倍以上:实现备份数据复用,减少重复建设成本,且结合永久增量备份和虚克隆等技术,极大降低存储空间,有效降低存储成本。
• 以开放性架构,实现全流程自动化,大幅提高效率:基于开放性架构和流程编排技术,能够与第三方平台进行协同,实现更高程度的自动化,进一步提升工作和管理效率。
AnyBackup 测试数据管理方案还具备创新的内置安全能力,以不可变存储、强制数据保留、Air-Gap 等技术,全方位保障测试数据安全。此外,AnyBackup 还能联动监测工具,如爱数 AnyRobot,帮助客户实现更好的灾备规划与建设。
硬核技术揭秘
击破测试数据管理效率和成本难关
AnyBackup Family 8 引入备份数据湖架构,并从数据保护迈向数据管理。其中,测试数据管理作为备受行业关注的业务场景,却遇到诸多技术门槛。海量测试数据管理迫切呼唤更强大的分布式存储系统,备份数据复用亟需全面增强的副本数据管理技术,广泛的生态对接需要全新的开放技术架构…… AnyBackup 持续创新,以诸多硬核技术突破重重技术门槛,助力客户走出测试数据管理的效率和成本困境。
•全新的分级索引,全面升级的性能体验:通过分级索引技术能显著降低索引空间的占用,加速快照的创建和删除,同时达到数据均衡负载的效果,读写压力均衡分散到各个节点,显著提升读写性能。
•真正的无损快照,真正的效率提升:快照和副本的创建会重新开辟索引数据块,不会对已有的基础卷和快照造成任何影响,做到真正的无损快照;再者,基础卷的读写都是将数据写入新的空间,并不会因为快照影响到基础卷的读写性能,显著地提升读写性能。
•硬核的直通挂载,更快的测试数据管理体验:AnyBackup 采用多网关直通挂载,就近读取数据,从而减少网络的中转,同时通过多节点分散读写压力,显著提升IOPS。
•第五代重复数据删除,最大程度降低存储成本:分布式重复数据删除技术,能够精准的将数据块分配到指定节点进行去重,同时支持并行重删,加速重删的效率,支持多种重删模式,最大限度地降低存储成本。
•专属副本镜像管理,体验强大的测试数据复用和分发能力:通过对挂载后的副本进行镜像操作,可以将加工处理后的数据形成可分发的数据资产包,放入镜像仓库,方便后续数据的分发和管理,实现高效地数据复用和分发。
•全新的开放架构,大幅降低集成对接复杂度:在数据的取存管环节,完善的API以及用户和权限体系,可以对接脱敏等数据处理组件、外部的OA 等系统,实现统一的流程管控;用数环节,可以通过API对接各种上层的业务系统,方便各种业务快速对接和落地。
聚焦客户需求,从客户中来,到客户中去。爱数 AnyBackup 测试数据管理方案旨在帮助客户实现备份数据复用,赋能开发测试等场景,释放数据的更多价值。未来,爱数 AnyBackup Family 8 还将有更多的创新方案和领先技术亮相,加速数字化转型。