本文来源于:“鑫智奖”第四届金融数据智能优秀解决方案评选 ,作者:上讯信息
上讯信息:基于CDM技术的测试基准数据快速交付方案
2022-03-28 关键词:数据治理,数据平台
2528
一、解决方案简介
上讯信息基于CDM技术的测试基准数据快速交付方案是针对银行业软件开发测试中心提出的应对方案,尤其适合大型银行软件开发中心测试环境的快速搭建,解决测试环境搭建中数据准备与交付这一环节的瓶颈问题,实现测试基准数据的统一获取、分钟级交付、测试数据版本快速切换、测试数据的高可用。该解决方案平台的部署采用分布式集群部署,方便节点扩展,且具备在数据快速增长时对存储容量扩容的能力。
二、应用场景痛点简介
大型银行软件开发中心的测试环境庞大复杂,每个生产环境都对应若干套测试环境包括主测环境、投演环境等,每套测试环境对应多台测试数据库,测试数据经由上游生产环境的备份数据恢复获取,随着银行业务的不断发展,信息系统变更日益频繁,对测试数据的使用频率提高,测试环境存量数据版本众多,在测试数据交付和使用上存在以下痛点:
1.测试基准数据准备时间长,测试数据主要通过上游生产环境的备份数据恢复获取,由于生产业务数据库数据量大,且一份业务数据需要恢复到多套测试环境,因此,测试基准数据的准备需要耗费大量时间,通常以“天”为计时单位;
2.测试数据的版本迭代速度慢,测试场景每日测试需求不断,测试数据变更频繁,需要及时保留版本应对迭代测试,如遇测试需求启用版本回退时,往往需要重新导入或恢复数据,等待时间较长,严重拖延了开发测试进度;
3.测试数据存储资源过度占用,测试业务频繁更新导致数据版本众多,大量分散存放的测试数据由于疏于管理,终形成了僵尸数据,消耗了大量的存储资源,也为数据泄露带来了一定的风险。
三、解决方案亮点介绍
上讯信息数据治理安全产品线重点客户群体主要面向金融领域,尤以银行业为主,当前随着移动互联网、云计算、大数据等新一代信息技术的发展,传统银行业务需求与之相结合,迸发出了巨大创新动力,银行业面临前所未有的业务转型与金融创新。
上讯信息从事数据安全技术创新10余年,积累了大量数据安全行业技术经验,专注于数据治理等领域产品的自主研发,早在2016年上讯信息就依据CDM技术理念成功研发以数据库虚拟化技术为核心的敏捷数据管理平台产品,并于当年申请国家专利,截止目前上讯信息已经服务20家大型银行,其中包括中国工商银行、中信银行、招商银行、广发银行、华夏银行等头部银行客户,助力银行实现敏捷开发,加快推进自动化测试进程,解决敏捷开发流程中测试环境和数据准备的瓶颈问题,提供一种新型的可预期、可重用的测试环境和测试数据准备方式。
上讯信息通过敏捷数据管理平台的部署,提出基于CDM技术的测试基准数据快速交付方案,协助银行实现以下收益:
1.兼容测试环境基准数据类型,实现备份系统恢复数据的自动化调度,基准数据获取方式灵活便捷。
2.采用数据库虚拟化技术通过对一份基准数据的获取,可分钟级创建若干个虚拟数据库用于交付测试数据,虚拟数据库支持多层级快照功能便于实时记录数据版本,版本回退只需花费几分钟启动相应快照虚拟库即可,因此,大幅提升了测试数据交付效率和版本迭代速度,推动了项目的开发、测试进度,加速了业务上线的时间。
3.新建虚拟数据库不占用额外的存储空间,且平台内置高效压缩存储池,针对测试基准数据与虚拟数据库新增数据都能够实现约3:1比例的压缩,显著降低存储成本。
4.集中统一的数据管理流程,便于对超期测试数据的销毁、存储设备资源的回收利用,更有效地为用户提供闭环的测试数据管理流程,有效解决测试数据分散存放产生的孤岛问题,杜绝僵尸数据的产生,提升测试数据使用的安全性。
5.双节点高可用架构部署,快速切换故障节点,保证测试服务持续运行和测试数据持续交付。
经过多家银行客户超一年以上的稳定运行,上讯信息基于CDM技术的测试基准数据快速交付方案在实际应用场景中得到了可靠认证,大幅提高了银行在开发测试环境中的工作效率,尤其在分钟级数据交付场景下,数据环境准备时间缩短到原来的20%以下,而利用分钟级的虚拟数据库快照回滚功能,同样环境下,将原来一整天甚至几天才能完成的一次回归测试,提升到一天时间可以完成5~6次回归测试,测试业务工作效率得到了全面提高。
四、金融行业客户名单
工商银行、中信银行、招商银行、广发银行、华夏银行、上海银行等。
五、客户评价
中国工商银行评价:
该解决方案基于我行业务研发中心测试环境现状和管理要求,严格把控项目产品质量和技术支持服务,获得2021年中国工商银行所有外部供应商考核排名*****的名次,该方案解决了敏捷开发流程中针对测试环境与测试数据的瓶颈问题,借助新兴技术CDM(Copy Data Management,数据副本管理)技术,结合我行实际应用场景优化产品功能,使产品更适用于我行业务特点,解决了测试环境和数据管理的效率、安全性和经济性问题。系统在运行后明显提升了我行开发测试工作效率,保证了上层业务和服务的迭代,提升了我行自动化测试水平,降低了测试存储资源的采购成本,产生了良好的经济效益。
本网站案例,除特殊标明来源的,版权归金科创新社所有,未经许可不得转载,否则将视为侵权,对于不遵守此声明或者其他违法使用本文内容者,本网站依法保留追究权。另,本网站部分案例、观点文章来源于网络素材,如有侵权,请邮件联系 fenglei@fintechinchina.com 处理!
特别提示: 本网站免费为广大金融企业提供IT选型咨询服务,详情点击 【 需求提交 】。
推荐阅读
更多
中国邮政储蓄银行 陈震宇:聚势赋能,推进大数据能力高质量发展
数据作为新资源、新资产,在数字化建设浪潮中起着核心关键作用。近年来,加快建设“数字中国”,更好发挥数据要素重要价值,多角度、深层次助推经济社会转型发展,已成为国家战略。中共中央、国务院于2023年2月印发《数字中国建设整体布局规划》,明确指出建设数字中国是数字时代推进中国式现代化的重要引擎,是构筑国家竞争新优势的有力支撑。借助数据要素的巨大驱动力,构建强大的数据能力,已成为各行各业进入“大数据时代”的必由之路。 中国邮政储蓄银行(以下简称“邮储银行”)深入贯彻党中央、国务院决策部署,强化顶层设计和整体统筹,以“十四五”IT规划和大数据五年发展规划为蓝图,以“构建同业先进的数据能力”为战略目标,强化核心数据能力建设,提升总分各级用数体验,深挖业务条线数据场景,不断释放数据内在价值,为打造数字邮储提供全方位数据服务支撑。
金融电子化
陈震宇
2022-03-28
宇信科技:一站式数据开发平台
一站式数据开发平台集成项目管理、数据建模、数据清洗加工、任务开发、任务发布、数据探索等数据能力,提供可视化开发主界面,赋予用户智能代码开发、规范化任务发布能力,高效完成大数据离线加工计算的核心业务开发。
“鑫智奖”第四届金融数据智能优秀解决方案评选
宇信科技
2022-03-28
东方国信:企业级数据平台建设方案
基于东方国信自主研发产品用于建设银行等金融机构的企业级数据平台,整合了传统的ODS、数据仓库、数据集市、分析类应用系统,实现面向全企业的统一储算平台,并在此基础上建设全企业的数据服务平台,为全企业提供标准的数据服务。
“鑫智奖”第四届金融数据智能优秀解决方案评选
东方国信
2022-03-28
刘昇晔:关于商业银行分行数据治理与应用的思考
自2018年银保监会发布《银行业金融机构数据治理指引》以来,商业银行数据治理工作便进入了快速发展阶段。各家商业银行已基本建立企业数据治理体系,成立专业化数据部门牵头推进数据治理制度规范编制、流程机制设立、系统平台建设等工作。与此同时,各行纷纷建设企业级数据平台,将治理后的数据汇聚融通后对外提供应用服务,为业务发展和经营管理提供了重要的数据支撑。
数据治理周周谈
刘昇晔
2022-03-28
数巅科技:AskDI银行业解决方案
数巅科技AskDI银行业解决方案基于数据虚拟化技术,实现跨多数据源的高效统一管理和利用:通过业务虚拟表建模,满足银行各类业务场景需求,灵活处理数据。该方案支持指标和流式事件消息应用,助力银行提升数据处理效率,降低数据的存储成本,显著加速数数据资产的查询速度和效率,适用于客户关系分析、业务效率提升等场景。
2024年“鑫智奖”第六届金融数据智能优秀解决方案评选
数巅科技
2022-03-28
上讯信息:数据交付流程编排自动化解决方案
数据交付流程编排自动化解决方案主要适用于银行业数据从生产域到测试域的交付流转场景,通过CDM技术、静态数据脱敏技术实现从数据采集、传输、存储、脱敏、交付、销毁各个环节的自动编排,保障数据安全的同时降低人力运营成本。
2024年“鑫智奖”第六届金融数据智能优秀解决方案评选
上讯信息
2022-03-28
微信
咨询
微信咨询
扫码添加金科小助手微信号
咨询案例和解决方案相关信息
或联系对应机构