近日,在华为开发者大会2023(Cloud)的“GaussDB数据库,打造轻量化迁移部署方案”专题论坛上,掌数科技解决方案总经理高星作为华为云GaussDB的优秀合作伙伴,分享了掌数科技和华为云GaussDB长期合作的实践和成果。
同心合力,一起打造完善的GaussDB生态体系
掌数科技是一家聚焦于证券和大资管行业,面向数据库和大数据技术、智能化场景应用以及行业信息技术应用创新领域的金融科技企业,服务于全国80余家大型金融机构客户。作为华为在金融行业数据库技术领域的全面合作伙伴,掌数科技长期与华为云GaussDB合作,提供基于华为云GaussDB数据库的配套生态软件产品及服务支撑体系,在金融大数据服务和应用迁移上云等领域积极投入,帮助行业用户快速转型。
高星表示,掌数科技作为为金融细分领域客户提供技术服务和支持的一家厂商,选择和华为云GaussDB合作,是因为华为有非常好的研发实力做基础,能够支撑客户应用场景稳定高效运转,也为掌数科技服务能力的构建和服务体系的建设提供了很多支持,并且有长期的研发投入与坚定的发展规划。这些都是掌数科技非常看重的重要因素。
面向金融核心场景,基于GaussDB打造迁移灾备整体解决方案
过去的两年多,掌数科技和华为云GaussDB面向金融核心业务系统联合打造了GaussDB完整配套软件,形成全面的产品体系,包括容灾备份一体化解决方案(Z-XCP)、数据迁移及持续复制软件( Z-RPS )、GaussDB增值插件包 (Z-DB+);同时也面向客户与合作伙伴打造了GaussDB技术支撑与服务团队,包含售前面向行业客户的金融创新解决方案,售中阶段创新项目的实施落地,共同打造行业标杆,以及售后的专家支持与专业服务。
容灾备份一体化解决方案(Z-XCP)以保护企业业务连续性为目标,可以一站式完成企业的“两地三中心”容灾体系建设和重要职能管理体系的部署,帮助客户轻松应对GaussDB集群的容灾、备份、监控以及开发/测试库搭建等管理难题,通过更低成本、更高效的方式,满足不同行业和业务场景下的数据安全性要求。
借助该产品,掌数科技不仅可以纳管原厂标准的GaussDB部署方案,自己也研发了一些符合行业应用需求的更灵活、更弹性的部署方案,让客户有更多选择。
GaussDB增值插件包(Z-DB+)提供了更多个性化工具,重在解决数据库之间互联互通的难题。慢SQL语句跟踪工具提供业务系统使用过程中慢SQL及执行计划的监控功能,用于分析优化系统性能,解决业务改造过程中业务性能下降等用户关切的问题;DBcopy工具支持GaussDB与原来异构数据库之间超高速率的双向复制,帮助企业快速完成迁移和同步;DBlink工具可以在迁移改造阶段支持GaussDB数据库与其他数据库等异构数据库之间的双向实时访问;高压缩传输工具,具备广域网下GaussDB高压缩传输能力,满足了证券行业客户同城或异地机房在窄带宽(如百兆网络)广域网下的容灾需求。
数据迁移及持续复制软件( Z-RPS )支持系统的实时迁移、数据库双活容灾、逃生通道保障(反向迁移),满足了核心系统数据实时迁移、实时汇总与实时分发等需求。
在金融核心场景不断落地,满足客户更多需求
在这些生态工具的加持下,该产品体系已经全面支撑证券、基金、银行、保险、信托等金融行业科技创新,满足了越来越多客户的需求。
法人清算系统是中国证券公司的核心业务系统之一,在证券交易后的结算环节起到至关重要的作用。某中大型证券公司法人清算系统迁移面临着几大考验:
数据量大:迁移数据以T为单位,不仅数据时间跨度长,数据质量还要求必须精确;
迁移频度高:在数据测试和生产、双轨和单轨运行等阶段,都需要重新进行迁移比对,反复的迁移导致不仅迁移频度高,实施周期也较长;
异构数据库迁移技术难度大:不同数据库的存储方式不同,字段的类型、精度和长度不同,表结构也不同,还有空白字符、乱码需特殊处理,都加大了异构迁移的难度。
掌数迁移方案对该系统的8000多张表进行了定制适配,内置了法人清算历史库和当前库的数据同步和比对、异构数据特殊转换模型和法人清算特殊处理,并且支持全量、增量、批量、指定表等多种模式的迁移,以及异常数据的校验分析和按计划定时迁移,最终快速完成了原数据库与GaussDB数据库之间的双向迁移,迁移全程透明、可视化管理,并通过工具自动化辅助人工,完成了异构数据的比对校验,实现了两套系统多维度的数据准确性校验,双轨期间一直稳定运行。
某超大型保险公司养老核心系统的迁移也面临着重要挑战,需要在短时间内完成17TB数据的全量迁移,还存在乱码数据及字符集问题,并且大量的表使用了clob、blob字段,对增量迁移及后续的数据校验带来极大挑战,特大表还存在不分区、无主键、无索引的问题,这些都提高了迁移的难度。掌数迁移方案用4天时间就完成了17TB的全量数据迁移,迁移速度保持线性趋势,迁移后系统功能稳定无异常,有效兼容了各类数据异常问题,并通过数据校验功确保了所有数据准确一致。整个迁移高效、准确、稳定,比普通同步工具的迁移效率提升了100多倍。
某大型基金公司选择了GaussDB的同城1AZ、异地1AZ的容灾建设方案,又通过掌数容灾备份一体化解决方案实现了多种灵活容灾部署架构、高压缩低带宽异地容灾、故障切换/灾难恢复、演练切换/计划停机的容灾管理,全量与增量备份恢复,基于策略的自动化备份恢复,库、模式、表的逻辑备份恢复,开发测试库恢复和基于时间点恢复(PITR)的备份恢复机制,以及集群核心指标、数据库核心指标、数据库节点的监控管理,做到数据容灾备份一体化管理,满足了业务需求。
“在持续的演进和发展过程中,华为云GaussDB的生态越来越成熟。掌数科技把自己定位为华为云GaussDB生态中的一员,并致力于成为华为云GaussDB生态中最优秀的服务商之一,未来将继续展开深入合作,不断完善华为云GaussDB技术支撑与服务体系,站在金融角度打造行业实施的标杆案例,让行业客户更信任华为云GaussDB,用好华为云GaussDB。”高星说。