2024年金融数据库转型方法论报告

2018~2021年金融行业数据库市场态势

• 分布式数据库产品现状：尚无100%成熟的分布式数据库产品，主要问题包括BUG数量多、金融业非功能性需求适配不足、开发及运维平台不友好、周边工具功能不足等。
• 主流分布式数据库类型：基于proxy的分布式数据库和原生分布式数据库。原生数据库应用侵入性少，但需更多代码研发和可靠性验证；基于proxy的数据库需整合底座数据库新特性。
• 产品演进状态：分布式数据库产品处于可用向好用的中间状态，需关注厂商内核掌控及bug修复能力、应用改造成本、软硬件综合成本。
• 技术路线发展：多条技术路线快速发展，金融企业选型需采取高度兼容策略，结合业务场景需求，选择通用性兼容及生态较好的产品，简化优化标准化SQL，提升应用性能并保持技术灵活可控。
• 中国太保探索：中国太保集团开始探索核心系统使用国产数据库。

2021~2024年金融行业数据库市场态势

• 国产分布式数据库分化：头部数据库产品趋于好用，形成头部两三家、中间四五家的格局。
• 头部金融企业核心系统攻坚：头部企业需提供核心金融场景及解决方案，厂商需掌控内核代码研发能力，合理权衡应用改造或产品改造，数字化转型需合理拆解，方法论和工具需从实践中来。
• 生态催熟效应：头部企业核心攻坚成功将起到标杆示范作用，催熟数据库产品和解决方案，形成良性生态循环。
• 改造成本战略：在稳定性前提下，国产数据库需兼容Oracle功能性能实现平滑迁移，金融企业需兼顾快速省力与远期发展，通过“攻坚牵引、改造前置、架构优化、工具创新、知识沉淀”降低成本。

我司数据库数字化转型成果

• 架构转型：从集中式架构向分布式架构转变，具备良好扩展性和弹性扩容能力，硬件故障自动切换时间13秒内，提升业务连续性。
• 降本显著：OceanBase压缩能力使服务器硬件需求下降1/3~1/4，备份恢复性能提升5倍，多形态数据库整合提升资源利用率，降低运维成本。
• 能力沉淀：形成数据库知识库（问题超1000条）、集群设计规范、开发规范等知识体系，培养国产数据库研发运维队伍，全集团1135人获得OceanBase认证。
• 技术创新：研发数据库数字化转型评估工具、索引优化助手，降低应用改造成本约20%；首创行业分布式数据库架构解决保险大库存储瓶颈；形成大库改造评估方法论等。

太保产险车险理赔核心系统数字化转型成果

• 系统业务：每日案件量约20000件，作业人员约20000人，包含报案、查勘、核赔等流程。
• 技术攻坚点：案卷模型导致高频查询SQL，主节点QPS峰值超11万；全流程复杂、高频交易、存储过程庞杂，数据量近50TB。
• 优化成果：CPU负载平均降低30%。
• SQL优化案例：通过queuing表模式、增加索引、改写SQL等方式提升查询性能。
• 会计核算系统：年处理交易近280亿笔，峰值1.3亿笔，HTAP特性显著。
• 技术攻坚点：数据存储近50TB，CPU计算资源要求高，存储过程数量庞大，性能时效要求高。
• 系统收益：应收结果统计模块计算效率提升2倍，存储成本节省80%以上，CPU使用率降低50%，高可用能力提升。

核心资金交易系统

• 业务场景：公司级统一资金收付管理平台，年处理交易近1.6亿笔，总金额近7,000亿元。
• 问题挑战：上下游关系复杂，业务高峰期处理71万笔交易，重度捆绑PLSQL，数据量大导致备份恢复时间长。
• 迁移方案：向分布式架构转变，实现弹性扩容，数据大幅压缩，备份恢复时间缩短5倍，PLSQL改造量小于5%。
• 优化案例：通过全局临时表设计优化、sequence优化、SQL改写等，批处理性能提升5倍。