数据级容灾系统DBRA技术白皮书

尼美创 数据级容灾系统DBRA技术白皮书 数据级容灾系统DBRA 巴美创 技术白皮书 F美创 正 美创 MEICHUANG 杭州美创科技有限公司 巴美创 版权所有侵权必究 尼美创 修订记录 数据级容灾系统DBRA技术白皮书 日期修订版本描述作者 20210930V1.0数据级容灾系统DBRA技术白皮书V1.0沈思平 巴美创 巴美创 尼美创 第一部分产品介绍 1.1.产品简介... 目录数据级容灾系统DBRA技术白皮书 1.2.产品架构. 1.3.技术架构.. 第二部分平台能力.. 2.1．真正以数据为视角.. 2.2.高度数据一致性保障.3 2.3．灵活的容灾切换模式... 2.4.简便的一键式操作.. 2.5.适配多种容灾架构 2.6.提供云-端架构整体管控方案4 第三部分技术能力 3.1．基于CopyOnLog技术的数据库复制 3.2.海量文件同步能力.5 3.3.容灾备库自动搭建6 3.4.对接美创运行安全产品 3.5.支持多种数据库和操作系统7 3.6.告警通知智能降噪 3.7.保障业务RTO.8 第四部分应用场景 4.1．行业合规要求，灾难应急切换8 4.2.同城灾备、异地灾备 4.3.自定义切换流程9 4.4.数据误操作恢复10 4.5.可视化大屏..10 第五部分实施部署...11 第六部分关于美创...13 尼美创 第一部分产品介绍 1.1．产品简介 数据级容灾系统DBRA技术白皮书 为更好地适应云计算、大数据等新型环境需求，美创总结了容灾产品研发和实践经验，结合新技术重构原有容灾产品后推出了全新的数据级容灾系统软件产 品（以下称为“DBRA"）这是一款以灾难完整性和容灾可用性为基准点，以 业务系统为视角单元的容灾软件产品，适应各类平台和各种场景，可以最大限度 地满足容灾系统RPO、RTO需求。DBRA致力于保护业务系统的数据完整性和高可 用性，广泛运用于“运营商、金融、政府、公安、交警、医疗、工商、社保、证 券、制造业、交通、教育”等所有具有容灾需求的行业 C196 DBRA登录页面 1.2．产品架构 数据级容灾系统DBRA采用模块化设计的理念，将切换管理模组与产品底层各模块解耦，并可通过接口与DRCC中心平台认证对接，整个产品架构体系可分为“六层一模组”，支持灾难切换和容灾演练两类场景，产品架构如下图所示： 杭州美创科技有限公司www.mchz.com.cn24小时服务热线：400-811-3777第1页，共13页 正美创 数据级容灾系统DBRA技术白皮书 第三力 产品架构图 1.3.技术架构 F美创 DBRA整休采用B/S架构，基础服务模块主要包拓：苯础配置，容灾操作，业务系统监控、口志管理、部署管理、系统管理等，数据库，文件等资源通过部署代理的方式连接资产并获取资产信总。从机白动化部署模块能够白动化地部署多种主流数据库主从模式。文件资源同步支持断点续传，支持传输限流，支持千万级数量和TB级容量的文件同步， 杭州美创科技有限公司www.mchz.com.cn24小时服务热线：400-811-3777第2页，共13页 尼美创数据级容灾系统DBRA技术白皮书 前端WebUl 接口层tarttulAr 业务层 告服管理斯管理日芯警理 警石管型低随管理指标管理 资源接入文件Agent 第二部分平台能力 2.1．正以数册为视角 逻辑架构图 美创 真正以数据为视角单元进行建设的容灾产品，能从根本上保证数据的一改性，又能降低灾难发生时的业务停滞时。 2.2.高度数据一致性保障 以白主创新的CopyOnLog技术，断点续传、数据加密传输等技术，多重保障 生产站点与容灾站点的数据一致性，最大程度还原业务数据，降低业务中断风险。 2.3.灵活的容灾切换模式 可根据不同阶段的需求，灵活选择容灾切换模式：灾难切换模式、容灾演练模式，并针对不同的资源可设置对应切换策略。 除此之外，还创新的创造了无需中断业务的模拟演练“桌面演练”，是 真正启用灾备数据库站点，以虚拟操作进行验证的演练模式。 杭州美创科技有限公司www.mchz.com.cn24小时服务热线：400-811-3777第3页，共13页 R美创 2.4.简便的一键式操作 数据级容灾系统DBRA技术白皮书 对于常见的灾难恢复，包括细粒度切换以及业务恢复都提供了一键式操作能力，使灾难恢复操作简单、可靠、快速，有效降低RTO消耗。 2.5.适配多种容灾架构 DBRA适配包含主备、主主、一对多、级联等容灾架构： P71< - Ththe 睿灾架构 2.6.3提供云-端架构整体管控方案 通过与DRCC中心平台认证对接，提供云-端架构的灾备整休管控解决方案，真正做到容灾管控平台化、一体化、智能化。 第三部分技术能力 3.1．基于CopyonLog技术的数据库复制 CopyOnLog技术是一项自主研发的数据库复制技术，它通过解析Oracle数据 库主库的ASM日志文件，从当前传输点开始读取日志块内容并传输到备库。传输支持断点续传、数据加密多重保障生产站点与容灾站点的数据一致性，最大程度还原业务数据，降低业务中断风险。 杭州美创科技有限公司www.mchz.com.cn24小时服务热线：400-811-3777第4页，共13页 R美创 数据库复制技术实现原理如下图所示： 数据级容灾系统DBRA技术白皮书 生产中心灾备中心 日志合两、分析 双日志片吸的形式传输数据合成并形成内国区文件 日志挖摄闪区区 日表文件 Oracle发出事务更新，LGWR完成OnlineRedoLog的写入过程，LogCapture Service实时读取生产端在线日志信息，由LogService同步往灾备中心端写日 志数据；在灾难备份中心，灾备SERVER进程按收LogSeTvice传送过来的数据 并且生成对应的灾备端的OnlineRedoLog数据，在生产系统进行Logswitch的时候同步在灾难备份中心完成LogSwitch，在灾备端ApplyService通过 活动站点库 Orar:lePhysicalRerower机制把相美OnlineRedoI.og口志内容更新到灵备中 心数据库（实时史新模式）或者直接把档内容更新灾难备份中心数据库（异步 模式). 在灾备服务器上，可以开启数据活动站点进程，构建只读查询库，查询库可 以提供对外读取服务，实现数据边同步边查的月标。 在回退打开情况下，DBRA采用Copyonwrite技术在更新灾备中心数据库的 同时把更新之前的数据进行备份，在回退区域形成回退日志片，误操作时可以进 行快速回退， 3.2.海量文件同步能力 自主研发的海量文件同步技术，给DBRA产品提供了文件同步产品功能。支持亿级别的文件梳理和TB级别文件容量的同步管理：支持大文件传输时断点续传，当传输网络环境变化引起部分文件块传输失败的情况下，只需要重新传输失收的文件块，节省服务器和带宽资源：支持传输网络流量控制，对网络带宽进行保护，避免传输带宽被文件同步服务占用耗尽，影响客户别的业务。同时在文件 杭州美创科技有限公司www.mchz.com.cn24小时服务热线：400-811-3777第5页，共13页 尼美创 同步的服务器和客户端采用SSL双向认证，保证安全性。具体的文件同步流程描述如下： 上次意外处理： 执行增量扫猫 数据级容灾系统DBRA技术白皮书 P美创 首次同步？ 是 执行全量同步执行增量同步 文件月步校染 导营 正常 记录淡文件 本次晶环 1，支持文件、日录，文件系统等内容的数据同步。同步程序可以安装在数据库服务器、中问件服务器或文件服务器上，支持实体机或虚拟机，支持常见的 探作系统，比如：Linux、Windows、AlX、HIUx等。 2．文件同步时间间隔以分为单位计算，可以按实际需要进行调整。 3．文件同步缺省以首次全量同步，之后增量同步的模式进行；每次增量同步时，白动检查同步内容的文件时间和文件大小，若遇到文件时间和文件大小不 致时，会白动同步整个文件至容灾服务器。 4，文件同步支持断点续传功能，若遇到文件传输过程中出现意外，导致文件内容不完整等情形时，同步在增量扫描中会自动检测到该文件，并实现断点续传功能。 5，文件同步在遇到文件传输成功结束时，会自动校验文件，以确认文件内容和 生产端文件内容完全一致。 3.3.容灾备库自动搭建 DBRA支持MySQL、Oracle、SQLServer等数据库的备库搭建功能，实现备库 杭州美创科技有限公司www.mchz.com.cn24小时服务热线：400-811-3777第6页，共13页 E美创 数据级容灾系统DBRA技术白皮书 的初始化全量数据同步和主从关系自动搭建完成后续增量数据自动同步。客户 先准备一个全新的空数据库作为备库，添加到DBRA系统中。DBRA将生产库中的数据库文件，日志文件，登录用户，口令等所有搭建主从关系所需要的内容从 生产库同步到备库，并自动设置主库和备库的主从关系。搭建完成的主备数据库，可以直接用来进行灾备切换演练， 3.4.对接美创运行安全产品 DRCC是一个以业务连续性为目标，以业务系统为视角单元的灾备集中管控平台，可以适配各类容灾技术技术和各种容灾管控场景，可以最大限度地满足业务 系统RTO诉求。 OSM是一个数据库运行安全管理平台，案焦数据库运行安全管理，融合AT 技不和人数据模型，提供智能监控，预测和势分析，功能稳盖数据库日带运维 场母。支持数据库种类多样，应用场母广泛，有效保障数据库系统的持续稳定运 行. DBRA作为关创容灾解决方案的数据级容灾部分，可以通过外部接I服务层对 接DRCC和OSM平台，形成完整的全业务容灾解决方案，DBRA提供容灾对的监控和容灾对的切换能力给DRCC，在DRCC中可以管控DBRA的数据库资源：DBRA提供监控信总给OSM，在OSM中监控分析DBRA的数据库运行状态。 3.5.支持多种数据库和操作系统 DBRA覆盖数据库容灾切换演练场景。支持数据库种类多样，应用场景广泛，有效保障数据库系统的容灾切换能力。支持的数据库如下： Oracle(10g,11g,12c,19c)Oracle(RAC)（1lg,12c19c)MySQL(5.5、5.6、5.7) SQLServer(20052008,2012、20142016) DB2(11.1) DM(DM7、DM8) 杭州美创科技有限公司www.mchz.com.cn24小时服务热线：400-811-3777第7页，共13页 R美创 数据级容灾系统DBRA技术白皮书 RDS-MysQL(5.6,5.7,8.0) RDS(Mariadb)(10.3) 支持的操作系统如下： AIX、HP-UNIX,Solaris、Windows、Linux、RHEL、Centos、Ubuntu、中标 麒麟等。 另外，DBRA支持添加通用资源，可以添加任何可以通过脚本进行监控或容灾的资源进来管理， 3.6.告警通知智能降噪 DBRA拥有智能化降噪功能，可根据告警消息类型制定规则，降低因网络波动而产生的告警信息，提高告警消息的真实性，减少告警风暴， 美创 平台日前已支持多种通知方式，如短信猫、企业微信、邮箱、短信等，同时 采用开放性设计方案，可兼容各种定制化通知方式。 3.7.保障业务RTO DBRA将整个切换流程分为切换前检查、切换过程两个人步骤，每·个人步骤下的资产容灾切换又细分出多个小步骤，其中的每一个小步骤都是源于关创DBA团队十多年灾备运维经验的沉淀和积累。DBRA已经在众多行业、大量客户具体业务场景下经历了非常多的灾备演练及实战，在实战中处理了大量的故障案例，保证广客户容灾恢复的及时性。 第四部分应用场景 4.1.行业合规要求、灾难应急切换 平战结合，支持容灾演练切换和灾难应急切换模式 >结合切换链路编排，切换全过程自动化 杭州美创科技有限公司www.mchz.com.cn24小时服务热线：400-811-3777第8页，共13页 尼美创 数据级容灾系统DBR