3-陈阳-B站大型活动背后的数据库保障

Bilibili大型活动数据库保障总结

1. 数据准备与全链路压测

• 数据准备：使用克隆集群或原集群进行压测，关注水位线评估指标（物理资源、QPS、TPS、P999响应时间、慢查询、bufferpool命中率、IOPS）。
• 全链路压测：涵盖全链路跟踪、混沌工程，关注关键指标，定位慢查询环节，进行应急预演。

2. 应急预案

• 设计注意事项：包含适用场景、触发阈值、操作人员、操作影响、执行步骤等。
• 数据库快速扩容：支持MySQL和TiDB的扩展。
• 异常流量拦截：SLB、Proxy、SDK和数据库层拦截。
• 降级与切流：刷盘策略降级、业务请求降级、实例级别切流、AZ/Region级别切流。
• 限流算法：固定窗口、滑动窗口、漏斗算法、令牌桶算法。

3. 熔断与多活设计

• 熔断：断路器状态包括关闭、打开、半打开。
• 同城多活：读请求本地闭环，写请求跨机房访问主库，通过DBProxy进行自动路由。
• 异地多活：读写请求本地闭环，业务需单元化改造，DBProxy多Region自动路由，集成全局发号器。

4. 保障流程

• 作战室：快速响应、决策。
• 整体指标大盘：响应时间、在线人数、系统压力。
• 定期同步：当前指标是否健康、是否出现异常。
• 提前决策：根据趋势提前判断下一步。

5. 异常情况应对

• 新手：慌乱中不知如何处理，深入问题底层。
• 老司机：迅速评估影响范围，选择预案止损，逐步缩小问题范围，定位根因。

6. 复盘与优化

• 活动回顾：结果数据与过程指标数据。
• 核心指标分析：问题汇总与预案执行情况。
• 经验总结：亮点与不足，优化方案，思考与总结。
• 监控数据保留：长期保留，作为下次活动评估参考。