张涛-快手持续测试加速研发效能提升经验

张涛作为快手效率工程部质量负责人，分享了持续测试与研发效能提升的关键方法。核心观点围绕持续测试、TDD质量内建、精准测试和监控可观测性展开。

持续测试与研发效能的关联

• 持续测试是覆盖软件全生命周期的全过程测试闭环，与持续交付流水线相融合。
• 持续测试能提升DevOps质量和效率，关键因素包括自动化测试、快速反馈和代码覆盖率。
• 实现框架需结合自动化测试工具和DevOps流程。

通过TDD质量内建提高研发质量

• UTDD（单元测试驱动开发）和ATDD（验收测试驱动开发）是实现质量内建的重要方法。
• UTDD挑战：时间紧、需求变化快、开发人员素质要求高、Mock使用导致测试价值降低。
• 好的单元测试原则：简单、Given-When-Then格式、速度快、包含断言、可重复执行。
• ATDD关键点：接口定义规范、QA提前编写测试用例、用例可自动化执行。
• TDD效果收益：
  • 自动化前置缺陷拦截率：5%->32%
  • 千行代码Bug率：2.5%->1%
  • 全量覆盖率：20%->60%+
  • 增量覆盖率：40%->80%+

通过精准测试提高测试质量和效率

• 精准测试核心能力：变更精准评估、用例精准推荐、结果精准度量。
• 调用链路分析：
  • 静态调用链路分析：识别变更方法影响的接口。
  • 动态调用链路分析：通过用例标识传递和记录代码覆盖，建立测试用例与代码的追溯关系。
  • 应用场景及收益：变更影响评估更全面，用例推荐效率提升63%（从57条到21条）。
• 覆盖率指标：
  • 覆盖率采集和分析：支持多任务多次采集、多应用合并、需求关联统计。
  • 应用场景及收益：通过持续采集和增补测试用例，实现增量覆盖率提升（如从78.24%到64.71%）。

通过监控和可观测提高服务稳定性

• 持续监控快速发现问题，可观测性快速定位问题。
• 可观测性三大支柱：指标（Metrics）、日志（Logs）、追踪（Tracing）。
• 实现路径：数据关联、数据分析&展示。
• 架构设计需整合监控和可观测性工具。
• 效果示例：通过可观测性快速定位和解决服务稳定性问题。