这是一篇 2023 年在 VLCTesting 演讲的总结。

主要观点：测试自动化是获取信心的基本工具，但存在一些短期看似有益实则长期有问题的实践（反模式）。

关键信息：

• 反模式特征：提供短期直觉性好处，看似当下正确解决方案，却导致长期负面后果。

• 六个常见反模式及分析：

  • 测试金字塔教条：按固定比例分配测试类型，忽略项目具体情况，导致与业务目标不符等问题。
  • 仅本地执行测试：只能在特定人本地机器执行，造成知识孤岛等长期问题。
  • 误解误用 Cucumber：期望其自动改善协作等，却带来不必要复杂等问题。
  • 通过界面测试与测试界面：用端到端工具测试整个应用栈，导致反馈慢等问题。
  • 不稳定测试的重试陷阱：配置自动重试掩盖根本问题，导致信任缺失等。
  • 以覆盖率为导向的测试幻觉：追求高代码覆盖率而忽略关键系统行为，导致测试无价值等。

重要细节：

• 每个反模式都有其短期好处和长期问题，以及相应的解决方法，如根据业务核心、风险分析等选择合适模型等。
• 要避免反模式需定义策略（关注业务问题等）、考虑具体情境、促进团队协作、投资基础、持续学习等。
• 反模式产生并非源于无能，而是有限信息下的理性决策，关键是保持长期视角并愿意根据情境改变。