是否存在单元测试无法发现的 logic/flow 错误类型？

Question

假设我定义了合同并明确了要求（包括输入范围、边界值等），并且单元测试验证了所有这些条件，那么当我将这些单元放在一起时是否还会出现集成错误？我现在不考虑外部服务。我已经看到以下作为集成错误的示例，但我相信这只是单元级别的缺失测试：

class Engine
{
   int RPM;

   void SetRPMtoZero()
   {
      RPM=0;
   }
}

class Display
{
  CalculateAverage(Engine e)
  {
    if (e.IsRunning)
    {
      int X=smth/e.RPM;  //could be division by 0
    }
  }
}

class IntegratingClass
{
  Engine e
  Display d..

  ...

  e.SetRPMtoZero();
  d.CalculateAverage(e);

  //this sequence would lead to the division by zero

}

我不认为这显示了积分错误 - CalculateAverage 只是缺少对 RPM 的检查！=0。

是否真的存在单元测试无法发现的逻辑错误（或控制流）？

Answer 1

有趣的问题。一方面是愚蠢的。显然肯定有某种逻辑无法通过单元测试发现，否则单元测试就是 Delphi.

的 Oracle

我认为这里重要的哲学考虑是涌现复杂性的概念。许多思想家过去已经指出了这一点。摩尔定律可能是最好的例子 [晶体管的复杂性大约每 2.5 年翻一番]。不过是一般校长。

因此，将涌现复杂性法则抽象为软件测试：5 个软件单元分别更复杂、相等或更不复杂，还是一起更复杂？当你这样说时，很明显 5 个单元一起工作肯定比单独的单元更复杂。这称为 "More than the sum of it's parts"，是系统的一般规则。

Answer 2

我同意你的看法，这个例子是关于缺少 class 显示单元测试的。

但是，也许那个例子的作者想指出单元之间的耦合可以更强比预期或合同中描述的要多。此外，这个例子已经清楚地表明在集成级别在单元测试级别上，事情可能与预期不同（也许这并不是故意的 SetRPMtoZero 方法在 CalculateAverage 方法之前调用）。通常你不会在单元测试级别看到这一点，除非你有世界上最好的规范。

所以，你在集成单元时可能还会遇到什么（同时这也是单元测试无法告诉你的）：

即使在集成测试的第一阶段，集成本身（f.e。将单元连接在一起，如果我们谈论像 c++ 这样的语言），可能会失败，如果接口在一个单元中更改，但在其他单元中没有相应调整。
如果单位使用公共资源（如文件、内存），则 reservation/release 资源可能会导致阻塞状态或数据损坏
如果您用 100% 的单元测试覆盖一个单元的源代码，这并不意味着所有代码都是真正必要的。关于整合级别你可能会意识到有很多代码，当把这些单元放在一起时，甚至无法达到。这可以帮助您了解，您的代码的哪些部分可能是 "dead code".
性能限制或资源限制（如有限内存）
对合同的误解或执行中的错误

是否存在单元测试无法发现的 logic/flow 错误类型？

Is there a type of logic/flow errors that cannot be discovered by unit tests?

unit-testing

language-agnostic

defects