使用 SpecRun 在 VSTS 发布阶段执行 SpecFlow 测试

Executing SpecFlow tests in VSTS Release phase using SpecRun

我们已经使用 SpecFlow 构建了许多测试,并且正在使用 SpecRun 运行 在本地和构建代理上进行测试。我们希望将测试从构建中取出并将它们粘贴到我们已链接到构建的 VSTS 版本的第一个发布阶段。

团队按照 the guidance from Tarun and Utkarsh 在构建中设置了 SpecRun,但是当我们使用 Publish Artefact 任务打包所有测试程序集时,在 运行ning 上找不到它们脱模剂。

在构建代理上构建项目时,解决方案的 NuGet 引用将恢复到 packages 文件夹,这包括包含 Visual Studio 测试适配器的 SpecRun.Runner 包发现并 运行 测试。

此测试 运行ner 包未复制到测试项目的输出目录。构建中的 VsTest 任务会自动检测包目录中的测试 运行ner,这就是为什么它在构建阶段像魔术一样工作的原因。

为了让它在 Release 中工作,我们找到了几个选项:

  1. 丑陋 使用发布工件选项并发布解决方案包文件夹。在发布阶段,将 VsTest 步骤指向另一个工件位置以找到测试适配器:

  2. 更好 使用 nuget 安装 SpecRun.Runner nuget 作为发布阶段的一部分。这 运行 构建下载 SpecRun.Runner 包的更新版本或意外版本的风险。

  3. best 签入单独的 packages.config 并引用 SpecRun.Runner 项目及其依赖项,在构建期间恢复它并将其作为单独的工件附加到构建中。这确保发布阶段将能够使用相同版本的 SpecRun.Runner 并且该版本存储在源代码管理中。