Azure DevOps将“不确定”测试报告为“未运行”

如何解决Azure DevOps将“不确定”测试报告为“未运行”

我进行了一些集成测试，这些测试可以用于外部服务，有时可能会失败。为此，我正在运行'Assert.Inconclusive（“ errMsgHere”）;'这样测试不会导致整个CI / CD管道失败；我只想警告。当我在Visual Studio中本地运行测试时，这的确显示警告图标，对于Azure DevOps，该测试报告为“未运行”。同样，在管道运行的“测试”选项卡中，即使输出的.trx文件中包含该错误消息，测试的“调试”详细信息也将错误消息的条目保留为空白，而不是“ errMsgHere”。 Azure DevOps当然应该显示Assert.Inconclusive（）输出的消息。有什么办法可以得到此消息，或者将测试结果报告为比“不运行”更有用的东西？也许是“警告”还是“不确定”？

解决方法

根据response在github issue上的Sarabjot Singh的说法，看来这是设计使然的行为。

@osolo不确定测试与跳过测试的处理方式相同。

不将其报告为失败并且使任务失败的行为是 目前通过设计。它基于测试设置的优先级 平台（https://github.com/microsoft/vstest）和测试框架 （https://github.com/microsoft/testfx）

在计算机上本地运行测试时的行为是什么 使用vstest.console运行程序？您可以生成trx结果文件 （使用--logger：trx选项），然后将其进行比较 管道用户界面。

此外，在开发社区中提交的linked bug似乎不太可能得到解决：

我检测到在过去35天内，这个问题没有太多 产品团队的活动以及少量的新投票或 评论。基于此，其严重程度和受影响的区域，这是我的 经验，这个问题极不可能得到解决。

虽然可能无法满足您的预期结果，但似乎确实提到了解决方法。我知道这可能不是您想要的，但是您可以通过为测试任务设置“错误继续”选项，将测试失败视为警告。不过，它将所有故障都视为警告，因此也许在某些情况下您确实想停止管道对您的情况没有用。