4

我有一个 vNext 构建,它运行一些 NUnit 测试并发布结果。但是,即使在相应的 XML 文件中找到了测试产生的输出,也不会发布。

例如:

在此处输入图像描述

但是,如果我检查相应的 XML 文件 - 它就在那里:

在此处输入图像描述

注意<output>元素。

我非常希望看到这个输出与测试结果一起发布。我该怎么做?

附言

出版还有另一个问题。运行持续时间在顶部窗格中报告为 4h 59m,但在底部详细信息窗格中它是正确的 10:48.176 分钟。4h 59m 看起来很像 5h,这是 EST 和 UTC 之间的时差。测试在 Octopus 服务器上运行,并由 vNext 构建获取。也许某处存在时区混乱。

编辑 1

我们有一个本地 TFS

编辑 2

检查Publish Test Results任务的源代码发现它使用Microsoft.TeamFoundation.TestClient.PublishTestResults程序集来解析 NUnit XML 测试结果。具体来说,以下 C# 代码用于解析test-case元素 (NUnit3ResultsXmlReader.cs):

if (testCaseResultNode.Attributes["result"] != null)
{
  testCaseResultData.TestCaseResult.Outcome = !string.Equals(testCaseResultNode.Attributes["result"].Value, "Passed", StringComparison.OrdinalIgnoreCase) ? (!string.Equals(testCaseResultNode.Attributes["result"].Value, "Failed", StringComparison.OrdinalIgnoreCase) ? (!string.Equals(testCaseResultNode.Attributes["result"].Value, "Skipped", StringComparison.OrdinalIgnoreCase) ? TestOutcome.Inconclusive.ToString() : TestOutcome.NotExecuted.ToString()) : TestOutcome.Failed.ToString()) : TestOutcome.Passed.ToString();
  XmlNode xmlNode1 = testCaseResultNode.SelectSingleNode("failure");
  if (xmlNode1 != null)
  {
    XmlNode xmlNode2 = xmlNode1.SelectSingleNode("message");
    XmlNode xmlNode3 = xmlNode1.SelectSingleNode("stack-trace");
    testCaseResultData.TestCaseResult.ErrorMessage = xmlNode2 != null ? xmlNode2.InnerText : (string) null;
    testCaseResultData.TestCaseResult.StackTrace = xmlNode3 != null ? xmlNode3.InnerText : (string) null;
    XmlNode xmlNode4 = testCaseResultNode.SelectSingleNode("output");
    if (!string.IsNullOrWhiteSpace(xmlNode4 != null ? xmlNode4.InnerText : (string) null))
      testCaseResultData.ConsoleLog = xmlNode4.InnerText;
  }
}

由此可以得出,汇编作者认为测试输出仅在有问题的测试用例失败时才有用。这是一个不幸的决定,因为输出何时有用不是由他们决定的。如果它在测试结果 XML 中,那么它应该被发布。

打开一个新问题https://github.com/Microsoft/azure-pipelines-tasks/issues/8979

打开 Azure DevOps 功能请求 - https://developercommunity.visualstudio.com/idea/432166/the-publish-tests-azure-devops-plugin-should-publi.html

4

1 回答 1

1

对于这种不幸的行为,我的解决方案是在将 XML 测试结果交给 Publish Test Results 任务之前破坏它。

以下 powershell 代码可以解决问题:

$Modified = $false
$xml = [xml](cat $OriginalTestResultsXmlFile -Raw)
$xml.SelectNodes('//test-case') |? { !$_.failure -and $_.output } |% { 
    $Modified = $true
    $_.InnerXml = @"
<!-- Workaround the issue https://github.com/Microsoft/azure-pipelines-tasks/issues/8979. No real failure here -->
<failure/>
$($_.InnerXml)

"@
}

if ($Modified)
{
    $xml.Save($TestResultsXmlFile)
}
else
{
    move $OriginalTestResultsXmlFile $TestResultsXmlFile
    $OriginalTestResultsXmlFile = $TestResultsXmlFile
}

我们必须通过在failure元素之外创建一个虚拟元素来欺骗任务执行我们需要的逻辑output

瞧:

在此处输入图像描述

于 2018-12-03T05:34:06.203 回答