Führen Sie Tests basierend auf XUnit nach Eigenschaften gefiltert in Teamcity

Question

Ich verschiebe meine Projekte von NUnit zu XUnit Test Framework. Wir führen Tests in TeamCity über MSBuild Task aus. Ich möchte Tests nach Kategorien ausschließen. In NUnit und Teamcity ist das einfach.

Wie würde ich in xUnit darüber gehen?

Msbuild Ziel sieht wie folgt aus:

<Target Name="xUnitTests"> 
    <xunit Assembly="$(SolutionDir)\Tests\bin\Debug\MyApp.Tests.exe" /> 
    </Target> 

Im Idealfall würde ich Exclude="Category=database" als Attribut <xunit> Element hinzufügen möchten, aber dies ist nicht gültig.

Ich sah schnell durch xUnit-Quellcode und fand diese Option für Msbuild Runner nicht.

Gibt es noch weitere Alternativen, Tests nach Merkmalen in msbuild runner zu ignorieren?

Answer 1

Verwenden Sie die TraitAttribute in den Tests, eine Exec Aufgabe in der Msbuild-Datei und der xunit.console.clr4.exe-Läufer mit dem /-trait "Category=database" Argument.

Eine Alternative besteht nicht darin, msbuild zu verwenden, sondern stattdessen einen zusätzlichen Schritt in TeamCity zu erstellen, in dem Sie die xunit-Konsole direkt ausführen. Sie können die Assemblys in einer xunit-Projektdatei angeben. Dies ist die Lösung, die ich bei TeamCity und XUnit.net eingesetzt habe. Ich habe die xunit-Projektdatei in meinem Ordner mit den Lösungselementen gespeichert und die Testassemblys manuell hinzugefügt.

Answer 2

Ich werde nur die Josh Gallagher Antwort ein wenig mit einfachen Beispiel erweitern, wie ich es mache. Unter der Annahme, dass Sie die folgenden Tests haben:

[Fact] 
[Trait("Category", "Integration")] 
public async Task Test_for_long_running_operation() 
{ 
    var someClass = new SomeClass(); 
    int result = await someClass.LongRunningOperationAsync() 
    Assert.Equal(5, result); 
} 

[Fact] 
[Trait("Category", "Unit")] 
public void Test_for_quick_operation() 
{ 
    var someClass = new SomeClass(); 
    int result = someClass.GetSomeNumber() 
    Assert.Equal(3, result); 
} 

könnten Sie die folgenden in Ihrem msbuild Zieldatei haben:

<Target Name="xUnitTests"> 
    <!-- For debug builds: skipping long integration tests --> 
    <xunit Condition="'$(Configuration)' == 'Debug'" 
      ExcludeTraits="Category=Integration" 
      Assembly="$(SolutionDir)\Tests\bin\Debug\MyApp.Tests.exe" /> 

    <!-- For release builds: run them all --> 
    <xunit Condition="'$(Configuration)' == 'Release'" 
      Assembly="$(SolutionDir)\Tests\bin\Debug\MyApp.Tests.exe" /> 
</Target> 

Answer 3

Obwohl auf MSBuild basiert nicht und wie Josh erwähnt, ich habe eine xunit + dotCover erstellt Meta-Runner, der das Einschließen und Ausschließen von Xunit-Merkmalen, Filtern und Wildcard-Auswahlen unterstützt. Dies bedeutet, dass Sie Build-Schritte erstellen können, die auf bestimmte Testgruppen abzielen. Sie können auch die Teile für den Dotcover ausschließen, wenn Sie nur den Testläufer-Teil benötigen.

Sie können die Details und die Quelle in meinem Beitrag finden:

http://www.wwwlicious.com/2015/09/25/teamcity-dotcover-xunit-at-last/