Reihenfolge der Ausführung von Tests in TestNG

Question

Wie die Reihenfolge der Ausführung von Tests in TestNG anpassen?

Zum Beispiel:

public class Test1 { 
    @Test 
    public void test1() { 
     System.out.println("test1"); 
    } 

    @Test 
    public void test2() { 
     System.out.println("test2"); 
    } 

    @Test 
    public void test3() { 
     System.out.println("test3"); 
    } 
} 

In der obigen Suite, die Reihenfolge der Ausführung von Tests ist beliebig. Für eine Ausführung kann der Ausgang sein:

test1 
test3 
test2 

Wie führe ich die Tests in der Reihenfolge, in der sie geschrieben wurde?

Answer 1

Tests wie Komponententests? Wozu? Tests MÜSSEN unabhängig sein, sonst ... Sie können keinen Test einzeln ausführen. Wenn sie unabhängig sind, warum stören sie überhaupt? Plus - Was ist eine "Bestellung", wenn Sie sie in mehreren Threads auf mehreren Kernen ausführen?

Answer 2

Es gibt Möglichkeiten, Tests in einer bestimmten Reihenfolge auszuführen. Normalerweise müssen Tests jedoch wiederholbar und unabhängig sein, um zu garantieren, dass sie nur die gewünschte Funktionalität testen und nicht von Nebeneffekten des Codes abhängig sind, die außerhalb des Tests liegen.

Um Ihre Frage zu beantworten, müssen Sie weitere Informationen angeben, z. B. WARUM es wichtig ist, Tests in einer bestimmten Reihenfolge auszuführen.

Answer 3

In TestNG, verwenden Sie dependsOnMethods und/oder dependsOnGroups:

@Test(groups = "a") 
public void f1() {} 

@Test(groups = "a") 
public void f2() {} 

@Test(dependsOnGroups = "a") 
public void g() {} 

In diesem Fall g() wird erst nach f1 laufen() und f2() abgeschlossen haben und es gelang ihm.

Sie werden viele Beispiele in der Dokumentation: http://testng.org/doc/documentation-main.html#test-groups

Answer 4

Wenn ich Ihre Frage richtig, dass Sie verstehen Tests in einer bestimmten Reihenfolge ausgeführt werden soll, TestNG IMethodInterceptor verwendet werden kann. Werfen Sie einen Blick auf http://beust.com/weblog2/archives/000479.html, wie Sie sie nutzen können.

Wenn Sie etwas Vorinitialisierung ausführen möchten, werfen Sie einen Blick auf IHookable http://testng.org/javadoc/org/testng/IHookable.html und zugehörige Thread http://groups.google.com/group/testng-users/browse_thread/thread/42596505990e8484/3923db2f127a9a9c?lnk=gst&q=IHookable#3923db2f127a9a9c

Answer 5

Durch Priorität Paramenter mit für @Test wir die Reihenfolge der Testausführung steuern.

Answer 6

@Test(dependsOnMethods="someBloodyMethod") 

Answer 7

bestimmtes Szenario in Frage zu beantworten:

@Test 
public void Test1() { 

} 

@Test (dependsOnMethods={"Test1"}) 
public void Test2() { 

} 

@Test (dependsOnMethods={"Test2"}) 
public void Test3() { 

} 

Answer 8

Dies funktioniert.

@Test(priority=1) 
public void Test1() { 

} 

@Test(priority=2) 
public void Test2() { 

} 

@Test(priority=3) 
public void Test3() { 

} 

priority fördert Auftragsausführung garantiert aber nicht die vorherige Prioritätsstufe abgeschlossen hat. test3 könnte beginnen, bevor test2 abgeschlossen wird. Wenn eine Garantie erforderlich ist, deklarieren Sie eine Abhängigkeit.

Im Gegensatz zu den Lösungen, die Abhängigkeiten deklarieren, werden Tests ausgeführt, die priority verwenden, auch wenn ein Test fehlschlägt. Dieses Problem mit Abhängigkeiten kann mit @Test(...alwaysRun = true...) nach documentation gelöst werden.

Answer 9

Piggy aus der von user1927494 Antwort sichern, Falls Sie einen einzigen Test vor allen anderen ausführen möchten, können Sie dies tun:

@Test() 
public void testOrderDoesntMatter_1() { 
} 

@Test(priority=-1) 
public void testToRunFirst() { 
} 

@Test() 
public void testOrderDoesntMatter_2() { 
} 

Answer 10

Wenn Sie nicht über die @Test(priority =) Option in TestNG verwenden möchten Sie können die Bibliothek javaassist und die IMethodInterceptor von TestNG verwenden, um die Tests nach der Reihenfolge zu priorisieren, in der die Testmethoden in der Testklasse definiert sind. Dies basiert auf der bereitgestellten Lösung here.

Fügen Sie diese Zuhörer auf Ihre Testklasse:

package cs.jacob.listeners; 

import java.util.Arrays; 
import java.util.Comparator; 
import java.util.List; 

import javassist.ClassPool; 
import javassist.CtClass; 
import javassist.CtMethod; 
import javassist.NotFoundException; 

import org.testng.IMethodInstance; 
import org.testng.IMethodInterceptor; 
import org.testng.ITestContext; 

public class PriorityInterceptor implements IMethodInterceptor { 
    public List<IMethodInstance> intercept(List<IMethodInstance> methods, ITestContext context) { 

    Comparator<IMethodInstance> comparator = new Comparator<IMethodInstance>() { 
     private int getLineNo(IMethodInstance mi) { 
     int result = 0; 

     String methodName = mi.getMethod().getConstructorOrMethod().getMethod().getName(); 
     String className = mi.getMethod().getConstructorOrMethod().getDeclaringClass().getCanonicalName(); 
     ClassPool pool = ClassPool.getDefault(); 

     try { 
      CtClass cc  = pool.get(className); 
      CtMethod ctMethod = cc.getDeclaredMethod(methodName); 
      result   = ctMethod.getMethodInfo().getLineNumber(0); 
     } catch (NotFoundException e) { 
      e.printStackTrace(); 
     } 

     return result; 
     } 

     public int compare(IMethodInstance m1, IMethodInstance m2) { 
     return getLineNo(m1) - getLineNo(m2); 
     } 
    }; 

    IMethodInstance[] array = methods.toArray(new IMethodInstance[methods.size()]); 
    Arrays.sort(array, comparator); 
    return Arrays.asList(array); 
    } 
} 

Diese im Grunde die Zeilennummern der Methoden findet und sortiert sie nach der Reihenfolge ihrer Zeilennummer, dh die Reihenfolge aufsteigend, durch die sie in die definiert sind Klasse.

Answer 11

mit den Testmethoden Angeben in testNg.xml ausgeführt werden wir die Testfälle in gewünschter Reihenfolge

<suite> 
 
<test name="selenium1"> 
 
    \t \t <classes> 
 
\t \t \t <class name="com.test.SeleniumTest" > 
 
\t \t \t  <methods><include name="methodB"></include> 
 
\t \t \t   <include name="methodA"></include> 
 
\t \t \t  </methods>  
 
\t \t \t </class> 
 
\t \t </classes> 
 
    
 
\t </test> 
 
</suite>

Answer 12

Die Reihenfolge der Methoden in der Klassendatei ist unberechenbar ausführen kann, so dass Sie Sie müssen entweder Abhängigkeiten verwenden oder Ihre Methoden explizit in XML einschließen.

Standardmäßig führt TestNG Ihre Tests in der Reihenfolge durch, in der sie in der XML-Datei enthalten sind. Wenn Sie die Klassen und Methoden in dieser Datei aufgelistet werden sollen in einer unpredictible Reihenfolge ausgeführt werden, stellen die wahren Ordnung

Answer 13

Verwendung auf false führen dies:

public class TestNG 
{ 
     @BeforeTest 
     public void setUp() 
     { 
        /*--Initialize broowsers--*/ 

     } 

     @Test(priority=0) 
     public void Login() 
     { 

     } 

     @Test(priority=2) 
     public void Logout() 
     { 

     } 

     @AfterTest 
     public void tearDown() 
     { 
       //--Close driver--// 

     } 

} 

Normalerweise liefert TestNG Anzahl der Anmerkungen, Wir können @BeforeSuite, @BeforeTest, @BeforeClass für die Initialisierung von Browsern/Setup verwenden.

Wir können Priorität zuweisen, wenn Sie Anzahl der Testfälle in Ihrem Skript geschrieben haben, und wollen als pro zugewiesenen Priorität auszuführen dann verwenden: @Test(priority=0) ab 0,1,2,3 ....

Inzwischen Wir können die Anzahl der Testfälle gruppieren und durch Gruppierung ausführen. dafür verwenden wir @Test(Groups='Regression')

Am Ende wie Schließen der Browser können wir @AfterTest, @AfterSuite, @AfterClass Annotationen verwenden.

Answer 14

Ich habe das gleiche Problem konfrontiert, der mögliche Grund ist aufgrund der parallelen Ausführung von Tests und die Lösung besteht darin, Priority Option hinzufügen oder einfach preserve-order = "true" in Ihrer testng.xml zu aktualisieren.

<test name="Firefox Test" preserve-order="true"> 

Answer 15

Falls Sie passieren wie dependsOnMethods zusätzliches Material zu verwenden, sollten Sie den gesamten @Test Fluss in Ihrer testng.xml Datei definieren. AFAIK, die in Ihrer XML-Suite-Datei (testng.xml) definierte Reihenfolge überschreibt alle anderen Bestellstrategien.