Порядок выполнения тестов в TestNG

Question

Как настроить порядок выполнения тестов в TestNG?

Например:

public class Test1 {
  @Test
  public void test1() {
      System.out.println("test1");
  }

  @Test
  public void test2() {
      System.out.println("test2");
  }

  @Test
  public void test3() {
      System.out.println("test3");
  }
}

В вышеприведенном наборе порядок выполнения тестов произвольный. Для одного выполнения вывод может быть:

test1
test3
test2

Как выполнить тесты в том порядке, в котором они были написаны?

Answer 1

Это будет работать.

@Test(priority=1)
public void Test1() {

}

@Test(priority=2)
public void Test2() {

}

@Test(priority=3)
public void Test3() {

}

priority поощряет выполнение распоряжения, но не гарантирует, что предыдущий уровень приоритета завершен. test3 может начаться до завершения test2. Если требуется гарантия, объявите зависимость.

В отличие от решений, объявляющих зависимости, тесты, использующие priority, будут выполняться, даже если один тест не пройден Эту проблему с зависимостями можно обойти с помощью @Test(...alwaysRun = true...) согласно документации .

Answer 2

В TestNG вы используете зависимости от методов и / или зависимости от групп:

@Test(groups = "a")
public void f1() {}

@Test(groups = "a")
public void f2() {}

@Test(dependsOnGroups = "a")
public void g() {}

В этом случае g () будет запускаться только после того, как f1 () и f2 () завершатся и завершатся успешно.

В документации вы найдете много примеров: http://testng.org/doc/documentation-main.html#test-groups

Answer 3

Для решения конкретного сценария:

@Test
public void Test1() {

}

@Test (dependsOnMethods={"Test1"})
public void Test2() {

}

@Test (dependsOnMethods={"Test2"})
public void Test3() {

}

Answer 4

Используйте это:

public class TestNG
{
        @BeforeTest
        public void setUp() 
        {
                   /*--Initialize broowsers--*/

        }

        @Test(priority=0)
        public void Login() 
        {

        }

        @Test(priority=2)
        public void Logout() 
        {

        }

        @AfterTest
        public void tearDown() 
        {
                //--Close driver--//

        }

}

Обычно TestNG предоставляет количество аннотаций. Мы можем использовать @BeforeSuite, @BeforeTest, @BeforeClass для инициализации браузеров / настройки.

Мы можем назначить приоритет, если вы написали количество тестовых случаев в своем скрипте и хотите выполнить в соответствии с назначенным приоритетом, затем используйте @Test(priority=0) начиная с 0,1,2,3 ....

Тем временем мы можем сгруппировать количество тестов и выполнить их с помощью группировки. для этого мы будем использовать @Test(Groups='Regression')

В конце, как закрытие браузеров, мы можем использовать @AfterTest, @AfterSuite, @AfterClass аннотации.

Answer 5

Если вы не хотите использовать опцию @Test(priority = ) в TestNG, вы можете использовать библиотеку javaassist и TestNG IMethodInterceptor для определения приоритетов тестов в соответствии с порядком, в котором тест методы определены в тестовом классе. Это основано на решении, предоставленном здесь .

Добавьте этот слушатель в свой тестовый класс:

package cs.jacob.listeners;

import java.util.Arrays;
import java.util.Comparator;
import java.util.List;

import javassist.ClassPool;
import javassist.CtClass;
import javassist.CtMethod;
import javassist.NotFoundException;

import org.testng.IMethodInstance;
import org.testng.IMethodInterceptor;
import org.testng.ITestContext;

public class PriorityInterceptor implements IMethodInterceptor {
    public List<IMethodInstance> intercept(List<IMethodInstance> methods, ITestContext context) {

    Comparator<IMethodInstance> comparator = new Comparator<IMethodInstance>() {
        private int getLineNo(IMethodInstance mi) {
        int result = 0;

        String methodName = mi.getMethod().getConstructorOrMethod().getMethod().getName();
        String className  = mi.getMethod().getConstructorOrMethod().getDeclaringClass().getCanonicalName();
        ClassPool pool    = ClassPool.getDefault();

        try {
            CtClass cc        = pool.get(className);
            CtMethod ctMethod = cc.getDeclaredMethod(methodName);
            result            = ctMethod.getMethodInfo().getLineNumber(0);
        } catch (NotFoundException e) {
            e.printStackTrace();
        }

        return result;
        }

        public int compare(IMethodInstance m1, IMethodInstance m2) {
        return getLineNo(m1) - getLineNo(m2);
        }
    };

    IMethodInstance[] array = methods.toArray(new IMethodInstance[methods.size()]);
    Arrays.sort(array, comparator);
    return Arrays.asList(array);
    }
}

Это в основном определяет номера строк методов и сортирует их по возрастанию их номера строки, то есть порядка, в котором они определены в классе.

Answer 6

@Test(dependsOnMethods="someBloodyMethod")

Answer 7

Если я правильно понимаю ваш вопрос о том, что вы хотите запускать тесты в указанном порядке, можно использовать TestNG IMethodInterceptor.Посмотрите на http://beust.com/weblog2/archives/000479.html, как их использовать.

Если вы хотите выполнить некоторую предварительную инициализацию, взгляните на IHookable http://testng.org/javadoc/org/testng/IHookable.html и связанный поток http://groups.google.com/group/testng-users/browse_thread/thread/42596505990e8484/3923db2f127a9a9c?lnk=gst&q=IHookable#3923db2f127a9a9c

Answer 8

Указав методы тестирования, которые будут выполняться в testNg.xml, мы можем выполнить тесты в нужном порядке

<suite>
<test name="selenium1">
 		<classes>
			<class name="com.test.SeleniumTest" >
			    <methods><include name="methodB"></include>
			        <include name="methodA"></include>
			    </methods>    
			 </class>
		</classes>
 
	</test>
</suite>

Answer 9

Я столкнулся с той же проблемой, возможная причина - параллельное выполнение testng, и решение состоит в том, чтобы добавить опцию Priority или просто обновить preserve-order = "true" в вашем testng.xml.

<test name="Firefox Test" preserve-order="true">

Answer 10

Порядок методов в файле класса непредсказуем, поэтому вам нужно либо использовать зависимости, либо явно включить ваши методы в XML.

По умолчанию TestNG будет запускать ваши тесты в том порядке, в котором они находятся в файле XML. Если вы хотите, чтобы классы и методы, перечисленные в этом файле, выполнялись в непредсказуемом порядке, установите для атрибута preserve-order значение false