Selenium test перезаписывается вторым сеансом при параллельном выполнении - PullRequest
0 голосов
/ 29 августа 2018

Мне нужна помощь, чтобы выяснить проблему во время выполнения Java-теста кросс-браузерного селена через Saucelabs. Я провожу один тест для двух браузеров, выбранных из задания Jenkins.

Во время выполнения одного теста другой (аналогичный) получает ошибку с ошибкой:

504 Время ожидания шлюза

. Сервер не ответил вовремя. Поэтому он не может перейти к следующему шагу.

Кажется, что один тест прерывает другой. Оба теста работают под собственным туннелем и потоком.

Aug 30, 2018 7:17:44 AM org.openqa.selenium.remote.ProtocolHandshake 
createSession
INFO: Detected dialect: OSS
30-08-2018 07:17:49.235 [TestNG-PoolService-0] INFO  
[com.***.tests.TestBase_Local:96] - Open a site URLDriver: RemoteWebDriver: 
chrome on XP (4f5a5d685f4c44c9a5864e91cb8f11e9)
Driver: RemoteWebDriver: chrome on XP (4f5a5d685f4c44c9a5864e91cb8f11e9)
thread id:14 Timestamp :2018-08-30T07:17:49.370
30-08-2018 07:17:51.912 [TestNG-PoolService-0] INFO  
[com.**.tests.TestBase_Local:35] - Select 'No thanks' on the popup

Aug 30, 2018 7:17:53 AM org.openqa.selenium.remote.ProtocolHandshake 
createSession
INFO: Detected dialect: OSS
30-08-2018 07:17:58.886 [TestNG-PoolService-1] INFO  
[com.**.tests.TestBase_Local:96] - Open a site URLDriver: 
RemoteWebDriver: MicrosoftEdge on ANY (c6978c03531d408485588ba501ff0589)
Driver: RemoteWebDriver: MicrosoftEdge on ANY 
(c6978c03531d408485588ba501ff0589)
thread id:15 Timestamp :2018-08-30T07:17:58.887
30-08-2018 07:18:03.406 [TestNG-PoolService-1] INFO  
[com.**.tests.TestBase_Local:35] - Select 'No thanks' on the popup
30-08-2018 07:18:05.337 [TestNG-PoolService-1] INFO  
[com.**.tests.TestBase_Local:38] - Search by input

Совместное использование кода:

public class Search extends RemoteTestBase {

    @Test(dataProvider = "browsers")
    public void SolrSearchTest(String browser, String version, String os, Method method) throws Exception {
        this.createRemoteDriver(browser, version, os, method.getName());
        System.out.println("Driver: " + driver.toString());

        Application app = new Application(driver);

        ConfigFileReader configRead = new ConfigFileReader();

        WebDriverWait wait = new WebDriverWait(driver,100);

        app.homePage().SelectNoThanks();
        Log.info("Select 'No thanks' on the popup");

        app.searchField().SearchBy(configRead.SearchInput());
        Log.info("Search by input");
    }
}

Расширенный класс RemoteTestBase:

public class RemoteTestBase {

    public WebDriver driver;
    private static String baseUrl;
    RandomDataSelect randomuser;
    private PropertyLoader propertyRead;
    public Logger Log = Logger.getLogger(TestBase_Local.class.getName());

    private static final String SAUCE_ACCESS_KEY = System.getenv("SAUCE_ACCESS_KEY");
    private static final String SAUCE_USERNAME = System.getenv("SAUCE_USERNAME");

    @BeforeMethod
    @DataProvider(name = "browsers", parallel = true)
    public static Object[][] sauceBrowserDataProvider(Method testMethod) throws JSONException {
        String browsersJSONArrayString  = System.getenv("SAUCE_ONDEMAND_BROWSERS");
        System.out.println(browsersJSONArrayString);
        JSONArray browsersJSONArrayObj = new JSONArray(browsersJSONArrayString);

        Object[][] browserObjArray = new Object[browsersJSONArrayObj.length()][3];
        for (int i=0; i < browsersJSONArrayObj.length(); i++) {
            JSONObject browserObj = (JSONObject)browsersJSONArrayObj.getJSONObject(i);
            browserObjArray[i] = new Object[]{ browserObj.getString("browser"), browserObj.getString("browser-version"), browserObj.getString("os")};
        }
        return browserObjArray;
    }

    void createRemoteDriver(String browser, String version, String os, String methodName) throws Exception {
        DesiredCapabilities capabilities = new DesiredCapabilities();
        Class<? extends RemoteTestBase> SLclass = this.getClass();
        capabilities.setCapability("browserName", browser);
        if (version != null) {
            capabilities.setCapability("browser-version", version);
        }
        capabilities.setCapability("platform", os);

        capabilities.setCapability("name", SLclass.getSimpleName());

        capabilities.setCapability("tunnelIdentifier", "***");

        driver = (new RemoteWebDriver(new URL("http://" + SAUCE_USERNAME + ":" + SAUCE_ACCESS_KEY + "@ondemand.saucelabs.com:80/wd/hub"), capabilities));

        randomuser = new RandomDataSelect();
        propertyRead = new PropertyLoader();
        baseUrl = propertyRead.getProperty("site.url");
        getURL();
    }

    private void getURL () {
        driver.get(baseUrl);
        driver.manage().timeouts().implicitlyWait(40, TimeUnit.SECONDS);
        this.annotate("Visiting HDSupply page..." + driver.toString());
        Log.info("Open a site URL" + "Driver: " + driver.toString());
    }

    private void printSessionId() {
        String message = String.format("SauceOnDemandSessionID=%1$s job-name=%2$s",(((RemoteWebDriver) driver).getSessionId()).toString(), "some job name");
        System.out.println(message);
    }

    @AfterMethod(description = "Throw the test execution results into saucelabs")
    public void tearDown(ITestResult result) throws Exception {
        ((JavascriptExecutor) driver).executeScript("sauce:job-result=" + (result.isSuccess() ? "passed" : "failed"));
        printSessionId();
        driver.quit();
    }

    void annotate(String text) {
        ((JavascriptExecutor) driver).executeScript("sauce:context=" + text);
    }
}

The suite.xml:

<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE suite SYSTEM "http://testng.org/testng-1.0.dtd">
<suite name="Tests Suite" verbose="4" parallel="tests" data-provider-thread-count="2">
    <test name="AllTests" parallel="methods">
        <classes>
            <class name="com.***.tests.Search"/>
        </classes>
    </test>
</suite>

Информация о проекте: java, селен, testng, maven, соусы, дженкинс

1 Ответ

0 голосов
/ 01 сентября 2018

Проблема заключается в вашем тестовом коде. Это определенно связано с расой между вашими @Test методами [у вас есть parallel="true" в вашей @DataProvider аннотации и parallel="methods" ]

Вам необходимо провести рефакторинг вашего кода таким образом, чтобы ваш driver объект был безопасным для потоков.

Некоторые способы, которыми вы можете сделать это, используют:

  • ThreadLocal варианты WebDriver.
  • Создайте свой экземпляр веб-драйвера и вставьте его в качестве атрибута в объект ITestResult.

В следующем примере показано, как использовать вариант ThreadLocal, чтобы сделать ваш код потокобезопасным

import java.net.URL;
import java.util.concurrent.TimeUnit;
import org.openqa.selenium.remote.DesiredCapabilities;
import org.openqa.selenium.remote.RemoteWebDriver;
import org.testng.ITestResult;
import org.testng.annotations.AfterMethod;

public class RemoteTestBase {

  public static final ThreadLocal<RemoteWebDriver> driver = new ThreadLocal<>();
  private static String baseUrl;
  private static final String SAUCE_ACCESS_KEY = System.getenv("SAUCE_ACCESS_KEY");
  private static final String SAUCE_USERNAME = System.getenv("SAUCE_USERNAME");

  void createRemoteDriver(String browser, String version, String os, String methodName)
      throws Exception {
    DesiredCapabilities capabilities = new DesiredCapabilities();
    Class<? extends RemoteTestBase> SLclass = this.getClass();
    capabilities.setCapability("browserName", browser);
    if (version != null) {
      capabilities.setCapability("browser-version", version);
    }
    capabilities.setCapability("platform", os);
    capabilities.setCapability("name", SLclass.getSimpleName());
    capabilities.setCapability("tunnelIdentifier", "***");

    URL url = new URL(
        "http://" +
            SAUCE_USERNAME + ":" +
            SAUCE_ACCESS_KEY + "@ondemand.saucelabs.com:80/wd/hub");

    RemoteWebDriver rwd = new RemoteWebDriver(url, capabilities);
    driver.set(rwd);
    getURL();
  }

  protected static RemoteWebDriver getDriver() {
    return driver.get();
  }

  private void getURL() {
    getDriver().get(baseUrl);
    getDriver().manage().timeouts().implicitlyWait(40, TimeUnit.SECONDS);
    this.annotate("Visiting HDSupply page..." + driver.toString());
  }

  private void printSessionId() {
    String message = String.format("SauceOnDemandSessionID=%1$s job-name=%2$s",
            getDriver().getSessionId(), "some job name");
    System.out.println(message);
  }

  @AfterMethod(description = "Throw the test execution results into saucelabs")
  public void tearDown(ITestResult result) {
    String txt = "sauce:job-result=" + (result.isSuccess() ? "passed" : "failed");
    getDriver().executeScript(txt);
    printSessionId();
    getDriver().quit();
  }

  void annotate(String text) {
    getDriver().executeScript("sauce:context=" + text);
  }
}

Все ваши подклассы будут пытаться получить доступ к объекту RemoteWebDriver с помощью метода getDriver().

Предостережение заключается в том, что вашему @BeforeMethod необходимо вызвать createRemoteDriver(), чтобы объект RemoteWebDriver был создан и помещен в контекст ThreadLocal, который будет действительным и доступным в методе @Test.

Правило всегда @BeforeMethod (создается экземпляр драйвера)> @Test (драйвер расходуется> @AfterMethod (должна произойти очистка драйвера). Это единственная комбинация, в которой объект RemoteWebDriver действителен в пределах ThreadLocal context.

...