Non TestNG metodi garanzia @BeforeSuite vengono eseguite prima metodi @BeforeTest?

Question

BACKGROUND: Il mio obiettivo è quello di codice di un sistema di TestNG-selenio che corre autosufficiente (nessun stringhe plugin Maven o formica; solo Java). Deve consentire casi di test per accettare parametri tra cui il browser e l'URL del dominio. Quando il TestRunner un'istanza questi casi di test, il browser e il dominio sono utilizzati per ottenere un oggetto per eseguire Selenio si sta mettendo alla prova.

PROBLEMA: una sola classe di test per suite riesce a ottenere il parametro di dominio (in un @BeforeSuite metodo) prima di tentare di ottenere un oggetto selenio (in un @BeforeTest). Le classi di test che non ricevono il dominio hanno un oggetto nullo selenio b / c smussa un'istanza.

CODICE: I XmlClasses sono ogni contenuto all'interno del proprio XMLTest e tutti e tre sono in un unico XmlSuite. La suite contiene il nell'ordine di TestClass1, TestClass2, poi TestClass3. Le classi di test stessi sono sottoclassi di 2 strati classi base astratte che include funzionalità per inizializzare le variabili iniettati e successivamente ottenere un'istanza di selenio. Lo scopo di questo è di un test o multipla applicazioni (su più domini) con il meno codice ripetuti possibile (cioè: Selenio istanziazione è nella classe base radice perché è comune a tutti i test). Vedere i metodi sotto per i dettagli.

// Top-most custom base class
abstract public class WebAppTestBase extends SeleneseTestBase
{
        private static Logger logger = Logger.getLogger(WebAppTestBase.class);
        protected static Selenium selenium = null;
        protected String domain = null;
        protected String browser = null;

        @BeforeTest(alwaysRun = true)
        @Parameters({ "selenium.browser" })
        public void setupTest(String browser)
        {
                this.browser = browser;
                logger.debug(this.getClass().getName()
                                + " acquiring Selenium instance ('" + this.browser + " : " + domain + "').");
                selenium = new DefaultSelenium("localhost", 4444, browser, domain);
                selenium.start();
        }

}

// Second level base class.
public abstract class App1TestBase extends WebAppTestBase
{

        @BeforeSuite(alwaysRun = true)
        @Parameters({"app1.domain" })
        public void setupSelenium(String domain)
        {
                // This should execute for each test case prior to instantiating any Selenium objects in @BeforeTest
                logger.debug(this.getClass().getName() + " starting selenium on domain '" + domain+ "'.");
                this.domain = domain;
        }
}

// Leaf level test class
public class TestClass1 extends App1TestBase
{
        @Test
        public void validateFunctionality() throws Exception
        {
                // Code for tests go here...
        }
}

// Leaf level test class
public class TestClass2 extends App1TestBase
{
        @Test
        public void validateFunctionality() throws Exception
        {
                selenium.isElementPresent( ...
                // Rest of code for tests go here...
                // ....
        }
}


// Leaf level test class
public class TestClass3 extends App1TestBase
{
        @Test
        public void validateFunctionality() throws Exception
        {
                // Code for tests go here...
        }
}

USCITA: TestCase3 viene eseguito correttamente. TestCase1 e TestCase2 fallisce. analisi dello stack viene generato ...

 10:08:23 [DEBUG RunTestCommand.java:63] - Running Tests.
 10:08:23 [Parser] Running:
  Command line suite
  Command line suite

[DEBUG App1TestBase.java:49] - TestClass3 starting selenium on domain 'http://localhost:8080'.
 10:08:24 [DEBUG WebAppTestBase.java:46] - TestClass2 acquiring Selenium instance ('*firefox : null').
 10:08:24 [ERROR SeleniumCoreCommand.java:40] - Exception running 'isElementPresent 'command on session null
 10:08:24 java.lang.NullPointerException: sessionId should not be null; has this session been started yet?
        at org.openqa.selenium.server.FrameGroupCommandQueueSet.getQueueSet(FrameGroupCommandQueueSet.java:216)
        at org.openqa.selenium.server.commands.SeleniumCoreCommand.execute(SeleniumCoreCommand.java:34)
        at org.openqa.selenium.server.SeleniumDriverResourceHandler.doCommand(SeleniumDriverResourceHandler.java:562)
        at org.openqa.selenium.server.SeleniumDriverResourceHandler.handleCommandRequest(SeleniumDriverResourceHandler.java:370)
        at org.openqa.selenium.server.SeleniumDriverResourceHandler.handle(SeleniumDriverResourceHandler.java:129)
        at org.openqa.jetty.http.HttpContext.handle(HttpContext.java:1530)
        at org.openqa.jetty.http.HttpContext.handle(HttpContext.java:1482)
        at org.openqa.jetty.http.HttpServer.service(HttpServer.java:909)
        at org.openqa.jetty.http.HttpConnection.service(HttpConnection.java:820)
        at org.openqa.jetty.http.HttpConnection.handleNext(HttpConnection.java:986)
        at org.openqa.jetty.http.HttpConnection.handle(HttpConnection.java:837)
        at org.openqa.jetty.http.SocketListener.handleConnection(SocketListener.java:245)
        at org.openqa.jetty.util.ThreadedServer.handle(ThreadedServer.java:357)
        at org.openqa.jetty.util.ThreadPool$PoolThread.run(ThreadPool.java:534)

Apprezzo qualsiasi informazione potete avere su questo tema.

Answer 1

Credo che il problema è che il metodo @BeforeSuite sta assegnando un valore a un campo, ma avete tre diverse istanze, quindi gli altri due non arrivano mai inizializzato.

Ricordate che @BeforeSuite viene eseguito solo una volta, indipendentemente da ciò che di classe a cui appartiene. Come tale, @ Prima metodi / AfterSuite sono generalmente definiti in classi che sono fuori l'intero ambiente di prova. Questi metodi in realtà dovrebbe essere statico, ma ho deciso di non rispettare questo requisito, perché a volte è poco pratica.

Credo che il modo migliore per affrontare il problema è quello di guardare il vostro campo di dominio come una risorsa iniettato che ognuno di tuo test riceveranno da Guice o altro quadro di iniezione di dipendenza.