Come posso ottenere il risultato del test durante l'esecuzione dei test del webdriver in Jenkins?

Question

Sto usando il gioco! Il modulo WebDrive e i lavori funzionano bene, ma quando i test falliscono, il lavoro di Jenkins mostra "tutti i test superati". Sto cercando di collegare i risultati dei test ma continuo a correre in problemi.

Ho provato a usare il plug -in Seleniumhq per Jenkins, ma questo si traduce nell'errore mostrato di seguito. Uso Firefox, quindi ho avuto la posizione dei risultati del test impostata su {App}/Test-Result/FirefoxDriver/*. HTML

Publishing Selenium report...
ERROR: No Test Report Found
Build step 'Publish Selenium Report' changed build result to FAILURE
Finished: FAILURE

Quindi immagino che l'output non sia davvero selenio. Ho provato a tirare nella commedia! Plugin e questo non ha dato buone opzioni. Ho provato il gioco! I report di auto-test sono stati post-build, ma ciò ha comportato solo la mostrare il registro delle applicazioni.

Infine, ho provato a utilizzare il rapporto post-build dei risultati degli strumenti di test di pubblicazione. Questo è particolarmente frustrante perché i documenti sono così terribili e Jenkins non fornisce informazioni sul debug / difficoltà che posso trovare.

Custom Tool Pattern: {app}/test-result/FirefoxDriver/*.html
Custom stylesheet: scripts/webdrive2junit.xsl

L'XSL che ho impostato è di seguito e quindi l'errore che ricevo costantemente è sotto. Qualcuno sta ottenendo risultati di test da WebDrive: test nel lavoro di Jenkins?

<?xml version="1.0" encoding="UTF-8"?>
<!--
 - Hopefully we won't use this for long.  I put it together to get some information
 - out of the webdrive:test results while I look for a better solution.
 -->
<xsl:stylesheet version="1.0" xmlns:xsl="http://www.w3.org/1999/XSL/Transform">
  <xsl:template match="child::body">
    <xsl:variable name="test" select="normalize-space(descendant::div/h1)"/>
    <testsuite>
      <xsl:attribute name="name">
        <xsl:value-of select="$test"/>
      </xsl:attribute>
      <testcase>
        <xsl:attribute name="classname">
          <xsl:value-of select="$test"/>
        </xsl:attribute>
        <xsl:attribute name="name">
          <xsl:value-of select="descendant::div/div/table/thead/tr/th"/>
        </xsl:attribute>
        <xsl:if test="descendant::tr[@class='  status_failed']">
          <error />
        </xsl:if>
      </testcase>
    </testsuite>   
  </xsl:template>
</xsl:stylesheet>

Ecco l'errore che ricevo nel registro del lavoro.

[xUnit] [INFO] - [Custom Tool] - 1 test report file(s) were found with the pattern 'src/test-result/FirefoxDriver/*.html' relative to '/opt/ci/hudson/workspace/enterprise_another-play-test' for the testing framework 'Custom Tool'.
[xUnit] [ERROR] - Conversion error Error to convert - A file not found
ERROR: Publisher org.jenkinsci.plugins.xunit.XUnitPublisher aborted due to exception
hudson.util.IOException2: remote file operation failed: /opt/ci/hudson/workspace/enterprise_another-play-test at hudson.remoting.Channel@34b246:build-trunk-2
...
Caused by: com.thalesgroup.hudson.plugins.xunit.exception.XUnitException: Conversion error Error to convert - A file not found
    at com.thalesgroup.hudson.plugins.xunit.service.XUnitConversionService.convert(XUnitConversionService.java:89)
    at com.thalesgroup.hudson.plugins.xunit.service.XUnitTransformer.invoke(XUnitTransformer.java:135)
    ... 11 more
Caused by: com.thalesgroup.dtkit.util.converter.ConversionException: Error to convert - A file not found
    at com.thalesgroup.dtkit.util.converter.ConversionService.convert(ConversionService.java:369)
    at com.thalesgroup.dtkit.util.converter.ConversionService.convert(ConversionService.java:177)
    at com.thalesgroup.dtkit.util.converter.ConversionService.convert(ConversionService.java:114)
    at com.thalesgroup.dtkit.metrics.model.InputMetricXSL.convert(InputMetricXSL.java:196)
    at com.thalesgroup.dtkit.metrics.model.InputMetricXSL.convert(InputMetricXSL.java:202)
    at com.thalesgroup.hudson.plugins.xunit.service.XUnitConversionService.convertCustomInputMetric(XUnitConversionService.java:104)
    at com.thalesgroup.hudson.plugins.xunit.service.XUnitConversionService.convert(XUnitConversionService.java:78)
    ... 12 more
Caused by: org.xml.sax.SAXParseException: The element type "meta" must be terminated by the matching end-tag "</meta>".
    at com.sun.org.apache.xerces.internal.parsers.DOMParser.parse(Unknown Source)
    at com.sun.org.apache.xerces.internal.jaxp.DocumentBuilderImpl.parse(Unknown Source)
    at com.thalesgroup.dtkit.util.converter.ConversionService.convert(ConversionService.java:324)
    ... 18 more
Finished: FAILURE

Answer 1

Il mio attuale lavoro è di seguito. Eventuali miglioramenti sarebbero apprezzati. Dal momento che il plug -in Play non funziona bene per me (a causa del modulo WebRive) i miei passaggi di build sono gli script bash.

# work-around for the XUnit Plugin trouble; feel free to Tidy up
find src/test-result/FirefoxDriver -name "*.html" -print0 | xargs -r0 -n 1 bash -c '
  testname=$(basename ${0%.html.*.html});
  xsltproc --html -o src/test-result/FirefoxDriver/TEST-$testname.xml scripts/webdrive2junit.xsl $0
'

Ho guardato il codice per il plug-in XUnit a Jenkins (che credo sia dietro il rapporto di reciprochi degli strumenti di test di pubblicazione) e mi rendo conto che non sta facendo ciò che pensavo.