Запускайте тесты PHPUnit в определенном порядке

StackOverflow https://stackoverflow.com/questions/10228

  •  08-06-2019
  •  | 
  •  

Вопрос

Есть ли способ получить тесты внутри TestCase запускать в определенном порядке?Например, я хочу разделить жизненный цикл объекта от создания до использования и уничтожения, но мне нужно убедиться, что объект настроен, прежде чем запускать другие тесты.

Это было полезно?

Решение

Возможно, в ваших тестах есть проблема с дизайном.

Обычно каждый тест не должен зависеть от других тестов, поэтому их можно запускать в любом порядке.

Каждый тест должен создавать и уничтожать все, что ему нужно для запуска. Это был бы идеальный подход: никогда не следует совместно использовать объекты и состояния между тестами.

Можете ли вы уточнить, почему вам нужен один и тот же объект для N тестов?

Другие советы

PHPUnit поддерживает тестовые зависимости через @зависит от аннотация.

Вот пример из документации, где тесты будут запускаться в порядке, удовлетворяющем зависимостям, при этом каждый зависимый тест передает аргумент следующему:

class StackTest extends PHPUnit_Framework_TestCase
{
    public function testEmpty()
    {
        $stack = array();
        $this->assertEmpty($stack);

        return $stack;
    }

    /**
     * @depends testEmpty
     */
    public function testPush(array $stack)
    {
        array_push($stack, 'foo');
        $this->assertEquals('foo', $stack[count($stack)-1]);
        $this->assertNotEmpty($stack);

        return $stack;
    }

    /**
     * @depends testPush
     */
    public function testPop(array $stack)
    {
        $this->assertEquals('foo', array_pop($stack));
        $this->assertEmpty($stack);
    }
}

Однако важно отметить, что тесты с неразрешенными зависимостями будут нет быть выполнен (желательно, так как это быстро привлечет внимание к неудачному тесту).Поэтому важно уделять пристальное внимание при использовании зависимостей.

Правильный ответ на этот вопрос — правильный файл конфигурации для тестов.У меня была та же проблема, и я исправил ее, создав тестовый набор с необходимым порядком тестовых файлов:

phpunit.xml:

<phpunit
        colors="true"
        bootstrap="./tests/bootstrap.php"
        convertErrorsToExceptions="true"
        convertNoticesToExceptions="true"
        convertWarningsToExceptions="true"
        strict="true"
        stopOnError="false"
        stopOnFailure="false"
        stopOnIncomplete="false"
        stopOnSkipped="false"
        stopOnRisky="false"
>
    <testsuites>
        <testsuite name="Your tests">
            <file>file1</file> //this will be run before file2
            <file>file2</file> //this depends on file1
        </testsuite>
    </testsuites>
</phpunit>

Если вы хотите, чтобы ваши тесты использовали различные вспомогательные объекты и настройки, вы можете использовать setUp(), tearDown() добавить к sharedFixture свойство.

PHPUnit позволяет использовать аннотацию @dependents, которая определяет зависимые тестовые случаи и позволяет передавать аргументы между зависимыми тестовыми примерами.

На мой взгляд, возьмем следующий сценарий, в котором мне нужно протестировать создание и уничтожение определенного ресурса.

Изначально у меня было два метода: а.testCreateResource и б.testDestroyResource

а.testCreateResource

<?php
$app->createResource('resource');
$this->assertTrue($app->hasResource('resource'));
?>

б.testDestroyResource

<?php
$app->destroyResource('resource');
$this->assertFalse($app->hasResource('resource'));
?>

Я думаю, что это плохая идея, поскольку testDestroyResource зависит от testCreateResource.И лучшей практикой было бы сделать

а.testCreateResource

<?php
$app->createResource('resource');
$this->assertTrue($app->hasResource('resource'));
$app->deleteResource('resource');
?>

б.testDestroyResource

<?php
$app->createResource('resource');
$app->destroyResource('resource');
$this->assertFalse($app->hasResource('resource'));
?>

Альтернативное решение:Используйте статические(!) функции в своих тестах для создания повторно используемых элементов.Например (я использую Selenium IDE для записи тестов и phpunit-selenium (github) для запуска тестов внутри браузера) 

class LoginTest extends SeleniumClearTestCase
{
    public function testAdminLogin()
    {
        self::adminLogin($this);
    }

    public function testLogout()
    {
        self::adminLogin($this);
        self::logout($this);
    }

    public static function adminLogin($t)
    {
        self::login($t, 'john.smith@gmail.com', 'pAs$w0rd');
        $t->assertEquals('John Smith', $t->getText('css=span.hidden-xs'));
    }

    // @source LoginTest.se
    public static function login($t, $login, $pass)
    {
        $t->open('/');
        $t->click("xpath=(//a[contains(text(),'Log In')])[2]");
        $t->waitForPageToLoad('30000');
        $t->type('name=email', $login);
        $t->type('name=password', $pass);
        $t->click("//button[@type='submit']");
        $t->waitForPageToLoad('30000');
    }

    // @source LogoutTest.se
    public static function logout($t)
    {
        $t->click('css=span.hidden-xs');
        $t->click('link=Logout');
        $t->waitForPageToLoad('30000');
        $t->assertEquals('PANEL', $t->getText("xpath=(//a[contains(text(),'Panel')])[2]"));
    }
}

Хорошо, теперь я могу использовать эти многоразовые элементы в другом тесте :) Например:

class ChangeBlogTitleTest extends SeleniumClearTestCase
{
    public function testAddBlogTitle()
    {
      self::addBlogTitle($this,'I like my boobies');
      self::cleanAddBlogTitle();
    }

    public static function addBlogTitle($t,$title) {
      LoginTest::adminLogin($t);

      $t->click('link=ChangeTitle');
      ...
      $t->type('name=blog-title', $title);
      LoginTest::logout($t);
      LoginTest::login($t, 'paris@gmail.com','hilton');
      $t->screenshot(); // take some photos :)
      $t->assertEquals($title, $t->getText('...'));
    }

    public static function cleanAddBlogTitle() {
        $lastTitle = BlogTitlesHistory::orderBy('id')->first();
        $lastTitle->delete();
    }
  • Таким образом вы можете построить иерархию своих тестов.
  • Вы можете сохранить свойство, что каждый тестовый пример полностью отделен от другого (если вы очищаете БД после каждого теста).
  • И самое главное, если, например, в будущем изменится способ входа в систему, вы измените только класс LoginTest, и вам не понадобится правильная часть входа в другие тесты (они должны работать после обновления LoginTest) :)

Когда я запускаю тест, мой скрипт очищает базу данных в начале.Выше я использую свой SeleniumClearTestCase class (я делаю снимок экрана() и другие приятные функции) это расширение MigrationToSelenium2 (из github, для переноса записанных тестов в Firefox с помощью плагина seleniumIDE + ff «Selenium IDE:PHP Formatters"), который является расширением моего класса LaravelTestCase (это копия Illuminate\Foundation esting estCase, но не расширяет PHPUnit_Framework_TestCase), который настраивает laravel для доступа к eloquent, когда мы хотим очистить БД в конце теста), что расширение PHPUnit_Extensions_Selenium2TestCase.Чтобы настроить laravel eloquent, у меня также есть функция createApplication в SeleniumClearTestCase (которая вызывается по адресу setUp, и я беру эту функцию из laral test/TestCase)

Действительно существует проблема с вашими тестами, если их нужно запускать в определенном порядке.Каждый тест должен быть полностью независим от других:это помогает вам локализовать дефекты и позволяет получать повторяемые (и, следовательно, отлаживаемые) результаты.

Проверить этот сайт за массу идей/информации о том, как учитывать ваши тесты таким образом, чтобы избежать подобных проблем.

Лицензировано под: CC-BY-SA с атрибуция
Не связан с StackOverflow
scroll top