есть способ обработать утверждение, переданное в pytest

Question

Я пытаюсь адаптировать инструмент pytest так, чтобы его можно было использовать в моей тестовой среде, для чего создается и хранится точный отчет об испытаниях. Отчет о тестах представлен в формате xml. До сих пор мне удалось создать новый плагин, который создает xml, который я хочу, за одним исключением: Мне нужно зарегистрировать в моем xml-отчете переданное утверждение с соответствующим кодом, если это возможно. Я не мог найти способ сделать это. Единственная возможная возможность - перегрузить pytest_assertrepr_compare im py pytest плагин, но он вызван только при отказе утверждения, а не на переданном утверждении.

Любая идея для этого?

Благодарим за помощь!

Etienne

Answer 1

Не уверен, если я понимаю ваши требования точно, но другой подход заключается в создании файла текст/XML с ожидаемыми результатами вашей обработки: первый раз ваши запустить тест, вы проверяете файл вручную для обеспечения правильности и сохранения теста. Дальнейшие тестовые прогоны будут производить аналогичный файл и сравнить его с предыдущим, если они не совпадают (при необходимости создавая diff для облегчения диагностики).

Плагин pytest-regtest использует подобный подход, захватывая выходные данные тестовых функций и сравнивая их с предыдущими запусками.

Answer 2

Я думаю, что это принципиально невозможно без изменения самого утверждения. py.test не видит, что происходит на уровне уровня assert, он просто выполняет тестовую функцию, и он либо возвращает значение (игнорируется), либо вызывает исключение. В случае, когда он вызывает исключение, он затем проверяет информацию об исключениях, чтобы обеспечить хорошее сообщение об ошибке.

Логика повторной записи утверждения просто заменяет оператор assert if not <assert_expr>: create_detailed_assertion_info. Я предполагаю, что теоретически можно продлить повторение утверждения, чтобы он вызывал крючки как при прохождении, так и при выходе из строя <assert_expr>, но это была бы новая функция.