Как я могу показать список тестов (MSTest) для запуска в одном из двух режимов из командной строки?

Question

У меня есть определенные тесты, которые в основном выполняются в двух режимах. Один режим работает с минимальными данными, они предназначены для запуска после каждого фиксации. Другой режим работает с обширными данными, они предназначены для ночного запуска.

Прямо сейчас, я использую файл vsmdi для разделения моих тестов на разные списки с именем для фиксации и в ночное время, а мой сервер сборки вызывает их через командную строку, используя файл vsmdi и имя списка тестов. Для этого я должен сделать две разные функции [TestMethod]: одну для режима фиксации и одну для ночного режима. Тогда я, конечно, назначу их одному из двух списков.

Я думал, что это немного утомительно .. Я знаю, что вам не разрешено передавать параметры в ваши методы тестирования, но есть способ настроить тестовый класс, чтобы каждый тест понимал, в каком режиме он пытается работать в ? Эта конфигурация должна быть передана через командную строку каким-то образом, так что сервер сборки работает, и было бы неплохо, если бы я мог также настроить визуальную студию на то, чтобы быть в одном режиме или в другом, или и том и другом, в любой заданной точке, так что тестовая работающая клавиатура ярлыки работают правильно.

Answer 1

Если ваш «обширный» набор данных занимает слишком много времени, вы можете столкнуться с проблемой с вашим набором данных. Вы должны иметь возможность охватить все ваши тестовые примеры в минимальном наборе данных, который выполняется быстро. Вот мой анекдот: однажды я написал что-то для создания штрих-кодов USPS. USPS очень любезно предоставили 10 000 тестовых примеров и ожидаемые результаты. Я покорно включил эти 10 000 тестовых примеров в отдельные модульные тесты. Тем не менее, я быстро понял, что эти 10 000 тестовых случаев были в значительной степени избыточными, и на самом деле было всего лишь пара десятков фактических тестовых случаев - остальное было шумом. Это то, что я подозреваю, происходит в вашем случае. Вы тестируете большой набор данных, который можно тестировать с гораздо меньшим.

Если, конечно, тестовый пример - то, как ваше приложение ведет себя при обработке большого набора данных. В этом случае разделите свои тесты на две сборки и сконфигурируйте свою сборку, чтобы запускать только «быструю» тестовую сборку на каждом контроле, а также каждую ночную сборку для запуска обоих.

Answer 2

Вы можете добиться этого, используя атрибут категории MsTest на своих модульных тестах.

[Category("Foo")] 
[TestMethod] 
public void MyTest() { 
    // test 
} 

Вы можете разместить более чем одну категорию для каждого теста, чтобы вы могли смешивать и сопоставлять. Затем из командной строки вы можете запускать тесты с помощью переключателя /category и снова выбирать, какие тесты следует запускать. Выезд this link.