← Все статьи
QA · 12 мин чтения

Техники тест-дизайна на практике: больше багов меньшим числом тестов

Классы эквивалентности, граничные значения, таблицы решений, переходы состояний и попарное тестирование — каждая техника на реальном примере, который можно использовать уже завтра.

Протестировать всё невозможно. Простая форма из пяти полей по десять возможных значений уже даёт 100 000 комбинаций. Тест-дизайн — это дисциплина выбора небольшого набора тестов с наибольшими шансами найти дефекты. Ниже пять техник, которыми мы пользуемся каждый день, каждая с разобранным примером.

1. Классы эквивалентности

Разбейте все возможные входные данные на группы (классы), которые система должна обрабатывать одинаково. Если одно значение из группы работает, остальные почти наверняка тоже будут работать, поэтому достаточно одного теста на группу.

Пример: онлайн-форма страхования принимает водителей в возрасте от 18 до 65 лет.

КлассПример значенияОжидаемый результат
Ниже диапазона12Ошибка: слишком молодой
Допустимый диапазон35Принято
Выше диапазона80Ошибка: возраст вне допустимых пределов
Не число«abc»Ошибка валидации
Пусто(пусто)«Поле обязательно»

Пять тестов вместо сотен, и каждый проверяет другое поведение.

2. Анализ граничных значений

Разработчики ошибаются на границах: < вместо <=, сдвиг на единицу в циклах, неправильное округление. Анализ граничных значений проверяет значения на самой границе и рядом с ней.

недопустимодопустимонедопустимо17186566Двузначное тестирование границ для поля возраста 18–65
Значения по обе стороны каждой границы ловят самые частые ошибки сдвига на единицу.

Для поля возраста мы тестируем 17, 18, 65 и 66. Трёхзначный подход добавляет 19 и 64. Вместе с классами эквивалентности это около восьми тестов на поле, и они ловят подавляющее большинство реальных дефектов в нём.

Границы — это не только числа: длина строки (0, 1, max, max+1 символов), даты (28/29 февраля, конец года, часовые пояса), размеры файлов и списков, цены около порога скидки.

3. Таблицы решений

Когда поведение зависит от комбинации условий, таблица решений гарантирует, что ни одна комбинация не забыта. Пример: стоимость доставки в интернет-магазине.

ПравилоЗаказ ≥ $50Премиум-клиентЭкспресс-доставкаСтоимость доставки
R1ДаДаДа$0
R2ДаДаНет$0
R3ДаНетДа$9
R4ДаНетНет$0
R5НетДаДа$5
R6НетДаНет$0
R7НетНетДа$15
R8НетНетНет$6

Каждая строка — тест-кейс. Построение таблицы часто выявляет пробелы в самих требованиях: по нашему опыту, на вопрос «сколько должно стоить R5?» у бизнеса часто ещё нет ответа. Найти это до разработки — самое дешёвое исправление бага из возможных.

4. Тестирование переходов состояний

Многие объекты проходят через состояния: заказ, подписка, баг-тикет, игровой персонаж. Тестирование переходов состояний проверяет, что допустимые переходы работают, а недопустимые заблокированы.

Из состояния \ СобытиеОплатаОтправкаДоставкаОтмена
НовыйОплачен✗✗Отменён
Оплачен✗Отправлен✗Отменён + возврат денег
Отправлен✗✗Доставлен✗ (процесс возврата)
Доставлен✗✗✗✗ (процесс возврата)

В ячейках с ✗ и прячутся баги: можно ли отправить заказ до оплаты? Можно ли отменить доставленный заказ через старую вкладку браузера? Мы пишем как минимум один тест на каждый допустимый переход и по одному на каждый рискованный недопустимый.

5. Попарное тестирование (pairwise)

В конфигурационном тестировании число комбинаций взрывается. Большинство дефектов вызывает один параметр или взаимодействие двух, поэтому проверка каждой пары значений покрывает большую часть риска малой долей тестов.

ПараметрЗначения
БраузерChrome, Safari, Firefox
ОСWindows, macOS, Android, iOS
ЯзыкEN, UK, DE
Тип пользователяГость, Зарегистрированный

Всех комбинаций: 3 × 4 × 3 × 2 = 72. Попарный набор, покрывающий каждую пару значений, требует всего около 12 прогонов. Инструменты вроде PICT или онлайн-генераторы pairwise собирают набор автоматически; невозможные пары (Safari на Android) исключаются ограничениями.

6. Техники на основе опыта

Формальные техники — основа, но опытные тестировщики добавляют угадывание ошибок (типичные места сбоев: пустые списки, двойные клики, медленная сеть, спецсимволы вроде O'Brien или эмодзи) и исследовательское тестирование в ограниченных по времени сессиях с чёткой целью, например: «45 минут исследовать оформление заказа при нестабильной сети в поисках дублей заказов».

Как объединить всё вместе

  1. Прочитайте требование и выпишите входные данные, условия и состояния.
  2. Примените классы эквивалентности и границы к каждому входному параметру.
  3. Используйте таблицу решений там, где правила комбинируются.
  4. Нарисуйте состояния и переходы для всего, у чего есть жизненный цикл.
  5. Сократите число конфигураций с помощью pairwise.
  6. Завершите исследовательской сессией с учётом рисков.
Хороший набор тестов — не самый большой. Это самый маленький набор, который упадёт, если сломается что-то важное.