← QA Library
Раздел 3 / 9 · 7 мин чтения

Тест-дизайн

Техники выбора небольшого набора тестов с наибольшими шансами найти дефекты — от ревью до исследовательских сессий.

Тест-дизайн отвечает на один вопрос: какие несколько тестов из бесконечного множества возможных стоит запускать? Хороший тест-дизайн находит больше дефектов меньшим числом тестов и делает покрытие видимым, а не случайным.

Статические техники: ещё до запуска

ТехникаКак выглядитЧто находит
Неформальное ревьюКоллега читает требование или pull requestОчевидные пробелы, нечёткие формулировки
WalkthroughАвтор проводит команду по материалуНедопонимания, пропущенные сценарии
Техническое ревьюКоллеги проверяют на соответствие стандартамИзъяны дизайна, рискованные решения
ИнспекцияФормальный процесс с ролями и чек-листамиДефекты в критичных документах и коде
Статический анализЛинтеры, проверка типов, сканеры безопасностиЗапахи кода, уязвимости, опечатки

Техники чёрного ящика

  • Классы эквивалентности: разбейте входные данные на группы с одинаковым поведением и проверьте по одному значению из каждой
  • Анализ граничных значений: проверьте значения на границах групп и рядом с ними
  • Таблицы решений: выпишите каждую комбинацию условий и ожидаемый результат
  • Тестирование переходов состояний: проверьте допустимые и недопустимые переходы между состояниями объекта
  • Попарное тестирование: покройте каждую пару значений параметров вместо каждой полной комбинации
  • Тестирование сценариев использования: пройдите реалистичные сквозные сценарии, включая альтернативные пути и ошибки

Все эти техники мы разбираем на примерах в статье Техники тест-дизайна на практике.

Техники белого ящика

Техники белого ящика измеряют, какую часть структуры кода выполняют тесты. Покрытие операторов проверяет, что каждая строка выполнилась хотя бы раз; покрытие ветвей — что каждое решение прошло оба варианта (if true и false). Покрытие — полезный сигнал о непротестированном коде, но высокое покрытие не гарантирует хороших тестов: тест может выполнить строку, не проверив результат.

function shippingCost(total, isPremium) {
  if (total >= 50) return 0;      // ветвь A: true / false
  if (isPremium) return 0;        // ветвь B: true / false
  return 6;
}
// 100% покрытие ветвей требует 3 тестов:
// (60, false) -> 0   (20, true) -> 0   (20, false) -> 6

Техники на основе опыта

  • Угадывание ошибок: знание типичных ошибок — пустые значения, спецсимволы, двойная отправка, часовые пояса
  • Тестирование по чек-листу: короткий список высокоуровневых условий, который переиспользуется от релиза к релизу
  • Исследовательское тестирование: ограниченные по времени сессии с миссией, например «30 минут исследовать страницу профиля с очень длинными именами и нелатинскими алфавитами», с заметками о покрытом и найденном

Как выбрать технику

СитуацияС чего начать
Поля форм и числовые параметрыКлассы эквивалентности + границы
Бизнес-правила с несколькими условиямиТаблица решений
Заказы, подписки, рабочие процессыПереходы состояний
Много конфигураций или настроекPairwise
Новая функция, нечёткие требованияИсследовательская сессия + ревью
Критичный алгоритмБелый ящик с покрытием ветвей
Сначала пишите тесты от требования, а потом проверяйте покрытие. Тесты, написанные только ради процента покрытия, обычно выполняют код, ничего не проверяя.