← Усі статті
QA · 12 хв читання

Техніки тест-дизайну на практиці: більше багів меншою кількістю тестів

Класи еквівалентності, граничні значення, таблиці рішень, переходи станів і попарне тестування — кожна техніка на реальному прикладі, який можна використати вже завтра.

Протестувати все неможливо. Проста форма з п'ятьма полями по десять можливих значень уже дає 100 000 комбінацій. Тест-дизайн — це дисципліна вибору невеликого набору тестів з найбільшими шансами знайти дефекти. Нижче п'ять технік, якими ми користуємося щодня, кожна з розібраним прикладом.

1. Класи еквівалентності

Розбийте всі можливі вхідні дані на групи (класи), які система має обробляти однаково. Якщо одне значення з групи працює, інші майже напевно теж працюватимуть, тож достатньо одного тесту на групу.

Приклад: онлайн-форма страхування приймає водіїв віком від 18 до 65 років.

КласПриклад значенняОчікуваний результат
Нижче діапазону12Помилка: замалий вік
Допустимий діапазон35Прийнято
Вище діапазону80Помилка: вік поза межами
Не число«abc»Помилка валідації
Порожнє(порожньо)«Поле обов'язкове»

П'ять тестів замість сотень, і кожен перевіряє іншу поведінку.

2. Аналіз граничних значень

Розробники помиляються на межах: < замість <=, зсув на одиницю в циклах, неправильне округлення. Аналіз граничних значень перевіряє значення на самій межі й поруч із нею.

недопустимодопустимонедопустимо17186566Двозначне тестування меж для поля віку 18–65
Значення по обидва боки кожної межі ловлять найчастіші помилки зсуву на одиницю.

Для поля віку ми тестуємо 17, 18, 65 і 66. Тризначний підхід додає 19 і 64. Разом із класами еквівалентності це близько восьми тестів на поле, і вони ловлять переважну більшість реальних дефектів у ньому.

Межі — це не лише числа: довжина рядка (0, 1, max, max+1 символів), дати (28/29 лютого, кінець року, часові пояси), розміри файлів і списків, ціни біля порога знижки.

3. Таблиці рішень

Коли поведінка залежить від комбінації умов, таблиця рішень гарантує, що жодну комбінацію не забуто. Приклад: вартість доставки в інтернет-магазині.

ПравилоЗамовлення ≥ $50Преміум-клієнтЕкспрес-доставкаВартість доставки
R1ТакТакТак$0
R2ТакТакНі$0
R3ТакНіТак$9
R4ТакНіНі$0
R5НіТакТак$5
R6НіТакНі$0
R7НіНіТак$15
R8НіНіНі$6

Кожен рядок — тест-кейс. Побудова таблиці часто виявляє прогалини в самих вимогах: з нашого досвіду, на питання «скільки має коштувати R5?» бізнес часто ще не має відповіді. Знайти це до розробки — найдешевше виправлення бага з усіх можливих.

4. Тестування переходів станів

Багато об'єктів проходять через стани: замовлення, підписка, баг-тікет, ігровий персонаж. Тестування переходів станів перевіряє, що допустимі переходи працюють, а недопустимі заблоковані.

Зі стану \ ПодіяОплатаВідправкаДоставкаСкасування
НовеОплачене✗✗Скасоване
Оплачене✗Відправлене✗Скасоване + повернення коштів
Відправлене✗✗Доставлене✗ (процес повернення)
Доставлене✗✗✗✗ (процес повернення)

У клітинках з ✗ і ховаються баги: чи можна відправити замовлення до оплати? Чи можна скасувати доставлене замовлення через стару вкладку браузера? Ми пишемо щонайменше один тест на кожен допустимий перехід і по одному на кожен ризикований недопустимий.

5. Попарне тестування (pairwise)

У конфігураційному тестуванні кількість комбінацій вибухає. Більшість дефектів спричиняє один параметр або взаємодія двох, тож перевірка кожної пари значень покриває більшу частину ризику малою часткою тестів.

ПараметрЗначення
БраузерChrome, Safari, Firefox
ОСWindows, macOS, Android, iOS
МоваEN, UK, DE
Тип користувачаГість, Зареєстрований

Усіх комбінацій: 3 × 4 × 3 × 2 = 72. Попарний набір, що покриває кожну пару значень, потребує лише близько 12 прогонів. Інструменти на кшталт PICT або онлайн-генератори pairwise збирають набір автоматично; неможливі пари (Safari на Android) виключаються обмеженнями.

6. Техніки на основі досвіду

Формальні техніки — основа, але досвідчені тестувальники додають вгадування помилок (типові місця збоїв: порожні списки, подвійні кліки, повільна мережа, спецсимволи на кшталт O'Brien чи емодзі) і дослідницьке тестування в обмежених за часом сесіях з чіткою метою, наприклад: «45 хвилин досліджувати оформлення замовлення при нестабільній мережі, шукаючи дубльовані замовлення».

Як поєднати все разом

  1. Прочитайте вимогу й випишіть вхідні дані, умови та стани.
  2. Застосуйте класи еквівалентності й межі до кожного вхідного параметра.
  3. Використайте таблицю рішень там, де правила поєднуються.
  4. Намалюйте стани й переходи для всього, що має життєвий цикл.
  5. Зменште кількість конфігурацій за допомогою pairwise.
  6. Завершіть дослідницькою сесією з урахуванням ризиків.
Хороший набір тестів — не найбільший. Це найменший набір, який впаде, якщо зламається щось важливе.