Техніки тест-дизайну на практиці: більше багів меншою кількістю тестів
Класи еквівалентності, граничні значення, таблиці рішень, переходи станів і попарне тестування — кожна техніка на реальному прикладі, який можна використати вже завтра.
Протестувати все неможливо. Проста форма з п'ятьма полями по десять можливих значень уже дає 100 000 комбінацій. Тест-дизайн — це дисципліна вибору невеликого набору тестів з найбільшими шансами знайти дефекти. Нижче п'ять технік, якими ми користуємося щодня, кожна з розібраним прикладом.
1. Класи еквівалентності
Розбийте всі можливі вхідні дані на групи (класи), які система має обробляти однаково. Якщо одне значення з групи працює, інші майже напевно теж працюватимуть, тож достатньо одного тесту на групу.
Приклад: онлайн-форма страхування приймає водіїв віком від 18 до 65 років.
| Клас | Приклад значення | Очікуваний результат |
|---|---|---|
| Нижче діапазону | 12 | Помилка: замалий вік |
| Допустимий діапазон | 35 | Прийнято |
| Вище діапазону | 80 | Помилка: вік поза межами |
| Не число | «abc» | Помилка валідації |
| Порожнє | (порожньо) | «Поле обов'язкове» |
П'ять тестів замість сотень, і кожен перевіряє іншу поведінку.
2. Аналіз граничних значень
Розробники помиляються на межах: < замість <=, зсув на одиницю в циклах, неправильне округлення. Аналіз граничних значень перевіряє значення на самій межі й поруч із нею.
Для поля віку ми тестуємо 17, 18, 65 і 66. Тризначний підхід додає 19 і 64. Разом із класами еквівалентності це близько восьми тестів на поле, і вони ловлять переважну більшість реальних дефектів у ньому.
3. Таблиці рішень
Коли поведінка залежить від комбінації умов, таблиця рішень гарантує, що жодну комбінацію не забуто. Приклад: вартість доставки в інтернет-магазині.
| Правило | Замовлення ≥ $50 | Преміум-клієнт | Експрес-доставка | Вартість доставки |
|---|---|---|---|---|
| R1 | Так | Так | Так | $0 |
| R2 | Так | Так | Ні | $0 |
| R3 | Так | Ні | Так | $9 |
| R4 | Так | Ні | Ні | $0 |
| R5 | Ні | Так | Так | $5 |
| R6 | Ні | Так | Ні | $0 |
| R7 | Ні | Ні | Так | $15 |
| R8 | Ні | Ні | Ні | $6 |
Кожен рядок — тест-кейс. Побудова таблиці часто виявляє прогалини в самих вимогах: з нашого досвіду, на питання «скільки має коштувати R5?» бізнес часто ще не має відповіді. Знайти це до розробки — найдешевше виправлення бага з усіх можливих.
4. Тестування переходів станів
Багато об'єктів проходять через стани: замовлення, підписка, баг-тікет, ігровий персонаж. Тестування переходів станів перевіряє, що допустимі переходи працюють, а недопустимі заблоковані.
| Зі стану \ Подія | Оплата | Відправка | Доставка | Скасування |
|---|---|---|---|---|
| Нове | Оплачене | ✗ | ✗ | Скасоване |
| Оплачене | ✗ | Відправлене | ✗ | Скасоване + повернення коштів |
| Відправлене | ✗ | ✗ | Доставлене | ✗ (процес повернення) |
| Доставлене | ✗ | ✗ | ✗ | ✗ (процес повернення) |
У клітинках з ✗ і ховаються баги: чи можна відправити замовлення до оплати? Чи можна скасувати доставлене замовлення через стару вкладку браузера? Ми пишемо щонайменше один тест на кожен допустимий перехід і по одному на кожен ризикований недопустимий.
5. Попарне тестування (pairwise)
У конфігураційному тестуванні кількість комбінацій вибухає. Більшість дефектів спричиняє один параметр або взаємодія двох, тож перевірка кожної пари значень покриває більшу частину ризику малою часткою тестів.
| Параметр | Значення |
|---|---|
| Браузер | Chrome, Safari, Firefox |
| ОС | Windows, macOS, Android, iOS |
| Мова | EN, UK, DE |
| Тип користувача | Гість, Зареєстрований |
Усіх комбінацій: 3 × 4 × 3 × 2 = 72. Попарний набір, що покриває кожну пару значень, потребує лише близько 12 прогонів. Інструменти на кшталт PICT або онлайн-генератори pairwise збирають набір автоматично; неможливі пари (Safari на Android) виключаються обмеженнями.
6. Техніки на основі досвіду
Формальні техніки — основа, але досвідчені тестувальники додають вгадування помилок (типові місця збоїв: порожні списки, подвійні кліки, повільна мережа, спецсимволи на кшталт O'Brien чи емодзі) і дослідницьке тестування в обмежених за часом сесіях з чіткою метою, наприклад: «45 хвилин досліджувати оформлення замовлення при нестабільній мережі, шукаючи дубльовані замовлення».
Як поєднати все разом
- Прочитайте вимогу й випишіть вхідні дані, умови та стани.
- Застосуйте класи еквівалентності й межі до кожного вхідного параметра.
- Використайте таблицю рішень там, де правила поєднуються.
- Намалюйте стани й переходи для всього, що має життєвий цикл.
- Зменште кількість конфігурацій за допомогою pairwise.
- Завершіть дослідницькою сесією з урахуванням ризиків.