Тест-дизайн
Техніки вибору невеликого набору тестів з найбільшими шансами знайти дефекти — від рев'ю до дослідницьких сесій.
Тест-дизайн відповідає на одне питання: які кілька тестів із безлічі можливих варто запускати? Хороший тест-дизайн знаходить більше дефектів меншою кількістю тестів і робить покриття видимим, а не випадковим.
Статичні техніки: ще до запуску
| Техніка | Як виглядає | Що знаходить |
|---|---|---|
| Неформальне рев'ю | Колега читає вимогу чи pull request | Очевидні прогалини, нечіткі формулювання |
| Walkthrough | Автор проводить команду матеріалом | Непорозуміння, пропущені сценарії |
| Технічне рев'ю | Колеги перевіряють на відповідність стандартам | Вади дизайну, ризиковані рішення |
| Інспекція | Формальний процес із ролями й чеклістами | Дефекти в критичних документах і коді |
| Статичний аналіз | Лінтери, перевірка типів, сканери безпеки | Запахи коду, вразливості, описки |
Техніки чорної скриньки
- Класи еквівалентності: розбийте вхідні дані на групи з однаковою поведінкою й перевірте по одному значенню з кожної
- Аналіз граничних значень: перевірте значення на межах груп і поруч із ними
- Таблиці рішень: випишіть кожну комбінацію умов і очікуваний результат
- Тестування переходів станів: перевірте допустимі й недопустимі переходи між станами об'єкта
- Попарне тестування: покрийте кожну пару значень параметрів замість кожної повної комбінації
- Тестування сценаріїв використання: пройдіть реалістичні наскрізні сценарії, включно з альтернативними шляхами й помилками
Усі ці техніки ми розбираємо на прикладах у статті Техніки тест-дизайну на практиці.
Техніки білої скриньки
Техніки білої скриньки вимірюють, яку частину структури коду виконують тести. Покриття операторів перевіряє, що кожен рядок виконався хоча б раз; покриття гілок — що кожне рішення пройшло обидва варіанти (if true і false). Покриття — корисний сигнал про непротестований код, але високе покриття не гарантує хороших тестів: тест може виконати рядок, не перевіривши результат.
function shippingCost(total, isPremium) {
if (total >= 50) return 0; // гілка A: true / false
if (isPremium) return 0; // гілка B: true / false
return 6;
}
// 100% покриття гілок потребує 3 тестів:
// (60, false) -> 0 (20, true) -> 0 (20, false) -> 6
Техніки на основі досвіду
- Вгадування помилок: знання типових помилок — порожні значення, спецсимволи, подвійна відправка, часові пояси
- Тестування за чеклістом: короткий список високорівневих умов, що повторно використовується від релізу до релізу
- Дослідницьке тестування: обмежені в часі сесії з місією, наприклад «30 хвилин досліджувати сторінку профілю з дуже довгими іменами й нелатинським письмом», з нотатками про покрите й знайдене
Як обрати техніку
| Ситуація | З чого почати |
|---|---|
| Поля форм і числові параметри | Класи еквівалентності + межі |
| Бізнес-правила з кількома умовами | Таблиця рішень |
| Замовлення, підписки, робочі процеси | Переходи станів |
| Багато конфігурацій чи налаштувань | Pairwise |
| Нова функція, нечіткі вимоги | Дослідницька сесія + рев'ю |
| Критичний алгоритм | Біла скринька з покриттям гілок |