← QA Library
Розділ 3 / 9 · 7 хв читання

Тест-дизайн

Техніки вибору невеликого набору тестів з найбільшими шансами знайти дефекти — від рев'ю до дослідницьких сесій.

Тест-дизайн відповідає на одне питання: які кілька тестів із безлічі можливих варто запускати? Хороший тест-дизайн знаходить більше дефектів меншою кількістю тестів і робить покриття видимим, а не випадковим.

Статичні техніки: ще до запуску

ТехнікаЯк виглядаєЩо знаходить
Неформальне рев'юКолега читає вимогу чи pull requestОчевидні прогалини, нечіткі формулювання
WalkthroughАвтор проводить команду матеріаломНепорозуміння, пропущені сценарії
Технічне рев'юКолеги перевіряють на відповідність стандартамВади дизайну, ризиковані рішення
ІнспекціяФормальний процес із ролями й чеклістамиДефекти в критичних документах і коді
Статичний аналізЛінтери, перевірка типів, сканери безпекиЗапахи коду, вразливості, описки

Техніки чорної скриньки

  • Класи еквівалентності: розбийте вхідні дані на групи з однаковою поведінкою й перевірте по одному значенню з кожної
  • Аналіз граничних значень: перевірте значення на межах груп і поруч із ними
  • Таблиці рішень: випишіть кожну комбінацію умов і очікуваний результат
  • Тестування переходів станів: перевірте допустимі й недопустимі переходи між станами об'єкта
  • Попарне тестування: покрийте кожну пару значень параметрів замість кожної повної комбінації
  • Тестування сценаріїв використання: пройдіть реалістичні наскрізні сценарії, включно з альтернативними шляхами й помилками

Усі ці техніки ми розбираємо на прикладах у статті Техніки тест-дизайну на практиці.

Техніки білої скриньки

Техніки білої скриньки вимірюють, яку частину структури коду виконують тести. Покриття операторів перевіряє, що кожен рядок виконався хоча б раз; покриття гілок — що кожне рішення пройшло обидва варіанти (if true і false). Покриття — корисний сигнал про непротестований код, але високе покриття не гарантує хороших тестів: тест може виконати рядок, не перевіривши результат.

function shippingCost(total, isPremium) {
  if (total >= 50) return 0;      // гілка A: true / false
  if (isPremium) return 0;        // гілка B: true / false
  return 6;
}
// 100% покриття гілок потребує 3 тестів:
// (60, false) -> 0   (20, true) -> 0   (20, false) -> 6

Техніки на основі досвіду

  • Вгадування помилок: знання типових помилок — порожні значення, спецсимволи, подвійна відправка, часові пояси
  • Тестування за чеклістом: короткий список високорівневих умов, що повторно використовується від релізу до релізу
  • Дослідницьке тестування: обмежені в часі сесії з місією, наприклад «30 хвилин досліджувати сторінку профілю з дуже довгими іменами й нелатинським письмом», з нотатками про покрите й знайдене

Як обрати техніку

СитуаціяЗ чого почати
Поля форм і числові параметриКласи еквівалентності + межі
Бізнес-правила з кількома умовамиТаблиця рішень
Замовлення, підписки, робочі процесиПереходи станів
Багато конфігурацій чи налаштуваньPairwise
Нова функція, нечіткі вимогиДослідницька сесія + рев'ю
Критичний алгоритмБіла скринька з покриттям гілок
Спочатку пишіть тести від вимоги, а потім перевіряйте покриття. Тести, написані лише заради відсотка покриття, зазвичай виконують код, нічого не перевіряючи.