Тестова документація
Стратегія, план, чеклісти, тест-кейси, баг-репорти, критерії приймання й звіти: навіщо кожен артефакт і як його писати.
Тестова документація існує з двох причин: щоб тестування було повторюваним і щоб якість була видимою для тих, хто не був присутній. Потрібний обсяг залежить від проєкту. MVP стартапу може вистачити односторінкової стратегії й чеклістів; платіжній системі потрібні детальні тест-кейси й трасування.
Основні артефакти
| Артефакт | Відповідає на питання | Рівень деталізації |
|---|---|---|
| Стратегія тестування | Як ми загалом підходимо до якості цього продукту? | Високий; змінюється рідко |
| Тест-план | Що, коли, де й хто тестує в цьому релізі? | Середній; на реліз чи проєкт |
| Чекліст | Які умови треба перевірити? | Короткі пункти без кроків |
| Тест-кейс | Як саме перевірити одну умову? | Кроки, дані, очікуваний результат |
| Баг-репорт | Що не так і як це відтворити? | Точно й мінімально |
| Звіт про тестування | Який зараз стан якості? | Підсумок із ризиками |
| Матриця трасування | Які тести покривають які вимоги? | Таблиця |
Тест-план: що включити
- Обсяг: функції, що входять і не входять у тестування
- Підхід: види й рівні тестування, ручне чи автоматизоване
- Оточення й тестові дані
- Критерії входу та виходу (коли починаємо й коли закінчуємо)
- Графік, ролі й відповідальність
- Ризики й способи їх зменшити
- Результати: звіти, списки багів, рекомендації
Чеклісти чи тест-кейси?
Чеклісти швидко писати, і вони залишають простір для судження тестувальника, тож тести різноманітніші. Тест-кейси точні й повторювані, що важливо для складної логіки, регульованих галузей, нових людей у команді та автоматизації.
Чекліст: Вхід
[ ] Вхід із правильними email і паролем
[ ] Помилка при неправильному паролі (без підказки, яке поле хибне)
[ ] Акаунт блокується після 5 невдалих спроб
[ ] «Запам'ятати мене» зберігає сесію після перезапуску браузера
[ ] Поле пароля приховує символи, перемикач показати/сховати працює
[ ] Працює лише з клавіатурою та зі скринрідером
Тест-кейс TC-LOGIN-03: Блокування після невдалих спроб
Передумови: активний акаунт [email protected]
Кроки:
1. Відкрити /login
2. Ввести email і неправильний пароль, надіслати — повторити 5 разів
3. Ввести правильний пароль, надіслати
Очікувано: після кроку 2 з'являється повідомлення про блокування;
крок 3 відхилено; надіслано лист для розблокування
Критерії приймання
Критерії приймання визначають, коли user story виконано. Написані до розробки, вони — найдешевший тест-дизайн з можливих. Популярний формат — Given / When / Then:
Scenario: Поріг безкоштовної доставки
Given сума мого кошика $49.99
When я додаю товар за $0.01
Then вартість доставки $0
And я бачу повідомлення «У вас безкоштовна доставка»
Баг-репорти
Хороший репорт має зрозумілий заголовок, оточення, мінімальні кроки, очікуваний і фактичний результати, докази, серйозність і пріоритет. Повний шаблон і приклади — у статті Баг-репорти, які люблять розробники.
Трасування й метрики
| Вимога | Тест-кейси | Статус |
|---|---|---|
| REQ-12 Безкоштовна доставка від $50 | TC-31, TC-32, TC-33 | Пройдено |
| REQ-13 Промокоди | TC-40 – TC-47 | 1 не пройдено |
| REQ-14 Подарункове пакування | — | Не покрито |
Матриця трасування робить прогалини очевидними (REQ-14 вище). Корисні метрики прості: покриті вимоги, тести пройдені/не пройдені/заблоковані, відкриті баги за серйозністю та дефекти, знайдені після релізу. Уникайте метрик, що заохочують неправильну поведінку, як-от підрахунок багів на тестувальника.