← QA Library
Розділ 2 / 9 · 8 хв читання

Види та рівні тестування

Рівні тестування, чорна, біла й сіра скринька, функціональне й нефункціональне тестування та тестування, пов'язане зі змінами.

Існують десятки назв видів тестування, і вони перетинаються. Найпростіше в них не заплутатися — розкласти їх за кількома незалежними осями: на якому рівні ми тестуємо, скільки знаємо про внутрішню будову, що тестуємо і навіщо тестуємо саме зараз.

Рівні: якого розміру об'єкт ми тестуємо

UI end-to-endІнтеграційні / APIМодульні+ ДослідницькеПовільніше, дорожче ↑Швидше, дешевше ↓
Піраміда тестування: багато швидких низькорівневих тестів, менше повільних end-to-end, плюс дослідницьке тестування людьми.
РівеньОбсягХто зазвичай виконує
Модульне (компонентне)Функція, клас чи компонент ізольованоРозробники
ІнтеграційнеЯк модулі чи сервіси працюють разом, API, база данихРозробники та QA
СистемнеУвесь продукт відповідно до вимогQA
ПриймальнеЧи готовий продукт для користувачів і бізнесуБізнес, користувачі, QA

Методи: скільки ми знаємо про внутрішню будову

МетодЗнання кодуТипове застосування
Чорна скринькаНемає; тестуємо через входи й виходиФункціональне й приймальне тестування
Біла скринькаПовне; тести базуються на структурі кодуМодульні тести, покриття гілок і шляхів
Сіра скринькаЧасткове: архітектура, база даних, APIІнтеграційне й API-тестування, перевірки даних

Функціональне й нефункціональне

Функціональне тестування перевіряє, що система робить: бізнес-правила, розрахунки, робочі процеси. Нефункціональне тестування перевіряє, наскільки добре вона це робить.

  • Продуктивність: навантаження (очікуваний трафік), стрес (понад межі), витривалість (години стабільного навантаження), сплески (раптові стрибки)
  • Безпека: контроль доступу, валідація вводу, витік даних, вразливості залежностей
  • Зручність і доступність: чи може кожен, зокрема люди зі скринрідерами чи лише клавіатурою, виконати завдання?
  • Сумісність: браузери, пристрої, операційні системи, розміри екранів
  • Локалізація: переклади, формати дат і чисел, текст, що стає довшим німецькою, мови з письмом справа наліво
  • Надійність і відновлення: що відбувається після падіння, втрати з'єднання чи невдалого деплою

Тестування, пов'язане зі змінами

ВидКолиМета
SmokeОдразу після нової збіркиЧи достатньо стабільна збірка, щоб її взагалі тестувати?
SanityПісля невеликого виправлення чи зміниЧи працює змінена частина, на перший погляд?
Повторне тестування (ретест)Після виправлення багаЧи справді виправлено саме цей баг?
РегресійнеПеред кожним релізомЧи не зламала зміна те, що раніше працювало?

Підходи: за сценаріями, дослідницький і на основі ризиків

Тестування за сценаріями йде за підготовленими тест-кейсами й добре для повторюваності та аудитів. Дослідницьке тестування поєднує навчання, тест-дизайн і виконання одночасно, з місією та обмеженням у часі; воно чудово знаходить несподівані проблеми. Тестування на основі ризиків визначає, куди витрачати зусилля: області з високим впливом на бізнес і високою ймовірністю збою отримують найбільше уваги.

Інші назви, які ви зустрінете

  • Альфа- та бета-тестування: внутрішнє тестування перед релізом, потім тестування обмеженою групою реальних користувачів
  • A/B-тестування: порівняння двох версій на реальних користувачах, щоб побачити, яка працює краще (це радше продуктовий експеримент, ніж пошук багів)
  • Мавпяче тестування: випадкові дії, щоб знайти падіння
  • Тестування встановлення й оновлення: чисте встановлення, оновлення, відкат
  • Тестування даних і міграцій: правильність і повнота перенесених чи перетворених даних
Рідко потрібні всі види одразу. Хороша стратегія тестування обирає поєднання, що відповідає ризикам продукту, — як її записати, див. Тестова документація.