Основи тестування
Що означає якість, що таке QA, QC і тестування та на яких принципах тримається кожне рішення в тестуванні.
Тестування ПЗ — це процес оцінювання продукту, щоб знайти дефекти й отримати впевненість, що він робить те, що потрібно користувачам. Тестування не може довести, що в програмі немає багів, але може показати, де вони є, і дає команді інформацію для рішення про реліз.
Якість — це більше, ніж «немає багів»
Продукт може не мати жодного відомого бага й усе одно бути поганим: повільним, заплутаним чи небезпечним. Тому якість зазвичай описують через кілька характеристик.
| Характеристика | На яке питання відповідає | Приклад перевірки |
|---|---|---|
| Функціональна придатність | Чи робить продукт правильні речі правильно? | Кошик правильно рахує податок |
| Продуктивність | Чи достатньо він швидкий і ефективний? | Сторінка завантажується менш ніж за 2 с на 4G |
| Зручність | Чи легко ним користуватися? | Новий користувач реєструється без сторонньої допомоги |
| Надійність | Чи продовжує він працювати? | Жодної втрати даних після перезапуску сервера |
| Безпека | Чи захищені дані? | Користувач не може відкрити чуже замовлення |
| Сумісність | Чи працює він у своєму середовищі? | Працює в двох останніх версіях популярних браузерів |
| Супроводжуваність | Чи можна його безпечно змінювати? | Код має тести й зрозумілу структуру |
| Переносність | Чи запуститься він деінде? | Встановлюється на Windows і macOS |
QA, QC і тестування
Ці три терміни часто плутають. Забезпечення якості (QA) стосується процесу: запобігання дефектам завдяки хорошим практикам — рев'ю, стандартам, зрозумілим вимогам. Контроль якості (QC) стосується продукту: перевірки, що створене відповідає вимогам. Тестування — головна діяльність QC: запуск програми чи вивчення її артефактів, щоб знайти проблеми.
Верифікація і валідація
Верифікація питає: «Чи правильно ми робимо продукт?» — чи відповідає він специфікації. Валідація питає: «Чи той продукт ми робимо?» — чи справді він вирішує проблему користувача. Функція може ідеально пройти верифікацію й не пройти валідацію, бо помилковою була сама специфікація.
Помилка, дефект, збій
Людина робить помилку (хибне припущення, описку). Помилка залишає дефект (баг) у коді чи документації. Коли дефектний код виконується за певних умов, він спричиняє збій — видиму неправильну поведінку. Не кожен дефект призводить до збою: деякі сидять у коді, який ніколи не виконується.
Сім принципів тестування
- Тестування показує наявність дефектів, а не їх відсутність. Успішні тести знижують ризик, але не доводять досконалості.
- Вичерпне тестування неможливе. Ми розставляємо пріоритети за ризиком, а не пробуємо все.
- Раннє тестування заощаджує час і гроші. Перевіряйте вимоги ще до появи коду.
- Дефекти скупчуються. Кілька модулів зазвичай містять більшість багів — шукайте там ретельніше.
- Тести «зношуються». Ті самі тести знову й знову перестають знаходити нові баги; оновлюйте їх і варіюйте.
- Тестування залежить від контексту. Банківський застосунок і мобільна гра потребують різних підходів.
- Відсутність помилок — оманлива мета. Продукт без багів, який не відповідає потребам користувачів, однаково провальний.
Статичне й динамічне тестування
Статичне тестування вивчає артефакти без запуску коду: рев'ю вимог, дизайну й коду або інструменти статичного аналізу. Динамічне тестування запускає програму. Статичне дешеве й знаходить проблеми рано; динамічне знаходить те, що проявляється лише під час виконання. Здоровий процес використовує обидва.