← QA Library
Раздел 7 / 9 · 8 мин чтения

Автоматизация тестирования

Что автоматизировать, а что нет, инструменты по уровням, поддерживаемая структура тестов, нестабильные тесты и запуск всего в CI.

Автоматизация не заменяет тестировщиков — она их освобождает. Машины быстро и последовательно повторяют проверки в каждой сборке, а люди сосредотачиваются на исследовательском тестировании, новых функциях и суждениях. Цель — быстрая и надёжная обратная связь, а не наибольшее возможное число скриптов.

Что автоматизировать

Хорошие кандидатыПлохие кандидаты
Smoke-тесты в каждой сборкеФункции, которые меняются каждую неделю
Регрессия стабильных критичных сценариевРазовые проверки
Тесты API и бизнес-логикиВизуальные оценки и ощущение UX
Тесты с множеством наборов данныхТесты, требующие физического взаимодействия
Проверки во многих браузерах или на устройствахИсследовательское тестирование

Практическое правило: автоматизируйте проверку, если она стабильна, ценна и будет запускаться много раз. Опускайте тесты ниже по пирамиде: API-тест быстрее и стабильнее UI-теста для того же правила.

Инструменты по уровням

УровеньПопулярные инструменты
МодульныйJest, Vitest, JUnit, pytest, NUnit
APIPostman/Newman, REST Assured, pytest + requests, Karate
Веб-UIPlaywright, Cypress, Selenium WebDriver
Мобильный UIAppium, Espresso, XCUITest, Maestro
Производительностьk6, JMeter, Gatling, Locust
Визуальная регрессияСкриншоты Playwright, Percy, Applitools

Поддерживаемая структура

Держите тесты читаемыми, а селекторы — в одном месте. Паттерн Page Object оборачивает элементы и действия страницы в класс, поэтому изменившуюся кнопку нужно исправить только один раз.

// pages/login.page.ts
export class LoginPage {
  constructor(private page: Page) {}
  async open() { await this.page.goto('/login'); }
  async login(email: string, password: string) {
    await this.page.getByLabel('Email').fill(email);
    await this.page.getByLabel('Password').fill(password);
    await this.page.getByRole('button', { name: 'Sign in' }).click();
  }
}

// tests/login.spec.ts
test('user sees dashboard after login', async ({ page }) => {
  const login = new LoginPage(page);
  await login.open();
  await login.login(USER.email, USER.password);
  await expect(page.getByRole('heading', { name: 'Dashboard' })).toBeVisible();
});

Нестабильные тесты

Нестабильный (flaky) тест то проходит, то падает без каких-либо изменений в коде. Такие наборы разрушают доверие, поэтому мы относимся к ним как к багам.

ПричинаРешение
Фиксированные паузы (sleep(3))Ждать условия: элемент видим, запрос завершён
Хрупкие селекторы (длинные CSS-пути)Роли, подписи или отдельные атрибуты data-testid
Общие или оставшиеся тестовые данныеСоздавать изолированные данные для каждого теста, убирать после
Зависимость от порядка тестовКаждый тест сам готовит своё состояние
Нестабильное окружение или сторонние сервисыМокать внешние сервисы, мониторить тестовое окружение

Автоматизация в CI/CD

КоммитLint + unitСборкаAPI-тестыUI smokeДеплой
Быстрые проверки запускаются в каждом pull request; длинные наборы — каждую ночь.

Запускайте быстрые наборы в каждом pull request, чтобы изменение нельзя было слить, пока тесты красные. Полную регрессию, кроссбраузерные тесты и тесты производительности запускайте каждую ночь или перед релизами. Запускайте тесты параллельно, чтобы обратная связь приходила быстрее десяти минут, и публикуйте понятные отчёты со скриншотами, видео и трассировкой для сбоев. Наш конвейер описан в статье Shift-left на практике.

Как измерять успех

  • Время от коммита до обратной связи
  • Доля регрессии критичных сценариев, покрытая автоматически
  • Доля нестабильных тестов (стремитесь почти к нулю)
  • Баги, найденные автоматизацией до релиза, по сравнению с багами, найденными пользователями
Если результатам никто не доверяет и их никто не читает, автоматизация не работает, сколько бы тестов в ней ни было.