Smoke, ретест и регресс: промокод
Smoke, ретест, тестирование новой функциональности и регресс на примере добавления промокода на скидку в форму оплаты.
Первый день в команде
Привет! Как тебя зовут?
Привет! Добро пожаловать!
Знакомство с продуктом
Вот наш продукт — форма оплаты заказа в интернет-магазине. Посмотри на неё внимательно: покупатель выбирает способ оплаты и оплачивает заказ. Можешь покликать — это тестовый стенд, реальные деньги не списываются.
Как посмотришь — у меня для тебя первая задача.
Момент, сейчас ознакомлюсь.
Всё понятно, давай дальше
Давай быстро проверим, всё ли понятно перед началом работы в команде. Расскажи, о чём наш продукт?
Посмотри на форму ещё раз и попробуй ответить.
Верно! А какие способы оплаты мы поддерживаем сейчас?
Посмотри на форму ещё раз и попробуй ответить.
Слушаю!
Скоро мы добавим в форму оплаты промокод на скидку. Прежде чем что-то менять, нужно составить регрессионный набор — список того, что уже работает и что придётся перепроверить после изменений. Это и есть твоя первая задача.
Определяем регресс
Команда собирается добавить в форму оплаты промокод на скидку. Пока в форме нет промокода, а заказ можно оплатить четырьмя способами.
Выберите существующие способы оплаты, которые нужно будет проверить после добавления промокода.
Это подготовка проверок — выполнять их пока не нужно.
Получаем задачу от продакт-менеджера
Всем привет! В следующем месяце маркетинг запускает рассылку с промокодами, поэтому в ближайшую неделю добавим в форму оплаты поле для промокода на скидку.
Как это должно работать: покупатель вводит промокод в поле «Промокод» и нажимает «Применить». Для теста заведён промокод SALE10 — он даёт скидку 10 %, и сумма к оплате должна сразу пересчитаться: 49,90 € → 44,91 €.
Если промокод неверный, показываем «Промокод не найден», а сумма остаётся прежней. При оплате со скидкой списываем уже уменьшенную сумму.
Пока платёжный сервис подключён в режиме sandbox: вместо настоящей оплаты открывается мок, реальные деньги не списываются. Для теста это ОК.
Марк возьмёт разработку, тестирование — на тебе. Если по требованиям будут вопросы, пиши мне.
Мари, привет! Нарисуй, пожалуйста, дизайн по требованиям Кристы.
Мари рисует дизайн
Привет! Прикладываю макет: поле промокода стоит под способами оплаты, а после применения сумма показывается со скидкой. Способы оплаты не меняются.
Посмотрел требования и макет — вроде всё понятно. Начинаю работать?
Да, начинай
Марк работает над задачей
Привет! Промокод добавил, новая версия 0.12 уже на тестовом стенде. Можно начинать проверку!
Выполняем Smoke
Быстро проверьте, готова ли новая версия к дальнейшему тестированию: форма открывается, сумма к оплате отображается, кнопка оплаты доступна.
Проверяем исправление
Марк, Smoke версии 0.12 не пройден. Сразу после открытия формы сумма к оплате отображается как «NaN €», а кнопка «Оплатить» неактивна — оплатить заказ невозможно даже без промокода. Проверять промокод и способы оплаты дальше нет смысла, поэтому тестирование остановил. Завёл баг-репорт , скриншот приложил.
Спасибо за баг-репорт! Нашёл причину: когда поле промокода пустое, сумма считалась неправильно. Исправил, выкатил версию 0.12.1 на тестовый стенд — проверь, пожалуйста.
Убедитесь, что сумма к оплате отображается правильно (49,90 €), а кнопка «Оплатить» нажимается.
Нажмите «Оплатить» в форме, чтобы проверить кнопку.
Посмотрите на форму ещё раз: сумма к оплате отображается правильно, а кнопка «Оплатить» нажимается. Дефект, который вы нашли на Smoke, исправлен.
Это ретест: повторная проверка конкретного дефекта после исправления.
Теперь завершите короткий Smoke
Тестируем новую фичу — промокод
Всем привет! В следующем месяце маркетинг запускает рассылку с промокодами, поэтому в ближайшую неделю добавим в форму оплаты поле для промокода на скидку.
Как это должно работать: покупатель вводит промокод в поле «Промокод» и нажимает «Применить». Для теста заведён промокод SALE10 — он даёт скидку 10 %, и сумма к оплате должна сразу пересчитаться: 49,90 € → 44,91 €.
Если промокод неверный, показываем «Промокод не найден», а сумма остаётся прежней. При оплате со скидкой списываем уже уменьшенную сумму.
Пока платёжный сервис подключён в режиме sandbox: вместо настоящей оплаты открывается мок, реальные деньги не списываются. Для теста это ОК.
Марк возьмёт разработку, тестирование — на тебе. Если по требованиям будут вопросы, пиши мне.
Проверьте промокод по требованию PM. Отметить проверку можно только после того, как вы её выполнили в форме.
- Сначала выполните проверку в форме
- Сначала выполните проверку в форме
- Сначала выполните проверку в форме
- Сначала выполните проверку в форме
Выполняем регресс
Промокод работает. Теперь проверьте, что без промокода каждый способ оплаты по-прежнему списывает полную сумму — 49,90 €.
Набор регресса из первого шага:
- Сначала выполните проверку в форме
- Сначала выполните проверку в форме
- Сначала выполните проверку в форме
- Сначала выполните проверку в форме
Эта оплата прошла со скидкой. Для регресса оплатите заказ без промокода — нажмите «Новый заказ».
Принимаем решение о релизе
Все проверки выполнены. Готова ли версия 0.12.1 к релизу?
Криста, тестирование версии 0.12.1 завершено. Дефект со Smoke исправлен, промокод работает по требованиям, регресс пройден. Открытых дефектов нет — версия готова к релизу.
Супер, отлично! Давайте релизить.
Криста дала добро. Выкатываю версию 0.12.1 на прод?
Да, выкатывай
Марк выкатывает релиз
Готово! Версия 0.12.1 на проде.
Всем привет! Промокод на скидку уже на проде — маркетинг может запускать рассылку.
Тестирование завершено!
- Smoke — проверили готовность версии к тестированию.
- Retest — проверили исправление конкретного дефекта.
- New feature testing — проверили промокод на скидку.
- Regression — проверили, что без промокода оплата работает, как раньше.
- Release — решили, что версия готова к релизу.
К оплате: 49,90 €
Мок платёжного сервиса
Заказ оплачен
Справка по теме
Smoke-тестирование
Короткая проверка самых важных функций новой версии: открывается ли приложение, работают ли ключевые элементы. Если Smoke не пройден, версию возвращают разработчику — дальнейшее тестирование не имеет смысла.
Ретест (Retest)
Повторная проверка конкретного дефекта после исправления: повторяют те же шаги, которые его воспроизводили, и убеждаются, что дефекта больше нет.
Тестирование новой функциональности
Проверка того, что новая функция работает по требованиям: основной сценарий, альтернативные сценарии и обработка ошибок.
Регрессионное тестирование
Проверка того, что изменения не сломали то, что уже работало. Набор регресса удобно определить заранее — ещё до начала работы над новой функцией.