Smoke, ретест и регресс: форма оплаты
Smoke, ретест, тестирование новой функциональности и регресс на примере нового способа оплаты частями в форме оплаты.
Первый день в команде
Привет! Как тебя зовут?
Привет! Добро пожаловать!
Знакомство с продуктом
Вот наш продукт — форма оплаты заказа в интернет-магазине. Посмотри на неё внимательно: покупатель выбирает способ оплаты и оплачивает заказ. Можешь покликать — это тестовый стенд, реальные деньги не списываются.
Как посмотришь — у меня для тебя первая задача.
Момент, сейчас ознакомлюсь.
Всё понятно, давай дальше
Давай быстро проверим, всё ли понятно перед началом работы в команде. Расскажи, о чём наш продукт?
Посмотри на форму ещё раз и попробуй ответить.
Верно! А какие способы оплаты мы поддерживаем сейчас?
Посмотри на форму ещё раз и попробуй ответить.
Слушаю!
Скоро мы добавим в форму оплаты ещё один способ. Прежде чем что-то менять, нужно составить регрессионный набор — список того, что уже работает и что придётся перепроверить после изменений. Это и есть твоя первая задача.
Составляем регрессионный набор
Команда собирается добавить в форму оплаты новый способ. Пока форма работает с тремя способами оплаты.
Выберите существующие способы оплаты, которые нужно будет проверить после добавления нового способа.
Этот набор понадобится позже: по нему мы проверим, что после добавления нового способа ничего не сломалось. Выполнять проверки пока не нужно.
Получаем задачу от продакт-менеджера
Всем привет! Покупатели часто спрашивают про оплату частями, поэтому в ближайшую неделю добавим в форму оплаты новый способ — Klarna.
Как это должно работать: покупатель выбирает Klarna среди способов оплаты, нажимает «Оплатить» и переходит на страницу Klarna, чтобы подтвердить платёж.
Если оплата прошла успешно, показываем «Заказ оплачен». Если Klarna отклонила платёж, показываем «Оплата не прошла» и даём возможность повторить попытку.
Пока платёжный сервис подключён в режиме sandbox: вместо настоящей оплаты открывается мок, реальные деньги не списываются. Для теста это ОК.
Марк возьмёт разработку, тестирование — на тебе. Если по требованиям будут вопросы, пиши мне.
Мари, привет! Нарисуй, пожалуйста, дизайн по требованиям Кристы.
Мари рисует дизайн
Привет! Прикладываю макет: так Klarna должна выглядеть в форме оплаты. Остальные способы оплаты не меняются.
Посмотрел требования и макет — вроде всё понятно. Начинаю работать?
Да, начинай
Марк работает над задачей
Привет! Klarna добавил, новая версия 1.5 уже на тестовом стенде. Можно начинать проверку!
Выполняем Smoke
Быстро проверьте, готова ли новая версия к дальнейшему тестированию: форма открывается, способы оплаты отображаются, кнопка оплаты доступна.
Проверяем исправление
Марк, Smoke версии 1.5 не пройден. Элементы формы оплаты перекрывают друг друга, а баннер Klarna закрывает кнопку «Оплатить» — нажать её невозможно. Без кнопки не проверить ни один платёж, поэтому дальнейшее тестирование остановил. Завёл баг-репорт , скриншот приложил.
Спасибо за баг-репорт! Поправил вёрстку: элементы больше не наезжают друг на друга, кнопка «Оплатить» снова доступна. Выкатил исправленную версию 1.5.1 на тестовый стенд — проверь, пожалуйста.
Убедитесь, что элементы формы больше не перекрываются, а кнопка «Оплатить» нажимается.
Нажмите «Оплатить» в форме, чтобы проверить кнопку.
Посмотрите на форму ещё раз: элементы больше не перекрываются, а кнопка «Оплатить» нажимается. Дефект, который вы нашли на Smoke, исправлен.
Это ретест: повторная проверка конкретного дефекта после исправления.
Теперь завершите короткий Smoke
Тестируем новую фичу — Klarna
Всем привет! Покупатели часто спрашивают про оплату частями, поэтому в ближайшую неделю добавим в форму оплаты новый способ — Klarna.
Как это должно работать: покупатель выбирает Klarna среди способов оплаты, нажимает «Оплатить» и переходит на страницу Klarna, чтобы подтвердить платёж.
Если оплата прошла успешно, показываем «Заказ оплачен». Если Klarna отклонила платёж, показываем «Оплата не прошла» и даём возможность повторить попытку.
Пока платёжный сервис подключён в режиме sandbox: вместо настоящей оплаты открывается мок, реальные деньги не списываются. Для теста это ОК.
Марк возьмёт разработку, тестирование — на тебе. Если по требованиям будут вопросы, пиши мне.
Проверьте Klarna по требованию PM. Отметить проверку можно только после того, как вы её выполнили в форме.
- Сначала выполните проверку в форме
- Сначала выполните проверку в форме
- Сначала выполните проверку в форме
- Сначала выполните проверку в форме
Выполняем регресс
Klarna работает. Теперь проверьте, что добавление нового способа оплаты не сломало существующие.
Набор регресса из первого шага:
- Сначала выполните проверку в форме
- Сначала выполните проверку в форме
- Сначала выполните проверку в форме
Принимаем решение о релизе
Все проверки выполнены. Готова ли версия 1.5.1 к релизу?
Криста, тестирование версии 1.5.1 завершено. Дефект со Smoke исправлен, Klarna работает по требованиям, регресс пройден. Открытых дефектов нет — версия готова к релизу.
Супер, отлично! Давайте релизить.
Криста дала добро. Выкатываю версию 1.5.1 на прод?
Да, выкатывай
Марк выкатывает релиз
Готово! Версия 1.5.1 на проде.
Всем привет! Оплата через Klarna уже на проде — покупатели могут платить частями.
Тестирование завершено!
- Smoke — проверили готовность версии к тестированию.
- Retest — проверили исправление конкретного дефекта.
- New feature testing — проверили новую оплату Klarna.
- Regression — проверили, что прежние способы оплаты продолжают работать.
- Release — решили, что версия готова к релизу.
К оплате: 49,90 €
Мок платёжного сервиса
Справка по теме
Smoke-тестирование
Короткая проверка самых важных функций новой версии: открывается ли приложение, работают ли ключевые элементы. Если Smoke не пройден, версию возвращают разработчику — дальнейшее тестирование не имеет смысла.
Ретест (Retest)
Повторная проверка конкретного дефекта после исправления: повторяют те же шаги, которые его воспроизводили, и убеждаются, что дефекта больше нет.
Тестирование новой функциональности
Проверка того, что новая функция работает по требованиям: основной сценарий, альтернативные сценарии и обработка ошибок.
Регрессионное тестирование
Проверка того, что изменения не сломали то, что уже работало. Набор регресса удобно определить заранее — ещё до начала работы над новой функцией.