Инструмент для баг-репортов QA, который заранее отвечает на вопросы разработчика
Обновлено
Midge — инструмент для баг-репортов QA в виде расширения для Chrome. Тестировщик записывает баг, и репорт приходит с уже приложенными видео, выполненными шагами, ошибками консоли, сетевыми запросами и данными об окружении, так что разработчик получает всё нужное с первого прочтения. Midge бесплатен: записи без ограничений, видео до 15 минут и без водяного знака.
Цена баг-репорта редко сводится ко времени на его написание. Дороже обходится переписка, которая следует за ним: «Какой браузер?», «Можешь прислать консоль?», «А что ты нажал перед этим?». Midge создан, чтобы этой переписки не было.
Что уже есть в каждом репорте
В каждой записи есть логи консоли, сетевые запросы, действия пользователя и данные об устройстве. Для QA-команды это ложится на разделы хорошего дефекта:
| Поле дефекта | Откуда оно берётся в Midge |
|---|---|
| Шаги воспроизведения | Лог действий пользователя: клики, переходы, поля, в которые вводили текст |
| Фактический результат | Видео или скриншот с пометками |
| Детали ошибки | Ошибки консоли и стек-трейсы, упавшие сетевые запросы |
| Окружение | Браузер и версия, ОС, размер окна, язык, часовой пояс, URL |
Заголовок, ожидаемый результат и всё, чего запись знать не может, например использованные тестовые данные, по-прежнему пишете вы. Наш шаблон баг-репорта показывает формат, который хорошо сочетается со ссылкой Midge.
Шаги воспроизведения без перепечатывания
Во время записи Midge фиксирует, что вы делаете: «Clicked Add to cart», «Navigated to /checkout», «Typed in input[name=coupon]». Сам набранный текст никогда не записывается, так что тестовые пароли и номера карт в репорт не попадут. Этот лог действий — набросок ваших шагов воспроизведения. Превратить его в пронумерованный список для тикета можно за минуту, и он будет точным, потому что записан, а не восстановлен по памяти.
Каждый репорт также получает ИИ-сводку с шагами воспроизведения и вероятной причиной, составленную по записи и её логам. Каждому человеку бесплатно доступно 30 сводок в месяц. Прежде чем вставлять сводку в тикет, сверьте её с логом действий.
Окружение сохраняется автоматически
«У меня всё работает» обычно означает, что окружения различаются. Midge записывает браузер и его версию, операционную систему, размер окна, язык и часовой пояс в каждом репорте. Баг вёрстки, который появляется только при ширине 1280 пикселей, или баг с датами, который проявляется только в часовом поясе Europe/Berlin, выдаёт свою причину прямо в информационной панели.
Ошибки, которые не пришлось ловить
Чтобы завести хороший баг, тестировщику не нужно держать открытыми DevTools. Midge слушает консоль и сеть в фоне и хранит последние несколько минут в памяти, так что когда что-то ломается, вы можете начать запись или сделать скриншот — и ошибка уже будет там. Что именно сохраняется, смотрите на страницах логов консоли и сетевых логов.
Для плавающих багов, которые появляются раз на двадцать прогонов, включите мгновенный повтор для своего стейджинга. Когда баг появится, один клик сохранит последние 30–120 секунд страницы. Повтор по умолчанию выключен и включается отдельно для каждого сайта.
Папки для каждого релиза
Репорты хранятся в общем рабочем пространстве с папками. Типичная структура:
- по папке на каждый релиз, например
Release 4.12, - постоянная папка
Regressionдля багов, которые вернулись, - папка
Needs infoдля репортов, ожидающих ответа от продакта.
Каждым репортом можно поделиться со всеми, у кого есть ссылка, только с участниками рабочего пространства или оставить его приватным, пока вы его дописываете. Команды, папки и приватные репорты бесплатны.
Регрессионный прогон с Midge
- Перед прогоном создайте папку для тестируемой сборки.
- Проходите тест-кейсы как обычно. Когда какой-то падает, запишите его с помощью записи экрана или сделайте скриншот с пометками.
- Дайте репорту заголовок, который называет симптом: «Сохранённые фильтры пропадают после выхода из аккаунта».
- Отправьте репорт в свой трекер. Если подключена интеграция с Jira, Linear или GitHub Issues, Send to Jira (или Linear, или GitHub) создаст задачу со ссылкой, ИИ-сводкой и шагами воспроизведения. Если вы пользуетесь другим трекером, просто вставьте ссылку: в ней есть всё.
- В конце прогона в папке собраны все падения этой сборки в одном месте.
Безопасно делиться за пределами команды
QA часто работает на стейджинге с правдоподобными данными, а баг-репорты путешествуют: к разработчикам, к подрядчикам, иногда в поддержку поставщика. Пароли, номера карт, токены и cookies скрываются в вашем браузере, прежде чем что-либо покинет ваше устройство. Email маскируются наполовину, так что [email protected] превращается в q***@acme.com. Если поставщик просит HAR файл, сначала очистите его бесплатным очистителем HAR.
Ограничения, о которых стоит знать
Midge записывает вкладки Chrome с помощью расширения, а Midge для Mac записывает вкладки Safari и приложения на Electron вместе с их логами консоли и сети. Для прогонов в Firefox улики пока придётся собирать другим способом; наш гайд объясняет, как получить HAR файл в каждом браузере. Кроме того, Midge не запускает тест-кейсы и не отслеживает покрытие. Обзор инструментов, которые это делают, — в нашем гайде по инструментам для QA-тестирования.
Частые вопросы
- Как Midge помогает с шагами воспроизведения?
- Midge записывает ваши клики, переходы между страницами и поля, в которые вы что-то вводили (без самого текста), на одной временной шкале с видео. Этот лог — готовый набросок шагов, который за минуту превращается в аккуратный список для тикета.
- Какие данные об окружении сохраняются?
- Браузер и его версия, операционная система, размер окна, язык, часовой пояс и URL страницы — автоматически в каждом репорте.
- Можно ли раскладывать репорты по релизам или спринтам?
- Да. В рабочих пространствах есть папки, так что команда может завести папку на каждый релиз, спринт или тестовый цикл. Команды и папки бесплатны.
- Заменяет ли Midge нашу систему управления тестированием?
- Нет. Midge сохраняет улики по багам и помогает ими делиться. Тест-кейсы, прогоны и покрытие по-прежнему живут в вашей системе управления тестированием, а ссылка Midge отправляется в дефект, который вы там заводите.