Бета-тестирование: финальный рубеж перед релизом

1.

Бета-тестирование: Финальный рубеж перед релизом
Бета-тестирование:
Финальный рубеж перед
релизом
Как реальные пользователи помогают довести продукт до идеала

2.

Что такое бета-тестирование?
Что такое бета-тестирование?
Бета-тестирование — это этап интенсивной проверки почти готовой версии
продукта реальными пользователями в их привычной среде.
Главная цель: Выявить скрытые дефекты, оценить удобство
интерфейса (User Experience) и получить честную обратную связь до
официального релиза.

3.

Ключевые особенности «беты»
Ключевые особенности «беты»
Реальное окружение
Целевая аудитория
Тест на тысячах комбинаций устройств, версий ОС и
Продукт оценивают будущие клиенты, а не
скорости интернета.
профессиональные QA-инженеры.
Метод «Черного ящика» (Black Box)
Участники видят только внешний интерфейс и не
Фокус на стабильности и UX(User
Experience)
имеют доступа к коду.
Проверяется удобство и надежность софта при
длительном использовании.

4.

Закрытая vs. Открытая бета
Закрытая vs. Открытая бета
Закрытое тестирование
(Private Beta)
Открытое тестирование
(Public Beta)
Доступ по приглашениям
Доступно всем желающим.
или заявкам.
Массовый масштаб.
Ограниченный круг
Используется как стресс-тест
участников.
серверов перед релизом.
Используется на ранних
этапах для сохранения
конфиденциальности.

5.

Бета-тестирование в цикле разработки
Бета-тестирование в цикле разработки
Альфа
Внутренние Quality
Assurance в лаборатории
проверяют
стабильность.
Разработка
Написание кода и
реализация функций.
Бета
Внешние пользователи
тестируют продукт в
реальных условиях.
Релиз
Выход продукта на рынок и
начало поддержки.
Альфа-тестирование
Бета-тестирование
Проводят внутренние QA-специалисты в лаборатории
Проводят внешние пользователи дома или на работе.
компании. Продукт еще может быть нестабилен.
Продукт функционально завершен и стабилен.

6.

В чем разница с UX-тестированием?
В чем разница с UX-тестированием?
Юзабилити-тест
Бета-тест
Исследователь сидит рядом с пользователем (или на
Пользователь остается один на один с реальным
созвоне) и наблюдает за каждым кликом по макету.
приложением.
Фокус только на удобстве интерфейса.
Фокус шире — проверяется техническая стабильность,
скорость работы и баги в реальной жизни.

7.

Почему это выгодно бизнесу?
Почему это выгодно бизнесу?
Экономия бюджета
Разнообразие платформ
Дешевле исправить баг до
релиза, чем терять клиентов и
Бесплатный тест на огромном
репутацию после.
который невозможно купить в
парке реальных гаджетов,
лабораторию.
Маркетинг и комьюнити
Вокруг беты собираются самые преданные пользователи, которые
создают «сарафанное радио».

8.

Обратная сторона бета-тестов
Обратная сторона бетатестов
Низкое качество отчетов
Обычные люди пишут «программа сломалась», не
прикладывая логи и шаги воспроизведения.
Риск утечки информации
Скриншоты и лишняя информация с закрытого
тестирования может досрочно попасть в сеть.
Сложность управления
Нужны отдельные специалисты (Beta Managers), чтобы
фильтровать тысячи дубликатов и спама в отзывах.

9.

Когда пора закрывать «бету»?
Когда пора закрывать «бету»?
01
Критические баги устранены
Исправлены все критические баги
02
Дефекты на спаде
График появления новых дефектов пошел на спад.
03
UX-метрики в норме
Метрики удовлетворенности пользователей (UX) соответствуют норме.
04
Инфраструктура выдерживает нагрузку
Инфраструктура и серверы выдерживают целевую нагрузку.

10.

Бета-тест — мост к успешному релизу
Бета-тест — мост к
успешному релизу
Бета-тестирование не заменяет классический QA, а дополняет его.
Это единственный способ узнать, как продукт поведет себя в
реальном, хаотичном мире до того, как за него заплатят
пользователи.