Как снизить риск сбоев продуктов за 2 недели

Предпосылки к проекту

Лига Ставок активно работает над разработкой новых сервисов и продуктов в области информационных технологий, не забывая о важности улучшения уже существующих. 

На этот раз перед компанией стояла амбициозная цель: выйти на рынок с новым продуктом. Планируемый запуск сервиса сопровождался обширной рекламной кампанией, целью которой было привлечение как можно большего количества клиентов. Однако перед таким масштабным стартом возник вопрос: сможет ли сервис выдержать поток пользователей, превышающий обычный в 3 раза? Ведь если при запуске рекламной кампании сервис столкнется со сбоями в работе или с замедлением скорости, цель достигнута не будет: пользователи попросту не смогут нормально пользоваться продуктом. 

В то же время у компании возникла необходимость развивать и другой продукт. А для этого было важно понять, какой трафик уже можно приводить и какие меры принять, чтобы можно было обрабатывать гораздо большие объемы. 

Обе задачи решаются с помощью нагрузочного тестирования. 

Решать приходится быстро

Запуск нового продукта — рискованный шаг. Здесь приходится действовать максимально быстро, чтобы опередить конкурентов. Доработка продуктов не менее важна: она позволяет удерживать конкурентное преимущество на рынке. В этом свете провести нагрузочное тестирование было необходимо как можно быстрее.

Через 2 недели должна была стартовать масштабная рекламная кампания. За этот срок было критически важно убедиться в том, что оба беттинговых сервиса смогут выдержать ожидаемый поток пользователей, привлеченных рекламой. Однако IT-отделу Лиги Ставок, занятому разработкой и улучшением сервисов, не хватало времени на эту задачу. Между тем, было понятно, что для проведения нагрузочного тестирования в такие сжатые сроки нужны опытные специалисты. Ведь небезопасное тестирование могло привести к простоям и финансовым потерям. Так было решено обратиться к проверенной компании Umbrella IT, — прокомментировал Юрий Булич, технический директор Лиги Ставок. 

Проводим нагрузочное тестирование за 4 этапа

Этап 1. Подключили команду за 3 дня и выяснили детали проектов.

В команду вошли два тестировщика и руководитель проекта. Они бесшовно интегрировались в две разные команды клиента, чтобы получить необходимую для нагрузочного тестирования сервисов информацию. Изучили и описали сервисы, запросы, интерфейс для старта работ.

Мы начали с того, что заходили на сайт и отслеживали отправляемые запросы.  Мы записывали каждый и исследовали их параметры, чтобы понять, для чего они предназначены. Полученные запросы внедряли в соответствующие сценарии (скрипты) — основные действия пользователей на сайте, — отметил Юрий Булич, технический директор Лиги Ставок. 

Этап 2. Смоделировали увеличенную в 3 раза нагрузку на готовый сервис, чтобы выяснить, выдержит ли они запланированный трафик от масштабной рекламной кампании. 

Смоделировали действия пользователей во время рекламной кампании и измерили пропускную способность (количество запросов в секунду), количество и тип ошибок (процент ошибок на запросы), среднее время ответа на запросы. Выявили нагрузку, при которой, несмотря на то, что сервис продолжает работать, начнется отток пользователей из-за долгого времени ожидания обработки запросов. 

Этап 3. Сократили срок проведения нагрузочного тестирования двух сервисов с 4 до 1,5 недели без остановки работающего сервиса. 

Провели нагрузочные тесты сервиса сразу в продакшн-среде, чтобы не тратить время на организацию препродакшн. За счет этого ускорили сдачу проекта.

Для нагрузочного тестирования в порядке вещей «уронить» сервис, даже если с ним все в порядке. Именно поэтому его крайне редко проводят на живой системе — слишком рискованно, потому что это может затронуть реальных пользователей. Но мы с клиентом приняли решение не тратить время на организацию препродакшн, чтобы максимально ускорить сдачу проекта. При этом мы минимизировали риски отказа сервиса за счет того, что работали во время минимального трафика, плавно повышали нагрузку и внимательно при этом следили за утилизацией ресурсов системы. Как итог, во время нагрузочных тестов сервер ни разу не упал, сервисы работали исправно, — добавил Юрий Булич, технический директор Лиги Ставок. 

Этап 4. Обеспечили устойчивость нового продукта, уменьшив возможные риски его неработоспособности после запуска. 

Нагрузочное тестирование и выявленные риски дали бизнесу информацию о готовности системы к успешному запуску. 

На практике больше половины задач в рамках нагрузочного тестирования были связаны с аналитической работой. Успех был напрямую связан с умением точно понять требования и ограничения клиента и предложить лучшее решение. Опытные QA-инженеры Umbrella IT справились с этим благодаря многолетнему опыту в области нагрузочного тестирования, — заключил Юрий Булич, технический директор Лиги Ставок.