Готовность к наплыву в дни распродаж

Мы проверили, что происходит, когда много покупателей приходят одновременно, как в Чёрную пятницу, с помощью инструмента нагрузочного тестирования, который запускает сотни покупателей параллельно: просмотр каталога, открытие товаров, добавление в корзину, данные и оплата. При 300 покупателях система зависла: 90 запросов в секунду, 95% ответов в течение 15 секунд и 6% ошибок. Причиной был код, который посреди открытого заказа просил ещё одно подключение к базе данных, и под нагрузкой все подключения ждали друг друга. Мы исправили два таких места (подарок в корзине и страницу аккаунта клиента) и добавили проверку, которая запускает все тесты с одним подключением, чтобы ошибка такого рода не вернулась незаметно. После исправления, всего с 4 подключениями: 2 093 запроса в секунду, 95% ответов за 2 миллисекунды и 0.01% ошибок. Во время нагрузки остатки ни разу не ушли ниже нуля, а распроданный товар блокировался при оплате вместо того, чтобы продаваться дважды. Теперь сервер переходит на 20 подключений на процесс.

Новое 1

  • Инструмент нагрузочного тестирования, который запускает сотни покупателей параллельно и падает, если цели не достигнуты.

Улучшено 1

  • 20 подключений к базе данных на процесс сервера и проверка, которая заранее ловит такую ошибку.

Исправлено 1

  • Магазин, зависавший под нагрузкой из-за ещё одного подключения к базе данных посреди заказа.