В последнее время нам поступили несколько запросов, связанных с доставкой e-mail уведомлений магазинами. В ходе дальнейшего изучения, наши инженеры обнаружили проблему из-за которой компоненты, отвечающие за отправку уведомлений, работали некорректно. После устранения данной неисправности, все уведомления были доставлены клиентам.
14:12: Наши инженеры получили уведомления о недоступности сервиса и приступили к изучению проблемы.
14:15: Выяснена причина сбоя и начаты работы по восстановлению сервиса.
14:50: Сервис частично восстановлен, но некоторые магазины отвечают с существенной задержкой.
14:58: Сервис полностью восстановлен и работает в штатном режиме.
Мы уже приняли меры для того, чтобы подобный инцидент больше не повторился и продолжаем работать над повышением надежности и доступности сервиса.
0:50 MSK: Зафиксирован рост времени отклика для части запросов к сервису
2:10 MSK: Проблема исправлена. Мы внимательно следим за ситуацией.
17:50 MSK: Мы выяснили источник проблемы и работаем над исправлением.
29 сентября в около 21:00 обнаружилась проблема: если в магазине на домене .рф с префиксом www. (www.тест.рф) нажать на любую ссылку, витрина переставала работать. Чтобы обойти проблему, нужно было скопировать адрес страницы и открыть ее снова, но он снова работала до первого клика.
Проблема была решена 1 октября в 17:23.
[Fixed] В 14:33 часть запросов к сервису стали возвращать ошибки. В 14:43 проблема со сбойным компонентом была устранена. Сервис работает в нормальном режиме.
[Fixed] Исправлена проблема, из-за которой часть запросов к магазинам не выполнялась и зависала. Инцидент разрешен менее чем за 5 минут.
[Fixed] Сегодня в 21:20 MSK были временно недоступны регистрация новых магазинов и вход в панель администратора через сайт merchium.ru. Проблема была обнаружена и устранена менее чем за десять минут. Витрины активных магазинов данная проблема не затронула.
Примерно в 1:30 часть запросов к магазинам на Мерчиуме стала выполняться дольше обычного. При изучении причин была обнаружена проблема с базой данных, из-за которой небольшой процент запросов (не более 10%) обрабатывался в течение нескольких секунд. Причина была быстро обнаружена и устранена, после чего время отклика для всех запросов вернулось к нормальным значениям.
Сегодня в 23:23:22 на сайты merchium.ru, merchium.com и merchium.com.au началась DoS-атака. Злоумышленникам удалось положить сайты на 10 минут.
Сейчас все сайты работают. Магазины на Мерчиуме не пострадали и работали в штатном режиме на протяжении всей атаки.
Возможно, нас попытаются атаковать снова. Внимательно следим за ситуацией и напишем в статус-блог, если атака повторится.
10 и 11 апреля в магазинах, у которых был включен модуль Яндекс.Метрика, не работала покупка товаров и сама Яндекс.Метрика.
Наши программисты выяснили, что источник проблемы был в том, скрипт Яндекс.Метрики загружался не в том месте страницы. Программисты исправили ошибку и экстренно обновили все магазины на Мерчиуме. В пять вечера по Москве во всех магазинах уже работали и покупка, и Яндекс.Метрика.
Искренне сожалеем, что наша ошибка доставила столько проблем. Наша команда приложит все усилия, чтобы такие проблемы не возникали в будущем.