13 января 2010 вместо привычной страницы захода в игру игроки увидели 502 Bad Gateway, не работали также все игровые сервисы, включая форум и сообщество. И только ближе к полуночи на главной появилась первая информация о происшествии: В данный момент происходит устранение серьезной аварии и восстановливаются данные из базы.
Данных большое количество, поэтому сроки восстановление невозможно прогнозировать (от нескольких часов до нескольких суток).
Как только работа базы данных будет восстановлена, игровые серверы будут запущены вновь.
Хронология событий:
15:15 скачок по питанию на М9
16:00 серверы начали подниматься, все приходилось поднимать вручную, потому что завершение работы было некорректным
17:30 все серверы включены, пробный запуск игры
17:35 стало ясно, что порушилась одна из центральных БД, без которой работа игры невозможна. БД хранит игровую почту, форум, все архивные данные (логи боев, переводы, логи заходов, бекапы юзеров)
18:00 после нескольких безуспешных попыток реанимировать работу хранилища малой кровью, принято решение вытащить все данные из БД с последующим пересозданием хранилища и перезалитием сохраненных данных в него
20:48 закончено сохранение форума, почты, логов боев (23 ГБ)
21:15 закончено сохранение логов заходов в игру (25 ГБ)
23:26 закончено сохранение логов переводов (57 ГБ). Теперь перестройка хранилища.
23:56 восстановлено хранилище, теперь начинаю наполнять его данными, которые перед этим сохранялись. Оцените объем и можете строить предположения, когда это закончится с учетом того, что обычно сохраняются они быстрее, чем восстанавливаются.
00:05 восстановлены данные форума, там всего гиг данных
00:17 восстановлены данные почты и прочие необходимые таблицы для внутреннего использования (8 ГБ)
00:36 запустил my.carnage.ru, по идее он должен уже работать и без восстановления оставшихся таблиц
01:55 восстановлены данные по архивным логам боев, в принципе без остальных данных все должно будет работать, так что буду пробовать запускать игру, остальное буду восстанавливать уже в процессе
..далее, по словам некоторых игроков, админы отвечали на вопросы и давали разного рода пояснения в режиме онлайн на уже работающих блогах сообщества Мой карнаж.
В настоящее время функционал игры (на взгляд простого пользователя) вполне восстановлен.
|
