20 декабря в Москве произошла авария в системе электроснабжения, которая повлекла временное отключение энергообеспечения в дата-центре на одной из площадок «Инновы». К сожалению, автоматика дата-центра некорректно отработала аварийную ситуацию (переход на резервные мощности).
Это, в свою очередь, привело к сбою в сетевой инфраструктуре, и потребовалось переконфигурировать ее в соответствии с резервной системой стабилизации ситуации (замена и настройка оборудования). На устранение неисправности ушло 40 часов непрерывной работы команды инженеров. В течение этого периода не было доступа к играм. К сожалению, в процессе восстановления сетевой инфраструктуры находились дополнительные последствия аварии, из-за чего мы неоднократно были вынуждены переносить сроки решения проблемы.
Отладка продолжилась и после запуска первых игр, а выяснение всех деталей произошедшего займет еще немало времени. В любом случае, мы увеличим отказоустойчивость всей системы и уже ведем работу в этом направлении.
Разумеется, пользователи всех проектов получат компенсации. Более того, мы готовим приятные сюрпризы, которые, надеемся, сгладят неприятное впечатление от произошедшего сбоя.
P.S.: это была самая большая авария в истории «Инновы».