Технический статус Kaiten
Рассказываем об инциденте, произошедшем 11 октября, и о том, что важно знать о работе сервиса сейчас.
Все данные клиентов сохранены. После инцидента мы восстановили работу всех основных функций Кайтена и продолжаем стабилизировать сервис. Понимаем, что недоступность платформы нарушила работу ваших команд, и приносим извинения.
11 октября около 03:48 мск начались перебои в работе Kaiten из-за аварии в дата-центре Яндекс Облака. По сообщению провайдера, его работа была полностью остановлена. К этому моменту еще один дата-центр Яндекс Облака уже был недоступен.
Мы могли быстрее восстановить работу Kaiten на оставшихся мощностях, но это не обеспечило бы необходимого уровня отказоустойчивости. В случае еще одной аварии сервис мог оказаться недоступен на значительно более длительное время.
Поэтому мы приняли решение перенести основную инфраструктуру Kaiten к другому облачному провайдеру — АО «Селектел». Переезд потребовал дополнительного времени на восстановление данных, запуск и настройку сервисов, но позволил снизить риски дальнейших сбоев.
12 октября мы завершили основную часть восстановления. 13 октября снова заработали все основные функции Kaiten.
Наш подход к защите данных — резервное копирование в географически удаленных друг от друга дата-центрах. Мы сохраняем этот подход и после переезда.
Последовательный выход из строя двух дата-центров Яндекс Облака показал, насколько важно хранить резервные копии на географически удаленных друг от друга площадках. Несмотря на масштаб инцидента, все данные наших клиентов сохранены, включая загруженные файлы.
По состоянию на 13 октября восстановлена работа всех основных функций Kaiten. В ближайшие дни еще возможны кратковременные сбои и замедления. Мы следим за состоянием системы и продолжаем устранять оставшиеся проблемы.
Экспорт временно недоступен. Планируем вернуть его в начале следующей недели и сообщим, когда он снова будет доступен.
Срочно выгружать данные из-за произошедшего сбоя не требуется: они сохранены. Просим по возможности отложить необязательные массовые выгрузки на период стабилизации — это поможет снизить дополнительную нагрузку на сервис. За сохранность данных и резервное копирование отвечает наша команда.
Сейчас Яндекс Почта работает в ограниченном режиме. Поэтому письма на ее адреса, включая уведомления и PIN-коды, могут приходить с задержкой. Если письма нет, проверьте папку «Спам» или пишите нам в службу поддержки.
Помимо облачной версии, у Кайтена есть вариант размещения на серверах вашей компании — on-premise. Он подходит командам, которым необходимо самостоятельно управлять инфраструктурой, хранением данных и резервным копированием.
Если вы рассматриваете такой вариант, обратитесь в службу поддержки или к личному менеджеру. Мы расскажем о требованиях к инфраструктуре, условиях и порядке переноса.
Понимаем, насколько важна стабильная работа Kaiten для ваших команд. Спасибо за терпение и поддержку! По любым вопросам пишите нам в службу поддержки или своему личному менеджеру.
Didn't find the answer to your question?
Create a request — we'll help you out