Мы развернули новый сервер в Selectel и начали поэтапно подключать к нему клиентов. Параллельно работаем над восстановлением доступа к прежним данным в инфраструктуре Яндекса.
Наша команда работает круглосуточно. Понимаем, насколько недоступность сервиса затрудняет вашу работу. Ниже рассказываем, что произошло, какие меры мы приняли и что пока остается недоступным.
Что произошло
В ночь на 11 октября дата-центр Яндекса во Владимире подвергся атаке БПЛА. По сообщению Яндекса, его работа остановилась. Из-за этого Chat2Desk оказался недоступен.
Данные, накопленные до 11 октября, и резервные копии остаются недоступными в инфраструктуре Яндекса. Мы ведем переговоры с Яндексом о возможности восстановления доступа к ним и прорабатываем технические варианты. О сроках сообщим, как только сможем их подтвердить.
Как устроена инфраструктура Chat2Desk сейчас
Переносим основной сервер в Selectel
Чтобы возобновить работу сервиса, мы развернули инфраструктуру Chat2Desk у другого провайдера — Selectel. Сейчас поэтапно подключаем к новому серверу клиентские аккаунты, чтобы снизить зависимость от одного дата-центра.
Подключение к новому серверу и восстановление прежних данных идут независимо друг от друга.
Храним резервные копии отдельно
Резервные копии хранятся у другого провайдера, независимо от основного сервера.
Что пока недоступно
Мы продолжаем подключать аккаунты к новому серверу и настраивать их работу. На текущем этапе остаются недоступны:
- прежние данные, накопленные до 11 октября.
Об изменениях сообщим на этой странице и в техническом канале Chat2Desk.
Хронология восстановления
11 октября, 06:12 — обнаружили неполадки
Мы обнаружили неполадки на сервере и уведомили клиентов о проблеме.
11 октября, 06:30 — установили причину и начали работы
После выяснения причины сбоя мы опубликовали информацию о произошедшем и приступили к восстановлению сервиса.
11 октября, 09:30 — приняли решение о переносе
Мы приняли решение развернуть новый сервер в дата-центре Selectel и начать перевод клиентских аккаунтов. К устранению последствий аварии подключились все сотрудники технической поддержки и разработки.
12 октября — развернули сервер и начали подключать клиентов
Новый сервер начал работу. Мы приступили к поэтапному подключению клиентских аккаунтов и начали переговоры с Яндексом о возможности восстановления имеющихся данных.
13 октября — продолжаем подключение и настройку
Мы продолжаем переводить аккаунты на новый сервер. Техническая команда проверяет и настраивает их работу. Параллельно прорабатываем варианты восстановления доступа к прежним данным.
14 октября, 8:30 — восстановили работу у части существующих клиентов
На 9:00 по МСК подключили 35% аккаунтов.
14 октября, 11:00 — восстановили работу конструктора чат-ботов
Подключаем опцию по заявке, чтобы синхронизировать данные аккаунтов.
14 октября, 18:30 — восстановили Direct-подключения Telegram и WhatsApp и вернули доступ к аккаунтам 45% клиентов
16 октября, 11:00 — конструкторе чат-ботов можно восстановить самостоятельно
Откройте в личном кабинете Автоматизация > Конструктор чат-ботов и нажмите Восстановить мой аккаунт. Все сценарии, которые вы настраивали раньше, будут на месте.
19 октября, 14:07 — открыли просмотр данных до сбоя
Данные и настройки аккаунтов сохранены. Посмотреть их можно по логину и паролю прошлого аккаунта на этой странице. Пока доступ только для просмотра. Сейчас готовим план объединения данных со старого и нового серверов. Чтобы учесть ваши пожелания, выберите подходящий вариант восстановления в форме.
FAQ
Собрали ответы на вопросы, которые чаще всего задают в чате и поддержке.
— Почему мой аккаунт ещё не подключили? Когда ждать?
Подключаем аккаунты поэтапно, по общему списку. Каждый день подключаем новых клиентов, и до вашего аккаунта тоже дойдём.
— Direct-подключение не работает. Что делать?
Напишите в поддержку, поможем настроить.
— Вернутся ли данные, накопленные до 11 октября?
Сейчас мы проводим работы по восстановлению системы. Цель — вернуть данные и настройки вашего аккаунта в автоматическом режиме. А пока настраиваем аккаунты, чтобы вы могли работать с клиентами, не дожидаясь полного восстановления.
— Почему поддержка не называет сроки?
Сроков пока нет, работаем над восстановлением системы. Как только сможем подтвердить даты, сообщим в канале и в статье.
— Нужно ли заново собирать ботов в конструкторе?
Нет. Все проекты и сценарии конструктора сохранены. В конструкторе появилась кнопка, которая в один клик вернёт ваши проекты в новый аккаунт. Как только она заработает, сообщим в канале.
— Ждать восстановления остальных настроек или настраивать заново?
Сейчас мы переносим данные, включая все настройки, в том числе меню самообслуживания. Совмещать их с новыми настройками будем на следующем этапе, и пока неизвестно, как это повлияет на то, что вы настроите сейчас. Вы можете не ждать переноса и настроить то, что нужно для работы. Решение остается за вами.
— У диалогов и клиентов теперь новые ID. Что будет с интеграциями во внешних системах?
Новые ID появились, потому что аккаунты сейчас работают на новом сервере. Прорабатываем варианты, как совместить их с прежними данными. Если интеграции нужны для работы сейчас, напишите в поддержку.
Как связаться с нами
Если у вас возникли вопросы или нужна помощь, напишите в поддержку: Telegram или support@chat2desk.com.