Масштабный сбой
Вступление
Хостинг stormway.ru расположен на нескольких площадках, имена которым были даны по их первоначальному местоположению: "Инфобокс" (IBX), "Шесть" (SIX), "Новочеркасская" (NBL), "Вестербро" (CPH). Каждую площадку обслуживает как минимум один сервер, свой или арендованный. Данные на каждом сервере защищаются избыточным массивом типа RAID5. Такой тип хранилища может пережить сбой одного диска в массиве, но сбой двух дисков для него будет фатальным.
29 сентября 2015 г. один из дисков хранилища площадки "Шесть" (SIX) вышел из строя, о чём служба RAIDXpert и направила письмо. На тот момент ситуация не выглядела критической, как можно увидеть из скриншота ниже, сбойный диск (порт 4) уже заменялся - изначально все диски были одной ревизии.
В это время я был в отпуске и быстро заменить диск не мог, и вернулся в Санкт-Петербург только 11 октября. На следующий день я прибыл к серверу для замены диска, и... Ещё один диск вышел из строя. Вероятно, при выключении питания. В любом случае я оказался в ситуации, когда у меня на руках оказалось 3 диска массива RAID5, два из которых неисправны, и хранилище сервера прекратило своё существование. Увы, резервная копия данных оказалась на том же самом массиве - на скрине выше можно увидеть, что разделение на "live" и "backup" было логическим, два массива RAID5 (RAID5-1 и RAID5-2) были организованы на одном и том же наборе дисков.
Таким образом, все данные площадки "Шесть" (SIX) погибли, включая резервную копию.
Я отправлял диски в компанию, чья специализация - восстановление данных: DICOM. К сожалению, сколь-нибудь серьёзные данные вытащить из массива оказалось невозможно, вытащили лишь сравнительно небольшие файлы. В целом процесс восстановления описан в таблице ниже. Комментарии можно получить у меня через VK лично или в нашей группе там же.
Текущая ситуация
Таблица содержит информацию, актуальную на 04 марта 2017 года. Скорее всего, обновления информации по сбою в октябре 2016 уже не будет.
№ Сервис Состояние Временное решение Постоянное решение 1 Почта Потеря данных Пустые почтовые ящики созданы на временном сервере на площадке "Вестербро", новая почта поступает туда. Для веб доступа к почте используйте сайт https://mailx10.stormway.ru/owa. Microsoft Outlook и ActiveSync тоже работают по этому адресу. Кроме того, см. примечание 1! Почтовый сервер переехал на площадку "CPH". Все службы доступны по новым адресам. POP3, IMAP4 и SMTP сервер: mailx10.stormway.ru,
OWA сервер: https://mailx16.stormway.ru.1.1 Почта,
доступ через WebТолько к новому содержимому почтового ящика Для веб доступа к почте используйте сайт https://mailx10.stormway.ru/owa. Установка сертификата не требуется. В поле имени пользователя обязательно указание домена "MAIL", например, "MAIL\SherlockHo". Для доступе к почте используйте сайт https://mailx16.stormway.ru/owa. Установка сертификата не требуется. В поле имени пользователя можно (но не обязательно) указать домен "MAIL", например, "MAIL\SherlockHo". 1.2 Почта,
доступ с мобильных устройствТолько к новому содержимому почтового ящика Используйте адрес сервера mailx10.stormway.ru Используйте адрес сервера mailx16.stormway.ru 1.3 Почта,
общие папкиПотеря данных Временного решения нет, сервис недоступен. К сожалению, данные потеряны. Создавайте новые папки в корне своей организации. 2.1 VPS (клиентские) Зависит от клиента Для клиентов C121, C130 и C202 - потеря данных, ваши виртуальные машины потеряны и в настоящий момент не работают. К сожалению, данные потеряны. Клиенты покинули хостинг stormway.ru. 2.2 Базы данных MySQL: сервера 10.208.16.52 и 10.208.16.53 Потеря данных, есть резервная копия сервера 10.208.16.52 для некоторых баз Попробуйте сменить адрес сервера на 10.208.8.52. Если там нет Вашей базы данных, обратитесь ко мне - вероятно, можно до восстановления основного сервера создать пустую базу на MySQL сервере другой площадки. К сожалению, данные потеряны. Для части клиентов нашлась резервная копия. В результате установлен один сервер, внутренний адрес 10.208.16.52. Резервное копирование данных не осуществляется, но весь сервер целиком копируется на другую площадку через репликацию Hyper-V. 2.3 Базы данных Microsoft SQL Server Express: сервера 10.208.16.58, SQL2008XPR Потеря данных Временного решения нет, сервис недоступен.
(На других площадках нет серверов Microsoft SQL Server)Microsoft SQL Server есть на других площадках, на площадке SIX клиентов не осталось. В случае необходимости будет создан новый сервер. 3 Хранение данных на SSD Недоступно Временного решения нет, сервис недоступен.
(На других площадках нет SSD)На площадке SIX хранение данных на SSD не планируется до перехода на платформу Ryzen (ориентировочно 2017). 4.1 Web hosting,
статические сайты и сайты FrontPage Extension.Есть возможность "поднять" сайт на другой площадке Так как статический контент сайтов реплицируется между площадками, сайт можно "поднять" на другой площадке. Владельцам сайтов следует обратиться ко мне по почте на стандартный адрес hosting@stormway.ru или через VK. Сайты возвращены на площадку "SIX" по запросам владельцев. 4.2 Web hosting,
динамические сайтыЗависит от клиента В связи с пунктами 2.2 и 2.3 бОльшая часть динамических сайтов на Joomla, WordPress и других CMS, хранящих данные в СУБД, недоступна. В любом случае временное решение будет зависить от места установки базы данных. Сайты возвращены на площадку "SIX" по запросам владельцев. 4.3 Web hosting,
FTP доступ к содержимомуFTP доступ возможен через площадку "Инфобокс" (для части клиентов). Так как статический контент сайтов реплицируется между площадками, доступ к файлам веб сервера может быть организован через другую площадку. Часть клиентов может получить доступ, используя FTP сервер ibx.stormway.ru с собственныими пользователем и паролем. 2 ноября появился ещё один FTP: nbl.stormway.ru. Свяжитесь со мной получения подробных сведений. Сайты возвращены на площадку "SIX" по запросам владельцев. Доступ по FTP через хост "six.stormway.ru" восстановлен по запросам клиентов. 4.4 Web Hosting,
отправка почты с сайтаЕсть relay на другой площадке, обратитесь ко мне для получения адреса 22 октября создан новый relay сервер, через который сайты могут отправлять почту. Свяжитесь со мной для получения адреса сервера. см. примечание 2! Используйте relay сервер 10.208.24.30. 4.5 Web hosting,
своя версия PHP и акселераторы PHPСервис доступен для заказа Пока Вы не можете выбрать свою собственную версию PHP. На временной площадке используйте общедоступную версию. Сервис доступен по отдельному заказу. Поддерживаются версии 5.6.x и 7.0.x. 4.6 Web hosting,
компоненты HeliconTech (аналог mod_rewrite для IIS)Сервис доступен при размещении временного сайта на площадке "IBX" Свяжитесь со мной для получения деталей и переноса сайта на временную площадку. На площадке "SIX" доступен URL Rewrite 2.0. 5 DNS сервера Восстановлены 15 октября Используются сервера ns1.stormway.ru и ns2.stormway.ru Доступны DNS сервера ns1.stormway.ru (46.229.210.4), ns2.stormway.ru (213.150.47.5), ns3.stormway.ru (92.243.64.94). Примечания:
- 1. Если Вы используете Microsoft Outlook, сохраните данные из OST файла в "Личные папки" (файл формата PST). После подключения к пустому новому ящику скопируйте данные обратно. Правила обработки почты потребуется создать заново.
- 2. Обратите внимание, если отправляется почта от имени Вашего домена, может потребоваться изменение SPF записи в Вашей DNS зоне. За деталями - ко мне.
Дополнительно
В FAQ'е есть раздел по хостингу.
последнее изменение: 04.03.2017
Generated: 25.04.2024 at 18:09:51 by stormway.ru (0 hits).