Обновление: VPS-RAM остаётся
Мы меняем принятое ранее решение: услуги VPS-RAM не будут выведены из эксплуатации. Вместо этого мы заменим диски на узле xeon-1, на котором они работают. Срок 15 декабря 2026 г., указанный в разделе Дальнейшая работа услуг VPS-RAM, больше не действует, и переносить данные на другую услугу не нужно.
Замена дисков на узле xeon-1 (pl1)
В воскресенье, 15.11.2026, около 02:00 (CET) начнутся технические работы на узле xeon-1 (pl1). Диски NVMe будут заменены на корпоративные диски SSD SAS. Это устраняет причину предыдущих сбоев, которой были диски NVMe, несовместимые с этой платформой.
- Ожидаемая продолжительность работ: до 6 часов.
- В это время серверы VPS-RAM могут быть недоступны или будут перезагружены.
- Перед началом работ будет сделана резервная копия всех серверов.
- Данные на серверах сохранятся, а IP-адреса останутся прежними.
После завершения работ VPS-RAM снова появится в продаже.
Ход сбоя
7 ноября в 04:47 узел xeon-1 был выключен в рамках плановых технических работ, связанных с оперативной памятью и дисками.
Перед любым вмешательством в оборудование мы делаем актуальную резервную копию всех услуг. После выключения узла выяснилось, что последнее задание резервного копирования завершилось не для всех серверов, и ранее это было упущено.
Чтобы завершить копирование, мы попытались снова запустить узел. Это уже было невозможно: платформа сообщила об ошибке Uncorrectable PCI Express Error, а дальнейшая диагностика выявила повреждение контроллеров обоих NVMe-дисков.
Почему сбой оказался неожиданным
Из четырёх дисков узла вышли из строя именно оба диска одного пула RAID1, в котором каждый диск является зеркальной копией другого. Диски этого пула специально были из разных серий и куплены в разное время, именно для того, чтобы не допустить такой ситуации.
Попытки восстановить данные с дисков
Чтобы исключить неисправность самого сервера, диски перенесли в другой выделенный сервер на иной платформе (AMD Ryzen). Там они тоже не подавали признаков жизни.
Работы шли параллельно. Диагностический скрипт раз за разом пытался вернуть к жизни контроллеры дисков, а тем временем мы купили новые диски и начали восстанавливать данные из резервных копий на новом оборудовании. Благодаря этому восстановление услуг не зависело от того, удастся ли спасти данные с повреждённых дисков.
Восстановление данных
Процесс восстановления включал:
- 1
Переустановку системы узла на новые системные диски.
- 2
Восстановление услуг из двух независимых репозиториев резервных копий.
- 3
Восстановление услуг, последняя копия которых завершилась успешно, до состояния на ночь с 6 на 7 ноября.
- 4
Восстановление остальных услуг из копии от 6 ноября, то есть сделанной примерно на 24 часа раньше.
В ходе восстановления сервер несколько раз перезагружался. Анализ аппаратных журналов показал, что причиной были другие NVMe-диски, установленные в той же плате расширения. Данные с этих дисков были безопасно скопированы на новые диски, а неисправные диски вместе с платой были извлечены из сервера. С этого момента узел работает стабильно, а остальные услуги восстанавливались и запускались без сбоев.
Данные всех услуг восстановлены.
Компенсация
Мы понимаем, что перерыв в работе услуг, а в ряде случаев и потеря изменений за последние сутки, доставили вам серьёзные неудобства.
В качестве компенсации каждый клиент получил 10 дней к расчётному периоду. Дни уже добавлены к вашим услугам.
Выводы
Главный вывод из этого инцидента: перед любым вмешательством в оборудование, в том числе перед выключением узла для плановых работ, необходимо убедиться, что резервное копирование завершилось успешно, без исключений. Одного запуска задания недостаточно.
Кроме того, мы убрали из узла компоненты, которые оказались источником нестабильности, и защитили его конфигурацию от подобных ошибок.
Дальнейшая работа услуг VPS-RAM
Обновлено 10 ноября 2026 г.
Решения, описанные в этом разделе, изменились: услуги VPS-RAM не будут выведены из эксплуатации и снова появятся в продаже после замены дисков на узле. Подробнее в разделе Обновление: VPS-RAM остаётся.
Сейчас все услуги работают стабильно. Однако последние события показали, что в случае VPS-RAM мы не можем гарантировать тот уровень надёжности, которого вы ожидаете и который мы сами хотим обеспечивать. Мы не хотим рисковать повторением подобной ситуации, поэтому приняли следующие решения:
Решения по услугам VPS-RAM
- Продажа услуг VPS-RAM приостановлена.
- Продление существующих услуг VPS-RAM приостановлено.
- Услуги VPS-RAM будут работать до 15 декабря 2026 г.
VPS-RAM вернётся в II квартале 2027 г.
Эта пауза не окончательная. Услуги VPS-RAM вернутся в наше предложение в II квартале 2027 г., после того как мы найдём и протестируем стабильные решения, прежде всего для хранения данных.
Это решение касается только услуг VPS-RAM. Остальные услуги работают без изменений и не были затронуты описанным сбоем.
Просим сохранить и перенести данные до этой даты. Клиентам VPS-RAM мы предлагаем перейти на услуги VPS-GAME, которые работают стабильно, а их непрерывное время работы исчисляется месяцами. Мы с радостью поможем перенести данные.
Переход на VPS-GAME
Поможем перенести данные с VPS-RAM на новую услугу.
Если ваша услуга VPS-RAM оплачена на период после 15 декабря 2026 г., свяжитесь с нами по электронной почте admin@pshost.pl или через систему тикетов в панели клиента. Мы подготовим индивидуальное предложение, например переход на VPS-GAME или расчёт за неиспользованный период.
Благодарность
Спасибо за терпение, понимание и все слова поддержки, которые мы получили во время сбоя. Если у вас есть вопросы об услугах, восстановленных данных или дальнейших шагах, свяжитесь с нами: