Европейская организация по ядерным исследованиям (ЦЕРН) анонсировала масштабный переход своей инфраструктуры управления ускорителями на операционную систему Debian 13 «Trixie». Проект охватывает более 2200 промышленных компьютеров и встраиваемых систем, которые должны быть переведены на новую платформу до конца 2026 года.
Особенности инфраструктуры управления ускорителями
Масштаб задачи подчеркивают инженеры ЦЕРН Федерико Вага и Никос Ципинакис. Инфраструктура управления ускорительным комплексом развернута на территории площадью около 43 квадратных километров. В настоящее время в нее интегрировано около 2200 вычислительных узлов, которые взаимодействуют с 17 000 различных устройств, и это число продолжает расти.
Речь идет не об офисных компьютерах или серверах общего назначения, а о специализированных машинах, расположенных в непосредственной близости к оборудованию. Они обеспечивают прямое сопряжение с аппаратным обеспечением, распределенным по всем объектам комплекса.
Причины отказа от экосистемы Red Hat
Исторически системы управления ускорителями ЦЕРН были ориентированы на экосистему Red Hat. Специалисты последовательно использовали Scientific Linux на базе RHEL 5 и 6, а затем CentOS в составе поколений RHEL 7 и 8. Однако изменение стратегии CentOS и преждевременное прекращение поддержки традиционной модели CentOS Linux вынудили команду пересмотреть подходы к выбору ОС.
Первоначально ЦЕРН планировал использовать CentOS Stream, однако руководство начало параллельную подготовку «запасного аэродрома», сделав уровень интеграции дистрибутивно-независимым. В качестве резервной системы был выбран Debian.
Экономические и технические риски миграции
Решающим фактором в пользу перехода на Debian стал анализ рисков, проведенный во втором квартале 2023 года. Сохранение курса на RHEL потребовало бы затрат в размере около 5,4 млн швейцарских франков. В технические задачи входили:
- перепроектирование 11 аппаратных плат;
- привлечение дополнительных штатных инженеров и техников;
- полная реорганизация и перекладка кабельных трасс в стойках;
- внесение изменений в большинство систем в процессе пусконаладочных работ.
Даже при успешном выполнении всех работ оптимистичный прогноз успеха оценивался всего в 20%. С учетом жесткого графика готовности ускорительной инфраструктуры к четвертому кварталу 2026 года, ЦЕРН решил применить программное решение сложной технической проблемы, выбрав миграцию на Debian вместо капитального перепроектирования оборудования.
График обновлений и поддержка оборудования
Работа ускорителей подчинена строгому расписанию с чередованием периодов эксплуатации, технических остановок и длительных отключений. Это создает уникальное ограничение: график выпуска Linux-дистрибутива должен соотноситься с графиком работы ускорительного комплекса. Команде инженеров необходимо подобрать релиз Debian таким образом, чтобы исключить необходимость «горячего» обновления критически важных систем во время работы ускорителя.
Процесс миграции выходит за рамки простой установки Debian. Специалисты ЦЕРН перерабатывают компоненты инфраструктуры, включая способы загрузки и распределения системных модулей. Отдельное внимание уделяется драйверам устройств: организация пересматривает способы интеграции специализированного оборудования с Linux, отходя от зависимостей, привязанных к конкретным дистрибутивам. Это критически важно для корректного взаимодействия с кастомной электроникой ускорителей.
Эволюция стратегии: от CentOS Stream к Debian
Изначально команда ЦЕРН не планировала отказываться от экосистемы Red Hat. Рассматривался сценарий перехода на CentOS Stream с планами по валидации CentOS Stream 9, последующим переходом на версию 10 и, возможно, в дальнейшем — на Stream 11. Параллельно с этим инженеры начали прорабатывать стратегию, которая позволила бы сделать слой интеграции независимым от конкретного дистрибутива (distribution-agnostic). Именно этот «запасной» путь подготовки инфраструктуры к работе на иной ОС в конечном итоге стал основным, так как стратегия развития CentOS перестала соответствовать долгосрочным требованиям к стабильности ускорительного комплекса.
Почему Red Hat оказался экономически невыгодным
Анализ, проведенный во втором квартале 2023 года, продемонстрировал, что попытка остаться в рамках экосистемы Red Hat Enterprise Linux не была просто вопросом смены дистрибутива — это был глубокий инфраструктурный кризис. По самым скромным подсчетам, стоимость «удержания» текущего курса составила бы 5,4 млн швейцарских франков. За этой цифрой стоял колоссальный объем работ: перепроектирование 11 критически важных аппаратных плат, необходимость расширения штата инженеров и техников, полная переработка кабельной архитектуры стоек и сложная пусконаладка. При этом, согласно внутренним оценкам, даже при идеальном стечении обстоятельств — без критических багов в новых решениях — вероятность успешной модернизации аппаратной части в отведенные сроки оценивалась лишь в 20%.
Инженерные вызовы: программный подход к железу
Выбор Debian стал осознанным решением «программной проблемы программными методами». Вместо того чтобы переделывать тысячи единиц «железа» под требования RHEL, инженеры предпочли адаптировать операционную систему. Это потребовало переосмысления того, как именно фронтенд-компьютеры загружаются и как распространяются компоненты операционной системы по сети. Особое место в этом процессе занимает работа с драйверами устройств. В ЦЕРН стремятся минимизировать использование специфических для конкретного дистрибутива допущений, создавая более универсальные способы взаимодействия специализированного ПО с уникальной электроникой ускорителей. Это превращает миграцию на Debian 13 не просто в замену ОС, а в глубокую модернизацию всей архитектуры управления данными, обеспечивающую независимость от рыночных изменений в дистрибутивах Linux.
Специфика «горячего» обслуживания
Поскольку системы управления ускорителями работают в режиме жесткого расписания, любое обновление Linux должно быть строго синхронизировано с периодами эксплуатации, техническими остановками и длительными плановыми отключениями оборудования. Одной из главных задач команды инженеров стало исключение ситуации, при которой пришлось бы проводить «горячее» исправление ошибок (hotpatching) работающего ускорителя частиц. В этом контексте Debian 13 «Trixie» рассматривается как надежная база, жизненный цикл которой позволит плавно интегрировать обновления в окна обслуживания, исключая непредсказуемые простои оборудования, критически важного для фундаментальной науки.
