Прототип пакетной обработки данных с использованием контейнеров

Аннотация

В успешно эксплуатируемом дата-центре МИВК Лаборатории информационных технологий им. М. Г. Мещерякова ОИЯИ существует постоянный запрос на новые вычислительные ресурсы как со стороны экспериментов ускорительного комплекса NICA, так и со стороны установок, базирующихся на LHC (ЦЕРН). Для пакетной обработки данных используется система SLURM. В традиционной практике выполнение задачи осуществляется на физическом сервере (вычислительном узле) в установленной и настроенной операционной системе, а также в промежуточном программном обеспечении. Рассматривается реализованный прототип батч-системы с использованием контейнеризованной среды. С помощью контейнеров можно применять более одного типа ресурсов для запуска задач, а также минимизировать операционные усилия по подготовке вычислительных узлов.