Система управления процессами обработки эксперимента SPD
Аннотации
Аннотация
Эксперимент SPD на коллайдере NICA в ОИЯИ находится на стадии разработки. Но, несмотря на это, обработка запросов на настройку алгоритмов моделирования и реконструкции уже требует значительных вычислительных ресурсов, а результаты обработки данных занимают довольно большой объем дискового пространства. Например, стандартный запрос на генерацию 20 млн событий включает в себя два этапа получения данных (моделирование и реконструкцию) и генерацию 10 ТБ данных и 15 тыс. выходных файлов, не считая служебных файлов и журналов обработки. Понятно, что для быстрого получения требуемых наборов данных необходимо создать систему, которая бы автоматизировала генерацию заданий, распределяла их по доступным вычислительным ресурсам и управляла выходными данными. Для решения этой проблемы разрабатывается система управления процессами обработки для эксперимента SPD. Эта система создается в соответствии с потоками данных, записанных в TDR, и должна обеспечивать их надежное хранение и обработку. Представлено текущее состояние работ по созданию системы управления процессами обработки для эксперимента SPD.

