Вторник, 17 сентября 2019 15:00 к.310 ЛИТ И. ПелеванюкИспользование гетерогенных вычислительных ресурсов через DIRAC в ОИЯИ. В ОИЯИ появляется всё больше задач, связанных с интенсивной обработкой и интенсивным обращением к данным: BM@N, MPD, SPD, нейтринные эксперименты и другие. Возникают вопросы: как обрабатывать данные, где хранить, как передавать. На сегодняшний день институт обладает широким спектром разнообразных ресурсов: очереди пакетной обработки, грид, облако, суперкомпьютер. Интеграция этих ресурсов с использованием системы DIRAC избавляет от необходимости привязываться лишь к одному из ресурсов. Программное обеспечение, разработанное для интеграции различных вычислительных ресурсов, иногда называемое interware, предназначено для облегчения выбора ресурса для работы с данными. DIRAC interware один из таких продуктов. Он доказал свою эффективность в разных экспериментах физики высоких энергий и в некоторых других областях науки. Программное обеспечение DIRAC было развёрнуто в ОИЯИ для того, чтобы удовлетворять требованиям разных научных групп, предоставляя единый интерфейс ко всему спектру ресурсов: грид, облакам, суперкомпьютеру «Говорун», дисковым хранилищам и ленточным хранилищам. Архитектура, основанная на DIRAC, предназначена для решения задач эксперимента BM@N, с которого уже поступают данные, и будущего эксперимента MPD на ускорителе NICA. В этих экспериментах использование гетерогенных вычислительных ресурсов необходимо. А. Петросян, Д. Олейник Автоматизация обработки (больших) данных в вычислительной инфраструктуре ЛИТ для настоящих и будущих экспериментов ОИЯИ Современные естественнонаучные исследования имеют критическую зависимость от скорости обработки собранных данных, и в большинстве случаев речь уже идет о "больших данных" - под которыми понимается не только физически большой объем, привычно измеряемый уже терабайтами, но и количество наборов данных, файлов и объектов, хранящихся в файлах. Автоматизация процесса обработки данных для естественнонаучных исследований является краеугольным камнем успеха исследования. Данный семинар представляет концепцию построения набора информационных систем и сервисом, необходимых для решения задач автоматизации процессов обработки данных на гетерогенных распределенных ресурсах ЛИТ ОИЯИ.
