Текущие особенности развития ЦКП «ИКИ-Мониторинг»

Постоянное наращивание аппаратной инфраструктуры ЦКП «ИКИ-Мониторинг» приводит к тому, что классические подходы по организации взаимодействия между вычислительными узлами и ресурсами хранения становятся неэффективными и приводят к задержкам и отказам в обслуживании при массированных потоках обработки данных. Узкими местами в этом случае становятся каналы связи, пропускная способность точек обмена данными, то есть серверов архивации и диспетчеризации данных, причём, что оказалось несколько неожиданным, не только за счёт производительности дисковых и сетевых подсистем, но и за счёт устойчивости сетевых сервисов, то есть программных, а не аппаратных компонент. В 2024 году была проведена реорганизация сетевой инфраструктуры для создания максимально широкополосного (с каналами пропускной способностью 10 Гбит/с и более) коммутационного ядра ЦКП, в котором замкнуты контура хранения и обработки данных, а также потребительских сегментов сети ЦКП, в которой размещаются средства обмена данными с внешними пользователями (веб-сервисы и т.п.).

Продолжаются работы по реорганизации и оптимизации системы управления обработкой для минимизации паразитного трафика и мусорных соединений в сети, а также для повышения её управляемости и устойчивости.

Вместе с тем необходимо отметить, что при всех темпах развития и количественном и качественном росте инфраструктуры ЦКП, в глобальном смысле он остаётся локализованным на одной, пусть и высококачественной площадке, на которой размещено подавляющее большинство ресурсов хранения, обработки и предоставления данных. В такой ситуации вопрос обеспечения устойчивости центра, неоднократно поднимавшийся ранее, остаётся крайне актуальным. Как показывает анализ ситуации, другие ЦКП, обеспечивающие работу с данными, и суперкомпьютерные центры (СКЦ) сталкиваются с похожими проблемами. В этой связи было бы логичным обеспечить взаимную интеграцию таких различных центров между собой путём развёртывания на их мощностях узлов ЦКП-партнёров по взаимно согласованным правилам и принципам. Подобная интеграция не только обеспечила бы повышенную отказоустойчивость всех участников этой схемы, но и позволила бы достичь более качественных результатов работы всех центров, в первую в области междисциплинарных проектов и исследований на стыке компетенций разных центров. Первым шагом к такой интеграции стало создание консорциума «Распределённая научная суперкомпьютерная инфраструктура» для развития и поддержки суперкомпьютерной инфраструктуры и инфраструктуры сверхбольших данных для решения актуальных научных и научно-технических задач, а также подготовки высококвалифицированных специалистов в области компьютерных наук, в число участников которого входят Федеральное государственное бюджетное учреждение науки Хабаровский Федеральный исследовательский центр Дальневосточного отделения Российской академии наук (ХФИЦ ДВО РАН), Федеральное государственное бюджетное учреждение науки Институт вычислительной математики и математической геофизики Сибирского отделения Российской академии наук (ИВМиМГ СО РАН), Федеральное государственное бюджетное учреждение науки Институт автоматики и процессов управления Дальневосточного отделения Российской академии наук (ИАПУ ДВО РАН), Федеральное государственное бюджетное учреждение науки Институт динамики систем и теории управления имени В.М. Матросова Сибирского отделения Российской академии наук (ИДСТУ СО РАН), Федеральное государственное бюджетное учреждение науки Институт математики и механики им. Н.Н. Красовского Уральского отделения Российской академии наук (ИММ УрО РАН) и Федеральное государственное бюджетное учреждение науки Институт космических исследований Российской академии наук (ИКИ РАН).