Разработка подхода к анализу доступности вычислительных узлов суперкомпьютерных комплексов
Авторы
-
А. В. Папченко
-
Д. А. Никитенко
Ключевые слова:
Суперкомпьютерный центр
вычислительные системы
доступность вычислительных ресурсов
анализ доступности
мониторинг состояния вычислительных узлов
Slurm
Octoshell
административные комментарии
классификация нештатных ситуаций
визуализация эксплуатационных данных
Аннотация
В работе рассматривается задача анализа доступности вычислительных ресурсов суперкомпьютерного центра коллективного пользования. Актуальность исследования обусловлена тем, что внедрение сторонних решений требует значительных затрат, а штатные средства не позволяют в полной мере оценивать доступность вычислительных систем. Предлагаемый подход основан на разработке специализированного модуля в составе системы Octoshell, объединяющего автоматически собираемые данные планировщика, экспертные комментарии администраторов и механизм накопления информации. Практическая значимость работы состоит в создании гибкого инструмента, ориентированного на задачи сопровождения вычислительных систем. Научная ценность заключается в формировании основы для дальнейшего исследования эксплуатационных, организационных и технических факторов, влияющих на доступность вычислительных ресурсов. Подход реализован на уровне прототипа.
Раздел
Параллельные программные средства и технологии
Библиографические ссылки
- D. A. Nikitenko, V. V. Voevodin, and S. A. Zhumatiy, “Deep Analysis of Job State Statistics on Lomonosov-2 Supercomputer,” Supercomputing Frontiers and Innovations 5 (2), 4–10 (2018).
doi 10.14529/jsfi180201
- V. V. Voevodin, R. A. Chulkevich, P. S. Kostenetskiy, et al., “Administration, Monitoring and Analysis of Supercomputers in Russia: a Survey of 10 HPC Centers,” Supercomputing Frontiers and Innovations 8 (3), 82–103 (2021).
doi 10.14529/jsfi210305
- D. A. Nikitenko, S. A. Zhumatiy, and P. A. Shvets, “Making Large-Scale Systems Observable – Another Inescapable Step Towards Exascale,” Supercomputing Frontiers and Innovations 3 (2), 72–79 (2016).
doi 10.14529/jsfi160205
- D. Nikitenko, S. Zhumatiy, A. Paokin, et al., “Evolution of the Octoshell HPC Center Management System,” in 13th International Conference Parallel Computational Technologies (PCT 2019), Kaliningrad, Russia, April 2–4, 2019. Communications in Computer and Information Science. Vol 1063. (Springer Nature, Cham, 2019), pp. 19–33.
doi 10.1007/978-3-030-28163-2_2
- A. V. Paokin, D. A. Nikitenko, and S. A. Zhumatiy, “Study of Support for Workflow Variability in the Octoshell System,” in Parallel Computing Technologies – XV International Conference (PCT’2021), Volgograd, March 30 – April 1, 2021(YuUrGU, Chelyabinsk, 2021), pp. 233–243.
- V. V. Voevodin, D. I. Shaikhislamov, and D. A. Nikitenko, “How to Assess the Quality of Supercomputer Resource Usage,” Supercomputing Frontiers and Innovations 9 (3), 4–18 (2022).
doi 10.14529/jsfi220301
- Lawrence Livermore National Laboratory.
https://www.llnl.gov/ Cited June 20, 2026.
- National Supercomputing Center in Wuxi.
https://www.nsccwx.cn/about/71.html Cited June 20, 2026.
- National Supercomputing Center in Wuxi. Hardware Resources.
https://www.nsccwx.cn/Resource/81.html Cited June 20, 2026.
- Oak Ridge Leadership Computing Facility - The OLCF was established at Oak Ridge National Laboratory in 2004 with the mission of standing up a supercomputer 100 times more powerful than the leading systems of the day.
https://www.olcf.ornl.gov/ Cited June 20, 2026.
- Center Reports - Oak Ridge Leadership Computing Facility.
https://www.olcf.ornl.gov/about-olcf/center-reports/ Cited June 20, 2026.
- Home | Argonne Leadership Computing Facility.
https://www.alcf.anl.gov/ Cited June 20, 2026.
- Jülich Supercomputing Centre (JSC).
https://www.fz-juelich.de/en/jsc Cited June 20, 2026.
- JSC Service Status.
https://status.jsc.fz-juelich.de/ Cited June 20, 2026.
- RIKEN Center for Computational Science RIKEN Website | RIKEN R-CCS.
https://www.r-ccs.riken.jp/en/ Cited June 26, 2026.
- Operating Status | RIKEN Center for Computational Science RIKEN Website.
https://www.r-ccs.riken.jp/en/fugaku/opp-status/ Cited June 26, 2026.
- HPC Cineca.
https://www.hpc.cineca.it/ Cited June 26, 2026.
- V. V. Voevodin, A. S. Antonov, D. A. Nikitenko, et al., “Supercomputer Lomonosov-2: Large Scale, Deep Monitoring and Fine Analytics for the User Community,” Supercomputing Frontiers and Innovations 6 (2), 4–11 (2019).
doi 10.14529/jsfi190201
- Slurm Workload Manager - REST API Details.
https://slurm.schedmd.com/rest.html?utm_source Cited June 20, 2026.
- I. S. Yashchenko and A. N. Salnikov, “Software for Predicting the Start Time of a Task by Statistical Analysis of the History of the Task Queue,” Physics of Elementary Particles and the Atomic Nucleus 55 (3), 580–584 (2024).