XX Международная конференция "Супервычисления и математическое моделирование"

Стажер-исследователь лаборатории Ф. А. Смирнов принял участие в международной конференции «Супервычисления и математическое моделирование», проводившейся с 5 по 9 октября 2026 года в Сарове на базе Дома ученых РФЯЦ–ВНИИЭФ. Конференция была посвящена ключевым направлениям развития суперкомпьютерных технологий. Участники обсуждали разработку новых методов математического моделирования сложных физических процессов, проектирование перспективных вычислительных систем на новых физических принципах и отечественных компонентах, а также внедрение в ведущие отрасли промышленности и экономики технологий суперкомпьютерного моделирования на базе искусственного интеллекта, анализа больших данных и машинного обучения.

В рамках конференции Ф. А. Смирнов представил доклад «Анализ эффективности коллективных ГПУ-коммуникаций в процессе передачи данных на суперкомпьютерных системах», посвященный вопросам распределенного инференса больших языковых моделей (LLM). В ходе работы был проанализирован инференс модели Qwen2.5-32B-Instruct и его масштабируемость с помощью чистого конвейерного параллелизма (Pipeline Parallelism). При данном характере масштабирования выявлено снижение локальной вычислительной нагрузки на GPU и одновременное увеличение длины последовательной межузловой P2P-цепочки передачи данных. Таким образом, ускорение расчетов на графических ускорителях AMD MI50 нивелируется ростом суммарной латентности в высокоскоростной сети InfiniBand FDR, делая конфигурацию с минимально возможной глубиной конвейера экономически и технически оптимальной для инференса данной модели в конкретной суперкомпьютерной системе.