Argonne Leadership Computing Facility

Argonne Leadership Computing Facility (ALCF) — это научно-исследовательский центр суперкомпьютерных вычислений, расположенный в Аргоннской национальной лаборатории (штат Иллинойс, США). ALCF является одним из ведущих вычислительных центров Министерства энергетики США (DOE), предоставляющим высокопроизводительные вычислительные ресурсы для решения сложных научных и инженерных задач. Центр специализируется на поддержке проектов, требующих экзафлопсных (10¹⁸ операций с плавающей запятой в секунду) и более высоких производительностей, и входит в состав программы DOE по созданию и эксплуатации суперкомпьютеров для открытой науки.

История

Создание и первые годы

ALCF был основан в 2006 году как часть инициативы Министерства энергетики США по развитию вычислительных мощностей для научных исследований. Первоначально центр базировался на суперкомпьютере Blue Gene/P (IBM), который в 2007 году занял третье место в списке TOP500 с производительностью около 0,5 петафлопс. Этот компьютер использовался для моделирования климата, биомолекулярных процессов и материаловедения.

Развитие в 2010-е годы

В 2012 году ALCF ввёл в эксплуатацию суперкомпьютер Mira (IBM Blue Gene/Q), который достиг производительности 10 петафлопс. Mira стал одним из самых мощных компьютеров мира и использовался для проектов в области астрофизики, ядерной энергетики и искусственного интеллекта. В 2018 году центр запустил Theta (Cray XC40), первый суперкомпьютер на базе процессоров Intel Xeon Phi, который обеспечил производительность до 11,7 петафлопс.

Эра экзафлопсных вычислений

В 2023 году ALCF представил суперкомпьютер Aurora, построенный на базе процессоров Intel Xeon Max и ускорителей Intel Data Center GPU Max. Aurora стал первым экзафлопсным компьютером в США, достигнув пиковой производительности 1,2 экзафлопс. В 2024 году он был официально включён в список TOP500, заняв второе место после Frontier (Ок-Риджская национальная лаборатория). Aurora используется для задач, связанных с климатическим моделированием, разработкой лекарств, квантовой химией и искусственным интеллектом.

Архитектура и оборудование

Суперкомпьютеры

ALCF эксплуатирует несколько суперкомпьютеров, каждый из которых оптимизирован для определённых классов задач:

• Aurora (2023–н.в.): экзафлопсная система на базе Intel Xeon Max (CPU) и Intel Data Center GPU Max (Xe-HPC). Включает более 10 000 узлов, объединённых высокоскоростной сетью Intel Omni-Path. Используется для задач ИИ, молекулярной динамики и гидродинамики.
• Theta (2018–н.в.): петафлопсная система на базе Intel Xeon Phi 7250 (Knights Landing). Обеспечивает производительность 11,7 петафлопс. Применяется для моделирования материалов, плазмы и климата.
• Polaris (2021–н.в.): система на базе процессоров AMD EPYC и ускорителей NVIDIA A100. Производительность — 44 петафлопс. Используется для машинного обучения и симуляций в области физики высоких энергий.

Инфраструктура

Центр оснащён системами жидкостного охлаждения, которые отводят тепло от высокопроизводительных компонентов. Энергопотребление Aurora составляет около 60 МВт, что требует мощной системы электропитания и охлаждения. ALCF также включает в себя хранилища данных на базе Lustre и GPFS, обеспечивающие пропускную способность до 1 ТБ/с.

Программное обеспечение и инструменты

Операционные системы и среды

ALCF использует операционные системы на базе Linux (Cray Linux Environment, RHEL). Для управления заданиями применяются системы очередей PBS Pro и SLURM. Пользователи имеют доступ к компиляторам Intel, GNU, а также к библиотекам MPI, OpenMP и CUDA.

Фреймворки для ИИ

Центр активно поддерживает фреймворки машинного обучения, такие как TensorFlow, PyTorch и Horovod. Для Aurora разработаны специализированные библиотеки oneAPI и Intel Extension for PyTorch, оптимизированные для GPU Intel.

Инструменты для науки

ALCF предоставляет пользователям доступ к программным пакетам для молекулярной динамики (NAMD, GROMACS), квантовой химии (Q-Chem, NWChem) и гидродинамики (OpenFOAM, FLUENT). Также поддерживаются среды для анализа данных, включая Jupyter Notebooks и Dask.

Научные направления

Климатическое моделирование

ALCF используется для разработки и валидации климатических моделей, таких как Energy Exascale Earth System Model (E3SM). Суперкомпьютеры позволяют моделировать атмосферные и океанические процессы с разрешением до 1 км, что необходимо для прогнозирования экстремальных погодных явлений и изменения климата.

Материаловедение и химия

Центр поддерживает проекты по моделированию свойств новых материалов, включая сверхпроводники, полимеры и катализаторы. Например, с помощью Aurora проводятся расчёты электронной структуры для поиска эффективных катализаторов для водородной энергетики.

Биология и медицина

ALCF применяется для молекулярного моделирования белков, вирусов и клеточных процессов. В 2020–2021 годах ресурсы центра использовались для исследования SARS-CoV-2, включая моделирование взаимодействия вирусных белков с лекарственными препаратами.

Физика высоких энергий и астрофизика

Суперкомпьютеры ALCF участвуют в обработке данных с Большого адронного коллайдера (ЦЕРН) и моделировании нейтронных звёзд, чёрных дыр и космологических структур. Например, с помощью Theta проводились симуляции гравитационных волн от слияния нейтронных звёзд.

Искусственный интеллект

ALCF активно развивает направление ИИ, включая обучение больших языковых моделей, генеративных нейросетей и систем компьютерного зрения. В 2024 году на Aurora была обучена модель AuroraGPT, предназначенная для научных приложений.

Программа доступа и сотрудничество

Конкурсный отбор

Доступ к ресурсам ALCF предоставляется на конкурсной основе через программу ALCF Allocation Program. Заявки оцениваются по научной значимости, технической выполнимости и потребности в вычислительных мощностях. Победители получают выделенное время на суперкомпьютерах (обычно от 1 до 10 миллионов узло-часов).

Партнёрства

ALCF сотрудничает с университетами, национальными лабораториями и промышленными компаниями. Среди партнёров — Intel, NVIDIA, IBM, а также университеты Иллинойса, Чикаго и Мичигана. Центр также участвует в программе DOE Exascale Computing Project (ECP), направленной на разработку приложений для экзафлопсных систем.

Образовательные инициативы

ALCF проводит тренинги, вебинары и хакатоны для исследователей, обучая работе с суперкомпьютерами и фреймворками ИИ. Центр также поддерживает программу стажировок для студентов и аспирантов.

Критика и ограничения

Энергопотребление

Экзафлопсные системы, такие как Aurora, потребляют значительные объёмы электроэнергии (до 60 МВт), что вызывает вопросы об экологической устойчивости. В ответ на это ALCF внедряет системы рекуперации тепла и использует возобновляемые источники энергии, однако полная углеродная нейтральность пока не достигнута.

Сложность программирования

Переход на гетерогенные архитектуры (CPU + GPU) требует от пользователей адаптации кода. Несмотря на усилия по созданию унифицированных фреймворков (oneAPI, SYCL), многие научные приложения остаются неоптимизированными для экзафлопсных систем, что снижает эффективность использования ресурсов.

Доступность

Конкурсный отбор ограничивает доступ к ALCF для малых исследовательских групп и стартапов. Кроме того, высокая стоимость обслуживания (бюджет ALCF в 2024 году составил около 200 миллионов долларов) делает центр недоступным для большинства стран.

Интересные факты

• Суперкомпьютер Aurora был построен на базе процессоров Intel Xeon Max, которые содержат до 56 ядер и 64 ГБ встроенной памяти HBM2e.
• В 2024 году ALCF запустил проект по использованию Aurora для генерации синтетических данных для обучения моделей ИИ в области медицины.
• Центр участвует в программе DOE по созданию суперкомпьютера следующего поколения (El Capitan), который должен достичь производительности 2 экзафлопс.

Источники

• Argonne National Laboratory. «Argonne Leadership Computing Facility». Официальный сайт.
• TOP500. «November 2024 List». TOP500.org.
• Министерство энергетики США. «Exascale Computing Project». DOE.
• Intel Corporation. «Aurora Supercomputer». Intel Newsroom.
• Nature. «Exascale computing: the next frontier». 2023.