LINUX.ORG.RU
ФорумTalks

Опубликована 67 редакция рейтинга самых высокопроизводительных суперкомпьютеров

 , ,


0

1

https://www.opennet.ru/opennews/art.shtml?num=65752:

Опубликован 67-й выпуск рейтинга 500 самых высокопроизводительных компьютеров мира. Наиболее заметным изменением в рейтинге стало занятие первого места новым китайским кластером LineShine, работающим под управлением Ubuntu Kylin. Кластер развёрнут в шэньчжэньском центре облачных вычислений, включает 13.78 миллионов процессорных ядер (304-ядерный CPU LingKun LX2 304C 1.55GHz на архитектуре ARMv9) и обеспечивает производительность почти 2.2 экзафлопса, что на 400 петафлопс больше, чем у прошлого лидера.

Четыре лидера прошлого рейтинга сместились на 2-5 места: 2. Кластер El Capitan, запущенный в Ливерморской национальной лаборатории Министерства энергетики США. Кластер насчитывает 11.3 миллионов процессорных ядер (CPU AMD EPYC 24C 1.8GH с ускорителем AMD Instinct MI300X) и обеспечивает производительность 1.809 экзафлопсов. В качестве операционной системы применяется HPE Cray OS (редакция SUSE Linux Enterprise Server 15). 3. Кластер Frontier, размещённый в Ок-Риджской национальной лаборатории Министерства энергетики США. 9 млн процессорных ядер (CPU AMD EPYC 64C 2GHz, ускоритель AMD Instinct MI250X). Производительность 1.353 экзафлопсов. Операционная система HPE Cray OS. 4. Кластер Aurora, развёрнутый в Аргоннской национальной лаборатории Министерства энергетики США. 9.2 млн процессорных ядер (CPU Xeon CPU Max 9470 52C 2.4GHz, ускоритель Intel Data Center GPU Max). Производительность 1.012 экзафлопса. Операционная система SUSE Linux Enterprise Server 15 SP4. 5. Кластер JUPITER Booster, запущенный в суперкомпьютерном центре Юлих (Германия). Кластер насчитывает 4.8 млн процессорных ядер (NVIDIA GH200 Grace Hopper Superchip 72C 3GHz) и демонстрирует производительность 1 экзафлопс. Операционная система - RedHat Enterprise Linux.

Шестое место занял новый итальянский кластер HPC7 на платформе HPE Cray EX255a, насчитывающий 3.46 млн процессорных ядер (CPU AMD EPYC 24C 1.8GHz с ускорителем AMD Instinct MI300A). Производительность 571 петафлопс. Операционная система RHEL 9.

С 7 по 10 места заняли кластеры, в прошлом рейтинге занимавшие 5-8 места:

  1. Кластер Eagle (Microsoft Azure, 2 млн процессорных ядер (CPU Xeon Platinum 8480C 48C 2GHz), производительность 561 петафлопс, ОС Ubuntu 22.04.
  2. Кластер HPC6 (итальянская нефтегазовая компании «Эни», 3 млн процессорных ядер (AMD EPYC 64C 2GHz), производительность в 477 петафлопса, ОС RHEL 8.9.
  3. Кластер Fugaku (институте физико-химических исследований RIKEN (Япония), 158976 узлов на базе SoC Fujitsu A64FX (48-ядерные CPU Armv8.2-A SVE 2.2GHz), производительность 442 петафлопса, ОС Red Hat Enterprise Linux.
  4. Кластер Alps (Швейцарский национальный суперкомпьютерный центр, 2.1 млн процессорных ядер (NVIDIA Grace 72C 3.1GHz), производительность 434 петафлопса, ОС HPE Cray OS.

Что касается отечественных суперкомпьютеров, то в рейтинг вошло 5 российских кластеров (для сравнения с ноября 2024 по июнь 2025 года в рейтинге было 6 отечественных систем, c 2021 по 2024 год - 7, в 2020 году - 2, в 2017 году - 5, а в 2012 году - 12). Созданные компанией Яндекс кластеры Червоненкис, Галушкин и Ляпунов опустились с 83, 115 и 140 мест на 101, 134 и 161 места. Данные кластеры созданы для решения задач машинного обучения и обеспечивают производительность 21.5, 16 и 12.8 петафлопса соответственно. Кластеры работают под управлением Ubuntu 16.04 и оснащены процессорами AMD EPYC 7xxx и GPU NVIDIA A100: кластер Chervonenkis насчитывает 199 узлов (193 тысячи ядер AMD EPYC 7702 64C 2GH и 1592 GPU NVIDIA A100 80G), Galushkin - 136 узлов (134 тысячи ядер AMD EPYC 7702 64C 2GH и 1088 GPU NVIDIA A100 80G), Lyapunov - 137 узлов (130 тысяч ядер AMD EPYC 7662 64C 2GHz и 1096 GPU NVIDIA A100 40G).

Развёрнутый Сбербанком кластер Christofari Neo опустился со 147 на 167 место. Christofari Neo работает под управлением NVIDIA DGX OS 5 (редакция Ubuntu) и демонстрирует производительность 11.95 петафлопса. Кластер насчитывает более 98 тысяч вычислительных ядер на базе CPU AMD EPYC 7742 64C 2.25GHz и поставляется с GPU NVIDIA A100 80GB. Второй кластер Сбербанка (Christofari) за полгода сместился с 233 на 257 место в рейтинге.

В рейтиге также присутствуют два кластера из Казахстана: 104 место занял кластер Alem.Cloud развёрнутый в Международном центре искусственного интеллекта на базе платформы HPE Cray XD670, включающий 66.8 тысяч ядер Intel Xeon Platinum 8568Y+ 48C 2.3GHz c ускорителем NVIDIA H200 SXM5 141 GB, 400g. ОС SLES 15. Производительность 20.48 петафлопса. На 122 месте находится кластер AI-Farabium развёрнутый в компании Казахтелеком на базе платформы Supermicro SYS-821GE-TNHR с 57 тысячами ядер Xeon Platinum 8558 48C 2.1GHz с ускорителем NVIDIA H200 SXM5 141 GB. ОС Ubuntu 22.04.4. Производительность 17.93 петафлопса.

Один кластер присутствует в Узбекистане - digital.uz, развёрнут в министерстве цифровых технологий и занимает 321 место в рейтинге. Кластер включает 20.7 тысяч ядер Xeon Platinum 8570 56C 2.1GHz с ускорителем NVIDIA B200 180 GB. ОС DGX OS 7.4.0 на базе Ubuntu. Производительность 4.45 петафлопса.

Наиболее интересные тенденции:

  • Распределение по количеству суперкомпьютеров в разных странах:
    1. США: 162 (172 - полгода назад). Суммарная производительность оценивается в 32.4% от всей производительности рейтинга (полгода назад - 46.5%, год назад - 48.4%, полтора года назад - 55.2%);
    2. Япония: 44 (43). Суммарная производительность - 8.8% (9.5%);
    3. Германия: 41 (40). Суммарная производительность - 8.2% (9.3%);
    4. Китай: 30 (39). Суммарная производительность - 6% (полгода назад - 1.3%, год назад - 2%, полтора года назад - 2.7%);
    5. Франция: 21 (22). Суммарная производительность - 4.2% (2.1%);
    6. Южная Корея 19 (15). Суммарная производительность - 3.8% (2.2%);
    7. Италия: 18 (18). Суммарная производительность - 3.6% (5.9%);
    8. Канада 17 (19). Суммарная производительность - 3.4% (1.1%);
    9. Великобритания: 11 (10). Суммарная производительность - 2.2% (2.6%);
    10. Тайвань: 11 (10). Суммарная производительность - 2.2% (1.4%);
    11. Бразилия 10 (10). Суммарная производительность - 2%;
    12. Швеция 9 (8);
    13. Норвегия: 8 (9);
    14. Польша: 8 (8);
    15. Саудовская Аравия 8 (7);
    16. Индия: 7 (6);
    17. Нидерланды: 7 (7);
    18. Сингапур: 7 (4);
    19. Объединённые Арабские Эмираты: 5 (5).
    20. Финляндия: 5 (3);
    21. Россия 5 (5);
    22. Австралия: 4;
    23. Швейцария 3 (3);
    24. Чехия: 3 (3);
    25. Испания: 3 (3).
    26. Израиль: 3 (3);
    27. Австрия: 3 (4);
  • В рейтинге операционных систем, используемых в суперкомпьютерах, c ноября 2017 года остаётся только Linux;
  • Распределение по дистрибутивам Linux (в скобках - 6 месяцев назад):
    • 22% (20.8%) - RHEL;
    • 16.6% (13.6%) - Ubuntu;
    • 9% (7.2%) - Rocky Linux;
    • 7% (9%) - Cray Linux;
    • 6.4% (7.6%) CentOS;
    • 3.6% (3.8%) - SUSE;
    • 2% (1.8%) - Alma Linux;
    • 0.2% (0.2%) - Amazon Linux
  • Минимальный порог производительности для вхождения в Top500 за 6 месяцев составил 2.66 петафлопса (полгода назад - 2.57 петафлопса). Десять лет назад лишь 96 кластера показывали производительность более петафлопса. Для Top100 порог вхождения вырос с 18.2 до 21.85 петафлопса, а для Top10 вырос с 241 до 434 петафлопса.
  • Суммарная производительность всех систем в рейтинге за 6 месяцев возросла с 15 до 18.7 экзафлопса (пять лет назад было 2.7 экзафлопса, десять лет назад - 0.57 экзафлопса). Система, замыкающая нынешний рейтинг, в прошлом выпуске находилась на 475 месте.
  • Общее распределение по количеству суперкомпьютеров в разных частях света выглядит следующим образом:
    • 179 суперкомпьютер находится в Северной Америке (191 - полгода назад),
    • 160 в Европе (154),
    • 144 в Азии (139),
    • 11 в Южной Америке (11),
    • 4 в Океании (4),
    • 2 в Африке (1).
  • В качестве процессорной основы лидируют CPU Intel - 53% (полгода назад было 57.2%), на втором месте AMD 38.4% (33.6%), на третьем NVIDIA Grace - 5.2% (3.6%), на четвёртом Fujitsu A64FX - 1.6% (1.8%) и на пятом IBM Power - 0.4% (0.8%).
  • 20.8% (полгода назад 20.2%) всех используемых процессоров имеют 64 ядра, 13.4% (15.2%) - 24 ядра, 13.4% (13%) - 32 ядра, 12% (10.8%) - 56 ядер, 10.8% (10.2%) - 48 ядер, 5.2% (3.8%) - 72 ядра, 5% (6.2%) - 20 ядер, 4.4% (3.6%) - 96 ядер. Суммарное число процессорных ядер во всех кластерах рейтинга за полгода сократилось возросло с 135.7 млн до 152.6 млн.
  • 274 из 500 систем (полгода назад - 252) дополнительно используют ускорители или сопроцессоры, при этом в 238 (218) системах задействованы чипы NVIDIA, в 32 (29) - AMD, в 4 (4) - Intel DataCenter GPU.
  • Среди производителей кластеров на первом месте закрепилась компания Lenovo - 25.8% (полгода назад 28%), на втором месте компания Hewlett-Packard Enterprise - 24.8% (25.2%), на третьем месте компания Bull - 11.6% (11.4%), далее следуют Dell 9.8% (9.2%), NVIDIA 7.4% (6.6%), NEC 3% (2.8%), Fujitsu 2.6% (3%), MEGWARE 1.6% (1.4%), Microsoft Azure - 1.6% (1.6%), Supermicro 1.6% (1.2%), Penguin Computing - 1% (1.4%), ASUS 1.2% (1.2%).
  • InfiniBand применяется для связи узлов в 58.6% кластеров (полгода назад 55.4%), Ethernet используется в 33.6% (33.8%) кластеров, Omnipath - 5.2% (6%). Если рассматривать суммарную производительность, то системы на базе InfiniBand охватывают 37.9% (42.6%) всей производительности Top500, а Ethernet - 45.6% (51.2%).

Одновременно опубликован новый выпуск альтернативного рейтинга кластерных систем Graph 500, ориентированного на оценку производительности суперкомпьютерных платформ, связанных с симулированием физических процессов и задач по обработке больших массивов данных, свойственных для таких систем. Рейтинги Green500, HPCG (High-Performance Conjugate Gradient) и HPL-AI объединены с Top500 и отражаются в основном рейтинге Top500.

★★★★★

Последнее исправление: dataman (всего исправлений: 1)
Ответ на: комментарий от dataman

Да ладно арч. Это понятно. Но дебиан?

Меня тут удивили три вещи: популярность рхел, популярность убунты и отсутствие дебиана.

LightDiver ★★★★★
()
Последнее исправление: LightDiver (всего исправлений: 1)
Ответ на: комментарий от MoldAndLimeHoney

То есть все дело в поддержке? Только коммерческие проекты?

Чот мне не верится, что китайским суперкомпьютерам каноникал какую то особую поддержку обеспечивает.

LightDiver ★★★★★
()
Последнее исправление: LightDiver (всего исправлений: 1)

Суммарное число процессорных ядер во всех кластерах рейтинга за полгода сократилось с 135.7 млн до 152.6 млн.

Вы уж, если воруете новости с Опеннета, то хотя бы читайте их перед публикацией.

MoldAndLimeHoney ★★★
()
Ответ на: комментарий от MoldAndLimeHoney

А что не так? Сокращение с меньшего до большего количества это вполне распространенное явление. Кто то называет его увеличением, кстати.

LightDiver ★★★★★
()

Интересно стало, а что считают на этих суперкомпьютерах? Погоду? Что-то из области ядерной физики/космоса? Вообще, какая экономическая цель создания таких устройств?

dicos ★★★
()
Последнее исправление: dicos (всего исправлений: 1)
Ответ на: комментарий от LightDiver

Кто то называет его увеличением, кстати.

Вот увеличат тебе зарплату с 1000000 до 500000, по-другому запоёшь. :)

dataman ★★★★★
() автор топика
Ответ на: комментарий от dicos

Я, в целом, могу представить, что задачи для них есть в США, Китае, Европе. Но вот наличие в рейтинге Казахстана и Узбекистана удивляет. Что там считают?

MoldAndLimeHoney ★★★
()
Ответ на: комментарий от MoldAndLimeHoney

А какие у тебя вообще знания про Узбекистан? Зайди на сайты с поиском работы - там чуть ли не половина вакансий с узбекским языком. Я полгода назад еще смотрел, удивился.

Там и геймдев развит, как оказалось.

А про казахстан же написано - международный центр искусственного интеллекта.

LightDiver ★★★★★
()
Ответ на: комментарий от LightDiver

...популярность рхел...

Видимо, «так надо».

sparkie ★★★★★
()
Ответ на: комментарий от dataman

Сначала пусть до миллиона увеличат, а потом можно и до 500 тысяч снижать - это всё равно сильно больше чем я имею сейчас.

unDEFER ★★★★★
()
Ответ на: комментарий от unDEFER

У меня круглый потолок, поэтому и числа такие. (На самом деле прямоугольный, конечно).

dataman ★★★★★
() автор топика
Ответ на: комментарий от LightDiver

Потому что там заведуют бюрократы, они смотрят на наличие всяких бумажек, а не на реальное качество продукции.

firkax ★★★★★
()
Ответ на: комментарий от firkax

Да, но нет. Не просто так принято смотреть на бумажки, потому что наличие этих бумажек более менее гарантирует качество. Без них было хуже, придумали смотреть на бумажки.

LightDiver ★★★★★
()
Ответ на: комментарий от LightDiver

Если заведует бюрократ, то разумеется он никак кроме как бумажками качество не оценит. Поэтому да, без бумажек было бы хуже. Вопроса же чтобы сменить высшее руководство на технически компетентных личностей и не ставится, это было бы лучшим решением данного вопроса, но оно не годится по нетехническим причинам.

firkax ★★★★★
()
Ответ на: комментарий от firkax

А ты знаешь высокоорганизованное развитое общество без бюрократии?

LightDiver ★★★★★
()
Ответ на: комментарий от LightDiver

То есть все дело в поддержке? Только коммерческие проекты?

В деньгах. Такие системы разрабатывают и внедряют коммерческие компании, поэтому и применяются коммерческие решения.

VIT ★★★
()
Ответ на: комментарий от MoldAndLimeHoney

Но вот наличие в рейтинге Казахстана и Узбекистана удивляет. Что там считают?

Нефть и газ.

VIT ★★★
()
Ответ на: комментарий от firkax

Потому что там заведуют бюрократы, они смотрят на наличие всяких бумажек, а не на реальное качество продукции.

Бумажка - это и есть подтверждение качества продукции. Другого способа пока не изобрели, но вы можете быть первым.

windows10 ★★★★★
()
Ответ на: комментарий от dicos

Интересно стало, а что считают на этих суперкомпьютерах? Погоду? Что-то из области ядерной физики/космоса? Вообще, какая экономическая цель создания таких устройств?

И погоду в том числе.

Как правило на этих компьютерах считают информацию с огромным количеством вводных данных на протяжении длинных отрезков времени с точным разрешением и в реальном времени. ИИшечка по сравнению с этим - детский лепет.

windows10 ★★★★★
()
Ответ на: комментарий от LightDiver

Зачем мне что-то кому-то доказывать? Просто когда у меня будет выбор между этими двумя ОС - я выберу дебиан. Если бы руководство там было технически компетентно, оно бы тоже могло выбрать дебиан исходя из собственных соображений, но поскольку там бюрократы - приходится выбирать по бумажкам.

firkax ★★★★★
()
Ответ на: комментарий от firkax

Понимаю, я нормально отношусь к верующим. Это тоже своеобразный способ познаниям мира.

LightDiver ★★★★★
()
Ответ на: комментарий от firkax

Я вот безо всяких бумажек знаю что дебиан лучше убунты.

Нет не знаешь.

Ты пришел к этому эмпирическим путем, на основе одному лишь тебе известных метрик.

Но организации с ответственностью (и юридической, и финансовой) так не работают.

Не будут аэропорты, РОВД, больницы, атомные электростанции простаивать, пока местный пердолик выясняет какой дистрибутив для него лучше.

Поэтому придумали систему «сертификаций», состоящую в том, что третье незаинтересованное лицо, оценивает то или иное положение вещей по всем заранее известной методике, и выносит вердикт о соответствии.

- - -

Я не зря упомянул юридическую ответственность организаций. Вот ты «лучшесть» дистрибутива как рассматривал? По каким-то версиям systemd, наличию xwayland, чтоб версия curl не была ниже 1.2.3.4.5, и прочим никому нафиг не интересным параметрам. А по Patent policy рассматривал? По открытым портам в дефолтной поставке (ты ж не думаешь что тов. майор будет конпелять генту себе на ноуте, и настраивать iptables?), чтобы твою работу не парализовали долбежкой извне - рассматривал?

windows10 ★★★★★
()
Ответ на: комментарий от firkax

Зачем мне что-то кому-то доказывать?

Затем чтобы

когда у меня будет выбор между этими двумя ОС - я выберу дебиан.

Ты не присел на 10 лет, потому что оказалось что твой Дебиан позволил противнику похачить расписание самолетов в аэропорту.

Если бы руководство там было технически компетентно, оно бы тоже могло выбрать дебиан исходя из собственных соображений

Ты хоть представляешь как будет парализована организация, если ее руководство будет мудохаца с маркой каждого кирпича в этой организации? Это для тебя Линукс в целом и Дебиан в частности - центр мира и икона. Для организации это - просто еще один инструмент, на проверку косяков которого у них нет ни времени не желания.

windows10 ★★★★★
()
Последнее исправление: windows10 (всего исправлений: 1)
Ответ на: комментарий от windows10

Для организации это - просто еще один инструмент, на проверку косяков которого у них нет ни времени не желания.

Ты не забыл в какой теме это обсуждение? Речь про поддержку суперкомпьютеров, и для них как раз быть экспертами в данных вопросах - весьма профильное направление.

firkax ★★★★★
()
Ответ на: комментарий от windows10

Поэтому придумали систему «сертификаций», состоящую в том, что третье незаинтересованное лицо

Меня в этом беспокоит один вопрос: А третье лицо точно незаинтересованное?

LightDiver ★★★★★
()
Ответ на: комментарий от firkax

Речь про поддержку суперкомпьютеров, и для них как раз быть экспертами в данных вопросах - весьма профильное направление.

Так так… И что же они в итоге решили? Что лучше?

LightDiver ★★★★★
()
Ответ на: комментарий от firkax

Ты не забыл в какой теме это обсуждение? Речь про поддержку суперкомпьютеров, и для них как раз быть экспертами в данных вопросах - весьма профильное направление.

Лол. Суперкомпьютер - это обычный (пусть и не совсем) инструмент. Если ты думаешь что работа на нем - это красноглазинг и компиляции чего-либо, то я тебя чутка разочарую.

И само собой, что поскольку эти компьютеры принадлежат профильным организациям - они так же само подчиняются правилам, распространяющимся на организацию. В том числе и списку разрешенного к запуску ПО.

windows10 ★★★★★
()
Ответ на: комментарий от LightDiver

Меня в этом беспокоит один вопрос: А третье лицо точно незаинтересованное?

Думаю да, ведь они в целом не принимают ни положительных, ни отрицательных решений, а просто измеряют на предмет наличия или отсутствия чего-либо.

Это ж происходит в любой сфере, где присутствует «сертификация». Например в образовательной.

Заинтересован ли какой-то ВУЗ, чтобы человека через несколько лет взяла на работу организация «А»? Думаю им вообще насрать, поэтому они просто оценивают образование этого человека по общей, или своей собственной методике.

Разумеется я говорю за систему, а не ее перекосы и вероятности.

windows10 ★★★★★
()
Ответ на: комментарий от LightDiver

Кто девушку кормит, тот ее потом и танцует.

Это да, но насколько я знаю, если потом танец не будет соответствовать корму - кормящий получит по жопе с последующим волчьим билетом даже у нас, не говоря уже за запад.

windows10 ★★★★★
()

В рейтинге операционных систем, используемых в суперкомпьютерах, c ноября 2017 года остаётся только Linux

Собственно как найти момент, когжа винда стала полным говном.

PPP328 ★★★★★
()
Ответ на: комментарий от PPP328

Собственно как найти момент, когжа винда стала полным говном.

Легко. Открываем википедию и читаем: Windows 1.0 вышла в 1985 году. Вот так с точностью до года этот момент определяется в один клик.

CrX ★★★★★
()
Ответ на: комментарий от lomaster

А ты как хотел? Местным капиталюгам казалось, что они Землю могут купить вместе с Луной, и еще останется на выпить и закусить. А оказалось, чёрта с два.

yars068 ★★★★★
()
Ответ на: комментарий от yars068

Да я то хорошо понимаю к чему все идет, но мы же привыкли верить в лучшее не смотря на факты:)

lomaster
()
Закрыто добавление комментариев для недавно зарегистрированных пользователей (со score < 50)