Вход |


О Программе
Результаты
Пресса о нас
Первые образцы
Выставки
Документация
СКИФ К-1000

"СКИФ К-1000" 2500/2028G 288-1U AMD OpteronTM 248 2.2

k-1000.jpg (13157 bytes)

Установка "СКИФ к-1000"
собранная в Центре кластерных технологий.
Москва, сентябрь 2004 года.

В сентябре 2004 года  завершена разработка и создание суперкомпьютерной установки "СКИФ К-1000" с пиковой производительностью 2,5 TFlops и Linpack-производительностью 2, 028 TFlops. Разработчиками установки являются

  • ОИПИ НАН Беларуси;
  • НИИ ЭВМ;
  • ИПС РАН;
  • компания "Т-Платформы".

Суперкомпьютер "СКИФ К-1000" создан в рекордно короткие сроки. Сборка и наладка осуществлены в центре кластерных технологий компании "Т-Платформы" (Москва). Место постоянного расположения установки: ОИПИ НАН Беларуси, г. Минск.

Установка "СКИФ К-1000" создана с целью комплексной реализации принципов построения моделей суперкомпьютеров "СКИФ" Ряда 2 кластерного уровня с массовым параллелизмом сверхвысокой производительности (триллионы операций в секунду) на базе новых перспективных 64-разрядных процессоров и новых перспективных сетевых средств для интеграции вычислительных узлов.

Суперкомпьютер "СКИФ К-1000" является старшей моделью семейства "СКИФ". Это - кластер из 288 двухпроцессорных вычислительных узлов на базе 64-разрядных процессоров, всего 576 процессоров AMD OpteronТМ 248, 2,2 GHz, 1 MB.

Каждый узел "СКИФ К-1000" содержит двухпроцессорную системную плату SMP 2 x OpteronTM 248 , 2,2 GHz, 1 MB, основную память (4 Гбайт), жесткий диск (не менее 80 Гбайт), два интерфейса Gigabit Ethernet, адаптер InfiniBand 4x. Мощность, потребляемая узлом не болше 400 ВА.

uzel.jpg (20601 bytes)

Вычислительный узел установки

В отличие от большинства установок семейства "СКИФ" , в суперкомпьютере "СКИФ К-1000" для организации MPI-взаимодействия для параллельных вычислений использована не аппаратура SCI,  применявшаяся в большинстве предыдущих моделей суперкомпьютеров "СКИФ", а сеть на базе адаптеров и коммутаторов InfiniBand. Коммутаторы InfiniBand обеспечивают работоспособность всех вычислительных узлов в топологии Fat Tree с обеспечением FBB 10 Gbit/sec.

infiniband-sh.jpg (31214 bytes)

infiniband-real.jpg (11590 bytes)

Структурная схема системной сети InfiniBand

Кабели сети InfiniBand в кластере "СКИФ К-1000"

Как и в "СКИФ К-500", в суперкомпьютере "СКИФ К-1000" имеются две вспомогательные сети Gigabit Ethernet которые служат:

  • для загрузки программ и данных, управления и мониторинга;
  • для подключения дополнительной дисковой памяти.

В установке "СКИФ К-1000" использована сервисная сеть, по своим функциональным возможностям подобная сервисной сети "СКИФ К-500", но с более компактными сетевыми адаптерами ServNet v.2.0. Сервисная сеть обеспечивает для любого вычислительного узла:

  • операции включение/выключение питания;
  • аппаратного сброса (reset);
  • возможности организации с управляющей ЭВМ консольного доступа к любому вычислительному узлу на этапах загрузки и конфигурирования BIOS, загрузки и работы ОС;
  • "посмертного" чтения последних консольных сообщений ОС.

Плата сетевого адаптера сервисной сети  СКИФ-ServNet v.2.0. 

Отличные технические показатели "СКИФ К-1000" позволили  суперкомпьютеру  войти   в очередную (9 ноября 2004 года) редакцию рейтинга  самых высокопроизводительных компьютеров мира TOP500, заняв в нем 98 место.  В  ноябре 2004 года еще в одном мировом рейтинге высокопроизводительных компьютеров top.cranch установка  "СКИФ К-1000" заняла 6-е место при расчете примера столкновения   трех автомобилей, который решается в пакете трехмерного моделирования быстропротекающих процессов, разработанном американским оборонным агентством DARPA. 7 декабря 2004 года была опубликована первая редакция рейтинга самых мощных суперкомпьютеров СНГ - Top50, в котором кластер  "СКИФ К-1000" занял первую позицию.

Отметим также, что "СКИФ К-1000" имеет очень хорошее отношение "цена/производительность".

Основные технические характеристики

Месяц и год выпуска сентябрь, 2004 год
Место расположения ОИПИ НАН Беларуси, Минск
Число вычислительных узлов/процессоров 288/576
Тип процессора AMD OpteronTM 248
Частота процессора 2200 MHz
Предельная пиковая (реальная на задаче Linpak) производительность 2,5(2,028) Tflops (2534/2028 GFlops)
Характеристики Linpack КПД=80%; N = 274 000 N1/2= 24 950
Оперативная память установки 288 * (8 * 0,5 GB) = 1 152 GB
Дисковая память установки 288 * 80 GB = 23 040 GB
Тип системной сети InfiniBand, IB 4x (MPI: ~830 MB/s, 5 mks
Тип управляющей (вспомогательной) сети Gigabit Ethernet
Сервисная сеть СКИФ-ServNet v.2.0
Конструктив узла (форм-фактор) 1U
Монтажные стойки 8 стоек 42U
Габариты и масса 4.8 м *1.07м * 2.07м, 10.7 м3, 5.4 Т
Потребление одной стойки / установки до 9 750-9 800 Вт / до 80 кВт
Цена / пиковая производительность $628 000 за 1 TFlops
Цена / производительность (Linpack) $785 000 за 1 TFlops
Тепловыделение ок. 70 кВт
Воздушное охлаждение 16 000 м3/час
Кабельная система Gigabit Ethernet 326 кабелей, ~930 м, 652 разъема
Кабельная система InfiniBand 576 кабелей, ~1500 м, 1152 разъема
Дополнительно: Этапы разработки:
- концепция, разработка ТТ и пр.

01.12.2003-31.05.2004
(6 месяцев)

-изготовление,
   в том числе:

15.07- 01.10.2004
(2,5 месяца)

   сборка

04.09-17.09.2004
(2 недели)

   тестирование

18.09-25.09.2004
(1 неделя)


© "СКИФ" 2002