СКИФ К-1000
"СКИФ К-1000" 2500/2028G 288-1U AMD OpteronTM 248 2.2

|
Установка "СКИФ к-1000"
собранная в Центре кластерных технологий.
Москва, сентябрь 2004 года. |
В сентябре 2004 года завершена разработка и
создание суперкомпьютерной установки "СКИФ
К-1000" с пиковой производительностью 2,5 TFlops и
Linpack-производительностью 2, 028 TFlops.
Разработчиками установки являются
- ОИПИ НАН Беларуси;
- НИИ ЭВМ;
- ИПС РАН;
- компания "Т-Платформы".
Суперкомпьютер "СКИФ К-1000" создан в
рекордно короткие сроки. Сборка и наладка
осуществлены в центре кластерных технологий
компании "Т-Платформы" (Москва). Место
постоянного расположения установки: ОИПИ НАН
Беларуси, г. Минск.
Установка "СКИФ К-1000" создана с целью
комплексной реализации принципов построения
моделей суперкомпьютеров "СКИФ" Ряда 2
кластерного уровня с массовым параллелизмом
сверхвысокой производительности (триллионы
операций в секунду) на базе новых перспективных
64-разрядных процессоров и новых перспективных
сетевых средств для интеграции вычислительных
узлов.
Суперкомпьютер "СКИФ К-1000" является
старшей моделью семейства "СКИФ". Это -
кластер из 288 двухпроцессорных вычислительных
узлов на базе 64-разрядных процессоров, всего 576
процессоров AMD OpteronТМ 248, 2,2 GHz, 1 MB.
Каждый узел "СКИФ К-1000" содержит
двухпроцессорную системную плату SMP 2 x OpteronTM
248 , 2,2 GHz, 1 MB, основную память (4 Гбайт), жесткий диск
(не менее 80 Гбайт), два интерфейса Gigabit Ethernet,
адаптер InfiniBand 4x. Мощность, потребляемая узлом не
болше 400 ВА.
 |
Вычислительный узел
установки |
В отличие от большинства установок семейства
"СКИФ" , в суперкомпьютере "СКИФ К-1000"
для организации MPI-взаимодействия для
параллельных вычислений использована не
аппаратура SCI, применявшаяся в большинстве
предыдущих моделей суперкомпьютеров "СКИФ",
а сеть на базе адаптеров и коммутаторов InfiniBand.
Коммутаторы InfiniBand обеспечивают
работоспособность всех вычислительных узлов в
топологии Fat Tree с обеспечением FBB 10 Gbit/sec.

|

|
Структурная схема системной
сети InfiniBand |
Кабели сети InfiniBand в кластере
"СКИФ К-1000" |
Как и в "СКИФ К-500", в суперкомпьютере
"СКИФ К-1000" имеются две вспомогательные сети
Gigabit Ethernet которые служат:
- для загрузки программ и данных, управления и
мониторинга;
- для подключения дополнительной дисковой
памяти.
В установке "СКИФ К-1000" использована
сервисная сеть, по своим функциональным
возможностям подобная сервисной
сети "СКИФ К-500", но с более компактными
сетевыми адаптерами ServNet v.2.0. Сервисная сеть
обеспечивает для любого вычислительного узла:
- операции включение/выключение питания;
- аппаратного сброса (reset);
- возможности организации с управляющей ЭВМ
консольного доступа к любому вычислительному
узлу на этапах загрузки и конфигурирования BIOS,
загрузки и работы ОС;
- "посмертного" чтения последних консольных
сообщений ОС.

|
Плата сетевого адаптера
сервисной сети СКИФ-ServNet v.2.0. |
Отличные технические показатели "СКИФ
К-1000" позволили суперкомпьютеру войти
в очередную (9 ноября 2004 года) редакцию
рейтинга самых высокопроизводительных
компьютеров мира TOP500, заняв в
нем 98 место. В ноябре 2004 года еще в одном
мировом рейтинге высокопроизводительных
компьютеров top.cranch установка "СКИФ К-1000"
заняла 6-е место при расчете примера столкновения
трех автомобилей, который решается
в пакете трехмерного моделирования
быстропротекающих процессов, разработанном
американским оборонным агентством DARPA. 7 декабря
2004 года была опубликована первая редакция
рейтинга самых мощных суперкомпьютеров СНГ -
Top50, в котором кластер "СКИФ К-1000" занял
первую позицию.
Отметим также, что "СКИФ К-1000" имеет очень
хорошее отношение
"цена/производительность".
Основные технические характеристики
Месяц и год выпуска |
сентябрь, 2004 год |
Место расположения |
ОИПИ НАН Беларуси, Минск |
Число вычислительных
узлов/процессоров |
288/576 |
Тип процессора |
AMD OpteronTM 248 |
Частота процессора |
2200 MHz |
Предельная пиковая (реальная на
задаче Linpak) производительность |
2,5(2,028) Tflops (2534/2028 GFlops) |
Характеристики Linpack |
КПД=80%; N = 274 000 N1/2= 24 950 |
Оперативная память установки |
288 * (8 * 0,5 GB) = 1 152 GB |
Дисковая память установки |
288 * 80 GB = 23 040 GB |
Тип системной сети |
InfiniBand, IB 4x (MPI: ~830 MB/s, 5 mks |
Тип управляющей (вспомогательной)
сети |
Gigabit Ethernet |
Сервисная сеть |
СКИФ-ServNet v.2.0 |
Конструктив узла (форм-фактор) |
1U |
Монтажные стойки |
8 стоек 42U |
Габариты и масса |
4.8 м *1.07м * 2.07м, 10.7 м3, 5.4 Т |
Потребление одной стойки / установки |
до 9 750-9 800 Вт / до 80 кВт |
Цена / пиковая производительность |
$628 000 за 1 TFlops |
Цена / производительность
(Linpack) |
$785 000 за 1 TFlops |
Тепловыделение |
ок. 70 кВт |
Воздушное охлаждение |
16 000 м3/час |
Кабельная система Gigabit Ethernet |
326 кабелей, ~930 м, 652 разъема |
Кабельная система InfiniBand |
576 кабелей, ~1500 м, 1152 разъема |
Дополнительно: |
Этапы разработки:
- концепция, разработка ТТ и пр. |
01.12.2003-31.05.2004
(6 месяцев) |
-изготовление,
в том числе: |
15.07- 01.10.2004
(2,5 месяца) |
сборка |
04.09-17.09.2004
(2 недели) |
тестирование |
18.09-25.09.2004
(1 неделя) |
|
© "СКИФ" 2002
|