Владимир Крумштейн Эксперт по внедрению вычислительных систем КРОК

Москва, 2014 г.

Infiniband: сверхскорости на службе Вашего бизнеса

2

ПЛАН

• О технологии Infiniband: цели создания,

история, особенности

• Infiniband – это не только

суперкомпьютеры!

• Применения с продуктами Oracle,

Microsoft и др.

• Практический опыт внедрения

технологии Infiniband в компании КРОК

3

О ТЕХНОЛОГИИ INFINIBAND

Infiniband — это высокоскоростная коммутируемая последовательная шина, применяющаяся как для внутренних (внутрисистемных), так и для межсистемных соединений.

• IBTA: организация, формирующая стандарт

• Высокопроизводительный Interconnect

следующего поколения

• Производительность

• Надёжность

• Простота

Mellanox Technologies

• Лидер рынка – FDR уже доступен • Решения для Ethernet и Infiniband

4

ОСОБЕННОСТИ IB

• Топология • Отказоустойчивость • Масштабируемость • Защита инвестиций • RDMA – что это и зачем?

5

ПРЕИМУЩЕСТВО IB №1 – СКОРОСТЬ!

Mellanox 56Gb/s FDR IB Intel 40Gb/s QDR IB Intel 10GbE NetEffect NE020

Пропускная способность 6.8 GB/s 3.2 GB/s 1.1 GB/s

Задержка 0.7us 1.2us 7.22us

Сообщений в секунду 137 млн 30 млн 1.1 млн

SDR DDR QDR FDR EDR

1X 2,5 / 2 Гбит/с 5 / 4 Гбит/с 10 / 8 Гбит/с 14,0625 / 14 Гбит/с

25,78125 / 25 Гбит/с

4X 10 / 8 Гбит/с 20 / 16 Гбит/с 40 / 32 Гбит/с 56,25 / 56 Гбит/с

103,125 / 100 Гбит/с

12X 30 / 24 Гбит/с 60 / 48 Гбит/с 120 / 96 Гбит/с 168,75 / 168 Гбит/с

309,375 / 300 Гбит/с

Пропускная способность интерфейса Infiniband, raw / data

6

ПРЕИМУЩЕСТВО IB №2 – ПРОСТОТА И НАДЕЖНОСТЬ!

• InfiniBand позволяет заменить три кабеля — Ethernet, кабели к подсистеме хранения и кабели межпроцессного взаимодействия – одним соединением

• Автоконфигурирование портов/системы

• Сокращение потребления пропускной способности памяти и контекстных переключений

• Шесть режимов передачи данных

• Forward Error Correction, которая позволяет устройствам InfiniBand исправлять битовые ошибки в сети и сокращает издержки на данные транзакции

7

Mellanox Technologies

• Адаптеры. VPI – поддержка Eth и IB

• Коммутаторы. От 12 до 648 портов

• Кабели. Медные и оптические. QSFP

• Системы для метросетей. От 10 до 80 км

8

ИНТЕГРАЦИЯ С СУЩЕСТВУЮЩИМИ СИСТЕМАМИ

• Oracle Exadata • OLTP • Analytics • Cloud • VmWare

9

ИНТЕГРАЦИЯ С СУЩЕСТВУЮЩИМИ СИСТЕМАМИ

• Microsoft Parallel Data Warehouse • SMB Direct

10

ИНТЕГРАЦИЯ С СУЩЕСТВУЮЩИМИ СИСТЕМАМИ

• ScaleMP • До 32768 процессоров и 256Тбайт ОЗУ • Поддержка виртуализации

11

• 2 ЦОДа, в каждом 200+ серверов • Infiniband – основа сети • Суммарный период эксплуатации –

с мая 2012 • Промышленная эксплуатация –

с апреля 2013 • Более 500 IB порта • Около 340 серверов • Без единого сбоя!

ПРАКТИЧЕСКИЙ ОПЫТ ВНЕДРЕНИЯ: ОБЛАКО КРОК

Отказоустойчивость Предсказуемость

Простота масштабирования Производительность

12

ОНИ ТОЖЕ ПРИМЕНЯЮТ INFINIBAND

13

СПАСИБО ЗА ВНИМАНИЕ!

Владимир Крумштейн

Эксперт по внедрению вычислительных систем КРОК

111033, Москва, ул. Волочаевская, д.5, корп.1 +7 495 974 2274 доб. 4692, +7 495 974 2277 (факс)

VKrumshtein@croc.ru www.croc.ru