1 © Copyright 2014 EMC Corporation. All rights reserved. © Copyright 2014 EMC Corporation. All rights reserved.
EMC ScaleIO Обзор решения
Ссылка на free trial: https://www.russia.emc.com/products-solutions/trial-software-download/scaleio.htm
Дасаев Марат SDS SE
2 © Copyright 2014 EMC Corporation. All rights reserved. © Copyright 2014 EMC Corporation. All rights reserved.
Что такое Software-defined решение?
Commodity-платформы
Программно определямые СХД
3 © Copyright 2014 EMC Corporation. All rights reserved. © Copyright 2014 EMC Corporation. All rights reserved.
Драйверы технологии So#ware-DefinedStorage Commodityhardware
Hyper-Convergence DatacenterConsolida;on
83% международных и крупных компаний используют или планируют приобретение SDS
Рынок небрендовых серверов вырос на 40.5% в 2014 и сейчас составляет 31.4% рынка
IDC характеризует гипер-конвергентные решения как резко растущий рынок на
2014-2015 гг
Тенденции к слиянию филиалов
*IDC MarketScape: Worldwide Hyperconverged Systems 2014 Vendor Assessment, December 2014, IDC #253267
4 © Copyright 2014 EMC Corporation. All rights reserved. © Copyright 2014 EMC Corporation. All rights reserved.
Максимально масштабируемая платформа хранения на основе коммодити компонент.
ScaleIO
5 © Copyright 2014 EMC Corporation. All rights reserved. © Copyright 2014 EMC Corporation. All rights reserved.
>10M IOPS 43 сервера
ScaleIO …
6 © Copyright 2014 EMC Corporation. All rights reserved. © Copyright 2014 EMC Corporation. All rights reserved.
Традиционный подход ScaleIO подход Servers
ScaleIO SAN
Servers
SAN
Software-Defined Scale-out Block Storage
7 © Copyright 2014 EMC Corporation. All rights reserved. © Copyright 2014 EMC Corporation. All rights reserved.
Масштабируемая конвергентная архитектура
• Платформа хранения данных на основе стандартных компонент
– ПО для создания SAN из локальных носителей серверов
– СХД и вычислительные ресурсы на единой платформе
– Поддержка любых серверов и носителей: HDDs, SSDs, & PCIe flash cards
– Поддержка физических и виртуальных серверов
8 © Copyright 2014 EMC Corporation. All rights reserved. © Copyright 2014 EMC Corporation. All rights reserved.
ScaleIO à SDC & SDS
ScaleIO Data Client
• Локальный драйвер
• Позволяет блочным устройствам ScaleIO быть презентованными серверам приложений
ScaleIO Data Server
• Управляет емкостью на севрерах
• Бэкенд для доступа SDC
9 © Copyright 2014 EMC Corporation. All rights reserved. © Copyright 2014 EMC Corporation. All rights reserved.
Вариант архитектуры 1: 2-Layer • Адаптировано для раздельного администрирования СХД и серверов
• Клиенты и бэкенд установлены на разных серверах
• Клиент взаимодействует с серверами напрямую для операций ввода/вывода
– Не используя flooding/broadcasting
• Эффективный параллелизм и отсутствие единых точек сбоя
ETH/IB
S S S
C C C
S S S
APPS
MORE STORAGE
STORAGE
10 © Copyright 2014 EMC Corporation. All rights reserved. © Copyright 2014 EMC Corporation. All rights reserved.
Вариант архитектуры 2: Конвергентный
• Меньший профиль в контексте стоимости и потребления
• ScaleIO избыточность минимальна
• Приложения и СХД используют один и тот же сервер
• Добавление серверов увеличивает единовременно вычислительные и СХД ресурсы
• Компоненты общаются при помощи LAN
ETH/IB
S S S
S S S
S S S
C C C
C C C
C C C
11 © Copyright 2014 EMC Corporation. All rights reserved. © Copyright 2014 EMC Corporation. All rights reserved.
Трансформация DAS в ServerSAN
• Конвергенция СХД и вычислительных ресурсов
• Масштабируемость – архитектура из тысяч серверов
• Гибкость – добавление/удаление серверов/емкости «на лету»
• Производительность – множественная параллелизация операций
12 © Copyright 2014 EMC Corporation. All rights reserved. © Copyright 2014 EMC Corporation. All rights reserved.
Упрощение архитектуры ЦОД
Конвергенция
� Объединение серверов и СХД на единой одноуровневой платформе
� Агрегация емкости и производительности
� Упрощение понимания архитектуры устройств СХД
� Консолидация данных и ресурсов приложений на единой архитектуре типа x86 и ARM
Servers
Network
Storage
Конвергентная инфраструктура
13 © Copyright 2014 EMC Corporation. All rights reserved. © Copyright 2014 EMC Corporation. All rights reserved.
Масштабируемость
� Архитектуры из тысяч устройств
� Модульное добавление носителей и серверов
� Автоматический рост среды хранения взависимости от роста приложения
14 © Copyright 2014 EMC Corporation. All rights reserved. © Copyright 2014 EMC Corporation. All rights reserved.
Гибкость
• Динамическое добавление/удаление ресурсов хранения и вычислений без простоя
• Отсутствие необходимости в планировании емкости
• Отсутствие стандартизации: – Производителях и типах серверов – Конфигурациях – Операционных системах – Типах носителей
15 © Copyright 2014 EMC Corporation. All rights reserved. © Copyright 2014 EMC Corporation. All rights reserved.
Множественная параллелизация Производительность
� Распределение нагрузки между серверами
� Автоматическая перестройка и перебалансировка
� Автономное управление
� Разделение по уровню производительности
Eliminate I/O Bottlenecks
16 © Copyright 2014 EMC Corporation. All rights reserved. © Copyright 2014 EMC Corporation. All rights reserved.
До ScaleIO ScaleIO
1,000 IOPS 10 TB 100 IOPS
1 TB 100 IOPS
1 TB 100 IOPS
1 TB 100 IOPS
1 TB 100 IOPS
1 TB 100 IOPS
1 TB 100 IOPS
1 TB 100 IOPS
1 TB 100 IOPS
1 TB 100 IOPS
1 TB
2,000 IOPS 20 TB
100 IOPS 1 TB
100 IOPS 1 TB
100 IOPS 1 TB
100 IOPS 1 TB
100 IOPS 1 TB
100 IOPS 1 TB
100 IOPS 1 TB
100 IOPS 1 TB
100 IOPS 1 TB
100 IOPS 1 TB
17 © Copyright 2014 EMC Corporation. All rights reserved. © Copyright 2014 EMC Corporation. All rights reserved.
8k IOPS 1 TB
8k IOPS 1 TB
8k IOPS 1 TB
8k IOPS 1 TB
8k IOPS 1 TB
8k IOPS 1 TB
8k IOPS 1 TB
8k IOPS 1 TB
8k IOPS 1 TB
8k IOPS 1 TB
• 8k IOPS каждого сервера • 1TB емкости каждого сервера • Отсутствие защиты данных при недоступности диска или сервера
Пример производительности 10 x SSD’s без ScaleIO…
18 © Copyright 2014 EMC Corporation. All rights reserved. © Copyright 2014 EMC Corporation. All rights reserved.
10k IOPS 1TB
10k IOPS 1TB
10k IOPS 1TB
10k IOPS 1TB
10k IOPS 1TB
10k IOPS 1TB
10k IOPS 1TB
10k IOPS 1TB
10k IOPS 1TB
10k IOPS 1TB
• 80,000 IOPS • 10TB общей емкости • Защита данных при недоступности компонент
Пример производительности 10 x SSD’s ScaleIO…
19 © Copyright 2014 EMC Corporation. All rights reserved. © Copyright 2014 EMC Corporation. All rights reserved.
Какое оборудование использовать?
© Copyright 2014 EMC Corporation. All rights reserved.
Servers
Network
Storage Converged Architecture
200,000 IOPS
20K IOPS
20K IOPS
20K IOPS
20K IOPS
20K IOPS
20K IOPS
20K IOPS
20K IOPS
20K IOPS
20K IOPS
Flash | SSD | HDD | RAID Cache | RAM
Bare Metal | KVM | VMware | Hyper-V
20 © Copyright 2014 EMC Corporation. All rights reserved. © Copyright 2014 EMC Corporation. All rights reserved.
Что мне это даст?
Bare Metal
Добавление, удаление, расширение, не лету, без остановки IO
Гипервизоры ОС Платформы PCIe FLash
SSDs
HDDs
Носители
21 © Copyright 2014 EMC Corporation. All rights reserved. © Copyright 2014 EMC Corporation. All rights reserved.
Автоматическая перебалансировка Автоматизированное управление при добавлении новых ресурсов
22 © Copyright 2014 EMC Corporation. All rights reserved. © Copyright 2014 EMC Corporation. All rights reserved.
Автоматическая перебалансировка Автоматизированное управление при удалении ресурсов
23 © Copyright 2014 EMC Corporation. All rights reserved. © Copyright 2014 EMC Corporation. All rights reserved.
B
A A
Two-Copy “Mesh” Mirroring
B
C
D D
C
E E
24 © Copyright 2014 EMC Corporation. All rights reserved. © Copyright 2014 EMC Corporation. All rights reserved.
Data Protection
F F B E E E
B B
F
25 © Copyright 2014 EMC Corporation. All rights reserved. © Copyright 2014 EMC Corporation. All rights reserved.
Простое управление и мониторинг
• Автоматизированная инсталяция • Простое управление • Встроенный механизм оповещений • Саморегулирование
26 © Copyright 2014 EMC Corporation. All rights reserved. © Copyright 2014 EMC Corporation. All rights reserved.
Ограничение IOPS/Bandwidth Для QoS
Преимущества Для Infrastructure as a Service
Снэпшоты для резервного копирования
Выделенные домены для разделения данных
Пулы дисков для тиринга
Контроль производительности, емкости, и размещения данных
Безопасность путем Data Encryption
APP 1
APP 2
APP 3
27 © Copyright 2014 EMC Corporation. All rights reserved. © Copyright 2014 EMC Corporation. All rights reserved.
3 модели поставки
VCE VxRack
ScaleIO Node
ScaleIO SW
Ультра масштабируемое решение SDS
Scale-Out Block Storage Node
Конвергентное решение от инженеров VCE
Software Defined Максимум гибкости
Software Defined Полный контроль
� Software � Полная гибкость и выбор аппаратной платформы
� HW + SW комплекс � Широкие возможности выбора окружения
� Путь к SAN.Next
� Интегрированная платформа для приложений
� Путь к Infrastructure.Next
28 © Copyright 2014 EMC Corporation. All rights reserved. © Copyright 2014 EMC Corporation. All rights reserved.
ScaleIO Node
• ПАК EMC ScaleIO Node - commodity сервера + ПО ScaleIO software – Упрощенное планирование и запуск – Проверено, протестировано и с предсказуемой производительностью
– Поддержка ЕМС для всего стека
29 © Copyright 2014 EMC Corporation. All rights reserved. © Copyright 2014 EMC Corporation. All rights reserved.
Типы Scaleio node
CAPACITY OPTIMIZED
Ø ScaleIO CS100 Chassis (Capacity Storage)
Ø ScaleIO CC100 Chassis (Capacity Compute)
PERFORMANCE OPTIMIZED
Ø ScaleIO PC100 Chassis (Performance Compute)
Ø ScaleIO PF100 Chassis (Performance Flash)
30 © Copyright 2014 EMC Corporation. All rights reserved. © Copyright 2014 EMC Corporation. All rights reserved.
Почему ScaleIO?
31 © Copyright 2014 EMC Corporation. All rights reserved. © Copyright 2014 EMC Corporation. All rights reserved.
USE CASES STaaS
Огромная емкость | Высокая производительность | Снижение TCO | Простое управление
Public Hosting
Managed Service Provider
Private Cloud for Enterprise
32 © Copyright 2014 EMC Corporation. All rights reserved. © Copyright 2014 EMC Corporation. All rights reserved.
• Торстейн Ботье • Директор по стратегии облачных
технологий • “При помощи ScaleIO исчезает
необходимость в управлении циклом обновления СХД. Все изменения, в том числе оборудования и платформ могут быть выполнены в режиме онлайн”
Swisscom EMC ScaleIO для поддержки облачной платформы
• Задачи – Обеспечение каждого потребителя виртуальным сервером и ресурсом в 10ТБ
– Полная автоматизация виртуальной среды для снижения стоимости и вывода сервисов на рынок
– Поиск абсолютного решения класса software-defined storage для возможного пути к open compute
• Решение – EMC ScaleIO
• Результаты – POC продемонстрировал, что в отличие от конкурентов
(Simplivity, Ceph) ScaleIO может покрыть все 100% запланированных тестов
– Полная независимость от аппаратной платформы ScaleIO позволяет Swisscom использовать коммодити сервера и менять вендоров на лету
– POC показал, что ScaleIO может иметь более 100 узлов в кластере
• Облачная платформа, построенная на ScaleIO обеспечит доступ пользователей к приложениям, таким как банкинг, биллинг, медиа и т.д.
Public Hosting
33 © Copyright 2014 EMC Corporation. All rights reserved. © Copyright 2014 EMC Corporation. All rights reserved.
HPA
“Мы увидели финансовые, технические и операционные выгоды. ScaleIO –
своевременная технология, позволившая нам исполнить значительные улучшения в
инфраструктуре.”
Incentive Management Модернизация инфраструктуры СХД при помощи ScaleIO
• Задачи – Традиционная инфраструктура СХД была дорога в обслуживании, медленная в контексте модернизации, ив целом сложна
– СХД вносила задержки при реализации запросов бизнеса – Заказчик хочет модернизировать инфраструктуру СХД для получения ценностей новых технологий
• Решение – EMC ScaleIO
• Результаты – “Поставил и забыл" технология ScaleIO быстра и проста в установке и работе
– Конвергентное решение устраняет необходимость раздельного управления сетью и СХД
– 30-35% уменьшение в капитальных вложениях позволяет использовать эти средства для приобретения высокопроизводительных дисков
• Приложения – Прикладное ПО с большим
потреблением IO – Решения облачных
вычислений – Web-приложения CIO
34 © Copyright 2014 EMC Corporation. All rights reserved. © Copyright 2014 EMC Corporation. All rights reserved.
• ScaleIO позволило значительно сократить расходы и устранить необходимость миграции данных.
Top 10 Международная финансовая компания Автоматизация СХД и увеличение производительности при помощи ScaleIO • Задачи
– Необходимость в управлении >50Pb блочной емкости с учетом роста в 40% ежегодно
– Огромный рост данных предполагает решение, которое способно легко и эффективно масштабироваться
– Традиционные СХД не могут обеспечить требуемую производительность
• Решение – EMC ScaleIO
• Результаты – Компания смогла сэкономить 29 млрд. долларов за 4 года – Необходимость в миграции данных полностью устранена, что добавляет экономии в расходах
• Приложения – Критичные OLTP и web
приложения – Финансовые приложения
Private Cloud for Enterprise
35 © Copyright 2014 EMC Corporation. All rights reserved. © Copyright 2014 EMC Corporation. All rights reserved.
Преимущества 1. Встроенные носители
2. Отсутствие специализированных компонент СХД
3. Экономия ресурсов энергопотребления, охлаждения и физического пространства
4. Отстутствие необходимости в обновлении EOL оборудования
5. Низкие расходы на администрирование
6. Линейные инвестиции с возможностью прогнозирования
36 © Copyright 2014 EMC Corporation. All rights reserved. © Copyright 2014 EMC Corporation. All rights reserved.
ScaleIO Server SAN
Меньший OpEx Уменьшение TCO Миграции данных Больше пространства
Программная, расширяемая, объединенная архитектура
хранилища
#EMCSCALEIO
37 © Copyright 2014 EMC Corporation. All rights reserved. © Copyright 2014 EMC Corporation. All rights reserved.
Уменьшение расходов
Свобода выбора
Платформа для облака