Эффективное хранение данных с применением дисковых массивов ЕМС. Опыт заказчиков КРОК и актуальные тенденции.

Дмитрий Дощаный,ведущий инженер

компании КРОК

• управление хранением• управление ростом• управление

производительностью• управление рисками,

защита данных

Информационныймир

По данным IDC, к 2010 общий объем пространства на дисковых системах хранения составит 19 161 000 000 Гбайт, 85% будет храниться организациями

Рост информации на внешних дисковых хранилищах

0

5,000 PB

10,000 PB

15,000 PB

20,000 PB

2007 2008 2009 20102003 2004 2005 2006

+ 56% ежегодно

5,047

7,873

12,283

19,161

840 1,2952,075

3,235

(Источник: IDC)

Вызовы информационного мира

«Быстрый взгляд» на линейку систем хранения

Дисковые библиотеки

CLARiiONEMCCentera

EMC Disk Library SymmetrixCelerraCX3 UltraScale Series

AX4EMC Centera 4-Node

DL4406DL6100

DL210

DMX-3 and DMX-4

DMX-3 950DMX-4 950

Rainfinity GlobalFile Virtualization

NSX

NS40

NS80

NS40GNS80GFibre Channeland iSCSI

NS20DL4106DL4100

DL4206/DL4200

DL4406DL4400

Mid-range,FC & iSCSI NAS

High-End,FC & iSCSI

CAS

Разделение СХД по уровням

High-end

Low-end

Mid-range

+ Хорошаяпроизводительность

+ Насыщенный функционал

+ Высокая масштабируемость

+ Высокая надежность, дублирование всех компонентов

– Ограниченнаяпроизводительность

– Низкая масштабируемость

-- Надежность недостаточна для некоторых приложений

+ Недорогие диски SAS, SATA

+ Мгновенные снимки

+ Подключения iSCSI

+ Впечатляющаяпроизводительность

+ Мощный функционал

+ БеспрецедентнаяМасштабируемость

+ Легендарная надежность

Уровни хранения внутри одного массива

Tier 1Information

Tier 3Information

Tier 2Information

Virtual ProvisioningУльтрабыстрые FLASH носители Dynamic Cache PartitioningSymmetrix Priority ControlsПеренос томов между уровнями без остановки

приложенийTier 0

Information

Многоуровневое хранилище в пределах одной системы

Symmetrix DMX4

New!!FLASH drives

RAID 510K RPM400 GBRAID 6

7,200RPM 500 GB

RAID 115K RPM 146 GB

Флеш-диски в СХД (Enterprise flash)

• производительность в 30 раз выше в терминах

операций ввода/вывода

• решена проблема многократной перезаписи

• надежность намного выше традиционных дисков

• EMC Symmetrix DMX4 – первый массив класса high-

end c поддержкой флеш-дисков

Thin provisioning – дисковое пространство по требованию

Физическоерасположение

томов

Том, видимый серверу

Пул физических дисков

• повышается утилизация массива

• упрощается планирование

• упрощается администрирование

• сокращается стоимость владения

iSCSI

• Менее критичные задачи• Необходим блочный доступ• Нет высоких требований к

производиетльности• Простота развертывания• Подходит для SQL, Exchange

IP SAN—iSCSI

Ethernet

iSCSI SAN

Пример использования – сервера для разработчиков

РВЦ ОВЦ

NS700 Gateway

MirrorView

NS700 Gateway

IP-сеть

X-Blade X-Blade

X-Blade

Данные остаются доступны

Clariion CX3

SAN

Clariion CX3

SAN

X-Blade

Данные остаются доступны!

NAS

Управление ростом

• Консолидация данных• Планирование будущих потребностей• Миграция данных• Внедрение концепции ILM• Thin provisioning

Миграция внутри массива

SAN

Приложение Приложение

Остановка приложений не требуетсяИспользуется Virtual LUN – встроенный функционал

Миграция на новые системы хранения

SRD

F

Раздел 1

Раздел 2 SRDF Сервер БД 2Сервер БД 1

SAN

Раздел 1

Раздел 2

SRD

F

Раздел 1

Раздел 2

Раздел 1

Раздел 2 SRDF

DMX 1000 DMX 1000

DMX 4 DMX 4

Переход на новые системы за 2 часаМиграция в существующей инфраструктуре

Защита данных

• защита от катастроф• защита от ошибок

пользователей• мгновенное восстановление • параллельные операции с

данными• консолидированное резервное

копирование• тестирование• отчетность

Территориально разнесённый кластер

R1 Раздел 1 R2 Раздел 1

R1 Раздел 2R2 Раздел 2

VD Раздел 2 VD Раздел 1

Сервер БД 2

Сервер БД 1

SAN

SRDF

LAN

Резервное копирование с использованием мгновенных снимков

Сервер резервного

копирования 2

Раздел 1

Раздел 2SRDF

Snap Раздел 1

Созданиемгновенных

снимков

Сервер БД 2Сервер БД 1

SAN

Раздел 1

Раздел 2

Snap. Раздел 2

Сервер резервного

копирования 1

Созданиемгновенных

снимков

Отчетная база с использованием клонов

• увеличение производительности обоих БД

• автоматизация процесса

Дисковый массивEMC DMX 1000

Основная База

Созданиеклона

Сервер БД

Сервер БДОтчетная

База

Особенности внедрения и работы с решениями репликации

symdev listsymdg create 3vdevs - type regularset SYMCLI_DG=3vdevssymld add dev 76symld addall dev -range 4F:51 - vdevsymld listsymsnap listsymsnap list -savedevssymsnap create -v DEV001 vdev ld VDEV001 -nopromptsymsnap activate -v DEV001 vdev ld VDEV001 -nopromptsymsnap query

Database Instance

Schema

Tablespace

Database Instance

LogicalVolume

Host Disk Array

DatabaseFile Host

FileSystems

VolumeGroup

ArrayDevice

ArraySpindle

Требуется обеспечить взаимодействие специалистов по приложениям и по инфраструктуре хранения

Сложная инфраструктура

Нецентрализованное управление

Необходимость в написании скриптов для автоматизации решений

Replication Manager – упрощенное управление репликацией

• Графический интерфейс• Автоматическая проверка соответствия инфраструктуры

требованиям• Автоматическое обнаружение массивов, приложений, файловых

систем, технологий репликации и ОС• Интеграция с приложениями• Управление репликами: отслеживание, обнаружение, запуск по

расписанию, удаление• Автоматическое монтирование на выбранный сервер

Резервное копирование с применением CDL

• Виртуальные ленточные библиотеки

• Скорость• Доступность данных,

постоянный контроль целостности

• Простота развертывания• Энергоэффективность• Дедупликация

EMC Disk Library

Стандартная ленточная библиотека

Серверы резервного копирования

Network

СХД

Технология дедупликации Удаленный офис 1 Копия

Файл является копией, поэтому создается дополнительная ссылка (20 байт)

ЦОД

A B C D

Сервер резервного копирования с дедупликацией

Файл разбивается на сегменты, только уникальные сегменты копируются

E

EA

BC

D

ОригиналУдаленный офис 2

Измененная копия

Копируются новые сегменты данных

Автоматизация

Архивныеданные

Резервныекопии

• архивирование неиспользуемых данных

• оптимизация резервного копирования

• устранение дублирующихся данных

• виртуализация серверов и СХД

• классификация и разделение на уровни

ProductionData

Уровень 3

Уровень 2

Уровень 1

Копии наудаленной СХД

ПространствоПо требованию

МассивыФайлы

Спасибо за внимание!

Дмитрий Дощаный,ведущий инженер

компании КРОК,тел.: 974-2274 #4603

DDoshaniy@croc.ru