Хранение данных в облаке

Если вам нужно хранить и обрабатывать большие объемы данных, хорошим выбором могут стать системы хранения данных (СХД) в облаке. Здесь нет ограничений по типам информации; работать можно с привычными форматами данных — документами, медиафайлами, архивами и т. д., а также со структурированными и неструктурированными данными. Выбор типа СХД зависит от задач, однако в своей основе системы хранения, как правило, мало отличаются: в них используются SSD-накопители (All Flash Array) или же гибридные решения, то есть SSD + HDD.

Infrastructure as a Service

Узнать об услуге

Если сформулировать основную задачу для систем хранения данных в одном предложении, оно будет звучать так: «У меня есть большой объем информации, с которым мне нужно регулярно что-то делать». Далее детали для конкретного сценария могут различаться.

Источник: netapp.com

Типы систем хранения данных

Блочные хранилища

Физически это могут быть несколько хранилищ разного типа, но операционная система воспринимает его, как логический диск, по отношению к которому доступны все традиционные действия — его можно отформатировать, разбить на разделы и установить операционную систему. В соответствии с названием, данные здесь хранятся не в виде файлов, а в виде блоков. Благодаря этому, скорость работы с данными (IOPS) выше, чем у других типов СХД.

Такие системы подходят для следующего:

Больших «тяжелых» БД. SAP Hana, Oracle и т. п.
Виртуализации. Виртуальные машины обычно используют дисковое пространство блочных СХД.
Высокопроизводительных вычислений.
В качестве хранилища для сред разработки.

Обычно блочные СХД используется в сетях типа SAN (Storage Attached Network).

Из минусов можно назвать высокую стоимость. Также здесь ограничен объем метаданных.

Файловые хранилища

Этот вид СХД представляет собой каталоги с файлами. Главное достоинство — простота работы, кроме того они дешевле блочных систем. Такая топология особенно удобна, если вам не нужно обрабатывать большие объемы данных.

Как правило, на таких СХД построено следующее:

Системы совместного использования файлов для работы распределенной команды над проектом.
Системы локального архивирования для регулярного создания резервных копий.

Главный недостаток — когда данных много, скорость работы хранилища становится ниже. Поэтому они лучше всего подходят для ситуаций, когда скорость отклика не критична. Файловые сервера NAS (Network Attached Storage) обычно строятся именно на таких хранилищах.

Объектные хранилища

Здесь можно хранить большие объемы данных — до петабайтов. Они хранятся не как файлы, а как объекты. У них есть уникальные идентификаторы и метаданные, поэтому получить доступ к объектам просто. Кроме того, они имеют внутренние механизмы проверки целостности и доступности файлов. Благодаря подробной метаинформации объектов вы можете оптимизировать хранение и расходы на хранилище.

Такие хранилища используются:

для машинного обучения и аналитики: на их основе можно внедрять новые решения и оптимизировать облачные приложения;
хранения больших медиафайлов — например, если вам нужно хранить много фотографий товаров в высоком разрешении;
big data — например, если ваши клиенты генерируют много данных и вы хотите их анализировать;
систем бэкапа;
разработки в облаке;
хостинга.

Именно на объектных СХД построена инфраструктура таких сервисов, как Facebook, Dropbox, Netflix, Spotify. Все они оценили масштабируемость, расширяемость метаданных и скорость доступа к информации. Но это не делает такие хранилища универсальным решением. Поэтому для своего проекта вам следует выбирать между всеми вариантами.

Примеры решений

NetApp

Один из лидеров мирового рынка СХД. Головной офис компании расположен в США. NetApp производит следующие типы СХД:

AFF С190. Младшие модели, стоят недорого, оптимальны для небольших организаций. Устойчивы к сбоям и надежны в части работы виртуальных машин.
AFF A-Series. Они созданы для непрерывной работы критически важных приложений, систем виртуализации и баз данных. Спроектированы так, чтобы занимать как можно меньше места и потреблять как можно меньше энергии в дата-центре.
EF-Series. В их основе — только SSD. Они оптимальны для работы бизнес-приложений, где важна скорость транзакций, а также производительность и надежность.
FAS-Series. Гибридные СХД, которые подходят для больших проектов. При этом, одновременно их можно использовать и для резервного копирования.

Среди преимуществ этих СХД:

Благодаря цельной системной архитектуре, модернизация и масштабирование проводятся просто.
Можно объединить сетевые хранилища на базе сетевой операционной системы NetWare или Windows.
Расходуется меньше ресурсов ОС, потому что бэкапы создаются быстрее.
Быстрота и защищенность ОС.
Расширенные опции по виртуализации как серверов, так и рабочих станций.
Совместимость с системами виртуализации и комбинирование с enterprise-приложениями.
Поддержка iSCSI, HTTP, NFS, FC, FTP, CIFS.

ITGLOBAL.COM получил от компании уровень партнерства Gold. За 12 лет компания накопила большую экспертизу, внедряя эти СХД у разных заказчиков. Также на хранилищах NetApp построена облачная инфраструктура ITGLOBAL.COM.

Hewlett Packard Enterprise

Среди достоинств решений от HPE — автоматизированная система управления жизненным циклом и повышения доступности массива. Вендор обещает, что у него достаточно накопленных глобальных данных, чтобы предотвращать проблемы заранее. Плюс СХД в том, что можно подобрать простое в установке решение, которое не будет требовать большого опыта работы в сфере хранения данных.

Одна из самых оптимальных СХД от HPE — Primera, разработанная для критически важных приложений. Она экономно потребляет ресурсы, поэтому производительность всегда остается высокой. Также можно отметить HPE Nimble, в которой используются интеллектуальные функции анализа для контроля состояния СХД.

Dell

Вендор старается предлагать подходящие решения для организаций разных масштабов. При покупке решения есть возможность заранее запланировать модернизацию, что снижает общую стоимость использования. Решения от этого вендора считаются надежными и эффективными. Также среди достоинств — легкая масштабируемость и высокая скорость работы.

Здесь можно отметить серию SC, в которой есть как гибридные решения, так и полностью построенные на SSD. Среди их плюсов — современная архитектура и высокая производительность. Также существует серия PowerVault ME4, созданная для упрощения работы с сетями SAN и DAS.

Плюсы хранения и обработки данных в облаке

Одно из главных преимуществ — ответственность за их сохранность лежит на провайдере. Вот еще плюсы такого подхода.

Масштабируемость. Вы пользуетесь и оплачиваете ровно тот объем услуг, который необходим. При этом, можно гибко менять конфигурацию как в сторону увеличения, так и в сторону уменьшения.
Не нужно покупать оборудование, которое затем будет простаивать. Это обеспечивает гибкость, глобальную масштабируемость и надежность.
Высокая скорость запуска. Благодаря облачной инфраструктуре ваши ИТ-специалисты смогут быстро получить нужное количество пространства для хранения данных и развертывания проектов. Они смогут заниматься более важной работой, а не обслуживанием СХД.
В СХД вы сможете настроить уровни доступа к информации любой сложности. Можно вводить и изменять уровни доступа к различным данным, чтобы каждый пользователь видел только нужную ему информацию.

Как выбрать надежного поставщика для хранения данных в облаке

Хороший вендор обладает несколькими качествами, которые сделают вашу совместную работу предсказуемой и уберегут от неприятных сюрпризов.

У него должен быть опыт работы с СХД с лучшими на рынке. Хороший знак, если у него есть профессиональная сертификация от производителя и успешные кейсы с крупными компаниями.
Поставщик должен иметь опыт управления сложной ИТ-инфраструктурой , с разными типами СХД. Лучший вариант здесь — Managed IT провайдер.
Хорошо, если СХД и сетевая инфраструктура размещены в надежных центрах обработки данных уровня Tier III.

Также важно заранее определиться, какой объем данных вы расчитываете хранить в облаке и какого типа они будут. Чем яснее вы заранее ответите на эти вопросы, тем точнее вы сможете рассчитать расходы, обсуждая конкретное облачное решение с поставщиком.