Бюджетные хранилища на основе Ceph без покупки СХД

Чтобы организовать традиционное хранилище, необходима покупка СХД. С распределённым хранилищем Ceph можно разместить данные на вычислительной части и сократить расходы. Сколько денег поможет сэкономить Ceph, рассчитал руководитель облачных сервисов EFSOL Oblako Лев Корольков. Статья основана на 12-летнем опыте в системной интеграции и автоматизации бизнес-процессов.

Содержание

Ceph – хранилище на базе свободного ПО. Оно позволяет объединить дисковые пространства серверов. С Ceph можно организовать масштабируемое хранилище с высокой производительностью и избыточностью. Ceph можно использовать для создания объектного хранилища и в качестве блочного устройства.

В Сeph каждый блок данных реплицируется на несколько серверов. Это обеспечивает отказоустойчивость.

Фактор репликации в Ceph по умолчанию равен двум. Если вы не используете отказоустойчивые дисковые массивы, рекомендую настроить более высокий фактор репликации.

Если одна из нод выйдет из строя, Сeph зафиксирует недоступность блока данных. Через определенное время (300 секунд по умолчанию) он начнёт восстанавливать недостающие данные.

Если в кластер устанавливают новый сервер, происходит разбалансировка хранилища: диски на всех нодах равномерно заполняются данными. В Ceph этот механизм называется Crush.

Чтобы получить высокую производительность дискового пространства в Ceph, используйте Cache Tiering — многоуровневое кеширование. Для кэширования используется отдельный высокопроизводительный пул, а основные данные размещаются на недорогих жёстких дисках.

С помощью Ceph можно организовать бюджетное хранилище или частное облако без использования СХД. Мы рассчитали, во сколько обойдутся эти решения.

Организуем отказоустойчивое хранилище объемом 6 Тб.

Без использования Ceph потребуется закупить СХД в следующей конфигурации:

Решение будет стоить 19 000 USD.

Можно обойтись без покупки СХД, если использовать Ceph. В качестве хранилища предлагаю решение Supermicro Twin. Это четыре серверных платформы в едином корпусе высотой в два юнита. Основные узлы дублируются для большей отказоустойчивости.
Комплектация каждой ноды:

Без использования Ceph пришлось бы покупать СХД с дисками. Минимальные затраты составили бы порядка 19 000 USD — на 39% выше.

Еще больше снизить расходы можно, если использовать серверы б/у. Серверы Supermicro с конфигурациями 48 ГБ RAM и процессорами линейки 5600 будут стоить около 800 USD.

Диски настоятельно рекомендую купить новые. На каждый сервер можно поставить по одному SSD-диску для кэширования и по три диска SATA.

Облако без использования Ceph
Для классического частного облака понадобятся два компонента:

Даже небольшое облако, построенное по этой схеме обойдется недёшево. Например, облако из трех носителей будет стоит около 31 000 USD:

19 000 USD — стоимость СХД

12 000 USD — стоимость вычислительной части. Это три сервера с наполнением в 50%. Цена каждого: 4 000 USD.

Для облака на базе Ceph в качестве хранилища можно использовать дисковые ресурсы вычислительной части. Мы используем ту же платформу Supermicro. Она будет задействована и для работы виртуальных машин, и для хранения информации. Поэтому выберем более мощную комплектацию:

Собранное облако будет работать при выходе из строя одной ноды. На платформе можно развернуть около 10 виртуальных машин с конфигурациями 12 ГБ RAM, 4 vCPU, 400 Гб дискового пространства.