Selectel File Storage Beta: места много не бывает

[popov-as]

Добрый! Пользуюсь услугами.

Любые, попавшие в хранилище данные, троекратно реплицируются на разные диски в разных серверах, находящихся в разных серверных стойках.

Репликацию делаете с помощью DRBD? Если да, то синхронно (ожидая реплики) или асинхронно (реплицируется после записи)?

[fortyseven]

Репликация средствами ceph, синхронная.

[DuD]

Если под капотом ceph, почему для Proxmox не рекомендуете подключение к нему? Есть какие-то ограничения?

Proxmox умеет нативно в него ходить: https://pve.proxmox.com/wiki/Storage:_RBD

[werter_l]

Предположу, что nfs\cifs — более универсальное решение в отличие от ceph.

[fortyseven]

потому что Ceph надо еще уметь приготовить

[HuckF1nn]

Насколько я помню (поправьте, пожалуйста, если не прав - мог подзабыть):

• CIFS драйвер для Linux не поддерживает многопользовательское использование шары, под каким пользователем подключили, таким и будем пользоваться.

• У NFS есть опция all_squash, но она тоже делает немного не то. Фактически в NFS тоже только один UID для одного пользователя

Как вы обходите это? Бывали ли кейсы разграничения по пользователям в подключаемой шаре по CIFS или NFS (как в ванильном Linux - один каталог принадлежит одному пользователю, другой - другому. Читается по битам прав доступа)?

Я в свое время не смог такого добиться.

Заранее спасибо за ответы.

[nukler]

Хотелось бы подробнее остановится на ProxMox. Почему шару так и не смог смонтировать?

Первый раз с таким сталкиваюсь. Да NFS4.2 действительно есть косяки, но на 4.1 всегда корректно монтируется. И да, на NFS можно разместить диск машины. Работает, ну такое, для теста, но работает.

[fortyseven]

Попробуйте 3 версию. И мы сейчас тюним кэширование для решения проблем низкой производительности.

[nukler]

Нет нет, у меня все очень хорошо в этом плане, спасибо. Я монтирую NFS с версией 4.1 и ни разу у меня никаких проблем с монтирование не возникало (ну ладно, был разок, сам опростофилился).

А Вот почему возникла проблема у топикстартера, хотелось бы узнать.

Спасибо.

[fortyseven]

Сложно сказать, скорее всего какая-то бага в веб-интерфейсе proxmox. Лучше на их форумах уточнять, предварительно собрав логи ошибки.

[connected201]

Пара моментов:

Момент 1:

Придется использовать workaround-решение по монтированию NFS-хранилищ

Где само решение?

Момент 2: актуальная версия Proxmox Version: 7.0-1 . базируется на Debian 11

Момент 3: FreeNas не запустится без 8 Гигабайт оперативной памяти.

[Darksa]

1. Имеется в виду не пользоваться GUI и смонтировать как Linux-директорию.
2. У меня на скрине четко видно 7.0-8.
3. Полагаете, что 8 Гб оперативной памяти это много?

[connected201]

Полагаете, что 8 Гб оперативной памяти это много?

И да и нет, смотря что Freenas даёт за эти 8 гигабайт, ещё учитывая что статья написана для домашнего использования (или нет?), то 8 гигов, это много, у меня на интел нюке,с 8 гигабайтами крутятся 4 виртуалки, и всём всё хватает.+ Proxmox на ZFS разделе,

[connected201]

У меня на скрине четко видно 7.0-8.

(на момент написания статьи это версия 11)

Я хотел указать на то что версия 11 это Debian bullseye, а версия Proxmox 7.0-1 взята с сайта разработчика, сейчас микроверсия будет 7.0.11