Как стать автором
Обновить

Комментарии 17

За 40 евро в месяц можно загнать в разы больше информации в Amazon Glacier
Deep Archive 0,00099 USD за 1 ГБ, за 40 евро в 10 раз больше получается

Если мы оптимисты, и считаем, что доставать не потребуется? :) Плюс там еще плата за закачку есть, как я понимаю, в дополнение к плате за перенос из архива и за ускорение скачивания.

https://www.reddit.com/r/aws/comments/rsw4i9/s3_glacier_deep_archive_are_these_the_costs/

My situation is I have ~4TB of data I want to backup. The files will never need to be changed but I may add new files in the future. I will only ever need to pull down the files again if I have a disaster-scenario.

I've asked around and it sounds financially like it would make most sense to go for Amazon S3 Glacier Deep Archive. According to the pricing structure:

  • Uploading my data to the bucket is $0.0018 per GB.

    • So 0.0018 1024 (a TB) 4 = $7.3728 per month to store my 4TB of data.

That seems to be the cheap bit - only $7.37 a month to store my data. However, if I ever have a disaster scenario and I need to retrieve the data:

  • To request the data to be pulled out of archive it's $0.026 per thousand requests.

    • Let's just assume I have 5,000 files that's $0.13 to get all my data out of archive into a temporary S3 Standard Bucket.

  • The data is then restored to a normal S3 Standard account for the length of the time I choose where it's $0.024 per GB, per month.

    • So that's $0.024 1024 4 = $98.30 if I store it in S3 Standard for a month (do they do pro-rata fees if it's just available for one or two days as I download it to my machine?)

  • And then in the Data Transfer tab it says to get the data out of AWS back to my computer, it would be $0.09 per GB for the first 10TB.

    • So that's 0.09 1024 4 = $368.64?!

  • Total: 0.13 + $98.30 + $368.64 = $467.07 for a one time restore?

Is that all right? Am I missing anything extra?

Also, I pushed a button somewhere (I can't find it for the life of me now!) which gave me the option of what I think was choosing the speed of the download? It was defaulted at 1GB/hr but I could change it and if I changed it, the cost could potentially end up in the thousands. That worries me because 1GB/hr won't be sufficient when it's 4TB in a temporary bucket.

Только там ещё (а) плата за запросы (PUT, COPY, POST, LIST), если у нас много мелких файлов, может вылететь в копеечку и (б) за скачивание совсем неприличные деньги. Ну и это за пределами РФ, а в свете событий последних лет даже если вся инфраструктура крутится за границей, хочется иметь резервную копию на всякий случай именно в России.

Так что меня предложение заинтересовало, отложу в закладки. Хотя и в статье, и на сайте подробностей маловато.

Ну и Minio и вообще объектное хранилище для задачи бекапа файлов на один единственный удалённый сервер, IMHO, лишняя сущность. Достаточно NFS-шару поднять. Шифровать всё равно надо на отправляющей стороне, инкрементальность и версионирование обеспечивает или софт бекапа, или ФС сервера, - а лишний оверхед на HTTP-запросы в данном случае не оправдан никакими преимуществами. Ну по крайней мере мне так кажется.

А в /dev/null ещё дешевле информацию загонять будет. :) С ледником ведь основной вопрос в восстановлении, если вдруг что.

Пока представитель компании спит :), глянул на Вашу ссылку (мне самому интересен вопрос). Тоже хорошее предложение, но совсем другое.

Во-первых, тут полноценный VPS, там просто место для доступа по SFTP/SMB/etc. Ну т.е. ни S3 не настроишь, как в посте, ни, скажем, Proxmox Backup Server не взгромоздишь (мне вот надо), никакой другой софт для бекапа с серверной частью и т.п.

Во-вторых, там Германия, тут Москва. IMHO, резервные копии в текущих условиях надо бы иметь по обе стороны границы для защиты от разных рисков. Ну а для кого-то, наоборот, критично либо только тут, либо только там. В общем, не особо взаимозаменяемые предложения.

P.S. Ну а rclone vs restic - тут уж на вкус и цвет, оба инструмента отличные.

Во первых - Наша локация Москва, а у них, судя по всему, европейские дата-центры

Почему rclone а не restic? - rclone более универсальный, может работать с разными облачными хранилищами помимо S3, а так же умеет chunked upload для больших файлов

если нужна простая система бэкапов с дедупликацией — restic топ

Я дешевле 40 арендую дедик в Амстердаме с 4х3Тб дисками...

да, тянуть терабайты данных в Европу из РФ— то ещё удовольствие

Ну, я не в РФ так что это не проблема.

А в чём нынче траблы тянуть из РФ? Ну и если это бэкапы - то обычно тянуть нужно один раз, а потом уже инкрементально.

В современных реалиях у корпоративного сегмента нет желания хранить данные своей компании за рубежом)

К тому же ФЗ это регулирует:

  1. 152-ФЗ "О персональных данных" - персональные данные россиян должны храниться в России

  2. 187-ФЗ "О безопасности критической информационной инфраструктуры" - Запрещает хранение и обработку данных о критически важных объектах за пределами РФ.

В современных реалиях корпоративного сегмента, если мы не про госсектор, совершенно точно нет желания хранить данные в РФ :) За рубежом за них как-то спокойнее, особенно после разрыва всех связей как с зарубежными IT-корпорациями, так и с зарубежными правоохранительными органами.

Но вот перспектива жёстких блокировок по белым спискам протоколов, каковые уже применялись точечно, заставляет-таки в РФ переползать. Для личных нужд какой-нибудь очередной хитрый прокси всегда найдётся, но вот туннелировать через него трафик даже небольшой компании может оказаться крайне печально. Не говоря уже про риски блокировки твоей учётки с той стороны границы - как бы ты ни притворялся честной турецкой/казахской/пр. компанией, трафик-то с российских IP :)

В общем, лично мой выбор на текущий момент для микробизнеса - сервер в РФ (bare metal, а не VPS, чтобы шифрование данных хоть как-то помогло), 2 бекапа - один за границей, второй на другой площадке в РФ. Вот применительно к выбору этой второй площадки и любопытно Ваше предложение, да.

А 152-ФЗ и тем более 187-ФЗ всё равно не выполнить без сертифицированного облака и подписанных по этому поводу юридически обязывающих бумажек. Тем, кого за их соблюдение есть риски реально попасть, можно только посочувствовать, тут сразу другой порядок расходов.

да, тянуть терабайты данных в Европу из РФ— то ещё удовольствие

Ну в нормальном режиме, пока РКН не свирепствует, вполне себе нормально тянутся эти терабайты, каждую ночь в процессе бекапа 300 Мбит/с канал забивается полностью (и больше бы забился, но мне хватает, нет смысла платить за больше). Но есть риски, согласен, про них в комментарии выше написал.

перетаскивать терабайты данных через половину континента интересное занятие наверное)

мы предлагаем локацию в датацентре Москвы!

А какая разница, куда перетаскивать, я же не на себе несу? ))

Ну и раз уж на то пошло, я далеко не в Москве, как и многие тут.

Зарегистрируйтесь на Хабре, чтобы оставить комментарий