Pull to refresh
  • by relevance
  • by date
  • by rating

Samsung выпустил «неубиваемые» SSD

Manufacture and development of electronics *Computer hardware Data storaging

SSD-накопитель PM1733 с обработкой аппаратных сбоев по типу RAID-5/6

SSD-накопители работают на порядок быстрее HDD, но страдают из-за ненадёжных контроллеров. Samsung пытается это исправить. Компания запустила в массовое производство две первые модели SSD с рядом новых технологий: 96-слойная 3D флеш-память с четырьмя битами на ячейку QLC V-NAND, поддержка PCIe 4.0 (скорость чтения 8 ГБ/с) и самое главное — более надёжные контроллеры, которые продолжают работу после многих сбоев, раньше считавшихся фатальными.

«Гарантированная работа даже при возникновении ошибок на уровне микросхемы означает внедрение первых в отрасли "неубиваемых" (never-dying) SSD-накопителей», — заявляется в пресс-релизе Samsung.
Читать дальше →
Total votes 25: ↑22 and ↓3 +19
Views 37K
Comments 59

Стартовала викторина по RAID 2.0+ в рамках «Уроков с экспертами»

Huawei corporate blog Data storage *

На форуме Huawei Enterprise началась викторина с вопросами по RAID 2.0+, которая проходит в рамках обучающей программы "Уроки с экспертами." Урок ведет Дарья Хафизова, HCIE Storage, руководитель группы инфраструктурных решений ICL.

Целью данного урока является помощь инженерам в освоении материала, необходимого для прохождения сертификации по направлению Storage.

Технология RAID2.0+ пришла на смену традиционного RAID и является "сердцем" cистем хранения данных Huawei.

Именно поэтому на просторах интернета можно найти множество статей, посвященных RAID 2.0+, где каждый автор пытается заглянуть под капот и поделиться с читателями своим видением этого интересного решения.

В рамках нового урока предлагаем всем, кто еще не глубоко знаком с RAID 2.0+, разобраться со всеми тонкостями его работы, а гуру-администраторам - подключаться к обсуждению (всегда есть шанс упустить что-то важное) и, конечно, не забывать про новый летний конкурс!

В первой части мы детально на примерах посмотрим, как строится многоуровневая архитектура виртуализации, во второй - обсудим, как происходит восстановление данных, и какие преимущества у RAID 2.0+ перед традиционным RAID.

Первая часть вопросов выглядит так:

Пройти квиз
Total votes 8: ↑8 and ↓0 +8
Views 399
Comments 0

Беззащитные данные

Lumber room
В голове крупных бизнес-потребителей ИТ произошло наконец-то смещение акцента с бизнес-приложений на данные, обрабатываемые этими приложениями. А в словосочетании «центр обработки данных» теперь заслуженно выделяют третье слово, а не второе. Вместе с пониманием главной роли данных в бизнесе пришёл и панический страх их утери. Ведь по статистике IDC, в случае продолжительного отсутствия доступа к оперативным данным большинство компаний ожидает банкротство.

Существует два принципиально разных подхода к обеспечению надёжности хранения данных. Первый – это резервное копирование. С резервированием связаны два главных понятия – RPO (recovery point objective) и RTO (recovery time objective). RPO – это момент времени, в который система содержала данные, соответствующие резервной копии. RTO – это время, занимаемое процессом резервирования/восстановления. Естественно, что с ростом объёма корпоративных данных, RTO растёт пропорционально объёму данных, а RPO возникают всё реже и реже. А значит, самые свежие, самые ценные данные становятся наиболее уязвимыми, и их объём при этом возрастает.

Второй подход – это «data is always there», то есть защита данных непосредственно в системе хранения, в момент их попадания туда. А это означает real time RPO и стремящееся к нулю RTO. Этот подход усиленно продвигается грандами систем хранения данных (в частности, компанией EMC). Самый популярный способ обеспечения защиты по предложенной концепции – RAID (redundant array of independent disk; кстати, ранее вместо слова «independent» фигурировало «inexpensive», что для современных fibre channel дисков вряд ли применимо). Принцип действия заключается в объединении нескольких дисков в группу и хранении в ней данных и избыточной информации. Думаю, нет особого смысла рассказывать про уровни RAID, поскольку нас сейчас интересует самый популярный уровень – 5.
((cut))
В RAID5 группе данные сохраняются «размазанными» по всем дискам, также «размазанными» сохраняются и коды коррекции – информация, требующаяся для восстановления данных. Её избыточность для RAID5 составляет оптимальные 25% от объёма полезных данных. RAID5 построен таким образом, что группа выдерживает отказ одного диска единовременно.

Казалось бы, при такой технологии хранения, данные действительно always there. Давайте посмотрим насколько «always». Тонкий момент здесь заключается в том, что группа выдерживает отказ только одного диска в один момент времени. Даже если вы моментально заменяете этот диск, группе требуется определённое время для того, чтобы восстановить на этот диск данные и коды коррекции (rebuild). Данные, естественно, при этом доступны, но если во время проведения процедуры rebuild произойдёт отказ ещё одного диска, то группа будет разрушена. Чем больше дисков в группе и чем больше объём каждого диска, тем более частым будет отказ одного из них, и тем больше времени требуется на rebuild. Вплоть до того, что RAID5 группа из большого количества недорогих объёмных дисков может полностью разрушаться несколько (3-4 раза) раз за год!

Решение этой проблемы во введении двойной коррекции, RAID6 или RAID5 DP. Такая группа выдерживает отказ уже двух дисков в один момент времени (как мы выяснили выше, «момент» для больших групп довольно продолжительное время процедуры rebuild). Отказ двух дисков подряд событие не частое. Теоретически, для групп менее 20 ТБ уровень RAID6 обеспечивает на 2 порядка лучшую защиту данных (время до потери данных) для дисков со средними параметрами, чем RAID5.

Практика заставляет усомниться в теории вероятности: выход из строя второго диска в момент rebuild весьма вероятен. Особенно это касается систем, находящихся под серьёзной рабочей нагрузкой. Влияют на это два фактора. Во-первых, процедура rebuild на продуктивной системе серьёзно нагружает диски, количество операций чтения/записи значительно увеличивается на уже сильно нагруженной системе. Во-вторых, при современном уровне микроэлектроники, диски выходят с конвейера похожими друг на друга как клоны; соответственно, и такой важный параметр, как время наработки на отказ (MTBF), у них практически одинаков. Таким образом, один из дисков, достигший предельного времени работы, приводит к повышенной нагрузке на всю группу, более быстрому, чем в обычных условиях, исчерпанию ресурса остальных дисков и, как следствие, повышенной вероятности отказа ещё одного диска. Этакое веерное отключение.

Производители систем хранения борются с этим как могут. Например, IBM при заказе системы хранения поставляет диски различных производителей и различных партий, для того чтобы внести неоднородность в MTBF дисков и уменьшить вероятность одновременного отказа двух дисков в группе. Однако, концепцию data is always there это не спасает. И наряду с защитой данных in-place продолжает использоваться и резервное копирование. Что, кстати, также не обеспечивает 100% защиты данных от аппаратного сбоя…

Держите это в уме: ваш бизнес уязвим, как и ваши данные. Абсолютная защита данных невозможна, но используя комбинированный подход к защите данных, надёжные устройств и полным резервированием систем хранения вероятность потери корпоративных данных можно минимизировать.
Total votes 61: ↑52 and ↓9 +43
Views 702
Comments 114

4-терабайтное хранилище данных от LaCie

Computer hardware
Компания LaCie представила Biggest Quadra — 4-терабайтное хранилище, предназначенное для резервного копирования данных. Новинка поддерживает возможность создания RAID-массивов уровней 0, 0+1 и 5.

Читать дальше →
Total votes 16: ↑12 and ↓4 +8
Views 1.1K
Comments 37

Теперь и до 1Тб на вашем MacBook

IT-companies
Компания MCE Technologies анонсировала сегодня комплект OptiBay, позволяющий вам с легкостью получить 1Тб на вашем «яблочном» товарище.

Если вам тяжело расставаться с вашим оптическим приводом, то специально для вас есть опция, а именно — либо внешний оптический привод с типами подключения FireWire и USB, либо внешний кейс для подключения оптического привода.

Вы можете использовать на данный момент уже два ваших жестких диска, как один, объединив их в RAID массив, или же вы можете их использовать, как отдельные диски, с помощью Disk Utility от Apple. Также вы можете использовать второй диск, как хранилище для бэкапов от Time Machine, если у вас стоит Mac OS X Leopard

Поддерживаемые модели ноутбуков от Apple: MacBook Pro 15" и 17", MacBook 13.3" и Apple PowerBook G4 12", 15" и 17". Но будьте внимательны, производитель предупреждает, что в 15" моделях MacBook и MacBook Pro используются нестандартных размеров оптические приводы, поэтому они и добавили оптический привод, как отдельную опцию.

Стоимость этого удовольствия доходит до $948 за самую передовую модель, заказать можно здесь. В этот комплект входит OptiBay с жестким диском объемом 500Гб и дополнительным SATA жестким диском от MCE Technologies такого же объема, и в дополнение — внешний оптический привод.

Оригинал на dvice.ru
Total votes 17: ↑14 and ↓3 +11
Views 349
Comments 11

UNИX: доклад по теме «Системы хранения данных»

Lumber room
30 мая в 18:30 в ауд. 707 второго учебного корпуса МГУ (факультет ВМК, МГУ1С52) состоится семинар Александра Герасёва по теме «Системы хранения данных». Страница доклада здесь: uneex.mithril.cs.msu.su/Events/Storage

Доклад рассчитан на тех, кто пока мало что знает о СХД, SAN и тому подобных вещах (но хочет узнать больше), и на тех, кто готов вносить интересные комментарии; проходит в рамках семинара UNИX.

В здании факультета ВМК работает бюро пропусков. Для получения пропуска необходимо предъявить паспорт и сказать, на что вы идёте — и этого должно быть достаточно. В случае проблем в день семинара можно связаться с Артёмом Гавриченковым (это я) по телефону +7 916 515 4958 и в джаббере (ximaera@gmail.com).

P. S. С этой весны мероприятия UNИX начинают проходить более-менее регулярно, так что вопрос: насколько интересны подобные объявления в будущем?

31 мая 2008. Всем пришедшим спасибо, было круто!

Материалы лежат по следующим адресам:
uneex.mithril.cs.msu.su/Events/Storage
http://esyr.org/wiki/index.php/UNИX,_весна_2008,_04_семинар_(от_30_мая)
esyr.org/photo/uneex_08_05_30
Total votes 8: ↑8 and ↓0 +8
Views 478
Comments 9

Разбиение диска объемом больше 2 Тб

Lumber room
На сервере увеличили дисковый объем. Поставили 8 дисков по 750 Гб каждый, объединив их в пятый рейд. В итоге получили массив объемом около 4.5 Тб. Тут и столкнулся с ограничением MBR в 2 Тб. Не знаю как под Windows дела обстоят, возможно там все автоматизировано, но на нашем сервере стоит FreeBSD 6.2, и стандартный установщик sysinstall упорно не хотел разбивать диск на полный объем. На помощь пришел GUID partition table (GPT).

UPD: В Windows Server все действительно происходит автоматически. Единственно что GPT доступен начиная с версии Windows Server 2003 Service Pack 1.<p/>

подробности разбиения на примере FreeBSD
Total votes 12: ↑11 and ↓1 +10
Views 1.6K
Comments 11

Серверная история

Server Administration *Data recovery *
Эта история произошла со мной в течение предыдущей недели — с 26-го по 31 января 2009. Прожив этот чудесно крохотный период своей жизни, я осознал необходимость простых вещей, поверил в существование «случая» и все более разочаровался в людях. Тегами этой недели были RAID, Инфобокс и бекап. Хотя началось-то все гораздо раньше…
Читать дальше →
Total votes 119: ↑115 and ↓4 +111
Views 853
Comments 96

Unclesoсky podcast — Выпуск #24

Lumber room Astronautics
— Ваши комментарии
— Воспоминания о каратэ
— Футбольные темы
— Долбаное БЖД
— Расписание и подготовка
— Горгона Медуза и Юпитер
— Кактусу скоро конец
— Перепайка схемы в сабе
— Ох уж этот raid
— Кот не любит огнедыщащих драконов
— Про подкаст-загадку
— lfcfeniks.com за 10 часов
— У старичков
— Кинотема*
— Чего не успел
— Подкрутили брекеты
— Про зрение и ортокератологию

*Фильм: «Нереальный боевик»
*Сериалы: «Монк», «24», «eli stone», «Сверхъестественное», «life»

Podsafe: Maya Filipic — Between two worlds (jamendo.com)

unclesocky podcast24 / 27.1 Мб / 59:09 / MP3, 64 kbps
Download

Офф. сайт подкаста

RSS подкаста
Total votes 3: ↑1 and ↓2 -1
Views 221
Comments 0

raid из 24 ssd с фантастической скоростью

Lumber room
Буржуйским ребятам было скучно, незнали что делать и вот решили собрать сабж.
результат дейсвительно зверский:
чтение/запись более 2000 Мб/с
Офис грузится за пол секунды, двд-рип молнеееносто копируется
видео под хабракатом
Читать дальше →
Total votes 21: ↑18 and ↓3 +15
Views 606
Comments 23

Медиасервер Thecus M3800. Raid 5 comes home

Computer hardware Network hardware
Совсем недавно я писал об одном простеньком NAS-сервере от этой компании – Thecus N1200. И если он был предназначен больше для домашнего использования, то сегодня расскажу еще об одном устройстве, поставить которое будет не стыдно и в крупной компании ;).

image
Встречайте – Thecus M3800. Обзор, трафик.
Читать дальше →
Total votes 61: ↑52 and ↓9 +43
Views 1.7K
Comments 63

Замена хотсвопом диска в зеркале gmirror под FreeBSD

Lumber room
Ситуация: есть RAID-массив из двух SATA-дисков в зеркале, созданном с помощью gmirror под FreeBSD.

Необходимо заменить один диск, не останавливая работы сервера.

Капля теории


На тему собственно создания зеркала на GEOM есть много статей.

При создании зеркала gmirror синхронизирует все данные, включая MBR, гласит http://people.freebsd.org/~rse/mirror/ (раздел Summary -> GEOM mirror on whole disk). Если при отказе диска сервер умер, можно загрузиться с оставшегося диска, вне зависимости от того, какой диск вышел из строя. Важно только при загрузке правильно выбрать, с какого диска грузиться.

При работе массива команда

# gmirror list

практически постоянно показывает Flags: DIRTY. Это нормально: флаг выставляется, когда на диск записывается информация, и в этот момент состояние данных на дисках массива не совпадает. Если на диск постоянно ведётся запись, флаг DIRTY постоянно будет выставлен.

Процедура замены


Предположим, в массиве gm0 присутствуют два диска: da0 и da1. Заменить нужно da0.

В описываемой ситуации использовался camcontrol. В зависимости от контроллера, через который подключены винты, вместо него может понадобиться atacontrol.
  1. Выводим диск из зеркала:

    # gmirror remove gm0 da0
    

  2. Определяем, какой диск физически нужно заменить — у выведенного из зеркала диска не будет работать индикатор активности.
  3. Не выключая сервер, вытаскиваем диск.
  4. Здесь возможно следующее: сервер несколько секунд ничего не понимает, а потом на полминуты впадает в кому. Нужно немного подождать.
  5. После этого команды

    # geom disk list
    # gmirror list

    помогут обнаружить, что одного диска нет.
  6. Если не был выполнен пункт №1, просим gmirror забыть обо всех дисках, которые сейчас неактивны в зеркале:

    # gmirror forget gm0

    gmirror обнаруживает, что da0 нет и забывает про него.
  7. Вставляем новый диск (желательно идентичный тому, с которым в паре он будет работать, вплоть до модели).
  8. Сканируем шину, чтобы система обнаружила новый подключённый диск:

    # camcontrol devlist           # что имеем сейчас?
    # camcontrol rescan all        # сканируем
    # camcontrol devlist           # что получилось?
    

  9. Добавляем в массив новый da0:

    # gmirror insert gm0 da0

  10. gmirror обнаружит новый диск и начнёт синхронизацию данных. Смотрим состав массива:

    # gmirror list

  11. Не пугаемся, если нам кажется, что синхронизация идёт не в том направлении :) Если заменялся da0, то теперь он в списке ПОСЛЕ da1, а не ДО, как был раньше.
  12. Испытываем счастье.
Total votes 6: ↑6 and ↓0 +6
Views 1.3K
Comments 22

Идеальный NAS — Synology DS209+

Synology corporate blog
Редко, но бывает такое, что я пишу про идеальные устройства. Ну, или почти идеальные, ведь, как известно, идеал — недостижим. Но некоторые производители настолько стремятся к нему, что писать обзоры таких девайсов – сплошное удовольствие!

image

Сегодня речь пойдет о таком устройстве, как Synology DS209+ — пока это последний из NAS-ов, о котором я напишу. Обзор, трафик.
Читать дальше →
Total votes 255: ↑240 and ↓15 +225
Views 53K
Comments 199

Идеальный NAS? Часть 2 — NETGEAR ReadyNAS Duo

Computer hardware
Вопрос хранения гигабайтов информации я уже поднимал в своих обзорах. Хорошо, если я кому-то помог определиться с выбором сетевого хранилища… если же нет – вот еще один интересный девайс. Чтоб наверняка $)

image

Детальный фотообзор, трафик.
Читать дальше →
Total votes 66: ↑60 and ↓6 +54
Views 16K
Comments 117

Организация распределенного дискового хранилища с возможностью неограниченного расширения с применением технологий LVM и ATAoE

Configuring Linux *

Задача


Когда диски были маленькие, а Интернет большой, владельцы частных FTP-серверов сталкивались со следующей проблемой:
На каждом жестком диске создавалась папочка Video или Soft, и получалось так, что добавив новый жесткий диск, приходилось делать на нем папочки Video2, Soft2, etc.
Задача поменять жесткий диск на диск большего объема приводила к тому, что данные нужно было куда-то переносить, все это происходило нетривиально и с большими downtime'ами.
Разработанная нами система в 2005 году позволила собрать надежный и быстрый массив в 3 терабайта, масштабируемый, расширяемый, в режиме онлайн, добавляя диски или целые сервера с дисками.
Цена всего решения составляла 110% от стоимости самих дисков, т.е. по-сути, бесплатной, с небольшим overhead.

Вот примерная схема устройства нашего хранилища:


Читать дальше →
Total votes 75: ↑69 and ↓6 +63
Views 5.1K
Comments 66

Сказ о том, как поднимался упавший fake RAID 0

Data recovery *Data storage *
… или, точнее говоря, — как я восстанавливал данные с положеного мною nVidia RAID 0.

Завязка

Собственно, прелюдия. Живёт у меня дома комп, контроллер IDE у него реализован в nVidia MCP65. У данного контроллера есть опция, превращающая его в RAID-контроллер с поддержкой RAID 0 и RAID 1. В моём случае — RAID 0 из двух Samsung'ов по 250 Гб каждый. Вобщем, ничего сверхестественного, набортным RAID'ом удивить сложно было уже 5 лет назад, не то что в наше время. Если кого-то заинтересовала приставка «fake» — так принято называть полуаппаратные реализации RAID. Разберём на пальцах.
Читать дальше →
Total votes 63: ↑60 and ↓3 +57
Views 3.5K
Comments 42

перенос системы на RAID + LVM (краткий конспект)

Lumber room
Немножко о работе с soft'овым RAID (mdadm) и LVM, возможно при наличии кучи свободного времени ЭТО превратится в какую-то приличную статью… а пока, лишь куча команд с краткими комментариями.

Итак, однажды мне потребовалось больше места под виртуалбоксовую папку…
Читать дальше →
Total votes 4: ↑3 and ↓1 +2
Views 2.2K
Comments 5

Программный RAID1 (зеркалирование) на XenServer 5.5

Virtualization *
Возникла необходимость установить Citrix XenServer 5.5 на сервер с «ненастоящим» RAID'ом.

Просто классическая ситуация: Intel Matrix Storage Manager в BIOS'е нормально создает RAID1-массив, но Linux (на котором построен XenServer) продолжает его видеть как два независимых SCSI-диска: /dev/sda + /dev/sdb… Привет, Fake RAID!
Читать дальше →
Total votes 2: ↑2 and ↓0 +2
Views 4.2K
Comments 6

SAS против SATA: нужно ли персональной корове серверное седло?

Computer hardware
Сегодня мы решили поговорить о жестких дисках с интерфейсом SAS, и не случайно. Новый виток интереса к SAS винчестерам возник примерно год назад с выходом материнских плат Asus на чипсете X58. Их отличительной особенностью являлся интегрированный SAS-контроллер, тогда как раньше для использования жестких дисков такого типа необходимо было покупать отдельный контроллер, который стоил не меньше, чем материнская плата. И потихоньку довольно дорогие SAS диски со скоростью вращения шпинделя 15000 оборотов в минуту стали перебираться в топовые «игровые» персоналки. Мы имели возможность оценить первые пробные конфигурации с RAID массивом из двух SAS Seagate Cheetah 15K.6 от крупных московских дистрибьюторов, и сразу возникли сомнения в целесообразности установки этих серверных «винтов» в десктопный компьютер, хоть и самый дорогой.
Читать дальше →
Total votes 53: ↑47 and ↓6 +41
Views 22K
Comments 53

Правильное приготовление и работа с ZFS под FreeBSD

*nix *
Некоторое время назад возникла задача построения достаточно вместительного массива для хранения оперативных инкрементальных бекапов. Причём тратить деньги особо не хотелось, а место было нужно. Решение было простым и достаточно удобным. Далее много текста.

Читать дальше →
Total votes 39: ↑36 and ↓3 +33
Views 41K
Comments 45