Всех приветствую!
В данном топике я расскажу о нашем реальном процессе перехода с системы HP EVA P6300 на новую СХД, опишу наши ожидания и что из них было получено, а что — нет. В тексте процесс выбора систем будет очень кратким, хотя процесс выбора занял ОЧЕНЬ много времени. Не привожу никаких данных IOPS дабы не начинатьcockfighting полемику. Не в этом цель статьи. Я просто описываю свой реальный опыт.
Занимаемся оптово-розничной торговлей инструментами, построена федеральная сеть по стране, Центральный офис — на Дальнем Востоке. База данных — 1C 8.2 УПП, несколько баз по 300-500 Гбайт, все рабочие. Все филиалы работают в единой базе. Среднее число одновременно работающих в базах — от 300 до 500 человек.
В 2011 году мной была построена СХД на базе протокола FC 8Gb, состоящая из 2 коммутаторов Brocade 8/24, серверов HP DL с HBA 82Q, ленточная библиотека HP ML2024 для организации резервного хранения данных и собственно сама СХД HP EVA P6300 для хранения данных, в основном БД 1С.
Состав EVA: 1 полка, 25 SAS SFF дисков 300 Gb 15K. Построены vRAID-группы 1 и 5 уровня для различных (по степени важности) данных.
При работе 1С в декабре 2012 происходила периодически деградация производительности 1С, что останавливало работу касс розничных магазинов и бизнес-процессы компании в целом.
Проведенный в декабре 2012 — январе 2013 года анализ показал, что узким местом в системе является именно дисковая подсистема.
Итак, узкое место найдено. Было 3 пути решения — нарастить количество дисков, купив дополнительные полки к EVA, перейти на SSD или купить хранилку уровнем выше.
Перенос активных (самых часто используемых данных) на SSD в текущей EVA в серьез не рассматривался, поскольку EVA не поддерживала ( и не будет) data tiering, а размер баз с учетом постановки их в vRAID-1 делал такое решение просто безумно дорогим.
При использовании просто второй полки качественного прироста производительности при вкладывании достаточно немалой суммы (более 1,1 млн рублей за полку с 25 дисками 300 gb 15К) мы не получали.
Поэтому я донес до руководства компании, что для кардинального решения нужна замена дискового массива. Получив одобрение и максимальную сумму, которую можно потратить («но лучше поменьше») начался процесс отбора.
Поскольку базируемся на Дальнем Востоке, были изначально откинуты вендоры, не представленные авторизованными СЦ и представительствами далее чем Новосибирск, а также по которым имелось много нареканий по сервису. По этой причине вообще не рассматривались NetApp, HDS, etc. В шортлисте остались HP (несмотря на их невнятные позиции на тот момент в сегменте СХД), IBM с их Storwize и EMC. Обязательными условиями были:
1. Наличие data tiering или аналогичных функций (перенос часто используемых данных на более быстрые диски и наоборот)
2. Поддержка SSD-дисков
3. Интерфейс FC 8Gb
4. Возможность расширения в дальнейшем
За базовую конфигурацию были взяты следующие данные — 40 дисков SAS 15K +8 SSD 200Gb.
Местные интеграторы дали первые предложения: EMC VNX 5300 и IBM Storwize 7100. Начались стандартные торги и уточнения конфиг, условий и т.д.
И тут зайдя как обычно 1 раз в месяц на сайт HP я увидел описание новой линейки 3PAR, позиционирующейся как middle-cost решение. Запросил информацию. Местные интеграторы узнали о данном оборудовании от меня :), соответственно сказать подробностей не могли. Сайт HP — больше рекламный («больше-выше-быстрее но кого — не скажем») чем технический, по этому продукту на тот момент почти ничего не было (январь 2013 года, напомню).
Связался с ДВ-представительством HP, получил проспекты, материалы чуть более подробные. Но в российском офисе HP дать потестить железку отказались, ибо нет их еще в России и дорого :).
К тому времени стало понятно, что Storwize по цене не проходит в бюджет, IBM очень неохотно и долго двигалась в цене.
EMC (после того, как им был «случайно» озвучен вариант с 3PAR) вместо VNX5300 предложила чуть дороже VNX5500. Это была серьезная заявка на победу. И вдруг HP обмолвилось, что готова зачесть стоимость существующей и стоящей на гарантии EVA в счет 3PAR оставив при этом EVA у нас. Это сделало решение дешевле на 18-22 килобакса привлекательней.
1 QR483A 4A HP 3PAR StoreServ 7400 2-N Storage Base
20 QR492A 4A HP M6710 300GB 6G SAS 15K 2.5in HDD
20 QR492A 0D1 4A Factory integrated
4 QR503A 4A HP M6710 200GB 6G SAS 2.5in SLC SSD
4 QR503A 0D1 4A Factory integrated
1 BC795A 43 HP 3PAR 7400 Reporting Suite LTU
1 BC795A 0D1 43 Factory integrated
1 BC773A 43 HP 3PAR 7400 OS Suite Base LTU
1 BC773A 0D1 43 Factory integrated
48 BC774A 43 HP 3PAR 7400 OS Suite Drive LTU
48 BC774A 0D1 43 Factory integrated
1 BC781A 43 HP 3PAR 7400 Virtual Copy Base LTU
1 BC781A 0D1 43 Factory integrated
48 BC782A 43 HP 3PAR 7400 Virtual Copy Drive LTU
48 BC782A 0D1 43 Factory integrated
1 BC787A 43 HP 3PAR 7400 Adaptive Opt Base LTU
1 BC787A 0D1 43 Factory integrated
48 BC788A 43 HP 3PAR 7400 Adaptive Opt Drive LTU
48 BC788A 0D1 43 Factory integrated
1 BC785A 43 HP 3PAR 7400 Dynamic Opt Base LTU
1 BC785A 0D1 43 Factory integrated
48 BC786A 43 HP 3PAR 7400 Dynamic Opt Drive LTU
48 BC786A 0D1 43 Factory integrated
1 QR490A 4A HP M6710 2.5in 2U SAS Drive Enclosure
20 QR492A 4A HP M6710 300GB 6G SAS 15K 2.5in HDD
20 QR492A 0D1 4A Factory integrated
4 QR503A 4A HP M6710 200GB 6G SAS 2.5in SLC SSD
4 QR503A 0D1 4A Factory integrated
1 HA110A3 72 HP 3y Support Plus 24 SVC
1 HA110A3 RDD 6W HP 3PAR 7400 OS Suite Base LTU Supp
1 HA110A3 RDG 6W HP 3PAR 7400 Virtual Copy Base LTU Supp
1 HA110A3 RDJ 6W HP 3PAR 7400 Adaptive Opt Base LTU Supp
1 HA110A3 RDK 6W HP 3PAR 7400 Dynamic Opt Base LTU Supp
1 HA110A3 RDQ 6W HP 3PAR 7400 Reporting Suite LTU Supp
192 HA110A3 WSF 6W HP 3PAR Internal Entitlement Purpose
40 HA110A3 WUS 6W HP 3PAR 7000 Drives under 1TB Support
8 HA110A3 WUU 6W HP 3PAR 7000 200GB SSD Support
1 HA110A3 WUW 6W HP 3PAR 7000 Drive Enclosure Support
1 HA110A3 WVA 6W HP 3PAR 7400 2-node Storage Base Supp
1 HA114A1 UW HP Installation and Startup Service
1 HA114A1 5TQ UW HP Startup 3PAR 7400 2-Nd Strg Base SVC
1 HA114A1 5TV UW HP Startup 3PAR 7000 2U SAS Enclosre SVC
4 QK734A 1Y HP Premier Flex LC/LC OM4 2f 5m Cbl
3 HF383A1 4J HP CP Svc for Storage Training
1 HA124A1 UW HP Technical Installation Startup SVC
1 HA124A1 5TM UW HP Startup 3PAR 7000 Reporting Ste SVC
1 HA124A1 5TB UW HP Startup 3PAR 7000 Dynamic Opt SVC
1 HA124A1 5TC UW HP Startup 3PAR 7000 Adaptive Opt SVC
Модель с 2 контроллерами и возможностью расширения при необходимости еще 2-мя.
Дополнительная гарантия — 3 года.
Срок поставки — 10 недель с внесения предоплаты.
Итак, 2 коробки с полностью собранными (диски воткнуты в слоты) бандлами приехали в офис. Поскольку был в контракте оплачен пункт
HP Installation and Startup Service и HP Technical Installation Startup SVC своим инженерам я запретил трогать коробки. Начались обзвоны поставщику, в ДВ-представительство HP и в московский офис HP с вопросом «Когда же»!!! HP-ДВ удивилось, но через 4 дня прислало 2 инженеров для настройки.
Сразу сказали, что делают это впервые. Они по присланным из HP-Россия бумажкам начали настройку. Очень скоро выяснилось (на второй день) что нужен еще виртуальный сервер на VMware для развертывания программы управления. Сервер выделили.
К концу 3 дня специалисты установили девайсы в стойку, подсоединили в существующую СХД, дали адреса, пароли, логины, подключили FC-диск к серверу и ушли. Меня немного насторожило, что на хосте диск видится в качестве 4 устройств, но инженерам видней.
По докам с сайта HP мы разбили тома, настроили CPG и оптимизацию. Реальный прирост производительности не заставил себя долго ждать. Даже без тестилок типа iometer прирост в 1С впечатлял.
Прошло 2 месяца, и я вдруг вспомнил про строчку контракта — 3 штуки HP CP Svc for Storage Training. В свое время ее включили в стоимость для получения дополнительной скидки (сумма скидки ощутимо перекрывала стоимость позиции). Через HP-ДВ узнали, что это — стоимость обучения 1 человека на курсе базовой настройки. Сайт HP подсказал дату ближайших курсов — 8-10 июля.
Готовим документы и человек летит в «нерезиновую» для получения знаний. 8 числа звонок от него — есть более глубокие курсы, начинаются 11 июля, стоят денег. По безналу естественно оплатить не успеваем. Кое-как в последний момент оплачиваем налом, оформляем договор на физлицо (налом от юрика оформить договор HP не умеет).
По прилету спеца наконец домой, начинаем анализировать что и как было настроено нами ранее, понимаем что все — не по «феншую». Переделываем метод подключения на серверах использую MPIO (вот откуда были 4 ранее смущавших меня диска), перенастроив CPG и настроив оптимизацию по канонам HP.
Итак, главный вывод — работой системы доволен практически полностью, хорошие (почти отличные) инструменты по контролю состояний, мониторингу производительности и т.д. Отчеты в 1С реально грузятся быстрей в разы, ни одного нарекания по остановке сервиса не было. Свою задачу железяка исполняет отлично! При этом старую — «проданную» EVA переориентируем сейчас на другие задачи, что не может не радовать. Кстати очень порабовал RAID-5 по скорости работы (при этом он не тирится).
upd: Радует техподдержка. Когда мы в результате эксперимента превысили резервом 85% объема дисков — тут же отзвонились, предупредили.
Однако:
1. Почему нельзя было настроить MPIO инженерами HP? Не позволила религия или не дали нормальную инструкцию?
2. Неужели нельзя подробней дать информацию о тех же курсах, времени проведения, линейки как таковой?
3. Учебный центр HP — очень негибкий по договорам, условиям оплаты и т.д. Компания, купив продукт за далеко не 1-2 млн. рублей не может проучить специалиста на 25 тыр. с отсрочкой платежа в 2-3 дня? ИМХО, бред. В результате оформить обучение правильно «по белой» мы не смогли.
Конечно необходимо учитывать, что это был первый опыт продаж и настройки данной системы на ДВ, но «осадочек остался».
В данном топике я расскажу о нашем реальном процессе перехода с системы HP EVA P6300 на новую СХД, опишу наши ожидания и что из них было получено, а что — нет. В тексте процесс выбора систем будет очень кратким, хотя процесс выбора занял ОЧЕНЬ много времени. Не привожу никаких данных IOPS дабы не начинать
Коротко о Компании
Занимаемся оптово-розничной торговлей инструментами, построена федеральная сеть по стране, Центральный офис — на Дальнем Востоке. База данных — 1C 8.2 УПП, несколько баз по 300-500 Гбайт, все рабочие. Все филиалы работают в единой базе. Среднее число одновременно работающих в базах — от 300 до 500 человек.
Что было
В 2011 году мной была построена СХД на базе протокола FC 8Gb, состоящая из 2 коммутаторов Brocade 8/24, серверов HP DL с HBA 82Q, ленточная библиотека HP ML2024 для организации резервного хранения данных и собственно сама СХД HP EVA P6300 для хранения данных, в основном БД 1С.
Состав EVA: 1 полка, 25 SAS SFF дисков 300 Gb 15K. Построены vRAID-группы 1 и 5 уровня для различных (по степени важности) данных.
При работе 1С в декабре 2012 происходила периодически деградация производительности 1С, что останавливало работу касс розничных магазинов и бизнес-процессы компании в целом.
Проведенный в декабре 2012 — январе 2013 года анализ показал, что узким местом в системе является именно дисковая подсистема.
Варианты решения
Итак, узкое место найдено. Было 3 пути решения — нарастить количество дисков, купив дополнительные полки к EVA, перейти на SSD или купить хранилку уровнем выше.
Перенос активных (самых часто используемых данных) на SSD в текущей EVA в серьез не рассматривался, поскольку EVA не поддерживала ( и не будет) data tiering, а размер баз с учетом постановки их в vRAID-1 делал такое решение просто безумно дорогим.
При использовании просто второй полки качественного прироста производительности при вкладывании достаточно немалой суммы (более 1,1 млн рублей за полку с 25 дисками 300 gb 15К) мы не получали.
Поэтому я донес до руководства компании, что для кардинального решения нужна замена дискового массива. Получив одобрение и максимальную сумму, которую можно потратить («но лучше поменьше») начался процесс отбора.
Выбор решения (кратко)
Поскольку базируемся на Дальнем Востоке, были изначально откинуты вендоры, не представленные авторизованными СЦ и представительствами далее чем Новосибирск, а также по которым имелось много нареканий по сервису. По этой причине вообще не рассматривались NetApp, HDS, etc. В шортлисте остались HP (несмотря на их невнятные позиции на тот момент в сегменте СХД), IBM с их Storwize и EMC. Обязательными условиями были:
1. Наличие data tiering или аналогичных функций (перенос часто используемых данных на более быстрые диски и наоборот)
2. Поддержка SSD-дисков
3. Интерфейс FC 8Gb
4. Возможность расширения в дальнейшем
За базовую конфигурацию были взяты следующие данные — 40 дисков SAS 15K +8 SSD 200Gb.
Местные интеграторы дали первые предложения: EMC VNX 5300 и IBM Storwize 7100. Начались стандартные торги и уточнения конфиг, условий и т.д.
И тут зайдя как обычно 1 раз в месяц на сайт HP я увидел описание новой линейки 3PAR, позиционирующейся как middle-cost решение. Запросил информацию. Местные интеграторы узнали о данном оборудовании от меня :), соответственно сказать подробностей не могли. Сайт HP — больше рекламный («больше-выше-быстрее но кого — не скажем») чем технический, по этому продукту на тот момент почти ничего не было (январь 2013 года, напомню).
Связался с ДВ-представительством HP, получил проспекты, материалы чуть более подробные. Но в российском офисе HP дать потестить железку отказались, ибо нет их еще в России и дорого :).
К тому времени стало понятно, что Storwize по цене не проходит в бюджет, IBM очень неохотно и долго двигалась в цене.
EMC (после того, как им был «случайно» озвучен вариант с 3PAR) вместо VNX5300 предложила чуть дороже VNX5500. Это была серьезная заявка на победу. И вдруг HP обмолвилось, что готова зачесть стоимость существующей и стоящей на гарантии EVA в счет 3PAR оставив при этом EVA у нас. Это сделало решение дешевле на 18-22 килобакса привлекательней.
В результате был выбран вариант HP 3PAR в следующей конфе:
1 QR483A 4A HP 3PAR StoreServ 7400 2-N Storage Base
20 QR492A 4A HP M6710 300GB 6G SAS 15K 2.5in HDD
20 QR492A 0D1 4A Factory integrated
4 QR503A 4A HP M6710 200GB 6G SAS 2.5in SLC SSD
4 QR503A 0D1 4A Factory integrated
1 BC795A 43 HP 3PAR 7400 Reporting Suite LTU
1 BC795A 0D1 43 Factory integrated
1 BC773A 43 HP 3PAR 7400 OS Suite Base LTU
1 BC773A 0D1 43 Factory integrated
48 BC774A 43 HP 3PAR 7400 OS Suite Drive LTU
48 BC774A 0D1 43 Factory integrated
1 BC781A 43 HP 3PAR 7400 Virtual Copy Base LTU
1 BC781A 0D1 43 Factory integrated
48 BC782A 43 HP 3PAR 7400 Virtual Copy Drive LTU
48 BC782A 0D1 43 Factory integrated
1 BC787A 43 HP 3PAR 7400 Adaptive Opt Base LTU
1 BC787A 0D1 43 Factory integrated
48 BC788A 43 HP 3PAR 7400 Adaptive Opt Drive LTU
48 BC788A 0D1 43 Factory integrated
1 BC785A 43 HP 3PAR 7400 Dynamic Opt Base LTU
1 BC785A 0D1 43 Factory integrated
48 BC786A 43 HP 3PAR 7400 Dynamic Opt Drive LTU
48 BC786A 0D1 43 Factory integrated
1 QR490A 4A HP M6710 2.5in 2U SAS Drive Enclosure
20 QR492A 4A HP M6710 300GB 6G SAS 15K 2.5in HDD
20 QR492A 0D1 4A Factory integrated
4 QR503A 4A HP M6710 200GB 6G SAS 2.5in SLC SSD
4 QR503A 0D1 4A Factory integrated
1 HA110A3 72 HP 3y Support Plus 24 SVC
1 HA110A3 RDD 6W HP 3PAR 7400 OS Suite Base LTU Supp
1 HA110A3 RDG 6W HP 3PAR 7400 Virtual Copy Base LTU Supp
1 HA110A3 RDJ 6W HP 3PAR 7400 Adaptive Opt Base LTU Supp
1 HA110A3 RDK 6W HP 3PAR 7400 Dynamic Opt Base LTU Supp
1 HA110A3 RDQ 6W HP 3PAR 7400 Reporting Suite LTU Supp
192 HA110A3 WSF 6W HP 3PAR Internal Entitlement Purpose
40 HA110A3 WUS 6W HP 3PAR 7000 Drives under 1TB Support
8 HA110A3 WUU 6W HP 3PAR 7000 200GB SSD Support
1 HA110A3 WUW 6W HP 3PAR 7000 Drive Enclosure Support
1 HA110A3 WVA 6W HP 3PAR 7400 2-node Storage Base Supp
1 HA114A1 UW HP Installation and Startup Service
1 HA114A1 5TQ UW HP Startup 3PAR 7400 2-Nd Strg Base SVC
1 HA114A1 5TV UW HP Startup 3PAR 7000 2U SAS Enclosre SVC
4 QK734A 1Y HP Premier Flex LC/LC OM4 2f 5m Cbl
3 HF383A1 4J HP CP Svc for Storage Training
1 HA124A1 UW HP Technical Installation Startup SVC
1 HA124A1 5TM UW HP Startup 3PAR 7000 Reporting Ste SVC
1 HA124A1 5TB UW HP Startup 3PAR 7000 Dynamic Opt SVC
1 HA124A1 5TC UW HP Startup 3PAR 7000 Adaptive Opt SVC
Модель с 2 контроллерами и возможностью расширения при необходимости еще 2-мя.
Дополнительная гарантия — 3 года.
Срок поставки — 10 недель с внесения предоплаты.
Прошло 11 недель
Итак, 2 коробки с полностью собранными (диски воткнуты в слоты) бандлами приехали в офис. Поскольку был в контракте оплачен пункт
HP Installation and Startup Service и HP Technical Installation Startup SVC своим инженерам я запретил трогать коробки. Начались обзвоны поставщику, в ДВ-представительство HP и в московский офис HP с вопросом «Когда же»!!! HP-ДВ удивилось, но через 4 дня прислало 2 инженеров для настройки.
Сразу сказали, что делают это впервые. Они по присланным из HP-Россия бумажкам начали настройку. Очень скоро выяснилось (на второй день) что нужен еще виртуальный сервер на VMware для развертывания программы управления. Сервер выделили.
К концу 3 дня специалисты установили девайсы в стойку, подсоединили в существующую СХД, дали адреса, пароли, логины, подключили FC-диск к серверу и ушли. Меня немного насторожило, что на хосте диск видится в качестве 4 устройств, но инженерам видней.
По докам с сайта HP мы разбили тома, настроили CPG и оптимизацию. Реальный прирост производительности не заставил себя долго ждать. Даже без тестилок типа iometer прирост в 1С впечатлял.
Работа над ошибками
Прошло 2 месяца, и я вдруг вспомнил про строчку контракта — 3 штуки HP CP Svc for Storage Training. В свое время ее включили в стоимость для получения дополнительной скидки (сумма скидки ощутимо перекрывала стоимость позиции). Через HP-ДВ узнали, что это — стоимость обучения 1 человека на курсе базовой настройки. Сайт HP подсказал дату ближайших курсов — 8-10 июля.
Готовим документы и человек летит в «нерезиновую» для получения знаний. 8 числа звонок от него — есть более глубокие курсы, начинаются 11 июля, стоят денег. По безналу естественно оплатить не успеваем. Кое-как в последний момент оплачиваем налом, оформляем договор на физлицо (налом от юрика оформить договор HP не умеет).
По прилету спеца наконец домой, начинаем анализировать что и как было настроено нами ранее, понимаем что все — не по «феншую». Переделываем метод подключения на серверах использую MPIO (вот откуда были 4 ранее смущавших меня диска), перенастроив CPG и настроив оптимизацию по канонам HP.
Заключение
Итак, главный вывод — работой системы доволен практически полностью, хорошие (почти отличные) инструменты по контролю состояний, мониторингу производительности и т.д. Отчеты в 1С реально грузятся быстрей в разы, ни одного нарекания по остановке сервиса не было. Свою задачу железяка исполняет отлично! При этом старую — «проданную» EVA переориентируем сейчас на другие задачи, что не может не радовать. Кстати очень порабовал RAID-5 по скорости работы (при этом он не тирится).
upd: Радует техподдержка. Когда мы в результате эксперимента превысили резервом 85% объема дисков — тут же отзвонились, предупредили.
Однако:
1. Почему нельзя было настроить MPIO инженерами HP? Не позволила религия или не дали нормальную инструкцию?
2. Неужели нельзя подробней дать информацию о тех же курсах, времени проведения, линейки как таковой?
3. Учебный центр HP — очень негибкий по договорам, условиям оплаты и т.д. Компания, купив продукт за далеко не 1-2 млн. рублей не может проучить специалиста на 25 тыр. с отсрочкой платежа в 2-3 дня? ИМХО, бред. В результате оформить обучение правильно «по белой» мы не смогли.
Конечно необходимо учитывать, что это был первый опыт продаж и настройки данной системы на ДВ, но «осадочек остался».
