В наш центр компетенции приехала большая куча коробок с логотипами и защитными марками CISCO. Наконец-то мы смогли вживую увидеть, как выглядят сервера CISCO UCS. Ниже представляем фотоотчет процесса распаковки и осмотра блейд-серверов.
Для нас это событие знаковое: 12 сентября этого года мы получили специализацию CISCO Advanced Unified Computing Technology, и теперь, учитывая золотой статус NetApp и Enterprise VMware, мы получили возможность собрать полноценный FlexPod.
На Хабре архитектура Cisco UCS обсуждалась не раз, напомним основные элементы:
1) Fabric Interconnect – коммутаторы на основе Nexus 5000 со встроенным функционалом UCS Manager, позволяющим управлять всеми серверами, настройками BIOS, прошивками компонентов, коммутаторами, маршрутизацией, виртуализацией и автоматизацией. Также позволяют работать с Ethernet и SAN сетями и полноценно поддерживают протокол FCoE.
2) UCS 5108 Blade Chassis – шасси, в которое устанавливаются серверы-лезвия (блейд-серверы). Используется, как централизованная система охлаждения серверов и подвода питания к серверам.
3) Fabric Extender (FEX) – расширяет Fabric Interconnect в блейд-шасси, прокладывая множественные 10 Гбит/с соединения между блейд-серверами и Fabric Interconnect. Не является коммутатором. Управляется как расширитель к коммутатору Fabric Interconnect. Управляет блоками питания и вентиляторами. Устанавливается в заднюю часть блейд-шасси.
Вот так бандл CISCO UCS выглядит в упакованном состоянии: пирамида выше человеческого роста.
Коробка в основании скрывает в себе шасси (5108 Blade Chassis), далее идут 4 блэйд-сервера (UCS B200 M3 Blade Server). Над серверами возвышаются 2 коммутатора (UCS 6248UP Fabric Interconnect), вершина пирамиды — это 4 коробки с кабелями.
Итак, приступим к вскрытию.
На одной из коробок обнаруживаем небольшую пробоину — видимо доставка была жесткой. Хорошо, что в ней находятся кабели. Они не пострадали)
![упакованный бандл cisco UCS](https://habrastorage.org/r/w780q1/getpro/habr/post_images/eef/be3/ad7/eefbe3ad7baea82f78656a374e068fe7.jpg)
На остальных коробках дефектов не обнаружено. Поэтому мы приступаем к раскрытию коробок с серверами-лезвиями. Каждое лезвие надежно упаковано.
![blade cisco UCS cisco UCS blade](https://habrastorage.org/r/w780q1/getpro/habr/post_images/f17/a3c/b7a/f17a3cb7a753cc7ce88fd736f0208ea1.jpg)
![blade cisco UCS cisco UCS blade](https://habrastorage.org/r/w780q1/getpro/habr/post_images/571/34e/fca/57134efcab8c539d16a6c8cbb554d570.jpg)
Не удержались и снимаем крышку сервера, с целью проверить вся ли оперативная память на месте, все ли процессоры.
![blade cisco UCS cisco UCS blade](https://habrastorage.org/r/w780q1/getpro/habr/post_images/e1b/39d/d48/e1b39dd4868ca2d48c6b0713603c4f2b.jpg)
Как видно на фотографии, между процессорами сделана перегородка из оргстекла, для того, чтобы потоки воздуха между CPU не пересекались. Желтыми стрелочками указано направление выделения тепла от процессора.
![blade cisco UCS cisco UCS blade](https://habrastorage.org/r/w780q1/getpro/habr/post_images/3d2/c65/d6d/3d2c65d6d3192ae46d54f4e28eb6d312.jpg)
Убедившись что все внутренности на месте, закрываем сервера крышками и переходим к распаковке самого массивного элемента системы – шасси. Каждое шасси вмещает 8 серверов-лезвий половинной ширины или 4 сервера-лезвия полной ширины.
![blade cisco UCS cisco UCS blade](https://habrastorage.org/r/w780q1/getpro/habr/post_images/268/c59/365/268c593657b5fd6c80f135bb3c7e6c8d.jpg)
Шасси занимает 6 юнитов в стойке, охлаждение происходит «спереди-назад». По умолчанию стоят заглушки, которые необходимо вынуть перед установкой серверов.
![Chassis cisco UCS cisco UCS blade Chassis](https://habrastorage.org/r/w780q1/getpro/habr/post_images/a45/bd8/33a/a45bd833a8469d3e3ffeee8d01a861a3.jpg)
На задней панели расположены 8 вентиляторов и 2 сетевых модуля UCS 2208XP Fabric Extender. Данные модули расположены вертикально, как уже говорилось выше главная их функция – это расширение Fabric Interconnect.
![Chassis cisco UCS cisco UCS blade Chassis](https://habrastorage.org/r/w780q1/getpro/habr/post_images/848/a5e/038/848a5e0385dadef8b590db444a3a8295.jpg)
Вытащить Extender’ы с первого раза не получилось, они так просто не поддавались. Для того, чтобы это сделать, необходимо отвернуть два болта крепления и с силой потянуть на себя.
![Chassis cisco UCS fan of cisco UCS blade Chassis](https://habrastorage.org/r/w780q1/getpro/habr/post_images/812/8fd/e25/8128fde2570df05f9734e77e07ce8894.jpg)
Каждый экстендер содержит 8x10GE портов. На каждое шасси возможна установка до двух экстендеров, следовательно всего 160 Gbps на шасси.
![Extender cisco UCS Extender of cisco UCS blade Chassis](https://habrastorage.org/r/w780q1/getpro/habr/post_images/04d/8a4/c1a/04d8a4c1a3504c227af8863e5b6428c7.jpg)
Далее настала очередь центрального коммутатора UCS 6248UP Fabric Interconnect.
![Extender cisco UCS Extender of cisco UCS blade Chassis](https://habrastorage.org/r/w780q1/getpro/habr/post_images/a26/826/f84/a26826f8417b2be2aef38cdea195477e.jpg)
Коммутаторы 6200 Fabric Interconnect имеют 2 модели: корпус размером 1RU с 48-ю портами (6248UP) и 2RU с 96 портами (6296UP), соответственно. В отличие от первого поколения (Cisco UCS 6100 Fabric Interconnect) в данных моделях увеличена плотность портов на 1RU.
![Fabric Interconnect cisco UCS Fabric Interconnect of cisco UCS](https://habrastorage.org/r/w780q1/getpro/habr/post_images/088/a4a/d05/088a4ad05c354f867817a9d1909c1486.jpg)
В нашем случае это Fabric Interconnect 6248UP с 32-ю портами и возможностью добавления 16-ти портового модуля. Каждый порт коммутатора является универсальным, т.е. поддерживает технологии Ethernet и FC.
![Fabric Interconnect cisco UCS Fabric Interconnect of cisco UCS](https://habrastorage.org/r/w780q1/getpro/habr/post_images/e6a/f00/ad9/e6af00ad993e424af2538263af7233f1.jpg)
Коммутатор имеет по паре вентиляторов и блоков питания с возможностью горячей замены.
На задней панели мы видим, что блоки питания и охлаждения продублированы. Данная опция считается обязательной для построения отказоустойчивой инфраструктуры. Каждый модуль имеет возможность горячей замены: блок охлаждения крепится винтом, а для замены блока питания необходимо отжать рычажок (серого цвета на фото).
![Fabric Interconnect cisco UCS Fabric Interconnect of cisco UCS](https://habrastorage.org/r/w780q1/getpro/habr/post_images/3a1/d28/7be/3a1d287be0649741857f4e0cb785cc5c.jpg)
Убедившись, что доставка произведена успешно и оборудование соответствует спецификации, упаковываем систему обратно в коробки и транспортируем на место установки.
![cisco UCS cisco UCS](https://habrastorage.org/r/w780q1/getpro/habr/post_images/912/80e/111/91280e1113cf8796c9c4acd8c7f19473.jpg)
В ближайшее время данная система будет смонтирована и настроена. В следующем посте мы сделаем обзор по установке и нюансах эксплуатации системы управления Cisco UCS.
Для того чтобы познакомиться с системой Cisco UCS, а также другим оборудованием, предоставляемым нашей компанией, вы можете обратиться в наш центр компетенции. Там вы получите ответы на интересующие вопросы и сможете обсудить варианты построения ИТ-инфраструктуры. Успехов!
![общий вид cisco UCS cisco UCS](https://habrastorage.org/getpro/habr/post_images/fef/563/92c/fef56392ca0c3684295c3afc426a407c.jpg)
Для нас это событие знаковое: 12 сентября этого года мы получили специализацию CISCO Advanced Unified Computing Technology, и теперь, учитывая золотой статус NetApp и Enterprise VMware, мы получили возможность собрать полноценный FlexPod.
На Хабре архитектура Cisco UCS обсуждалась не раз, напомним основные элементы:
1) Fabric Interconnect – коммутаторы на основе Nexus 5000 со встроенным функционалом UCS Manager, позволяющим управлять всеми серверами, настройками BIOS, прошивками компонентов, коммутаторами, маршрутизацией, виртуализацией и автоматизацией. Также позволяют работать с Ethernet и SAN сетями и полноценно поддерживают протокол FCoE.
2) UCS 5108 Blade Chassis – шасси, в которое устанавливаются серверы-лезвия (блейд-серверы). Используется, как централизованная система охлаждения серверов и подвода питания к серверам.
3) Fabric Extender (FEX) – расширяет Fabric Interconnect в блейд-шасси, прокладывая множественные 10 Гбит/с соединения между блейд-серверами и Fabric Interconnect. Не является коммутатором. Управляется как расширитель к коммутатору Fabric Interconnect. Управляет блоками питания и вентиляторами. Устанавливается в заднюю часть блейд-шасси.
Вот так бандл CISCO UCS выглядит в упакованном состоянии: пирамида выше человеческого роста.
![упакованный бандл cisco UCS](https://habrastorage.org/getpro/habr/post_images/a88/bb6/7b2/a88bb67b29bebc014677cfa7182066a6.jpg)
Коробка в основании скрывает в себе шасси (5108 Blade Chassis), далее идут 4 блэйд-сервера (UCS B200 M3 Blade Server). Над серверами возвышаются 2 коммутатора (UCS 6248UP Fabric Interconnect), вершина пирамиды — это 4 коробки с кабелями.
Итак, приступим к вскрытию.
На одной из коробок обнаруживаем небольшую пробоину — видимо доставка была жесткой. Хорошо, что в ней находятся кабели. Они не пострадали)
![упакованный бандл cisco UCS](https://habrastorage.org/getpro/habr/post_images/eef/be3/ad7/eefbe3ad7baea82f78656a374e068fe7.jpg)
На остальных коробках дефектов не обнаружено. Поэтому мы приступаем к раскрытию коробок с серверами-лезвиями. Каждое лезвие надежно упаковано.
![blade cisco UCS cisco UCS blade](https://habrastorage.org/getpro/habr/post_images/f17/a3c/b7a/f17a3cb7a753cc7ce88fd736f0208ea1.jpg)
![blade cisco UCS cisco UCS blade](https://habrastorage.org/getpro/habr/post_images/571/34e/fca/57134efcab8c539d16a6c8cbb554d570.jpg)
Не удержались и снимаем крышку сервера, с целью проверить вся ли оперативная память на месте, все ли процессоры.
![blade cisco UCS cisco UCS blade](https://habrastorage.org/getpro/habr/post_images/e1b/39d/d48/e1b39dd4868ca2d48c6b0713603c4f2b.jpg)
Как видно на фотографии, между процессорами сделана перегородка из оргстекла, для того, чтобы потоки воздуха между CPU не пересекались. Желтыми стрелочками указано направление выделения тепла от процессора.
![blade cisco UCS cisco UCS blade](https://habrastorage.org/getpro/habr/post_images/3d2/c65/d6d/3d2c65d6d3192ae46d54f4e28eb6d312.jpg)
Убедившись что все внутренности на месте, закрываем сервера крышками и переходим к распаковке самого массивного элемента системы – шасси. Каждое шасси вмещает 8 серверов-лезвий половинной ширины или 4 сервера-лезвия полной ширины.
![blade cisco UCS cisco UCS blade](https://habrastorage.org/getpro/habr/post_images/268/c59/365/268c593657b5fd6c80f135bb3c7e6c8d.jpg)
Шасси занимает 6 юнитов в стойке, охлаждение происходит «спереди-назад». По умолчанию стоят заглушки, которые необходимо вынуть перед установкой серверов.
![Chassis cisco UCS cisco UCS blade Chassis](https://habrastorage.org/getpro/habr/post_images/a45/bd8/33a/a45bd833a8469d3e3ffeee8d01a861a3.jpg)
На задней панели расположены 8 вентиляторов и 2 сетевых модуля UCS 2208XP Fabric Extender. Данные модули расположены вертикально, как уже говорилось выше главная их функция – это расширение Fabric Interconnect.
![Chassis cisco UCS cisco UCS blade Chassis](https://habrastorage.org/getpro/habr/post_images/848/a5e/038/848a5e0385dadef8b590db444a3a8295.jpg)
Вытащить Extender’ы с первого раза не получилось, они так просто не поддавались. Для того, чтобы это сделать, необходимо отвернуть два болта крепления и с силой потянуть на себя.
![Chassis cisco UCS fan of cisco UCS blade Chassis](https://habrastorage.org/getpro/habr/post_images/812/8fd/e25/8128fde2570df05f9734e77e07ce8894.jpg)
Каждый экстендер содержит 8x10GE портов. На каждое шасси возможна установка до двух экстендеров, следовательно всего 160 Gbps на шасси.
![Extender cisco UCS Extender of cisco UCS blade Chassis](https://habrastorage.org/getpro/habr/post_images/04d/8a4/c1a/04d8a4c1a3504c227af8863e5b6428c7.jpg)
Далее настала очередь центрального коммутатора UCS 6248UP Fabric Interconnect.
![Extender cisco UCS Extender of cisco UCS blade Chassis](https://habrastorage.org/getpro/habr/post_images/a26/826/f84/a26826f8417b2be2aef38cdea195477e.jpg)
Коммутаторы 6200 Fabric Interconnect имеют 2 модели: корпус размером 1RU с 48-ю портами (6248UP) и 2RU с 96 портами (6296UP), соответственно. В отличие от первого поколения (Cisco UCS 6100 Fabric Interconnect) в данных моделях увеличена плотность портов на 1RU.
![Fabric Interconnect cisco UCS Fabric Interconnect of cisco UCS](https://habrastorage.org/getpro/habr/post_images/088/a4a/d05/088a4ad05c354f867817a9d1909c1486.jpg)
В нашем случае это Fabric Interconnect 6248UP с 32-ю портами и возможностью добавления 16-ти портового модуля. Каждый порт коммутатора является универсальным, т.е. поддерживает технологии Ethernet и FC.
![Fabric Interconnect cisco UCS Fabric Interconnect of cisco UCS](https://habrastorage.org/getpro/habr/post_images/e6a/f00/ad9/e6af00ad993e424af2538263af7233f1.jpg)
Коммутатор имеет по паре вентиляторов и блоков питания с возможностью горячей замены.
На задней панели мы видим, что блоки питания и охлаждения продублированы. Данная опция считается обязательной для построения отказоустойчивой инфраструктуры. Каждый модуль имеет возможность горячей замены: блок охлаждения крепится винтом, а для замены блока питания необходимо отжать рычажок (серого цвета на фото).
![Fabric Interconnect cisco UCS Fabric Interconnect of cisco UCS](https://habrastorage.org/getpro/habr/post_images/3a1/d28/7be/3a1d287be0649741857f4e0cb785cc5c.jpg)
Убедившись, что доставка произведена успешно и оборудование соответствует спецификации, упаковываем систему обратно в коробки и транспортируем на место установки.
![cisco UCS cisco UCS](https://habrastorage.org/getpro/habr/post_images/912/80e/111/91280e1113cf8796c9c4acd8c7f19473.jpg)
В ближайшее время данная система будет смонтирована и настроена. В следующем посте мы сделаем обзор по установке и нюансах эксплуатации системы управления Cisco UCS.
Для того чтобы познакомиться с системой Cisco UCS, а также другим оборудованием, предоставляемым нашей компанией, вы можете обратиться в наш центр компетенции. Там вы получите ответы на интересующие вопросы и сможете обсудить варианты построения ИТ-инфраструктуры. Успехов!