Привет, Хабр! Меня зовут Александр Власов, 6 лет назад я создал Лабораторию R&D в «РТК-ЦОД» и с тех пор ей руковожу. О том, как работала наша команда в те далекие времена, я уже рассказывал на Хабре. С тех пор нам — впрочем, как и всем остальным инженерам и разработчикам — пришлось многое пережить. Мы росли и количественно, и качественно. Росло количество, а иногда и качество, российского «железа» и ПО, которое мы испытываем. О том, до чего все доросло, я и хочу рассказать.
Наша Лаборатория. Как мы изменились?
Если в 2022-2023 годах очень многим казалось, что еще немного — и все станет как раньше, то в дальнейшем такая мыслительная парадигма претерпела значительные изменения. Судите сами. До 2022 года Лаборатория проводила испытания сравнительно небольшого количества единиц ИТ-оборудования, в т.ч. отечественного. Рынок был понятен, продукция тоже. Начиная с 2023 года количество производителей и оборудования на российском ИТ-рынке значительно выросло, в том числе из-за взятого уже всерьез курса на импортозамещение. Значит, выросло и количество запросов на испытания. Выросло настолько, что имеющихся у нас ресурсов со всей очевидностью перестало хватать. Вот так одна стойка превратилась в 35, а ЦОДов в распоряжении Лаборатории стало два. Оба — в Москве.
Если раньше мы работали во внутренней корпоративной сети, то теперь у нас собственные сеть и облако, а еще полная автономия в управлении учетными записями и доступами. Даже ВПН у нас отдельный. Мы самостоятельно принимаем многие решения, в т.ч. о выдаче доступов в нашу отдельную сеть представителям производителей, продукцию которых испытываем. Такая автономия существенно облегчает жизнь.
Чьими силами сегодня проводятся испытания? В 2020 году нас было трое. Сейчас — 18. Появились отделы, внутри которых оформились направления по типам испытываемого оборудования: отдел сетевых технологий, отдел вычислительных комплексов и аналитическое направление. Есть и направление, которое занимается только эксплуатацией инфраструктуры Лаборатории. Такой рост позволил вывести на новый уровень экспертизу в проведении испытаний абсолютно любого инфраструктурного оборудования преимущественно российского производства.
Аналитическое направление решает огромное количество задач до и после испытаний: контактирует с производителями, чье «железо» и ПО представляется нам перспективным, анализирует их ответы в опроснике, проводит R&D-клуб, актуализирует составленные командой квадранты «РТК-ЦОД», построенные по аналогии с квадрантом Gartner. Квадранты отображают текущую картину рынка сетевого оборудования.
В команде Лаборатории нет случайных людей: все — маститые знатоки своего дела и просто хорошие люди с чувством локтя. К тому же, они настолько въедливы, что буквально не отстанут от производителей, пока те не исправят выявленные недостатки. На рынке таких специалистов днем с огнем не сыщешь.
Когда-то наша небольшая команда умела испытывать исключительно серверы. Чуть позже мы освоили испытания СХД блочного типа. Потом прошло буквально два года — и вот мы уже испытываем SDS, написав под них собственную ПМИ. Мы освоили также проведение испытаний S3, СРК, систем виртуализации, сетевого оборудования, балансировщиков нагрузки и ИБ-оборудования. Кстати, мои коллеги недавно выпустили статью об испытаниях СХД, где раскрыли гораздо больше подробностей о нашей внутренней кухне.
В среднем Лаборатория способна одновременно проводить испытания около 15 единиц оборудования и ПО или ПАК. При этом загрузка команды слабо предсказуема. Во-первых, интенсивность проведения зависит как от количества рабочих рук, так и от количества запросов (в норме на одного сотрудника приходится одно испытание). Во-вторых, каждому типу оборудования — свой срок проведения испытаний. Порой они проходят итерационно, в несколько этапов, потому что после исправления дефектов производителем мы испытываем оборудование повторно. При этом дефектов и исправлений может быть сколько угодно, а испытания продолжаются до тех пор, пока производитель не устранит абсолютно все недостатки и мы не признаем его продукцию годной к продакшену. Сами того не желая, мы становимся для производителя внешним Q&A-центром и выявляем такие недостатки, о которых он и не подозревал. Смешно и грустно, но мы зачастую знаем о продукции производителя больше, чем он сам.
Запросы на испытания мы получаем как внешние, так и внутренние — последние необходимы нам самим для проектов «РТК-ЦОД». У нас действуют тестовые стенды для ключевых проектов нашей компании, например, для «Облака КИИ», которые эмулируют продуктовую среду самих проектов и собраны полностью из отечественного оборудования. Внешние запросы мы получаем от тех заказчиков, которые не сталкивались с той или иной моделью оборудования от конкретного производителя.
Еще одно направление нашей работы — коммерческие испытания. Их заказывают компании, у которых нет собственных лаборатории и экспертизы, и вендоры, которым нужно продемонстрировать заказчику убедительный отчет о том, что их оборудование соответствует его ТЗ. Запросов на коммерческие испытания за последние годы стало так много, что мы выделили это направление в отдельную облачную услугу «Лабораторию как сервис» (Lab-as-a-service или LabaaS).
На каком оборудовании мы это делаем. Инфраструктура Лаборатории
У нас действует собственная IP-фабрика, функционирование которой обеспечивают коммутаторы компании «Бифорком». Стойки и шкафы в Лаборатории также отечественного производства — от компании «C3 Солюшнз». PDU от Systême Electric. Патч-панели — от НТСС. Для оптимизации процесса коммутации нового оборудования мы построили СКС. Серверы — от YADRO, 2-го поколения, СХД — Tatlin 2-го поколения.
За сетевую маршрутизацию в Лаборатории отвечает оборудование от «Элтекс».
Боремся с трудностями и побеждаем
Трудность первая. Несмотря на значительный рост команды, Лаборатория по-прежнему нуждается в кадрах. Для отдельных видов испытаний нам все так же не хватает рабочих рук, и нужны люди с уникальной экспертизой — не сисадмины, не архитекторы и не тестировщики, а самые настоящие исследователи. За рынком мы следим, но в основном выращиваем таких сотрудников внутри Лаборатории, так как сами по себе они таковыми не становятся и в «готовом» состоянии к нам не приходят.
Трудность вторая. Из-за большого количества задач и развертывания дополнительных тестовых стендов железа Богу железа требуется все больше и больше. Например, мы часто сталкиваемся с нехваткой серверов.
Трудность третья. Коллеги из других подразделений далеко не всегда осознают важность испытаний отечественного ИТ-оборудования. Мы их отчасти понимаем: у них сроки горят. Вот они и норовят буквально схватить что-нибудь с краю, чтобы проект максимально быстро выкатился в прод, и сэкономить время. Однако правило есть правило: нельзя просто так взять и использовать что бы то ни было без вердикта нашей команды. А иначе рискуем обрушить инфраструктуру — как свою, так и наших заказчиков с их жесткими SLA. К тому же, в долгосрочной перспективе оказывается, что заранее протестировать на самом деле быстрее, чем поставить в прод то, что не тестировали, и пытаться это поддерживать.
Трудность четвертая. Отдельные российские производители свято верят в высокое качество своей продукции, но при этом выпускают то, что на самом деле никуда не годится. Они надеются на авось, поэтому, услышав наш вердикт, просто забирают свое изделие и уходят. Мы же при этом потратили кучу времени — в отдельных случаях около года — на испытания.
А теперь — о хорошем. Есть и те, кто, изучив наш отчет, тщательно устраняют описанные нами недостатки. Иногда на это уходит больше года, но это уже другая история.
Планов — громадье!
В этом году планируем:
Дооснастить Лабораторию железом от одного китайского производителя для нагрузочного тестирования сетевого оборудования и не только.
Нарастить экспертизу в испытаниях оборудования для ВКС, IP-телефонии, инженерной инфраструктуры ЦОД. Будем и повышать квалификацию команды, и набирать новых специалистов, и разрабатывать новые ПМИ, а еще, конечно же, строить новые тестовые стенды.
С каждым годом нашим ПМИ доверяет все больше и больше производителей, поэтому они со спокойной душой передают нам свою продукцию.
Возможность ознакомиться с нашими ПМИ и оборудованием для тестовых стендов предоставляется заинтересованным компаниям — потенциальным заказчикам и производителям — в ходе экскурсий в дата-центры «РТК-ЦОД», которых у нас, к слову, уже 27. Для записи на экскурсию всегда можно связаться со мной или с коллегами по электронной почте. Представители компаний обычно знакомятся с нами на отраслевых конференциях.
Коммерческим партнерством мы не ограничиваемся: планируем вывести Лабораторию на качественно новый уровень: получить статус центра испытаний Минцифры РФ (для тестирования решений в реестре ведомства), разработать собственную систему добровольной сертификации ДПАК и аккредитации, что позволит вендорам в том числе проходить в Лаборатории аттестацию на соответствие их продукции требованиям к критической информационной инфраструктуре.
Вместо заключения
За те шесть лет, что действует Лаборатория, наши труды принесли пользу большому количеству российских вендоров, а следом и их клиентам. Мы превратились в крупную фабрику тестирования отечественного инфраструктурного оборудования, накопили огромную базу знаний. Этот информационный массив помогает в любой момент провести сравнительный анализ, чтобы определить, какое решение лучше, а какое — хуже. Рекомендации, которые мы предоставляем производителям по итогам испытаний, позволяют повышать качество российских ИТ-продуктов, а значит, и ИТ-отрасли РФ, в целом. А значит, мы напрямую влияем на технологический суверенитет страны.
Получается, что, как ни крутись, без R&D не обойтись. Пожалуй, на такой торжественной ноте я и закончу. До новых встреч!
