Продолжу свой рассказ про посещение дня открытых дверей в CERN.
Первая часть здесь
Вторая часть здесь
Часть 3. Вычислительный центр.
В этой части я расскажу о месте, где хранят и обрабатывают то, что является продуктом работы CERN — результаты экспериментов. Речь пойдет про вычислительный центр, хотя правильнее, наверное, его назвать дата центром. Но сначала я немного коснусь проблематики вычислений и хранения данных в CERN. Каждый год один только Большой Адронный Коллайдер производит такое количество данных, что если их записать на CD, получится стопка высотой 20 километров. Это происходит из-за того, что при работе коллайдера пучки сталкиваются 30 миллионов раз в секунду и при каждом столкновении возникает примерно 20 событий, каждое из которых производит большое количество информации в детекторе. Конечно, эта информация обрабатывается сначала в самом детекторе, затем поступает в локальный вычислительный центр и только потом передается в главный центр хранения и обработки данных. Тем не менее, приходится обрабатывать примерно петабайт данных каждый день. К этому надо добавить то, что эти данные надо не только хранить но и распределять между исследовательскими центрами по всему миру, а кроме того, поддерживать примерно 4000 пользователей WiFi сети в самом CERN. Необходимо добавить, что существует вспомогательный центр хранения и обработки данных в Венгрии, с которым существует 100 гигабитный линк. При этом внутри CERN проложено 35000 километров оптического кабеля.
Однако, таким мощным компьютерный центр был не всегда. На фотографии видно, как менялось используемое оборудование с течением времени.
Сейчас произошел переход от мейнфреймов к гриду обычных РС. В настоящее время центр обладает 90000 процессорных ядер в 10000 серверов, которые работают 24 часа в сутки 7 дней в неделю. В среднем на этом гриде одновременно работает 250000 заданий по обработке данных. Этот вычислительный центр находится на пике современных технологий и, часто, двигает вычислительную технику и IT вперед для решения задач, необходимых для хранения и обработки таких больших объемов данных. Достаточно упомянуть то, что в здании, находящемся недалеко от вычислительного центра Тимом Бернерсом-Ли был изобретен World Wide Web (расскажите об этом темидиотам альтернативно одаренным, которые, сидя в интернете, говорят, что фундаментальная наука не приносит пользы).
Однако вернемся к проблеме хранения данных. На фотографии видно, что вдопотопные времена раньше данные хранились на магнитных дисках (Да, да, я помню эти диски объемом 29 мегабайт на ЕС ЭВМ).
Чтобы посмотреть, как обстоят дела сегодня, я иду к зданию, где находится вычислительный центр.
Там, на удивление, народу не очень много и я довольно быстро прохожу внутрь. Нам показывают небольшой фильм, а затем ведут к запертой двери. Наш гид открывает дверь и мы оказываемся в достаточно большом зале, где находятся шкафы с магнитными лентами, на которых и записана информация.
Большая часть зала занята этими самыми шкафами.
В них хранится порядка 100 петабайт информации (что эквивалентно 700 годам Full HD видео) в 480 миллионах файлов. Интересно, что к этой информации имеют доступ примерно 10000 физиков по всему миру в 160 вычислительных центрах. Эта информация содержит все экспериментальные данные начиная с 70-х годов прошлого века. Если присмотреться повнимательнее, видно, как эти магнитные ленты расположены внутри шкафов.
В некоторых стойках находятся процессорные модули.
На столе располагается небольшая выставка того, что используется для хранения данных.
Этот вычислительный центр потребляет 3.5 мегаватта электрической энергии и имеет свой дизель-генератор на случай отключения электричества. Надо также сказать про систему охлаждения. Она расположена снаружи здания и гонит холодный воздух под фальш-полом. Водяное охлаждение используется лишь на небольшом числе серверов.
Если взглянуть внутрь шкафа, видно, как происходит автоматическая выборка и загрузка магнитных лент.
Пройдя далее можно увидеть стойки с другим оборудованием.
Вообще-то этот зал является не единственным залом, где расположена вычислительная техника, но то, что посетителей пустили хотя-бы сюда уже вызывает уважение к организаторам. Я сфотографировал то, что демонстрировалось на столе.
После этого появилась другая группа посетителей и нас попросили на выход. Делаю последнюю фотографию и покидаю вычислительный центр.
В следующей части я расскажу про мастерские, где создается и собирается уникальное оборудование, которое используется в физических экспериментах.
Первая часть здесь
Вторая часть здесь
Часть 3. Вычислительный центр.
В этой части я расскажу о месте, где хранят и обрабатывают то, что является продуктом работы CERN — результаты экспериментов. Речь пойдет про вычислительный центр, хотя правильнее, наверное, его назвать дата центром. Но сначала я немного коснусь проблематики вычислений и хранения данных в CERN. Каждый год один только Большой Адронный Коллайдер производит такое количество данных, что если их записать на CD, получится стопка высотой 20 километров. Это происходит из-за того, что при работе коллайдера пучки сталкиваются 30 миллионов раз в секунду и при каждом столкновении возникает примерно 20 событий, каждое из которых производит большое количество информации в детекторе. Конечно, эта информация обрабатывается сначала в самом детекторе, затем поступает в локальный вычислительный центр и только потом передается в главный центр хранения и обработки данных. Тем не менее, приходится обрабатывать примерно петабайт данных каждый день. К этому надо добавить то, что эти данные надо не только хранить но и распределять между исследовательскими центрами по всему миру, а кроме того, поддерживать примерно 4000 пользователей WiFi сети в самом CERN. Необходимо добавить, что существует вспомогательный центр хранения и обработки данных в Венгрии, с которым существует 100 гигабитный линк. При этом внутри CERN проложено 35000 километров оптического кабеля.
Однако, таким мощным компьютерный центр был не всегда. На фотографии видно, как менялось используемое оборудование с течением времени.
Сейчас произошел переход от мейнфреймов к гриду обычных РС. В настоящее время центр обладает 90000 процессорных ядер в 10000 серверов, которые работают 24 часа в сутки 7 дней в неделю. В среднем на этом гриде одновременно работает 250000 заданий по обработке данных. Этот вычислительный центр находится на пике современных технологий и, часто, двигает вычислительную технику и IT вперед для решения задач, необходимых для хранения и обработки таких больших объемов данных. Достаточно упомянуть то, что в здании, находящемся недалеко от вычислительного центра Тимом Бернерсом-Ли был изобретен World Wide Web (расскажите об этом тем
Однако вернемся к проблеме хранения данных. На фотографии видно, что в
Чтобы посмотреть, как обстоят дела сегодня, я иду к зданию, где находится вычислительный центр.
Там, на удивление, народу не очень много и я довольно быстро прохожу внутрь. Нам показывают небольшой фильм, а затем ведут к запертой двери. Наш гид открывает дверь и мы оказываемся в достаточно большом зале, где находятся шкафы с магнитными лентами, на которых и записана информация.
Большая часть зала занята этими самыми шкафами.
В них хранится порядка 100 петабайт информации (что эквивалентно 700 годам Full HD видео) в 480 миллионах файлов. Интересно, что к этой информации имеют доступ примерно 10000 физиков по всему миру в 160 вычислительных центрах. Эта информация содержит все экспериментальные данные начиная с 70-х годов прошлого века. Если присмотреться повнимательнее, видно, как эти магнитные ленты расположены внутри шкафов.
В некоторых стойках находятся процессорные модули.
На столе располагается небольшая выставка того, что используется для хранения данных.
Этот вычислительный центр потребляет 3.5 мегаватта электрической энергии и имеет свой дизель-генератор на случай отключения электричества. Надо также сказать про систему охлаждения. Она расположена снаружи здания и гонит холодный воздух под фальш-полом. Водяное охлаждение используется лишь на небольшом числе серверов.
Если взглянуть внутрь шкафа, видно, как происходит автоматическая выборка и загрузка магнитных лент.
Пройдя далее можно увидеть стойки с другим оборудованием.
Вообще-то этот зал является не единственным залом, где расположена вычислительная техника, но то, что посетителей пустили хотя-бы сюда уже вызывает уважение к организаторам. Я сфотографировал то, что демонстрировалось на столе.
После этого появилась другая группа посетителей и нас попросили на выход. Делаю последнюю фотографию и покидаю вычислительный центр.
В следующей части я расскажу про мастерские, где создается и собирается уникальное оборудование, которое используется в физических экспериментах.
