IT-инфраструктура *

Виртуальные машины и контейнеры Cloud.ru Evolution: возможности использования в 2023 и 2024 году☁️ 

Привет, Хабр! Делимся новостью для юрлиц. Сейчас можно подключить виртуальные машины и контейнеры в облаке Cloud.ru Evolution и бесплатно использовать их для своих проектов в течение 30 дней. 

Для чего подойдут облачные сервисы Cloud.ru Evolution

• Создание изолированных окружений для разработки и тестирования приложений.

• Развертывание инфраструктуры для временных проектов.

• Гибкое масштабирование в период пиковых нагрузок.

• Упрощенное развертывание приложений.

• Создание кластеров последних версий.

При подключении этих сервисов бесплатно до 31 декабря вы получите скидку 30% на использование всех сервисов облака в 2024 году. 

Узнать больше

Что еще полезного есть в блоге:

• Записывайтесь на сертификацию в сфере облачных технологий для физлиц и юрлиц от Cloud.ru

• Бесплатный курс по работе с облачными сервисами: осваивайте облака на платформе Cloud.ru Advanced

• Про YouTube-канал для технарей и подкаст про Java в 2023 году

Сегодня в 16:00 — прямой эфир «Kubernetes Workshop: как развернуть сайт c помощью Terraform»

Включайте уведомление на YouTube, чтобы не пропустить начало.

Программа

• Создание в Terraform кластера Kubernetes и реестра для хранения образов контейнеров.

• Настройка интеграции между Managed Kubernetes и Container Registry.

• Добавление домена в DNS-хостинг Selectel.

• Создание сертификата в менеджере секретов.

• Добавление сертификата в Load Balancer.

• Публикация сайта в Kubernetes.

• Разбор кейсов по работе с Kubernetes и ответы на вопросы.

Canonical объявила о выпуске инструментария MicroCloud, позволяющего быстро развёртывать на своём оборудовании вычислительные кластеры и облачные системы с общим распределённым хранилищем данных и защищённой виртуальной сетью.

Инструментарий MicroCloud оформлен в виде snap-пакета, включающего компоненты, необходимые для управления работой узлов кластера. Коммерческая техническая поддержка решений на базе MicroCloud предоставляется в рамках сервиса Ubuntu Pro, но те, кто может обойтись без поддержки, вольны использовать инструментарий без ограничений. Наработки проекта написаны на языке Go и распространяются под лицензией AGPL 3.0.

MicroCloud по умолчанию применяет средства для обеспечения отказоустойчивости, поэтому позволяет создавать кластеры, насчитывающие не менее трёх узлов (в качестве верхней планки упоминаются кластеры, включающие до 50 узлов). Используемый для управления кластером программный стек основан на использовании системы централизованного управления контейнерами и виртуальными машинами LXD, платформы для построения виртуальных сетей OVN (Open Virtual Network) и распределённого отказоустойчивого хранилища Ceph. MicroClouds предоставляет инструменты для автоматической настройки LXD, Ceph и OVN на всех узлах кластера.

MicroCloud также пригоден для быстрого проведения экспериментов на системах разработчиков, включая симуляцию кластера на ноутбуке разработчика, тестирования развиваемых облачных приложений, экспериментов на инфраструктуре.

Источник: OpenNET.

С начала 2023 года почтовые серверы IT-инфраструктуры сервиса «Яндекс 360» обработали свыше 78 млрд входящих писем. Из них около 22% (17 млрд) как потенциально опасные были отправлены в спам и заблокированы благодаря технологии «Спамооборона». А с помощью обновления механизма пользовательских жалоб скорость распознавания спама увеличилась в 30 раз и достигла всего нескольких секунд.

В «Яндекс 360» сообщили, что каждые сутки с помощью «Спамообороны» отправляется в папку «Спам» или блокируется чуть более 56 млн входящих писем. Самым «популярными» темами от спамеров с начала года были рассылки с онлайн-казино, розыгрыши призов, а также денежные выплаты от якобы банков и крупных корпораций. При этом в первом полугодии 2023 года мошенники слали рассылки про возврат налогов, компенсации затрат и письма с PDF-вложениями с вредоносной ссылкой.

В «Яндекс 360» добавили, что в последнее время участились спуффинг-атаки, которые также может предотвратить «Спамооборона». Подобные письма замаскированы под известные магазины или компании. Мошенники используют телефонные номера, электронную почту и даже IP‑адреса, чтобы попытаться обойти систему и выдать себя за уважаемую организацию или известную личность.

За фильтрацию спама в электронной почте «Яндекс 360» отвечают сложные алгоритмы и машинное обучение. Алгоритмы анализируют адрес отправителя, текст письма, вложения и ссылки — всего несколько тысяч факторов. Для обнаружения сходства текста используется модель на основе нейронных сетей.

Microsoft начала использовать инфраструктуру Oracle для поддержки Bing Chat. Некоторые модели машинного обучения, используемые Bing Search, перенесут в суперкластер графических процессоров Oracle в рамках многолетнего соглашения.

«Наше сотрудничество с Oracle и использование инфраструктуры Oracle Cloud вместе с инфраструктурой искусственного интеллекта Microsoft Azure расширит доступ для клиентов и улучшит скорость получения многих результатов поиска», — пояснили в Microsoft.

Компания решила использовать преимущество Oracle Interconnect для Microsoft Azure, которое позволяет сервисам, работающим в Azure, взаимодействовать с ресурсами в Oracle Cloud Infrastructure (OCI). Ранее эту службу использовали, чтобы позволить клиентам подключать рабочие нагрузки, выполняемые в Azure, обратно к базам данных OCI. В этом случае Microsoft использует систему вместе со своей службой Azure Kubernetes для оркестровки узлов графического процессора Oracle.

Oracle утверждает, что облачные суперкластеры, которые, предположительно, будет использовать Bing, могут масштабироваться каждый до 32 768 графических процессоров Nvidia A100 или 16 384 графических процессоров H100 с использованием сети удалённого прямого доступа к памяти (RDMA) со сверхнизкой задержкой. 

Сегодня в 18:30 — прямой эфир с Selectel UX & Research meetup: про карьеру и исследования

Включайте уведомление на YouTube, чтобы не пропустить начало.

Темы докладов

1. Кто есть кто в UX: роли и направления развития специалистов по пользовательскому опыту

2. Составляем план развития для UX-дизайнера 

3. Как не проводить исследования ради исследований и применять результаты в работе

4. Редакторская таблица мер и весов: как мы в Авито научились измерять текст

Читайте подробную программу и заполняйте форму регистрации, чтобы задать вопрос спикерам.

Промты надо писать целостными и самодостаточными. Для создания заклинаний для нейросетей необходимо учитывать множество факторов, таких как тип нейросети, задачи, которые она должна решать, и используемые алгоритмы обучения. Ниже приведены некоторые советы по созданию эффективных заклинаний:

1. Определите цель заклинания. Это может быть улучшение точности модели, ускорение обучения или повышение производительности.

2. Выберите подходящий тип заклинания. Существуют различные типы заклинаний, такие как линейные, нелинейные, адаптивные и т.д. Выберите тот, который лучше всего подходит для вашей задачи.

3. Учитывайте особенности вашей нейросети. Заклинания могут быть более эффективными для определенных типов нейросетей, например, для рекуррентных нейросетей.

4. Используйте различные техники обучения, такие как градиентный спуск, обратное распространение ошибки и т.п.

5. Тестируйте свои заклинания на различных наборах данных и моделях, чтобы определить их эффективность.

6. Не забывайте о регуляризации, которая может помочь предотвратить переобучение модели.

7. Если возможно, используйте ансамблевые методы, такие как бэггинг или бустинг, чтобы улучшить качество предсказаний.

8. Не бойтесь экспериментировать и тестировать различные комбинации заклинаний и методов обучения.

9. Наконец, помните о том, что создание эффективных заклинаний требует времени и усилий, но результаты могут быть очень полезными для улучшения вашей модели. ПС. Магия - это не шутка.

Сегодня в 18:00 — Selectel Network MeetUp#7. Полезные инструменты сетевого инженера: часть 2

Включайте уведомление на YouTube, чтобы не пропустить начало.

Темы докладов:

• Создание собственных сетевых инструментов

• Netbox как единственный источник правды

• Как перестать настраивать сети руками

После докладов мы разберем рабочие кейсы, ответим на вопросы и пообщаемся.

Заполняйте форму регистрации, чтобы задать вопрос спикерам.

Сегодня в 19:00 — Selectel Python Meetup. Три уровня погружения: процессы под капотом, архитектура кода, развитие языка

Включайте уведомление на YouTube, чтобы не пропустить начало.

Темы докладов

Мультипроцессность и сбор метрик в Python: как построить мониторинг без сюрпризов

Заносим микросервисы и Kubernetes в облако

Такое ли светлое будущее у Python?

Заполняйте форму регистрации, чтобы задать вопрос спикерам.

Что я, как разработчик, должен знать о Kubernetes: https://full-stack.blog/kubernetes_for_software_developer.html

Я на Хабр, и не с пустыми руками

Привет! Я не то чтобы профессиональный архитектор высоконагруженных решений, я просто люблю читать и анализировать. Люблю учиться у тех, кто умеет. Недавно нашёл на спецпросторах любопытную статью, которой хочу поделиться. Для вашего удобства мой друг сделал перевод.

С днем системного администратора! Поздравляю всех с праздником.

Пусть ваши серверы падают как можно реже, а юзеры попадаются толковые и ненавязчивые. Стабильного коннекта и долгого аптайма!

Ну и традиционно первый тост за localhost!

ЦИПР 2023: главное впечатление первого дня

Вчера на ЦИПР 2023 премьер-министр Михаил Мишустин призвал промышленные предприятия активнее переходить на отечественные ИТ-решения. И если раньше можно было сказать, а куда, собственно, переходить, то сейчас ясно, что точно есть куда.

Ни автомобили, ни спутник, ни серверные стойки не могли на площадке отвлечь от главного - практически все отрасли промышленности презентуют комплексные софтверные решения управления безопасностью, производством, коммуникациями, - чем угодно. Было всё: от привычных CRM, сервисов видеоконференций, офисных пакетов до узкоспециализированных систем управления безопасностью и производством. Даже те же автозаводы представляли не только и не столько технику, сколько именно технологии.

Это разительно отличает ЦИПР от всех предыдущих: очевидно, что с начала 2022 команды разработчиков смогли перестроиться и начать создавать рабочий софт. Да, на секциях обозначали находки (особенно в сфере безопасности), и проблемы текущих решений, но разработчики не выглядели растерянно: они готовы к консультациям и доработкам. Кроме того, очевидно, что есть накопленный отраслевой опыт, который также будет вноситься в разработки. То есть теперь ПО не привозится и адаптируется, а растёт из существующей необходимости. Впереди большой путь, но софт, победивший на экспозициях оборудование, впечатляет. Хотя и об оборудовании есть что рассказать :-)

Rabbit VS Kafka? Что выбрать и как понять, верный ли выбор сделан?

Решили обсудить тему погорячее, и во втором выпуске шоу Слёрма «Заходят два архитектора в бар…», где профи поднимают острые вопросы об архитектуре приложений, поговорили про Кролика и Кафку ?.

С докладом выступил Саттар Гюльмамедов из МТС BigData, а его оппонентами стали Владислав Килин, Tech Team Lead в Coolblue.nl, и Алексей Барабанов, IT-директор «Хлебницы».

Эксперты поспорили про:

• применение служб сообщений в архитектурных задачах;

• возможности RabbitMQ и Kafka на проектах с разной нагрузкой;

• процессы принятия архитектурного решения;

• выбор промежуточного ПО;

• анализ и ревью принятого решения.

Смотрите выпуск, делитесь впечатлениями, подливайте масла в огонь в комментариях и приходите на следующие дискуссии!

Увидеть первый выпуск, вступить в наш чат и найти анонсы новых шоу можно тут: https://slurm.io/two-architects ?