Администрирование

SpaceWeb запустил частное облако

Мы расширили линейку облачных сервисов и подключили изолированное приватное облако на базе собственной системы виртуализации. Особенность частного облака в том, что внутри него инфраструктура проекта находится в непосредственном распоряжении разработчика. Облака такого типа изолированы друг от друга на физическом уровне и позволяют настроить высокий уровень защиты от несанкционированного доступа.

Внутри облака можно создать локальные сети, а виртуальные серверы в нем при желании можно изолировать от интернета. Пропускная способность сети составляет 1 Гб/сек. Ресурсы публичного облака не имеют ограничений на ПО и стек технологий, вы можете установить любые программы. 

Также вы сможете получить доступ и к технологиям публичного облака SpaceWeb, таким как балансировщик нагрузки, управляемые базы данных и независимый мониторинг доступности. 

Узнать подробнее про частное облако от SpaceWeb можно на сайте.

Мастер-класс: «Как оптимизировать операционную деятельность компании на базе low-code BPM-системы»

Кто проводит: Бауманский учебный центр «Специалист»

Почему это важно:

Компании во всех отраслях сталкиваются со сложностями в управлении IT-процессами. Чаще всего эта ситуация имеет две причины: сложился произвольный набор программных решений, оставшихся в наследство от разных IT-директоров или лоскутной цифровизации, или же бизнес не видит отдачи от вложенных в IT-направление ресурсов. Затраты на сотрудников растут, а выгода получается минимальной.

Поэтому российские компании все чаще используют в качестве единой информационной системы low-code BPM-решения. ПО такого класса позволяет быстро оцифровывать любые процессы без привлечения программистов. Такие системы уже используют «Спортмастер», «ВкусВилл», «Академия РосАтома», «Сколково».

Чему научатся участники:

• узнают, как устроена панель администратора, где настраиваются бизнес-процессы;

• какие знания нужны для работы с low-code конструктором;

• какие бизнес-процессы можно оцифровать в одной системе;

• как интегрировать BPM-систему с другими источниками корпоративных данных.

Вам будет интересно и полезно, если вы:

Бизнес-аналитик, системный аналитик, руководитель предприятия, руководитель службы компьютерного обеспечения.

Как попасть:

Участие бесплатное, по предварительной записи.

SpaceWeb запустил частное облако

Мы расширили линейку облачных сервисов и подключили изолированное приватное облако на базе собственной системы виртуализации. Особенность частного облака в том, что инфраструктура проекта находится в непосредственном распоряжении разработчика. Облака такого типа изолированы друг от друга на физическом уровне и позволяют настроить высокий уровень защиты от несанкционированного доступа.

Внутри облака можно создать локальные сети, а виртуальные серверы в нём при желании можно изолировать от интернета. Пропускная способность сети составляет 1 Гб/сек. Ресурсы публичного облака не имеют ограничений на ПО и стек технологий, вы можете установить любые программы. 

При использовании частного облака вы также сможете получить доступ к технологиям публичного облака SpaceWeb, таким как балансировщик нагрузки, управляемые базы данных и независимый мониторинг доступности. 

Узнать подробнее про частное облако от SpaceWeb можно на сайте.

Россияне массово разрывают договоры с интернет-провайдерами.

Абоненты более 135 региональных операторов связи начали разрывать договоры из-за сбоев в работе YouTube и других сервисов Google.

«Ростелесеть» пояснила, что из-за «отсутствия официальных заявлений в СМИ и опубликованных нормативно-правовых актов по указанной проблеме» операторы не могут объяснить пользователям причины проблем с YouTube , пишет «Коммерсантъ».

P.S.

Предположение автора данного поста, высказанное 4 дня назад, что российские чиновники провоцирующие изменение маршрутов и технологий передачи гуглотрафика(а это 25%+ от всего провайдерского трафика), а заодно прямо сейчас вытесняющие апаратуру GGC из российской IT-инфраструктуры, вряд ли способны грамотно оценить технико-экономические последствия для Рунета, от подобных действий, стало подтверждатся практикой, которая и есть критерий истины.

Продолжаем улучшать наш инструмент анализа планов PostgreSQL explain.tensor.ru. Сегодня мы представляем новую подсказку-рекомендацию и расширенный вариант визуального представления хода выполнения (посмотреть пример):

Ловим кривые индексные условия

Периодически приходится разбирать ситуации, когда вроде бы давно уже отлаженный запрос к PostgreSQL начинает "съезжать с катушек" и дико "тупить".

Зачастую оказывается, что виной тому передача в качестве параметра-массива для ключа индекса какого-то заведомо-ложного условия типа пустого массива (= ANY('{}'::integer[])) или NULL (= ANY(NULL::integer[])).

В таких случаях некоторые версии PostgreSQL начинают себя не очень хорошо вести, пытаясь сканировать индекс без указания этого ключа... и получаем тормоза.

В принципе, это ответственность самого разработчика передавать корректные значения. Но чтобы вам было удобнее находить такие кейсы, мы сделали новую подсказку в анализе плана.

Ход выполнения запроса

Выполнение запроса - это проход дерева плана "снизу - вверх", но сам план при этом представляет из себя дерево "сверху - вниз". Неудобненько...

Помимо узлов самого плана, в полное время выполнения запроса входит плюсом еще и время планирования (Planning Time) и время передачи данных (Execution Time), которые могут составлять весьма солидную долю.

Чтобы более наглядно увидеть ход выполнения запроса, мы добавили под "шеврон" navbar'а иерархическое представление времени отработки узлов именно в порядке выполнения.

Закрытие темы "Гипотеза о связи относительного количества ожиданий СУБД и производительности СУБД "

Отношение количества событий ожидания влияющих на производительность СУБД к количество событий ожидания не влияющих на производительность в ходе штатной работы СУБД будет примерно постоянное.

Для проверки гипотезы была проведёна серия экспериментов по 3-м сценарям:

1) Базовая(эталонная) нагрузка.

2) Дополнительная нагрузка на CPU/RAM.

3) Очередь ожидания освобождения блокировки строк/таблиц.

Итог: Гипотеза не подтверждается экспериментальными данными : разница в соотношении между ожиданиями составляет ~3% , при деградации производительности ~34%.

Или другими словами: соотношение между ожиданиями при работе СУБД, в общем случае, не зависит от нагрузки и производительности СУБД и остаётся примерно постоянным для конкретной СУБД.

Таким образом - изменение соотношения между ожиданиями СУБД не может являться индикатором деградации производительности.

Тема закрыта. Статья снята с публикации.

P.S. Однако, в ходе экспериментов, получен интересный побочный результат:

При использовании pgbench c параметром "--connect", отношение количества ожиданий влияющих на производительность, к количеству ожиданий не влияющих на производительность - существенно отличается (~38%).

Следствие - данное соотношение может быть использовано как оценочное значение результатов нагрузочного тестирования и для оценки эффективности архитектурного решения.

Задайте вопрос по кубам архитекторам Southbridge

15 августа проведём бесплатную онлайн-консультацию вместе с архитекторами Southbridge и ответим на ваши вопросы по Kubernetes.

А чтобы эксперты смогли подготовиться и дать более подробные ответы — присылайте вопросы чуть заранее в бота консультации 😉

О Southbridge:

Компания Southbridge c 2007 года создаёт и обслуживает средне- и высоконагруженные IT-инфраструктуры. Среди клиентов — VolkswagenGroupRus, Альфастрахование, Skillbox, Спортмастер и другие.

Отвечать на вопросы будут её архитекторы:

Сергей Бондарев. Специалист по внедрению Kubernetes. Один из разработчиков kubespray с правами на принятие pull request. Работал над всеми куб-проектами Southbridge.

И Николай Месропян. Реализовал проекты по созданию и рефакторингу решений с применением Ansible для компаний Фольксваген, Спортмастер и других.

Чтобы получить бесплатную консультацию от экспертов по Kubernetes:

▶️ Напишите свой вопрос боту
▶️ Приходите на вебинар 15 августа
▶️ Получите ответ и задайте любые уточняющие вопросы

Если у вас нет конкретных вопросов — приходите послушать других и обменяться опытом.

📌 15 августа в 18:00 мск
📌 Зарегистрироваться и задать вопрос — по ссылке.

Монетизация на YouTube ВСЁ — российских блогеров полностью отключают от рекламной сети YouTube.

Получать доход от монетизации через РФ-аккаунты будет нельзя. Заработок за июль будет выплачен между 21 и 26 августа, если в аккаунте не приостановлено получение платежей и достигнуты пороги оплаты.

В 2022 Google отключал показ рекламы для российского региона, но из-за замедления и блокировки YouTube многие пользователи начали смотреть видео с VPN и видели нецелевую рекламу. Как итог — у блогеров в последние недели сильно выросли доходы.

О способе оценки производительности отдельного SQL запроса .

В дополнении к теме:

Размышления о мониторинге производительности отдельного SQL запроса

Для возможного варианта решения задачи:

https://habr.com/ru/posts/833162/

если производительность отдельного SQL запроса в настоящее время не мониторится.

Предположение.

Для того, чтобы оценить производительность отдельного SQL запроса необходимо и достаточно получить отношение стоимости запроса (EXPLAIN ANALYSE) к актуальному времени выполнения запроса .

Важное следствие и ограничение:

Данную оценку производительности можно получить только на данный конкретный момент времени при данном конкретном состоянии СУБД в целом.

Данное весьма существенное ограничение , вообще говоря, влечет реальные проблемы для использования данной методики в промышленной эксплуатации СУБД(запрос может быть весьма ресурсоемким). Но с другой стороны, позволяет очень чётко и однозначно отследить причины изменения производительности запроса при изменении текста запроса и/или, что важнее - при изменении входящих параметров запроса .

Т.е. данная методика больше применима на этапе разработки и нагрузочного тестирования , а не в ходе промышленной эксплуатации СУБД.

Инженер Intel Linux Колин Ян Кинг обнаружил, что если выровнять параметр slab в коде ACPI с помощью флага «SLAB_HWCACHE_ALIGN», то можно будет добиться заметного улучшения производительности памяти и сократить время загрузки ядра Linux ещё примерно на 0,035 секунды.

Колин объяснил это с помощью однострочного патча ядра:

«Включение SLAB_HWCACHE_ALIGN для кэшей объектов ACPI повышает скорость загрузки в ядре ACPICA для выделения и освобождения объектов, особенно на этапах анализа и выполнения AML при загрузке. Тестирование со 100 загрузками показывает среднюю экономию загрузки в acpi_init в размере ~0,035 с по сравнению с невыровненной версией. Большинство выделяемых и освобождаемых объектов ACPI имеют очень короткое время жизни в критических путях для анализа и выполнения, поэтому дополнительная память, используемая для выравнивания, не слишком обременительна».

Linux проделал большую работу по оптимизации времени загрузки ядра, начиная с дней помешательства на нетбуках и в последующие годы для лучшей оптимизации серверов. Экономия загрузки около 0,035 секунд едва ли будет заметна для конечных пользователей, но каждая мелочь имеет значение, особенно в случае гипермасштабаторов и других факторов, в которых необходимо минимизировать время простоя в центре обработки данных, будь то серверы bare metal или виртуальные машины. А то, что это всего лишь однострочный патч, делает его еще более легкой и приятной победой.

*cache = kmem_cache_create(name, size, 0, SLAB_HWCACHE_ALIGN, NULL);

Ускорение Youtube в Линукс. Скрипт для автоматизированной установки полезного ПО из исходников.

Youtube в России, как известно официально не внесен в реестр запрещенных сайтов, но по разным официальным версиям почему-то медленно работает), а Роскомнадзор выражает свое сочувствие российским гражданам уставшим от медленного и некачественного видео на зарубежных сервисах. Оживились шарлатаны, которые под видом "ускорителей Ютуба" предлагают разные зловреды в бинарниках.

По отзывам для реального решения проблемы медленного Ютуба в РФ на Линуксах весьма неплохо себя показал специально настроенный под эту задачу "zapret", но по тем же отзывам у рядового пользователя тонкости настроек этого ПО вызывают трудности.

С учетом изложенного, внося свой посильный вклад, написал, для ускорения Ютуба, скрипты на bash: скрип-установщик, который автоматически качает исходники с GitHub, ставит зависимости, компилирует, устанавливает и настраивает zapret на настольном ПК с Ubuntu-based и Red-Hat-based Линуксами, скрипт обновления zapret(не изменящий его настройки), и скрипт деинсталятор.

Обновление от 22.09.2024 и zapret-a и его настроек (запускать скрип-установщик) Скрипты для Ubuntu-based ОС, скрипты для Red-Hat-based ОС. Проверенно на Linux Mint 20.1 "Ulyssa" и "Fedora 40" соответственно.

Ставится все в пару кликов. Берите пользуйтесь, адаптируйте к другим Линуксам! Конструктивная критика приветствуется.

Ярославский провайдер «Ярнет» объяснил, что не может оказать своим клиентам психологическую помощь на фоне замедления YouTube.

«Ярнет» посоветовал недовольным работой YouTube клиентам обращаться по этому поводу в Роскомнадзор (звонить на официальную горячую линию). Речь идет о случаях, когда сам интернет работает. Других идей, как помочь, нет. Такая информация была опубликована на официальном сайте провайдера. Уведомление с советом об этих действиях для пользователей висело на сайте компании несколько часов, а потом его убрали.

Роскомнадзор (РКН) объявил о блокировке доступа к мессенджеру Signal в России. Причиной названо несоблюдение российского законодательства.

Ещё до официального заявления, 8-9 августа 2024 года, многие пользователи из России столкнулись с трудностями при попытке использовать Signal. Некоторые отметили, что даже применение VPN не позволяло обойти возникшие проблемы с доступом к сервису.

«Доступ к мессенджеру Signal ограничен в связи с нарушением требований российского законодательства, выполнение которых необходимо для предотвращения использования мессенджера в террористических и экстремистских целях», — сообщили в пресс-службе РКН.

Amvera Cloud представила работу с несколькими ветками Git, бэкапы PostgreSQL и управление портами. Обзор релиза

С августа 2024 в Amvera стал доступен новый функционал.

К проектам можно привязать произвольные ветки репозитория и развернуть staging и prod окружения, используя один репозиторий.

Что это даёт 

• возможность командной работы.

• возможность создать для одного репозитория staging и prod проекты. 

Как это работает

• Вы создаёте нужное количество проектов со своими тарифами и переменными. Как пример - два проекта для стейджинга и прода вашего бота, где для стейджинга используется минимальный тариф, а для продакшн версии тариф с запасом;

• Привязываете к каждому проекту ваш GitLab/GitHub/Bitbucket;

• Выбираете ту ветку Git-репозитория, которая является основной для проекта;

• Делаете git push и ваш проект развернут.

  Управлять портами и TLS-сертификатами проектов

  Ранее SSL-сертификаты выписывались автоматически, теперь их можно отключить. Как и организовать работу приложения с несколькими открытыми портами.

  Подключать автоматические планы создания бэкапов кластеров PostgreSQL.

Amvera — облако, где вы можете развернуть и обновлять приложение через команду git push amvera master. Без настройки виртуальных машин, SSL и установки зависимостей.

Разверните базу данных на выделенном облачном сервере ⚡️

Преимущества DBaaS на выделенном облачном сервере

• Максимальная производительность,

• Экономическая выгода,

• Быстрый запуск,

• Безопасность.

Сделали все для максимальной производительности ваших баз данных

• Собрали конфигурации серверов с высокочастотным процессором Intel® Xeon® Gold 6240 в односокетной сборке с включенным Turbo Boost и Hyper-threading. 

• Используем специальные планки оперативной памяти ECC REG, рекомендуемые для СУБД.

• Для дополнительной отказоустойчивости добавили дисковую подсистему на сверхбыстрых NVMe SSD дисках компании Intel, собранных в RAID1.

• Оптимизировали настройки всех систем на сервере от BIOS до ОС.

Создайте базу данных →

Первый эпизод нашего подкаста уже вышел в прод!

Присоединяйтесь к дискуссии между руководителем группы разработки Сергеем Зайцевым и руководителем департамента комплексного аудита ИБ и DevSecOps Бастиона Владимиром Ченцовым, где они обсуждают противоречивую природу безопасной разработки.

В этом выпуске вы узнаете:

• Как внедрить процессы безопасной разработки без ущерба для Time-to-Market

• Почему безопасность нужно учитывать уже на этапе проектирования продукта?

• Как найти баланс между творчеством разработчиков и требованиями безопасности

• Какие основные этапы внедрения безопасной разработки существуют?

• Как оценить экономическую эффективность инвестиций в безопасность?

Наши эксперты обсудят реальные сценарии, поделятся практическими советами и развеют мифы о конфликте интересов между разработчиками и специалистами по безопасности. Вы получите ценные инсайты о том, как построить безопасный "дом" для вашего продукта, начиная с фундамента.

Слушайте, чтобы узнать, как превратить безопасную разработку из головной боли в конкурентное преимущество вашего бизнеса!

Продолжительность: 88 минут

Уровень душности: Средний

Изучение английского онлайн — это конспекты, учебники, видео, аудио… а еще выделенные серверы, объектное хранилище и DNS-хостинг.

В Академии Selectel рассказываем, как онлайн-школа «Инглекс» развернула EdTech-платформу:

• создала комфортную среду для онлайн-занятий благодаря выделенным серверам готовой конфигурации в двух дата-центрах,

• гарантировала отказоустойчивость сервисов и надежное хранение данных с ежедневным бэкапированием и загрузкой в объектное хранилище,

• обеспечила сетевую задержку менее 100 мс во время уроков.

Подробности кейса — в Академии Selectel.

Всем DevOps! Автоматизация проверки одобрений merge requests с помощью GitLab CI/CD и GitLab API — это классный способ без лишних затрат оптимизировать процесс управления кодом в вашей команде.

Наш DevOps-инженер Виктор рассказал, как он смог настроить approve rules для merge request в бесплатной версии GitLab CE.

Из статьи вы узнаете, какие инструменты и методы он применил, а также получите советы по настройке и интеграции решения в ваш рабочий процесс.

💻 Если ещё не читали — тогда вам сюда!

Решение «Ассистент» совместимо с операционной системой РЕД ОС 8. Специалисты компаний «РЕД СОФТ» и «САФИБ» провели успешное тестирование совместной работы РЕД ОС 8 и системы «Ассистент» версии 5.6. Совместимость продуктов подтверждена сертификатами.

«Ассистент» — это программный комплекс для организации безопасного удаленного доступа, управления и администрирования компьютеров и серверов. Решение соответствует требованиям информационной безопасности и допускается к применению в государственных информационных системах, информационных системах персональных данных, автоматизированных системах управления и объектах критической информационной инфраструктуры, что подтверждается сертификатом ФСТЭК России № 4162, переоформлен 07.07.2023. программный комплекс зарегистрирован в Едином реестре российских программ под номером 3173.

Пользователи операционной системы РЕД ОС 8 могут применить функционал решения «Ассистент» для эффективного администрирования: просматривать экраны удаленных компьютеров, оказывать удаленную поддержку пользователя и осуществлять настройку устройств.

В РЕД ОС 8 появились новые графические окружения KDE и GNOME, ядро Linux 6.6, режим киоска, актуальные и LTS‑версии ключевых компонентов операционной системы. Операционная система РЕД ОС может применяться в организациях с высокими требованиями к информационной безопасности и сохранности персональных данных.

Ежемесячный дайджест: новое за июль☀️

📺 Показали удобный способ, как развернуть Telegram-бота с сервисом Evolution Container Apps на бесплатном вебинаре. А в ближайших планах: 

• рассказать, как устроено объектное хранилище на базе SDS — на вебинаре 22 августа;

• показать, как упростить работу с большими данными с помощью Cloud.ru Evolution — на вебинаре 27 августа.

💼 Разобрали кейс: АТОЛ — компания, которая занимается полным циклом разработки и производства оборудования для транспортной телематики поделилась, как улучшила производительность критически важных приложений 1C после миграции IT-инфраструктуры в Облако VMware от Cloud.ru. Другие кейсы можно посмотреть на нашем сайте.

📝 Поделились опытом и экспертизой:

• Как защитить приложения в облаке от DDoS-атак — рассказал эксперт по информационной безопасности Руслан Корнев, 

• Как снизить неопределенность в проектной деятельности — поделился руководитель проектов Александр Жульков,

• Про новые стадии запуска продукта (на примере платформы Cloud.ru Evolution) — рассказал лидер продуктового направления Никита Бутримов.

☁️ Даем еще две недели, чтобы попробовать облако Cloud.ru юрлицам и ИП бесплатно. Успевайте подать заявку до 31 августа 2024 года!

🎧 Спросили у Максима Смирнова — frontend-разработчика из Т-Банка, кто такой frontend-архитектор, чем хорош фреймворк Angular и почему в работе так важна гибкость. Ответы в новом подкасте на YouTube-канале Cloud.ru. 

До встречи в сентябре!