Pull to refresh

Shit happens. Яндекс удалил часть виртуальных машин в своем облаке

IT Infrastructure *Cloud computing *Server Administration *DevOps *Cloud services
image
Кадр из фильма Мстители: Война бесконечности

По сообщению пользователя dobrovolskiy 15 мая 2019 года в результате человеческой ошибки Яндекс удалил часть виртуальных машин в своем облаке.

Пользователь получил письмо от техподдержки Яндекса с таким текстом:
Сегодня мы проводили технические работы в Яндекс.Облаке. К сожалению, из-за человеческого фактора были удалены виртуальные машины пользователей в зоне ru-central1-c, которые хоть раз находились в статусе SUSPENDED. Мы сразу заметили ошибку и остановили удаление. Увы, некоторые ВМ и их boot-диски были удалены.

В результате пользователем были полностью потеряны некоторые продакшн-сервера. Бекапы у пострадавшего были, но часть данных всё равно утрачена безвозвратно. Обычно Яндекс компенсирует даун-тайм своих сервисов, согласно своей политике, но кто компенсирует потерю данных?

UPD Яндекс официально подтвердил инцидент и прокомментировал ситуацию.
Total votes 130: ↑118 and ↓12 +106
Views 105K
Comments 268

[Санкт-Петербург] 12 сентября митап в офисе Яндекса про облака и управление проектами цифровой трансформации

IT Infrastructure *SaaS / S+S *Project management *DevOps *Cloud services
Цифровизация или цифровая трансформация — понятие, которое описывает технологические улучшения в бизнесе. Цифровизация подразумевает разнообразные изменения, но их объединяет одно: сбор и обработка огромных массивов данных с применением машинного обучения и облачных решений.

12 сентября Яндекс.Облако и компания «21 век» поделятся кейсами цифровой трансформации.

Вы узнаете:
Читать дальше →
Total votes 12: ↑9 and ↓3 +6
Views 1.4K
Comments 0

Yandex Scale. 1 октября мы проведем первую большую конференцию про облачные технологии

Яндекс corporate blog Hosting Virtualization *Cloud computing *Cloud services
Виртуальные машины, управляемые базы данных, объектные хранилища – всем этим пользуются и отдельные разработчики, и небольшие стартапы, и крупные корпорации. Но облачная платформа – это не просто набор полезных сервисов. Это экосистема, которая живет, растет и развивается. И именно об этом мы хотим поговорить 1 октября на первой большой конференции Яндекс.Облака – Yandex Scale.

Yandex Scale – это, пожалуй, первая большая российская облачная конференция, где разработчики будут подробно рассказывать о собственных продуктах, делиться знаниями, реальными бизнес-историями и помогут вам на практике познакомиться с действующими и новыми сервисами платформы. И, конечно, наша конференция не обойдется без крупных анонсов.

Читать дальше →
Total votes 14: ↑12 and ↓2 +10
Views 2.1K
Comments 5

Яндекс.Облако запустила автоматически обновляемую систему управления базами данных вместе с Mongo DB

Data storage *Data storages *Finance in IT IT-companies


Разработчик системы управления базами данных MongoDB и платформа Яндекс.Облако объявили о партнерстве. Яндекс.Облако стала первым официальным партнером MongoDB в России. Платформа предоставила компании сервис Managed Service for MongoDB, который помогает поддерживать кластеры баз данных на основе СУБД Mongo DB.

«MongoDB — популярное NoSQL-решение для хранения данных с открытым исходным кодом. С Managed Service for MongoDB вы можете создавать, эксплуатировать и масштабировать нереляционные базы данных MongoDB в инфраструктуре Яндекс.Облака», — поясняют в Яндекс.Облаке.
Читать дальше →
Total votes 16: ↑14 and ↓2 +12
Views 3.7K
Comments 0

Яндекс.Облако стало первой платформой из РФ, которая подтвердила соответствие международным стандартам

Information Security *IT Standards *Yandex API *Cloud services
image

Яндекс.Облако — первая в России и СНГ публичная облачная платформа, которой удалось выстроить управление информационной безопасностью по стандарту ISO/IEC 27017:2015 и обеспечить защиту персональных данных пользователей по международному стандарту ISO/IEC 27018:2019. Соответствие стандартам подтвердил независимый аудитор — Британский институт стандартов (BSI).

BSI заявил, что Яндекс.Облако соответствует требованиям трех международных стандартов информационной безопасности: ISO/IEC 27001:2013, ISO/IEC 27017:2015, ISO/IEC27018:2019. Два из них подтверждены в России впервые.
Читать дальше →
Total votes 23: ↑20 and ↓3 +17
Views 12K
Comments 14

Яндекс.Облако и Nvidia открыли библиотеку приложений для работы с ИИ в России

Cloud services Artificial Intelligence
image

Облачная платформа «Яндекс.Облако» и Nvidia открыли для российских разработчиков библиотеку приложений для работы с искусственным интеллектом и машинным обучением – Nvidia GPU Cloud (NGC). Яндекс.Облако стала первым публичным облаком в России со статусом официального партнера c NGC-сертификацией от Nvidia.
Читать дальше →
Total votes 6: ↑6 and ↓0 +6
Views 2.7K
Comments 0

Яндекс.Облако открывает доступ к сервису для ML-обучения Yandex DataSphere

Cloud computing *Machine learning *Cloud services IT-companies
image

Яндекс.Облако предлагает опробовать новый сервис Yandex DataSphere для разработки машинного обучения. Сервис работает в режиме preview по предварительной регистрации, а пользоваться им можно бесплатно.
Читать дальше →
Total votes 12: ↑12 and ↓0 +12
Views 4.4K
Comments 1

Зарубежные компании в 2020 году начали активнее закупать облачные мощности в РФ

IT Infrastructure *Cloud services IT-companies

В International Data Corporation (IDC) сообщили, что в прошедшем году иностранные компании из финансовой и розничной сферы начали активнее закупать облачные мощности у российских поставщиков. Аналитики объясняют это тем, что российская облачная инфраструктура стала более конкурентоспособной как по цене, так и по функционалу.

Кроме того, многим компаниям теперь необходимо хранить персональные данные российских клиентов на территории страны.

Читать далее
Total votes 11: ↑10 and ↓1 +9
Views 2.2K
Comments 3

«Яндекс.Облако» представила новый сервис для создания фирменных голосов Yandex SpeechKit Brand Voice

Artificial Intelligence IT-companies

Платформа «Яндекс.Облако» представила сервис для создания фирменных голосов Yandex SpeechKit Brand Voice. С его помощью компании смогут синтезировать голос для голосового помощника, автоматизированных колл-центров, опросов, телемаркетинга и контроля качества. 

Читать далее
Total votes 13: ↑13 and ↓0 +13
Views 1.4K
Comments 0

Yandex.Cloud выйдет на европейский рынок и запустит сервис виртуальных рабочих столов

Information Security *Cloud services

Облачная платформа Yandex.Cloud планирует выйти за пределы российского региона и до конца 2022 года откроет представительство Германии. Об этом сообщается в блоге компании.

Представительство в Германии станет первым центром Yandex.Cloud в Европе. Для работы в регионе сервис будет использовать площадки коммерческого оператора дата-центров, которые будет соответствовать немецким, общеевропейским и мировым стандартам надежности и безопасности. На развитие на европейском рынке Yandex.Cloud потратит более $30 миллионов. 

Читать далее
Total votes 12: ↑12 and ↓0 +12
Views 2.2K
Comments 2

Экспресс-обзор производительности PostgreSQL 10.5 в новейших облачных сервисах Яндекс.Облака

PostgreSQL *DevOps *Cloud services
Буквально на днях Яндекс открыл доступ для beta-пользователей к своему новому сервису — Яндекс.Облако. Так вышло, что это событие совпало с необходимостью выбора облачной платформы для одного из наших внутренних проектов и я решил сразу протестировать производительность решений Яндекса.

Для теста я взял PostgreSQL и старый добрый pgbench. Выбор на СУБД пал потому что было интересно протестировать и сравнить производительность не только виртуальных машин, то и managed database сервисов.

Disclaimer: автор не является ни профессиональным админом, ни DBA, ни специалистом по настройке облачных решений. Тестирование проводилось сугубо в личных целях и на объективность не претендует, поэтому прошу воспринимать статью «as is». Внутри не будет какого-то глубокого разбора, но будет экспресс-сравнение с Selectel VPC (на разных дисках) и различными конфигурациями AWS EC2/RDS в части производительности и стоимости решений. Возможно, это сэкономит кому-то немного времени.

Подробности Yandex.Cloud vs Selectel VPC vs AWS под катом.
Читать дальше →
Total votes 18: ↑18 and ↓0 +18
Views 8.6K
Comments 21

Эволюция Backend as a Service: второе пришествие Scorocode

Scorocode corporate blog Go *Start-up development Cloud services
Здравствуй, Хабр.

Мы прерываем длительное молчание и объявляем о выходе второй версии Scorocode.
Это даже не эволюция, а рождение нового сервиса.

Год работы, Docker, Kubernetes, Яндекс.Облако, и т.п.

Предупреждая вопрос «А зачем тут хаб Go?», отвечаю — все сервисы Scorocode написаны на Golang, именно этот язык у нас является основным в стеке технологий.

За подробностями прошу под кат.
Читать дальше →
Total votes 12: ↑9 and ↓3 +6
Views 3.8K
Comments 0

Яндекс открывает Облако. Архитектура новой платформы

Яндекс corporate blog IT Infrastructure *Cloud computing *Cloud services IT-companies
image

Сегодня Яндекс.Облако стало доступно всем. Теперь любой пользователь может зайти в Облако и развернуть необходимые ему ресурсы, получив доступ к технологиям Яндекса. Например, к машинному переводу и распознаванию и синтезу речи.

Сегодня я хочу познакомить вас с Яндекс.Облаком и рассказать, как оно устроено внутри. Под катом вы узнаете немного об истории, команде и архитектуре нашей платформы.

Читать дальше →
Total votes 87: ↑85 and ↓2 +83
Views 60K
Comments 139

Как без даунтайма масштабировать базы данных в Яндекс.Облаке. Пример с тремя хостами

Яндекс corporate blog IT Infrastructure *Database Administration *
Tutorial
Пост подготовили участники команды Яндекс.Облака: Иван Веткасов — архитектор, Леонид Клюев — редактор

Недавно мы рассказали об архитектуре Яндекс.Облака. Теперь давайте перейдем от теории к практике. В Облаке есть несколько сервисов для автоматизированного контроля за СУБД: Managed Service for ClickHouse, Managed Service for PostgreSQL и Managed Service for MongoDB. Все они являются платформенными и позволяют сосредоточиться на задаче хранения данных, а не на администрировании инфраструктуры. Но иногда бывает важно контролировать ещё и виртуальные машины кластера. Например, может возникнуть задача масштабирования в ответ на увеличение или снижение нагрузки. Обычно этот сценарий — один из самых трудоёмких с практической точки зрения. Сегодня мы расскажем, как Яндекс.Облако позволяет автоматизировать сложные задачи масштабирования, и убедимся, что база остаётся доступной в процессе изменения размера кластера.


Читать дальше →
Total votes 26: ↑25 and ↓1 +24
Views 8.2K
Comments 3

MPLS повсюду. Как устроена сетевая инфраструктура Яндекс.Облака

Яндекс corporate blog IT Infrastructure *Network technologies *Cloud services Network hardware
Пост подготовили: Александр Вирилин xscrew — автор, руководитель службы сетевой инфраструктуры, Леонид Клюев — редактор

Мы продолжаем знакомить вас с внутренним устройством Яндекс.Облака. Сегодня поговорим о сетях — расскажем, как устроена сетевая инфраструктура, почему в ней активно применяется непопулярная для дата-центров парадигма MPLS, какие ещё сложные решения нам приходилось принимать в процессе построения облачной сети, как мы ей управляем и какие мониторинги используем.

Сеть в Облаке состоит из трёх слоёв. Нижний слой — уже упомянутая инфраструктура. Это физическая «железная» сеть внутри дата-центров, между дата-центрами и в местах присоединения к внешним сетям. Поверх сетевой инфраструктуры строится виртуальная сеть, а поверх виртуальной сети — сетевые сервисы. Эта структура не является монолитной: слои пересекаются, виртуальная сеть и сетевые сервисы напрямую взаимодействуют с сетевой инфраструктурой. Поскольку виртуальную сеть часто называют overlay, то сетевую инфраструктуру мы обычно называем underlay.
Читать дальше →
Total votes 50: ↑50 and ↓0 +50
Views 27K
Comments 27

1С и Яндекс.Облако Compute Cloud. Вдоль и поперек

Cloud computing *Database Administration *1С-Bitrix Cloud services
Бороться и искать. Найти и перепрятать

Достаточно популярная поговорка во времена Союза.

Вот и сейчас, те у кого сервер 1С в локальной сети мечтают вынести его в облако, а те у кого в облаке прикупить свой в локальную сеть.

7 декабря 2018 г. AlexandrSurkov пригласил желающих: Яндекс открывает Облако. Архитектура новой платформы

Как у обычного пользователя у меня не нашлось чем занять этот ресурс, но как 1С-ник я подумал: А пуркуа бы и не па ? И попробовал положить в облако от Яндекса 1С Предприятие.

Тестирование Яндекс.Облако Compute Cloud для 1С Предприятие оставило у меня приятное впечатление.

Возможно кто-то повторит его и внесет больше ясности в настройки виртуальных серверов, использованию API и так далее. Интересующихся прошу продолжить чтение…


Читать дальше →
Total votes 29: ↑25 and ↓4 +21
Views 23K
Comments 57

Архитектура сетевого балансировщика нагрузки в Яндекс.Облаке

Яндекс corporate blog High performance *Network technologies *Cloud services

Привет, я Сергей Еланцев, разрабатываю сетевой балансировщик нагрузки в Яндекс.Облаке. Раньше я руководил разработкой L7-балансировщика портала Яндекса — коллеги шутят, что чем бы я ни занимался, получается балансировщик. Я расскажу читателям Хабра, как нужно управлять нагрузкой в облачной платформе, каким мы видим идеальный инструмент достижения этой цели и как движемся к построению этого инструмента.
Читать дальше →
Total votes 47: ↑47 and ↓0 +47
Views 17K
Comments 5

Опыт вывода программной реализации социального проекта «Вспомнить каждого» в опенсорс

Open source *Node.JS *MongoDB *
Sandbox
В прошлом году, нашей команде повезло принять участие в разработке программного обеспечения для социально значимого проекта – системы ввода архивных данных военных комиссариатов Хабаровского края времен Великой Отечественной войны. Кратко говоря, когда был призван, куда убыл и другую связанную с этим информацию – оцифровать и дать возможность искать эти данные кому угодно. Дальневосточный центр социальных технологий в 2018 году, при поддержке Фонда президентских грантов, реализовывал проект — «Вспомнить каждого». А мы, разработали приложение на нашем опенсорсном продукте IONDV. Framework. Итоговое приложение сейчас доступно под лицензией GPLv3.

Делимся нашим решением и опытом работы над проектом.

image
Читать дальше →
Total votes 18: ↑16 and ↓2 +14
Views 2K
Comments 7

Архитектура сервиса распределённых очередей сообщений в Яндекс.Облаке

Яндекс corporate blog System Analysis and Design *Industrial Programming *Cloud services Distributed systems *
Привет, меня зовут Василий Богонатов. Я один из тех, кто приложил руку и голову и вложил свою душу в сервис распределённых персистентных очередей сообщений Yandex Message Queue. Сервис вышел в общий доступ в конце мая, но внутри Яндекса он уже давно и активно используется в разных продуктах.

Сегодня я хочу рассказать читателям Хабра об очередях сообщений вообще и о Yandex Message Queue в частности. Сначала я хочу объяснить, что такое «распределённая персистентная очередь сообщений» и зачем она нужна. Показать её практическую ценность, механику работы с сообщениями, поговорить про API и удобство использования. Во второй половине материала мы посмотрим на техническую сторону: как в наших очередях используется Yandex Database (это надежный фундамент нашего сервиса), как выглядят наивный и улучшенный подход к построению архитектуры, какие проблемы вызывает распределённость и как их можно решить.


Читать дальше →
Total votes 57: ↑55 and ↓2 +53
Views 22K
Comments 23

Как можно использовать прерываемые виртуальные машины Яндекс.Облака и экономить на решении масштабных задач

Яндекс corporate blog IT Infrastructure *Server optimization *Cloud computing *Cloud services
Сегодня мы хотим рассказать о такой полезной функции Яндекс.Облака как прерываемые виртуальные машины. Это специальная опция, которую вы можете выбрать при создании виртуальной машины, чтобы использовать вычислительные ресурсы по сниженной цене. Что же такого особенного в прерываемых виртуальных машинах, почему они стоят дешевле обычных и в каких случаях разумно их применять?


Читать дальше →
Total votes 35: ↑31 and ↓4 +27
Views 13K
Comments 8
1