Abstract: О новом тренде — software defined strorge и главной родовой травме блочных устройств — обещании бесконечной надёжности.

Лирика

На горизонте новый buzzword: Software defined $thing. Мы уже имеем состоявшийся и сформировавшийся круг всего, относящегося к software defined networks (SDN), пришла очередь и storage (SDS). Видимо, дальше у нас будет software defined computing или ещё что-то подобное, потом резко всполошатся и подтянутся HP/VMWare и предложат (private) «software defined enterprise», который будет означать всё тоже, что было, но ещё моднее и актуальнее.

Впрочем, рассказ не про баззворды. За каждым таким странным названием (grid, elastic, cloud) стоит дальнейшее развитие технологий — построение дальнейших слоёв взаимодействия компонент (эм… взаимодействия участников взаимодействия, иначе не скажешь), основным мотивом которых является уход от гранулированности компьютерной системы, так, чтобы вся терминология, вся предметная область ушла от «межпроцессного взаимодействия» и стала автономной. В более-менее приличном виде мы это (в виде уже свершившегося факта) мы видим в волшебном мире javascript работе www, когда нас никаким образом не волнуют сервера, на которых крутятся задачи — всё общение происходит на уровне между браузером (с учётом его интимных подробностей DOM, JS и т.д.) и абстракцией, под названием URI, которой не важно — один это сервер или сотни разных.

Это взаимодействие выглядит очень соблазнительным, так что его распространяют на все остальные области, по мере возможности.

Перед рассказом про SDS, посмотрим на уже состоявшееся: SDN (software defined network).

Похоже на то, что игровая консоль нового поколения от Sony не является теперь самым важным игровым продуктом японской компании. Сегодня был анонсирован интересный игровой потоковый сервис PlayStation Now, открывающий мир «консольных» видеоигр для владельцев смартфонов, планшетов и даже телевизоров. Этот сервис будет работать и на PS4, PS3, PlayStation Vita.

Я на них не работаю! Зная нелюбовь к ним, считаю нужным сообщить это сразу.

Что было

Тем, кто не в курсе — Mail.Ru решили раздать всем по 1ТБ на их облачном диске.
Пост на Хабре вызвал бурную дискуссию. Помимо отчётов о работе приложения и заявлений о недоверии к этой компании, всплыли интересные пункты лицензионного соглашения:

5.7. Лицензиат, размещая на Сервисе Контент, предоставляет Лицензиару, его партнерам и Конечным пользователям (при условии получения доступа к Персональному дисковому пространству Лицензиата) на условиях безвозмездной, неисключительной лицензии право использования данного Контента в течение всего срока действия исключительного права на соответствующий Контент на территории всего мира любыми способами, включая, но не ограничиваясь, доведение до всеобщего сведения, просмотр, воспроизведение, перевод и переработку.

5.10. Лицензиат, размещая на Сервисе Контент, предоставляет Лицензиару, его партнерам и Конечным пользователям (при условии получения доступа к Персональному дисковому пространству Лицензиата) на условиях безвозмездной, неисключительной лицензии право использования данного Контента в течение всего срока действия исключительного права на соответствующий Контент на территории всего мира любыми способами, включая, но не ограничиваясь, доведение до всеобщего сведения, просмотр, воспроизведение, перевод и переработку.

5.12. Лицензиат не вправе загружать или иным образом доводить до всеобщего сведения (размещать на Сервисе) Контент и прочие результаты интеллектуальной деятельности Лицензиара и иных лиц-правообладателей, при отсутствии явным образом выраженного согласия правообладателя и/или необходимого объема прав на такие действия.

6.4. Лицензиар имеет право:
6.4.2. удалять без каких-либо причин и без предупреждения любой Контент, в том числе Контент, который по усмотрению Лицензиара нарушает и/или может нарушать законодательство Российской Федерации, положения настоящего Соглашения, права других Лицензиатов или третьих лиц, причинять им вред или угрожать безопасности;

7.2.7. не размещать на Сервисе фотографии, на которых помимо Лицензиата запечатлены другие лица, без их предварительного согласия, за исключением случаев, когда в соответствии со статьей 152.1. ГК РФ такое согласие не требуется;

8.2. Лицензиар не несет ответственности за возможные сбои и перерывы в работе Приложения и вызванные ими потерю информации. Лицензиар не несет ответственности за любой ущерб персональному компьютеру Лицензиата, любому другому оборудованию или программному обеспечению, вызванный или связанный с использованием Приложения.

Результатом было мнение многих — «хорошая попытка, Mail.Ru но нет». И я ожидал, что на этом история закончится.

В связи с недавней неожиданной радостью от халявного ТБ на Облаке Mail.ru, быстро сменившейся разочарованием после прочтения его лицензионного соглашения, я решил провести небольшое исследование способов шифрования данных в облаках для Windows и собрать все достойные внимания варианты в одном месте.

Входные требования следующие:

• Облачный клиент не умеет синхронизировать файлы поблочно.
• Метод шифрования должен обеспечить возможность быстрого доступа к любому файлу на облаке для его обновления или дешифровки без необходимости передачи больших объемов паразитных данных.

Мегафон начал предоставлять облачные серверы в аренду, т.е. по сути работать по модели IaaS.

На мой взгляд это отличная новость для отечественного рынка облачных услуг. Это даст существенный толчок для его развития.
Кстати, цены вполне себе демократичные: аренда в час 100 МГц процессорного времени обойдется клиентам в 0,1 руб., использование дискового пространства в 0,03 руб. за 1 ГБ, оперативной памяти — 0,01 руб. за 32 МБ.
Сервера находятся в датацентре уровня Tier 3 в Самаре.

UPD:
Калькулятор.

Компания Google наконец-то открыла для всех желающих сервис облачных вычислений Google Compute Engine (GCE), анонсированный полтора года назад. Учитывая опыт компании Google в разработке масштабируемых решений, сервисов для разработчиков и самый большой в мире парк серверов, GCE вполне может составить конкуренцию EC2. Никому не будет плохо, если два гиганта-конкурента начнут демпинговать.

Ко дню премьеры приурочено ещё несколько приятностей:

• снижены цены на инстансы на 10%;
• поддержка 16-ядерных инстансов (до 104 ГБ RAM) для высокопроизводительных вычислений и баз NoSQL;
• кроме Debian и CentOS с ядром от Google, теперь в виртуальных машинах можно запускать FreeBSD и любые дистрибутивы Linux с любыми ядрами и программным обеспечением, включая Docker, FOG, xfs и aufs.

Месяца два назад на хабре народ пытался понять — куда, собственно были попиленытрачены деньги, выделенные для создания национальной облачной платформы? Ибо со стороны продукт действительно выглядит несколько невнятно. Собственно, ответ от МинСвязи на данный вопрос — под катом. Правда, ответ так себе — скорее отписка, но немного занимательной информации здесь можно найти.

P.S Так торопились с ответом, что даже имя мое перепутали. В шапке записали инициалы C.А, а в заголовке ответа уже правильно — Дмитрий Алексеевич.

P.P.S Если вдруг надо, могу выложить на дропбоксе оригинальную пдф-ку в нормальном качестве.

Яндекс релизнул PaaS (Platform-as-a-Service) на основе своего же продукта Cocaine — системы с открытым исходным кодом, позволяющей создавать аналоги Google AppEngine или Heroku.
В данный момент, поддерживаются C, C++, Python, и в разработке Perl и JavaScript.

В Cocaine используются LXC — Linux Containers, легковесное подобие виртуальных машин, для этого используется обертка Docker, написанная на Go.

Чтобы создать свое облако, нужно всего лишь запустить cocained на одной или нескольких машинах. Клиенты, которые подключаются к cocained, называются Cocaine Dealer, и имеют FastCGI-интерфейс, который просто прикрутить к любому веб-серверу.
Все приложения в облаке исполняются независимо друг от друга.

Cocaine уже используют в:

• Яндекс.Браузере
• Яндекс.Паспорте
• Внутренней инфраструктуре Яндекса

Репозиторий Cocaine на GitHub

Последнее время во всех коллективах где мне доводилось работать я так или иначе продвигал систему управления проектами, так как без нее начинался полный бардак, который мне терпеть ни будучи исполнителем, ни будучи руководителем мне не хотелось. Основным кандидатом для наведения порядка почти всегда становился Redmine, но чем дольше я им пользовался (как со стороны пользователя, так и со стороны администратора), тем больше хотелось перейти на что-то другое. Да, как багтрекер она работает замечательно, но как только хочешь получить что-то большее, например, хотя бы личные/общие календари — начинается возня. А если уж надо переехать на другой сервер… Даже и вспоминать не хочется — каждый раз какие-то «танцы».

В то же время я довольно плотно привязался к сервисам компании Google, таким как Docs, Calendar, Gmail… И если с последним более менее все понятно, то, например, аналог первого хотелось иметь локально: когда корпоративная почта не в Google Apps, который к тому же теперь всегда платный, пользоваться уже не так удобно, да и доступ к локальным ресурсам защищеннее и быстрее.

И тут после довольно активных поисков мне попадается Feng Office, который на хабре, к сожалению, почти обделен вниманием: упоминания встречаются лишь в нескольких вопросах и без особых подробностей. Подумалось — сделалось: под катом то что из этого получилось (включая пару десятков скриншотов, правда не очень тяжелых)

Сегодня китайская группа компаний Alibaba Group объявила о том, что приобрела за неназванную сумму сервис Kanbox (клон Dropbox) и отныне предоставляет владельцам аккаунтов по 10 Тб облачного хранилища бесплатно.

Kanbox — солидный сервис, как утверждают создатели, которым в Китае пользуются около 15 млн человек. Имеются как десктопные клиенты, так и мобильные (Windows, Mac, iPhone, Android), позволяющие пользователям загружать файлы на сервис и синхронизировать устройства между собой.

Для получения 10 Тб требуется иметь учётную запись на Kanbox и установить мобильное приложение Laiwang (есть и для Android и для iOS) — китайский мессенджер для мобильной социальной сети. Учётную запись в Laiwang надо будет связать с Kanbox, после чего и будет выделено место.

UPD: да, механизм работает (правда, прецедент из Китая), инструкция ожидается в скором времени.

В последнее время у меня довольно много клиентов мигрирующих в облака, по большей части в амазон и все они подвержены примерно одинаковым мифам про облака. И эти заблуждения и непонимания мне приходится постоянно развеивать. В данной статье я буду рассказывать про IAAS(инфраструктура как сервис) это такое облачные компании как Amazon, Rackspace, Linode, digitalocean, для PAAS выглядит все немного иначе.

Вчера официально было заявлено, что мобильный офисный пакет QuickOffice (в своё время поисковый гигант купил его и спустя год закрыл харьковский и питерский офисы разработки, уволив более ста инженеров) становится бесплатным для своих обеих версий — для Android и iOS. Ранее существовали платные версии Quickoffice Pro и Quickoffice Pro HD.

QuickOffice умеет работать с файлами Microsoft Office — можно открывать и редактировать файлы Word, Excel, презентации PowerPoint и ряд других сопутствующих возможностей.

В Google Drive произошло значительное обновление инструмента Google Forms.

К пользовательским контролам был добавлен прогресс-бар, иллюстрирующий процесс заполнения формы: типичный сценарий примерно следующий — форма состоит из большого числа элементов управления, вводя данные в которые или щёлкая по флажкам, пользователь видит динамически обновляющийся индикатор, показывающий степень её заполнения. Выглядит это таким образом:

Гонка за объёмом предоставляемого облачного хранилища в Китае явно выходит на новый уровень: китайская компания Tencent предлагает всем зарегистрироваться и получить в итоге в своё распоряжение 10 Тб (терабайт) места на своём сервисе бесплатно. В этом смысле потуги Google или Dropbox действительно выглядят неважно — правда, всегда можно задаться вопросом о надёжности или приватности, хотя в этом смысле у Tencent вроде бы дела идут неплохо: она работает с 1998 года и её акции продаются на Гонконгской бирже…

Не обошлось без некоторых условий, которые, впрочем, действительно не трудно соблюсти — требуется зарегистрироваться с Tencent QQ-аккаунтом (получить его можно здесь) на странице акции и скачать мобильный клиент сервиса — доступны версии для Android и iOS. Сразу после этого в распоряжении пользователя оказывается 1 Тб облачного хранилища, который подходит для любых файлов (такой же объём на Flickr разрешают заполнять только фото и видео).

В дальнейшем по мере исчерпания свободного места сервис будет автоматически его увеличивать, пока верхняя планка не упрётся в заявленные 10 Тб в соответствии с приведённой ниже таблицей:



Насколько можно понять, что web-версии или десктопного клиента для сервиса нет, так что речь идёт именно о мобильном хранилище. Время акции также ограничено.
UPD:
Как подсказывают:

• Есть десктопный клиент под Windows
• API сервиса
• Веб-версия (есть ограничения на закачку одного файла в 300 Мб, оно снимается, если позволить установить Webkit-плагин )

Mail.ru запустил своё облачное хранилище данных, пишет Lenta.ru. Сервис под названием «Облако Mail.ru» сейчас работает в бета-режиме, а первым пользователям предлагается до ста гигабайт пространства.

В «Облаке» можно хранить файлы, которые синхронизируются между всеми устройствами пользователя. Помимо веб-версии, Mail.ru выпустил программы для работы с сервисом для Windows и OS X и мобильные приложения для Android и iOS.

Сегодня очень популярны облачные сервисы, и на kickstarter'е появился проект домашнего облачного хранилища — Plug, который собрал уже более $600 тысяч (Необходимые $69 тысяч проект собрал всего за пять дней). Самые дешевые места по $59 закончились, но остались по $79.

Вы и прежде могли назвать смартфоны жизненно важною технологией, но теперь вы можете помочь ей в борьбе против СПИДа. Или обратить её в средство изучения глобального потепления. Или обнаруживать пульсары.

А всё благодаря инфраструктуре BOINC (Berkeley Open Infrastructure for Network Computing), которую ужé использует аналогичная программа для компьютеров, координирующая помощь нескольким различным проектам со стороны более 600 тысяч добровольцев, позволяющих исследовательским центрам «позаимствовать» вычислительную мощность своих компьютеров для построения виртуального суперкомпьютера.

Например, за последние 24 часа совокупная вычислительная мощность проекта составила в среднем 6,2 петаFLOPS. Будь он одной вычислительной машиною, она стала бы шестою в ряду мощнейших в мире суперкомпьютеров.

Среди проектов, охваченных BOINC, есть поддерживаемая IBM программа Исследовательского института имени Скриппс, изучающая различные возможные варианты лекарств в попытке блокировать ключевые энзимы, необходимые ВИЧ.

Другой проект (от Института имени Альберта Эйнштейна) нацелен на обнаружение радиопульсаров, регулярность пульсации которых делает их ценным «навигационным» средством в дальнейшем изучении космоса.

Недавно пришла идея хранить свои документы не на флешке или внешнем HDD, а на более удобных облачных хранилищах, таких как SkyDrive, Box, Google Drive. Единственной проблемой была невозможность «из коробки» заставить их все работать с одной лишь единой папкой. Собственно, на примере этих трёх сервисов и рассмотрю такую возможность (Dropbox и iCloud работают по схожему принципу).