HighLoad 2012

[@Xeenon]

Первый зал:

[@Skull]

Докладчик, кстати, реально опасен: написал с помощью Recursive CTE и Regexp'a парсер JSON'а в Postgres массив одним запросом!
Хотелось бы полюбоваться (понять на 100% не надеюсь)

[@tzurbaev]

Спасибо :)

Не нашел слайдов о докладе ВКонтакте. Их нет или я плохо искал?

[@le0pard]

Докладчик, кстати, реально опасен: написал с помощью Recursive CTE и Regexp'a парсер JSON'а в Postgres массив одним запросом!

Интересно глянуть на скорость — чей вариант быстрее :)

[@dovg]

Слайд с презентации яндекса.

[@ToSHiC]

Он сам рисовал, кстати :)

[@Xeenon]

«Вы можете поднять у себя Amazon EC2 с помощью кокаина» © yandex
github.com/cocaine/

[@toppka]

почему EC2, когда кокаин это AppEngine?
github.com/cocaine/cocaine-core

[@Xeenon]

AppEngine, причем с возможностью управлять приложениями практически на любом языке (по словам яндекса добавить новый язык очень просто).
А про Amazon — цитата была со слов докладчика.

[@ToSHiC]

Когда будет lxc виртуализация (скоро), можно будет легко сделать плагин, загружающий образ диска и дёргающий на нём init скрипты. А вот попасть в такую машинку будет сложнее :) Либо заворачивать ssh в кокаиновый транспорт, а потом разворачивать обратно, либо дождаться поддержки туннелирования IP. Вот второе, честно, не в этом году будет, скорее всего надо будет ядро пилить.

[@dovg]

Принцип работы comet сообщений на мамбе:

[@Voenniy]

Аксенов тоже радовал :)
Качество не очень — поэтому спрячу под спойлер

Скрытый текст

[@antarx]

Презентация «MySQL в Google» была бы крайне интересна, но на указанном Slideshare её нет. Странно, что они говорят о небольших скриптах в том числе в youtube, если в других местах говорят, что в youtube используется vitess как middleware к mysql.

Очень радует, что google пропагандирует Go — всё-таки он очень крутой и перспективный язык программирования.

[@MzMz]

Спасибо за отличный обзор. Кто нибудь знает — будет ли видео где-нибудь видео?

[@kyookineko]

Видео всех презентаций прошлого года было доступно через личный кабинет участника.

В этом году, кстати, всем дали книгу с расшифровкой и слайдами презентаций двух прошлых конференций. Очень полезная книга, я своим ребятам для повышения квалификации ещё две умыкнул :)

[@bullgare]

Простите, не дадите ссылочку?
Может не там смотрел, но на profyclub.ru/ только расшифровки

[@oleg_bunin]

Почему? Там должны быть не только расшифровки, но и видео.

[@bullgare]

ответил вам ниже habrahabr.ru/post/155951/#comment_5330683

[@impass]

Чего-то по итогам ещё HighLoad++ 2010 (да-да) так видеозаписей всех выступлений и не дождались. :-D
Хотя ведь снимали усердно, божились организаторы, что выложат, как только обработают…

[@bullgare]

Я к Бунину на каждом хайлоаде подходил. Он мне лично, честно глядя в глаза, говорил, что всё выложат.
Теперь я уверен, что это их бизнес-модель.
Решил больше не ходить.
Сейчас достаточно бесплатных конференций, а уж онлайн можно посмотреть гораздо больше.

[@oleg_bunin]

Почему? Мы все выложили на www.profyclub.ru, и видео, и расшифровки текстов.

[@impass]

Странно, что на highload.ru не стоит никаких ссылок, на то, что что-то где-то вообще опубликовано было. А через поисковик на этот profyclub.ru по достаточно релевантному запросу совершенно нереально самому попасть (SEO у сайта вообще никакое?). Потому, видимо, и неизвестнен он никому, кроме владельцев… Рассылок тоже, как помню, никаких по итогам конференции не производилось.
В круглом столе ВКонтакте, например, что-то никакого видео не заметно.

[@bullgare]

туда пускают за деньги по подписке.
видимо у гугла маловато денег на профиклуб;)

[@impass]

По моему аккаунту conf.ontico.ru, через который оформлялся на конференцию, пустило. Хотя, конечно, странная политика — зажимать таким образом отчёты о давнишнем мероприятии.

[@bullgare]

краулер гугла на хайлоад не видел)

[@bullgare]

Приведите, пожалуйста, ссылку на какое-нибудь видео.
Особенно интересует доклад profyclub.ru/docs/155 про AjaxLayout. Текст есть, давно; и слайды тоже. За это спасибо. Но видео не нашёл. Около полугода назад заходил, прошёлся по _всем_ выложенным материалам. Но видео не нашёл. Может не умею смотреть.
Может премиум-подписка нужна (я уже не удивлюсь). Но об этом ни слова.

[@oleg_bunin]

Почему? Мы все выложили на www.profyclub.ru, и видео, и расшифровки текстов.

[@deNULL]

одно время у ВКонтакте был P2P для видео на flash (wat!?)

Об этом, кстати, даже была отдельная статья.

[@k3NGuru]

Вот на такие мероприятия я посещал с большим удовольствием. Спасибо автору

[@petropavel]

Поиграю-ка я в зануду… Поправки к статье:

При выполнении каждого statement'а создаётся MVCC snapshot, который определяет, какие данные в БД видимы/доступны statement'у.

snaphot создается виртуально, то есть с точки зрения пользователя все ведет себя так, как если бы он создавался, но физически, конечно, никаких снапшотов не создается.

И не на каждый statement, а на каждую транзакцию.

считаем видимыми те записи, у которых:
* xmin < current номера
* они не удалены (xmax = null), либо транзакция, в которой они удалены, не закомичена

не «не закомичена», а xmax > current, то есть «закомичена» после того как началась current транзакция.

Не MVCC CУБД требуют непосредственного изменения данных при изменении или удалении записей. MVCC СУБД лишены этой проблемы — все неактуальные данные чистятся отложено.

Брюс этого не говорил. Потому что это неверно. Не-MVCC СУБД вполне могут чистить отложено. MVCC СУБД вполне могут чистить сразу.

Тут хочется добавить от себя, что отложенная чистка (так называемый VACUUM)...

Отложенная чистка — это необязательно VACUUM. В InnoDB тоже отложенная чистка, а VACUUM-а нет.

Обзорный доклад про Maria DB. Форк MySQL полностью переписанный с нуля основателем MySQL,

Не переписанный с нуля, конечно :) Откуда это взялось? Мы просто дописываем к MySQL отдельные фичи.

По сути доклад сводится к Сhangelog'у MariaDB версии 5.5.

к Changelog-у всех версий, начиная с 5.1. Не только 5.5.

Personal story of how MySQL grew and the challenges I've met on the journey

Вообще-то это был доклад «What is new in MySQL». На первом слайде же написано :) А «personal story...» это то, что было в программе, то что все думали будет, но к удивлению как докладчика так и организаторов высветился этот доклад. Кто-то что-то перепутал по дороге…

Доклад от Oracle. В основном о том, что будет в новых версиях.

Да ну, ни фига. Доклад был о 5.6 — о том что уже есть в 5.6.7-RC.

[@nmike]

clustering index contains all row data (видимо подразумевалось, что при построении кластерного индекса данные в таблице сортируются согласно индексу);

не совсем верно. если дословно, то — кластерный индекс содержит в себе все данные строки. подробнее тут.

[@Arceny]

> сымплементили

Что за ужасный рунглиш? Можно же было сказать «реализовали».

[@CKOPOBAPKuH]

> How to choose right index
> Доклад о том, что такое индексы и с чем их едят. В докладе было не мало матчасти и примеров, так что всем, кто интересуется вопросом рекомендую посмотреть презентацию.

В докладе было очень мало матчасти и ровно 1 (один) нетривиальный слайд.
Для тех кто не в курсе, токутек сделали свои b-trees нового поколения, с апдейт-буфером и заменой серии случайных записей одной последовательной. У гугла такая разработка называется LevelDB и про неё рассказывала мамба, а у токутека она называется Fractal Trees.

И за то что пропустили третий, самый интересный, доклад про поиск, лично автору статьи луч поноса.

[@odiszapc]

Что насчет видео?

[@oleg_bunin]

Через некоторое время выложим для участников конференции на www.profyclub.ru

[@tzurbaev]

А для простых смертных?

[@bullgare]

это бизнес, ничего личного)

[@Linloil]

Не удалось найти видео?

[@StraNNikk]

Эх… лучше поздно чем никогда :) наконец-то дошли руки — решил черкнуть пару слов у себя в бложике по поводу прошедшей конференции. По первому дню — посещенные доклады у меня практически совпали с описанными в данной статье, а вот второй день отличается и довольно существенно. Если кому интересно, то вот:
Хранение и доставка контента Вконтакте, NoSQL в Mamba, MySQL в Google
Deploy в Mamba, SPDY в nginx, построение highload-систем в Amazon-е
RabbitMQ плагины, аналитика больших данных в Etsy.com, Percona XtraBackup
MySQL плагины, оптимизация при помощи YSlow, CUBRID