Собираем InnoDB cluster из mysql 5.7 на centos 7

[SergeyMax]

1.1.1.1 — это IP-адрес публичного DNS-сервера CloudFlare. Просто вспомнилось.

[kolu4iy]

Знаете, нам очень зашёл galera cluster на mariadb. Минусы, конечно, есть: master-master обязан считать транзакцию завершенной только тогда, когда ее совершили все ноды, однако конкретно у нас сеть (основной источник латентности) в порядке, и потому проблем не доставляет. Зато все остальное… Голова совершенно не болит. Никто не мешает остальных мастеров использовать как read only, не внося при этом конфликтов данных уровня кластера. Вот maxscale для балансировки вносил проблемы, было дело. Сейчас этот кластер собран на банальном keepalived и одну реальную аварию (не тесты) прекрасно пережил. Рекомендую, если у вас условия позволяют. Как готовить — статьи на хабре есть.

[SergeyMax]

master-master обязан считать транзакцию завершенной только тогда, когда ее совершили все ноды

А если одна из нод выйдет из строя, то что в этом случае произойдёт?

[kolu4iy]

Ничего не произойдёт. Если keepalived публиковал её как мастера, то адрес переедет на другую ноду. Они все мастер. Когда нода поднимется, произойдёт full state transfer (если остановка была длительной), либо incremental state transfer, если остановка была недолгой (патч-корд по ошибке выдернули). А потом keepalived вернёт адрес на место.
Основное уловие: в работающем состоянии — нечётное число нод, либо «наблюдатель» при чётном числе нод, во избежании возникновения т.н. split brain состояния. Наблюдатель — galera arbitrator, ресурсов для работы практически не требует.

Если вопрос был про транзакцию — она откатится, вернув ошибку на уровень приложения, которое должно будет её повторить. Также есть настройка, сколько раз пытаться закоммитить транзакцию (3 по-умолчанию). Как правило, до ошибок уровня приложения не доходит: со второй попытки транзакция падает в «усечённый» кластер.

[SergeyMax]

Всё-таки не совсем понятно. Будут ли комититься транзакции в базе, если одна из нод выключена?

[n1nj4p0w3r]

Будут, а на чтение база будет доступна до последней ноды

[kolu4iy]

Не только на чтение. На запись тоже.

[n1nj4p0w3r]

На запись только в случае наличия большинства голосов кворума, либо если отключить саму галеру.

[kolu4iy]

Вы правы, однако в данном случае разговор шёл про одну ноду. Исходя из чего предполагаем наличие кворума — у нас же больше двух нод, либо две + арбитратор.

[larrabee]

master-master обязан считать транзакцию завершенной только тогда, когда ее совершили все ноды

Я не уверен как реализовано в MariaDB Galera, но в классическом Galera Cluster и Percona GC это не так. Каждая транзакция валидируется на всех нодах при коммите на отсутствие конфликтов, а репликация самих изменений выполняется уже после коммита.

[kolu4iy]

Да, вы правы.

[nikitych]

Про сравнение galera cluster и InnoDB Cluster рекомендую прочитать комментарии под постом lefred.be/content/mysql-group-replication-is-sweet-but-can-be-sour-if-you-misunderstand-it. Если кратко, то они немного про разное. galera пытается сделать вид что она синхронная и это почти всегда удается, кроме некоторых крайних случаев, за счет производительности. mysql говорит, раз формальной синхронности нет, не будем и пытаться зато выдадим производительность, как следствие при неудачных обстоятельствах ноды могут разбежаться на тысячи транзакций. И ваше приложение должно быть к этому готово, т.е. данные всегда консистентны, но не всегда свежи.
Если прямо нужен честный, межнодовый read_your_own_writes можно посмотреть на MySQL NDB Cluster и список его ограничений появившихся не на пустом месте.
dev.mysql.com/doc/refman/5.7/en/mysql-cluster-limitations.html

[kolu4iy]

Потому я и писал, что «конкретно нам». И мы её рассматриваем как синхронный мастер-слейв, дабы не переписывать вагон легаси, а просадку производительности нивелируем хорошей сетью и симметричным железом. Спасибо за уточнение — это действительно не очевидно из моего комментария.