
В данной статье я бы хотел показать как настроить MySQL для дальнейшего использования gem'a octopus, который используется для шардинга и репликации в Rails — приложениях.
Итак, представим, что перед нами стоит задача развернуть три сервера(на первом крутится Rails — приложение, второй нужен для Master'a, третий будет выступать в качестве Slave'a), настроить репликацию между серверами и сделать так, чтобы octopus работал.
Шаг первый — предварительная настройка серверов
Действия, описанные в данном шаге, необходимо проделать как на Master — машине, так и на Slave.
Установим MySQL.
sudo apt-get install mysql-serverТеперь зайдем в MySQL консоль:
mysql -u root -pСоздадим базу данных, а также пользователя, у которого будут все права на работу с данной базой:
create database rails_myapp;
GRANT ALL ON rails_myapp.* TO 'rails_myapp_user'@'localhost';
GRANT ALL ON rails_myapp.* TO 'rails_myapp_user'@'%';
FLUSH PRIVILEGES;
EXIT;Шаг второй — настроим Master
Откроем файл конфигурации MySQL на Master — сервере.
sudo nano /etc/mysql/my.cnfВнутри этого файла мы сделаем несколько изменений. Во — первых, найдем следующую строчку:
bind-address = 127.0.0.1Заменим стандартный IP адрес на 0.0.0.0, для того, чтобы Rails — приложение могло достучаться до сервера:
bind-address = 0.0.0.0Следующим нашим шагом будет изменение значения server-id, ищем server-id в [mysqld] секции файла конфига. Вы можете выбрать любое число в качестве server-id, но для простоты лучше указать 1, нужно лишь помнить, что данное число должно быть уникально для группы серверов, которые будут участвовать в репликации.
Еще раз убедитесь, что данная строка откомментирована.
server-id = 1Теперь перейдите на строку со значением log_bin. Slave будет копировать все изменения, которые будут регистрироваться в логе. Опять же, лучше просто откомментировать строчку с log_bin:
log_bin = /var/log/mysql/mysql-bin.logВ конце Вы должны указать имя базы данных, которая будет реплицирована Slave — сервером. Вы можете указать несколько баз, повторяя данную строку для всех баз, которые хотите репллицировать.
binlog_do_db = rails_myappВсе изменения сделаны! Можно сохранить и закрыть файл.
Перезапустим MySQL.
sudo service mysql restartОткроем MySQL — шелл.
mysql -u root -pВы должны предоставить привилегии для Slave. Для этого используем следующую команду:
GRANT REPLICATION SLAVE ON *.* TO 'slave_user'@'%' IDENTIFIED BY 'password';
FLUSH PRIVILEGES;Далее Вы должны переключиться на свою базу:
USE rails_myapp;Заблокируем базу данных, чтобы посмотреть данные, которые пригодятся нам на следующих этапах:
FLUSH TABLES WITH READ LOCK;Далее наберем:
SHOW MASTER STATUS;Вы увидите примерно такую табличку, если наберете описанную ниже команду:
mysql> SHOW MASTER STATUS;| File | Position | Binlog_Do_DB |
|---|---|---|
| mysql-bin.000001 | 107 | rails_myapp |
1 row in set (0.00 sec)
Важно! Запишите или запомните название файла и номер позиции, данные значения будут использоваться позже.
Пока ваши базы данных заблокированы, нужно экспортировать базу rails_myapp. Откройте второй терминал в новом окне, убедитесь, что набираете данную команду в bash — шеле, а не в консоле MySQL.
mysqldump -u root -p --opt rails_myapp > rails_myapp.sqlПерейдите обратно в MySQL консоль, разблокируйте базы данных(разрешим запись).
UNLOCK TABLES;
QUIT;Все! Мы закончили настройку Master'a.
Шаг третий — настроим Slave.
Зайдите на MySQL сервер, откройте MySQL и создайте базу данных(имя точно такое, как и на мастере):
CREATE DATABASE rails_myapp;
EXIT;Перенесите файл с SQL — командами, который вы экспортировали на мастере и сделайте импорт.
mysql -u root -p rails_myapp< /path/to/rails_myapp.sqlЗатем необходимо немного поправить файл конфигурации MySQL:
sudo nano /etc/mysql/my.cnfПервое, что изменим будет server-id. Как Вы помните, номер должен быть уникальным в пределах группы(в конфиге Master'a мы указали 1).
server-id = 2Теперь допишем(или откомментируем) следующие три строки:
relay-log = /var/log/mysql/mysql-relay-bin.log
log_bin = /var/log/mysql/mysql-bin.log
binlog_do_db = newdatabaseЗададим новое значение bind-address:
bind-address = 0.0.0.0 Перезапустим MySQL:
sudo service mysql restartСледующим шагом будет непосредственно запуск репликации. Помните! Вместо MASTER_LOG_FILE и MASTER_LOG_POS Вы должны вписать те значения, которые записали до этого.
CHANGE MASTER TO MASTER_HOST='12.34.56.789',MASTER_USER='slave_user', MASTER_PASSWORD='password', MASTER_LOG_FILE='mysql-bin.000001', MASTER_LOG_POS= 107;
START SLAVE;
Как проверить, удачно ли прошел запуск Slave'a? Необходимо ввести комманду, описанную ниже и просмотреть лог:
SHOW SLAVE STATUS\GШаг четвертый — настроим octopus.
В Rails — приложении нужно добавить следующую строчку в Gemfile:
gem 'ar-octopus'Внутри директории config/ нужно создать файл shards.yml, который будет отвечать за конфигурирование Slave — сервера. Помните! Файл database.yml отвечает за конфигурацию Master'a, а только что созданный shards.yml за конфигурацию Slave'ов, не забываем, что в YML пробелы и табуляции имеют значение.
Файл shards.yml, после заполнения должен выглядеть примерно так:
octopus:
replicated: true
fully_replicated: true
environments:
- development
- test
development:
slave:
adapter: mysql2
encoding: utf8
database: rails_myapp
username: rails_myapp_user
password: qwerty
host: 130.111.11.111
port: 3306
pool: 10
test:
slave:
adapter: mysql2
encoding: utf8
database: rails_myapp
username: rails_myapp_user
password: qwerty
host: 130.111.111.111
port: 3306
pool: 10Все! Осталось прописать в Ваших моделях, что они являются replicated_model(), и запустить Rails — приложение. Отправив POST — запрос, в консоли Вы должны увидеть примерно следующее:
[Shard: slave] OurModel Load (1.0ms) SELECT `model`.* FROM `model` WHERE `chats`.`id` = 'gkjhgfhd' LIMIT 1Удачной настройки!