Как работает полусинхронная репликация MySql?

2012-01-22T07:52:00.000-08:00

Последнеевремя много вопросов начинает возникать вокруг полу синхронной репликации (semi-synchronousreplication). Я обнаружилнесколько частых неправильных суждений о механизме работы полусинхронной репликации.

Во-первых,несмотря на своё имя «полу-синхроннаярепликация» до сих пор асинхронна. Полу-синхронное представление это простоне удачно выбранное имя, поскольку нет четкой обратной связи между коммитом транзакции на мастере и коммитамитранзакций на репликах. Чтобы понять почему, давайте сначала четко определитьсяс этим понятием. Что в действительности означает синхронная репликация. Считаю,что таковой будет репликация, когда на мастере завершается транзакция, и передсвоим коммитом она дожидается успешногозавершения транзакции на всех репликах.

В полусинхронной репликации MySql коммит на мастере происходитещё до того как транзация отправляется на реплику. Если во время этого коммитана мастере происходит какая-нибудь проблема и транзакция откатывается, тореплики не получают транзакции. Но если на мастере все нормально и транзакцияпередана репликам, нет гарантий что на реплике все пройдет хорошо (duplicatekey err наверное знакомо?). Еслиошибка на реплике все же произойдёт, то уже будет слишком поздно откатывать транзакциюна мастере назад – там она уже завершилась.

Как стоилобы переименовать полусинхронную репликацию на MySql? Думаю, что она должна была бы называться репликация коммитов с задержкой наподтверждение, ведь именно это на самом деле и происходит. Когда транзакциязавершается на мастере - коммит проходит нормально, и транзакция отправляетсяна реплики. Тут тоже все нормально. Но клиент на мастере не делает ничего (онпросто ждет) пока не получит уведомление об успешном выполнении транзакции отвсех реплик.

Можновзглянуть на этот процесс под другим углом, и назвать его полусинхронной репликацией затрагивающей клиентов. Клиент мастера долженждать пока не придут подтверждения от остальных клиентов, что транзакция полученауспешно, но коммит на мастере не ждет этого – завершается как обычно.Транзакция уже полностью завершилась на мастере, коммит не воробей – вылетит непоймаешь – обратного пути нет. Как результат мы получаем узкое место в системе,мастер не может обогнать по скорости максимальную скорость выполнения апдейта реплик. Это как надпись наавтомобилях: ”Не гони быстрее, чем летит твой Ангел Хранитель”.

Полусинхроннаярепликация также не гарантирует, тогочто на реплике не будет возникать задержек. Клиент мастера ждет подтверждениявыполнения транзакции на всех репликах. Как вы, наверное, знаете, отправка дажеочень длинной транзакции на реплику рассчитывается обычно в миллисекундах. Носама реплика может затратить значительное время, перелопачивая свои данные. И вэто время отставать от мастера. В тоже время, реплика продолжает получать транзакцииот мастера и запускать их в отдельных потоках. Из этого вытекает, что полусинхронная репликация не можетгарантировать сохранения целостности данных.Под гарантийным сохранением данных, я имею ввиду, что перед тем как транзакциябудет завершена на мастере, на всех репликах должна быть точная копия данных мастера. Этого нет в полусинхронной репликации.

А если произойдёт какой-нибудь крах сервера в самый неподходящий момент, или большойтаймаут и все будет возвращаться к обыкновенному методу репликации. Что тогда мнеможет гарантировать полусинхронная репликация? Если не было ошибок илитаймаутов, тогда она гарантирует, что только одна транзакция может быть потеряна,если мастер-сервер ушел в даун.

Я не хочу,чтобы это звучало как то негативно, или говорить, что полусинхронная репликациябесполезна. Она полезна, но если вы неправильно понимаете её, вы не можете быть100% уверены, что происходит с вашими данными на серверах.

Если хотитебольше информации, то можно пойти в мануал MySQL manual. Но читайте внимательно, например:

When a commit returns successfully, it is known thatthe data exists in at least two places (on the master and at least one slave).If the master commits but a crash occurs while the master is waiting foracknowledgment from a slave, it is possible that the transaction may not havereached any slave.

Когдакоммит завершается удачно, это значит что данные существуют по крайней мере вдвух местах(на мастере и хотя бы на одном слейве). Если транзакция на мастере завершилась,и мастер ушел в даун пока ждал подтверждения от реплик, это может означать что транзакцияне достигла ни одной из реплик.

В конце-концов,хотелось бы узнать кто и как давно уже использует полусинхронную репликацию напродакшене. Мне кажется, что пока не так-то много людей знакомы с ней. Какой увас опыт? Что думаете?

статья основана на метериале выложенным тут

how dump only one table with mysqldmp

2011-12-28T04:53:00.000-08:00

mysqldump -u root -p test t1 --where="1=1 " > test.t1.sql

Adminer for MySql

2011-12-28T00:52:00.001-08:00

I have try to use Adminer. At first I need to solve login connection error

Can't connect to local MySQL server through socket '/var/run/mysqld/mysqld.sock

It was solved with

sudo mkdir /var/run/mysqldsudo chown mysql:mysql /var/run/mysqld/sudo ln -s /tmp/mysql.sock /var/run/mysqld/mysqld.sock

After it I try to manypulate with it data ( using this script). And found nothing. Nothing special like it. Where is it? :-) just boring from 2000)

And I deleted it at the end)

Install Mysql 5.5.15 on Ubuntu 11.10

2011-12-20T00:24:00.001-08:00

I have tried to install MySql 5.5.15 on Ubuntu 11.10 over 1 day. Hope it help who want do something

sudo apt-get purge mysql-server
sudo apt-get purge mysql-client
sudo apt-get purge mysql-common
sudo apt-get autoremove
sudo apt-get autoclean
sudo rm -rf /var/lib/mysql
sudo rm -rf /etc/mysql

sudo apt-get install alien
sudo apt-get install libaio1 libaio-dev
sudo alien -i MySQL-server-5.5.15-1.rhel4.x86_64.rpm --scripts
sudo alien -i MySQL-client-5.5.15-1.rhel4.x86_64.rpm --scripts

sudo chown mysql:root /var/lib/mysql/ -R
sudo chmod g+rw /var/lib/mysql/ -R
sudo /usr/sbin/mysqld –skip-grant &
sudo /etc/init.d/mysql start

MySql on Linux

Как работает полусинхронная репликация MySql?

how dump only one table with mysqldmp

Adminer for MySql

Install Mysql 5.5.15 on Ubuntu 11.10