mysql主從同步操作,及隊列設計

1.mysql主從同步操作
參考搜尋文章:
http://7056824.blog.51cto.com/69854/400642
http://lymrg.blog.51cto.com/1551327/696132
http://tech.it168.com/a2009/0526/577/000000577322.shtml
http://www.aslibra.com/blog/read.php?1038
http://www.cnblogs.com/yuanermen/archive/2010/08/11/1797206.html
http://www.linux521.com/2009/database/200901/170.html
http://www.xuephp.com/main/detail.php?type=database&cid=16894

主庫:
1> my.cnf
log-bin=master-bin 二進位檔案的名字,開啟二進位日誌
log-bin-index=master-bin.index 正在使用的二進位檔案的索引目錄
binlog-format=maxed
server-id=1

binlog-do-db = yourdb 需要備份的資料庫名，如果備份多個資料庫，重複設定這個選項即可(據說是危險的)
binlog-ignore-db = mysql 不需要備份的資料庫苦命，如果備份多個資料庫，重複設定這個選項即可

2> server mysqld restart
3> 檢測修改是否有效
mysql>show master status; 不應為空白
mysql>show variables like 'log_bin'; 不應為NO
mysql>reset master; (清除記錄檔)
mysql>show master logs;
4> 添加同步處理的使用者
mysql>GRANT REPLICATION CLIENT,REPLICATION SLAVE ON *.* TO repl@'192.168.1.%' IDENTIFIED BY 'passwd';
mysql>FLUSH PRIVILEGES;
5> 上鎖
mysql> FLUSH TABLES WITH READ LOCK;
6> 同步現有的資料庫
tar -zcvf /tmp/mysql-yourdb.tar.gz ./yourdb
scp mysql-yourdb.tar.gz root@192.168.1.103:/tmp/mysql-yourdb.tar.gz
7> 解鎖
mysql> show master status;
mysql-bin.000002 |      106 |
記錄該值。以後設定從伺服器時需要使用這些值。
它們表示複製座標，從伺服器應從該點開始從主伺服器上進行新的更新。
mysql> unlock tables;

從庫:
1> 複製原庫資料
service mysqld stop
tar -zxvf mysql-yourdb.tar.gz 注意解開之後的目錄許可權.
2> my.cnf
server-id=2
3> 測試主庫串連
mysql -urepl -h 192.168.1.105 -P 3306 -ppasswd
不通時檢查網路,連接埠.(iptables)
3> 啟動從庫
mysql>change master to
master_host='192.168.1.105',
master_user='repl',
master_password='passwd',
master_port=3306,
master_log_file='mysql-bin.000002',
master_log_pos=106,
master_connect_retry=30;
4> 啟動複製進程
mysql> START SLAVE;
5> 檢查狀態
mysql> show slave status \G;
上面出現： Slave_IO_Running: Yes 和 Slave_SQL_Running: Yes 表示複製正常

2.同步過程
http://www.diybl.com/course/6_system/linux/Linuxjs/2008108/149090.html
用戶端--D->主庫sql--A->主庫binlog--B->從庫relay-log--C->從庫sql.
如果從庫也開啟binlog,則還可以繼續級聯同步下去.
mysql的同步過程是非同步,從庫可以在任意時間開啟,繼續之前的同步.日誌隊列可以保證不會錯過一條語句.
從庫線上時,這個非同步過程還是相當的快的.因為主庫有更新時,會通知從庫來取日誌,而不是從庫定時重新整理主庫.
A應該是原子性的,B,C的操作使資料達到最終一致性.
B,C出錯時,同步過程會停止,等待人工幹預.
D,C執行的是一樣的語句.為了達到分布式執行的效果,mysql在主從兩台機器上都寫了記錄檔.
簡化,獨立了B的操作,B只要完成binlog到relay-log的過程就好了.

3.隊列設計
1> 記錄檔單向增長
log-bin-index 記錄檔索引
mysql-bin.000002 某記錄檔
pos 座標
從庫按參數 master_log_file='mysql-bin.000002',master_log_pos=106, 來定位從隊列的哪個位置開始讀取資料.
對relay-log也是一樣的定位.
3> 日誌清理
http://www.jzxue.com/shujuku/mysql/201102/22-6298.html