標籤:http io ar os sp on 資料 div 2014
gearman 建立Mysql持久化隊列的方式如下:
1. 登入mysql命令列,運行:
create database gearman;
2. 啟動gearman,命令如下:
/usr/local/gearman/sbin/gearmand -p 4730 -L 0.0.0.0 --log-file=/tmp/gearmand-4730.log --pid-file=/tmp/gearmand-4730.pid -q MySQL --mysql-host=localhost --mysql-user=root --mysql-db=gearman --verbose DEBUG-d
具體的參數,根據自己的伺服器狀況去修改就行了。
3. 再次登入mysql命令列,執行:
use gearman;show tables;
就可以看到下面多了個“gearman_queue”的表。
這樣,gearman就變成了持久化的方式。
=============================================================================
gearman用mysql持久化之後,其實會帶來一些問題。
1. 每個任務都會寫入資料庫,這樣會帶來磁碟IO的損耗,並且gearman的效能瓶頸又多了一個可能,就是由資料庫引起的效能問題。
2. mysql有個“wait_timeout”的參數,在mysql命令列中運行
show variables like "%timeout%";
可以看到wait_timeout的值,預設是28800。也就是說,如果一個mysql的串連,超過28800s沒有任何響應,就會斷開。
3. gearman持久化的方式,如果超過了mysql的wait_timeouts的時間沒有任何響應,和資料庫的串連就會被mysql斷開,而且gearman目前是沒有mysql重新串連的,結果就是,會導致如下錯誤,必須重啟gearman才能重新正常工作。
gearman報錯
ERROR 2014-04-01 02:10:02.897899 [ proc ] mysql_stmt_execute failed: -> libgearman-server/plugins/queue/mysql/queue.cc:357
ERROR 2014-04-01 02:10:02.897910 [ proc ] gearman_server_job_add gearman_server_run_command(QUEUE_ERROR) -> libgearman-server/server.cc:301
所以,gearman持久化方式帶來的缺點顯而易見,該方式下,要避免gearman對mysql連線逾時斷開,可以將mysql的wait_timeout參數改大。
或者,直接放棄用mysql的持久化方式。
http://www.ttlsa.com/gearman/gearman-mysql/
http://huoding.com/2012/10/30/196
http://www.linuxeye.com/database/mysql-replication-to-redis-by-gearman.html
gearman mysql持久化