標籤:attribute ptime avg disk select icc 服務 tail monit
作業系統及MySQL資料庫的即時效能狀態資料尤為重要,特別是在有效能抖動的時候,這些即時的效能資料可以快速協助你定位系統或MySQL資料庫的效能瓶頸,就像你在Linux系統上使用「top,sar,iostat」等命令工具一樣,可以立刻定位OS的效能瓶頸是在IO還是CPU上,所以收集/展示這些效能資料就更為重要,那都有哪些重要的即時效能狀態指標可以反應出系統和MySQL資料庫的效能負載呢?
目前在Linux跑MySQL是大多數互連網公司的標配,以片的效能資料指標項是我認為在Linux,MySQL,InnoDB中較為重要的即時狀態資料,然而在以片Doing一欄其實更為重要,之所以把它叫做Doing,是因為「processlist,engine innodb status,locks」等指標項才真正反映了MySQL此時正在做什麼。
我們來對標Oracle資料庫看一下,在Oracle資料庫中提供了「AWR,ASH,SQL Monitor」等眾多診斷工具,可以一眼望穿資料庫正在做什麼,甚至都可以知道在過去30天內任何一個時間區間的效能負載和當時資料庫正在做什麼。
在MySQL中雖然有像「zabbix,PMM」等優秀的監控工具,但它們只能反映資料庫曆史的一些效能資料曲線,例如,TPS高了,暫存資料表使用多了,有InnoDB Deadlocks,但對於MySQL當時的Doing,我只能說不夠直接。如果你在現場,你可以抓到MySQL正在做什麼,但是,你總有不在現場的時候,如果問你昨天晚上資料庫的效能抖動是什麼原因?怎樣快速重現現場找到引起抖動的原因呢?
答案是可以使用「doDBA tools」,這是一款免費的基於控制台監控工具。doDBA tools是什麼doDBA tools是一個基於控制台的遠程監控工具,它不需要在本地/遠程系統上安裝任何軟體,它可以即時收集作業系統、MySQL、InnoDB的即時效能狀態資料,並可以產生Doing記錄檔,來協助你快速瞭解/最佳化系統及MySQL資料庫。特點
基於golang語言開發
可收集Linux、MySQL相關效能資料
可本地或遠程收集,可多台
mytop --Like Linux TOP
基於並發產生Doing日誌,複現現場
可記錄到記錄檔
doDBA tools 工作原理
遠程收集系統資訊是通過ssh(使用者名稱密碼或建立信任)的方式串連到遠程伺服器上收集,收集的方法都是通過讀取Linux的proc下的等meminfo,diskstats,uptime,net,vmstat ,cpuinfo ,loadavg等檔案,這和pmm,zabbix收集方式一致。
遠程收集MySQL資訊是通過 MySQL tcp串連到MySQL資料庫上收集,只需要授予串連使用者PROCESS、SELECT許可權即可。
系統資訊和MySQL資訊的收集可以分離,如果只想收集系統資訊,只需要提供系統使用者名稱密碼即可,如果只收集MySQL可以只提供MySQL串連資訊,如果是rds使用者,可以使用-rds參數,在使用mytop時會自動忽略系統資訊的收集。
如何使用Github首頁:
https://github.com/dblucyne/dodba_tools
Download:
wget https://raw.githubusercontent.com/dblucyne/dodba_tools/master/doDBA --no-check-certificatewget https://raw.githubusercontent.com/dblucyne/dodba_tools/master/doDBA.conf --no-check-certificatechmod +x doDBA
下載下來就可以直接使用,不依賴於任何環境。
使用協助:
./doDBA -help -c string configuration file.(default "doDBA.conf") -h string Connect to host/IP. -sys Print linux info. -myall Print linux and mysql info.
-mysql
Print mysql info. -innodb Print innodb info. -mytop Print mysql prcesslist,like top. -i duration refresh interval in seconds.(1s) -t int doing on Threads_running.(50)
-rds
Ignore system info.
-log Print to file by day. -nocolor Print to nocolor.
使用執行個體1. 收集Linux效能資料./doDBA -h=10.1.x.xx -sys
2. 收集MySQL效能資料
./doDBA -h=10.1.x.xx -mysql
3. 收集InnoDB效能資料./doDBA -h=10.1.x.xx -innodb
4. 收集MySQL及Linux效能資料./doDBA -h=10.1.x.xx -myall
5. mytop --like linux top./doDBA -h=10.1.x.xx -mytop
6. 藉助Shell收集多台cat ip.txt
10.1.x.x1
10.1.x.x2
Shell
cat ip.txt | while read ip; do echo $ip; ./doDBA -h=$ip -mysql -log </dev/null & done
7. 收集到記錄檔./doDBA -h=10.1.x.xx -mysql -log
8. 開啟Doing功能
使用【-t】參數可以基於Threads_running的數量設定閾值,設定後可記錄「processlist,engine innodb status」資訊到dodba.log日誌中,--複現現場。
./doDBA -h=10.1.x.xx -myall -t=3
9. 查看Doing日誌tail -f dodba.log
MySQL 的即時效能監控利器