MySQL儲存日誌並使用Loganalyzer作為前端展示

MySQL儲存日誌並使用Loganalyzer作為前端展示

為什麼要使用日誌
在生產環境中我們可能需要一個較為完整的日誌系統來查看運行中主機服務的狀態和所作出的操作，我們可以在較大型的網路架構中使用ELK來實現對日誌的收集、檢索、最上層顯示，但是中小型架構中使用rsyslog足以對所有伺服器的日誌進行收集和檢索來達到即時分析資料流量的目的。

本文目標
使用rsyslog將兩台主機的日誌資訊儲存到MySQL資料庫中，並且編譯安裝Loganalyzer對MySQL中的日誌資訊使用httpd+php在前端進行展示。

實驗拓撲圖

實驗環境

主機名稱	IP地址	負責
syslog.bkjia.com	192.168.2.2	收集日誌,MySQL
www.bkjia.com	192.168.2.3	web
server1.bkjia.com	192.168.2.4	正常使用

本文所有主機皆關閉SElinux和IPtables

 

syslog主機上rsyslog設定
以下操作在 syslog.bkjia.com 中執行

首先我們要安裝mysql和rsyslog串連mysql的驅動

[root@syslog ~]# yum install mysql-server rsyslog-mysql -y
Loaded plugins: fastestmirror
Setting up Install Process

    #省略
Installed:
  rsyslog-mysql.x86_64 0:5.8.10-10.el6_6 
  mysql-server.x86_64 0:5.1.73-5.el6_7.1                                                                                                                                                 

Complete!然後我們要修改rsyslog的設定檔，將下面兩項啟用

$ModLoad imudp
$UDPServerRun 514
再添加mysql的配置

$ModLoad ommysql
修改日誌存放位置為MySQL
vim編輯器進入末行模式進行替換

%s@./var\/log.*@:ommysql:192.168.2.2,Syslog,syslog,passwd@gi
重啟rsyslog服務

[root@syslog ~]# service rsyslog restart
Shutting down system logger:                              [  OK  ]
Starting system logger:                                    [  OK  ]
建立mysql使用者並賦予許可權

mysql> GRANT ALL ON Syslog.* TO 'syslog'@'%' IDENTIFIED BY 'passwd';
Query OK, 0 rows affected (0.00 sec)

mysql> FLUSH PRIVILEGES;
Query OK, 0 rows affected (0.00 sec)
匯入表

[root@syslog ~]# mysql -usyslog -ppasswd < /usr/share/doc/rsyslog-mysql-5.8.10/createDB.sqlServer1主機上rsyslog設定
以下操作在 server1.bkjia.com 中執行

首先我們要修改rsyslog的設定檔
vim編輯器進入末行模式進行替換

%s@./var\/log.*@\@192.168.2.2@gi
重啟rsyslog服務

[root@server1 ~]# service rsyslog restart
Shutting down system logger:                              [  OK  ]
Starting system logger:                                    [  OK  ]
測試是否成功

在syslog.bkjia.com中查詢資料庫看是否記錄

mysql> select * from SystemEvents\G;
*************************** 1. row ***************************
                ID: 1
        CustomerID: NULL
        ReceivedAt: 2016-03-23 17:28:21
DeviceReportedTime: 2016-03-23 17:28:21
          Facility: 0
          Priority: 6
          FromHost: syslog
          Message: imklog 5.8.10, log source = /proc/kmsg started.
        NTSeverity: NULL
        Importance: NULL
      EventSource: NULL
        EventUser: NULL
    EventCategory: NULL
          EventID: NULL
  EventBinaryData: NULL
  省略。。。。Web伺服器配置
以下操作在 www.bkjia.com 中執行

由於loganalzyer提供的動態網頁，所以我們要安裝httpd和php

[root@www ~]# yum install php-gd httpd php php-mysql -y | tail -n 10
  apr-util.x86_64 0:1.3.9-3.el6_0.1                                           
  apr-util-ldap.x86_64 0:1.3.9-3.el6_0.1                                       
  httpd-tools.x86_64 0:2.2.15-47.el6.CentOS.4                                 
  libedit.x86_64 0:2.11-4.20080712cvs.1.el6                                   
  mailcap.noarch 0:2.1.31-2.el6                                               
  php-cli.x86_64 0:5.3.3-46.el6_7.1                                           
  php-common.x86_64 0:5.3.3-46.el6_7.1                                         
  php-pdo.x86_64 0:5.3.3-46.el6_7.1                                           

Complete!
解壓loganalzyer程式包到/var/www/html中並配置

[root@www ~]# tar xf loganalyzer-3.6.4.tar.gz  -C /var/www/html/
[root@www ~]# cd /var/www/html/
[root@www html]# ls
loganalyzer-3.6.4
[root@www html]# cp -a loganalyzer-3.6.4/src/ log
 cp -a loganalyzer-3.6.4/contrib/*.sh log/

[root@www html]# cd log
[root@www log]# chmod +x *.sh
[root@www log]# ./configure.sh
[root@www log]# ./secure.sh
[root@www log]# chmod 666 config.php
啟動httpd服務

[root@www log]# service httpd start
Starting httpd: httpd: Could not reliably determine the server's fully qualified domain n
ame, using www.bkjia.com for ServerName                                                          [  OK  ]
訪問web頁面安裝loganalyzer

一直下一步到下面的頁面，並按下面這樣輸入

一直下一步到最後點擊Finish

安裝完成，我們可以通過前端頁面查看多台主機日誌資訊了

總結
怎麼樣？是不是很直觀的就能查看排版好且美觀的日誌資訊，再也不用面對繁雜的命令列介面了！

RHEL5.4部署中央Log Service器之rsyslog+loganalyzer 

使用rsyslog mysql 和logAnalyzer 的Log Service器 

CentOS 6.3下利用Rsyslog+LogAnalyzer+MySQL部署Log Service器 

LogAnalyzer 的詳細介紹：請點這裡
LogAnalyzer 的：請點這裡

本文永久更新連結地址：