Druid資料庫連接池_Druid資料庫連接池

Druid的簡介

Druid首先是一個資料庫連接池。Druid是目前最好的資料庫連接池，在功能、效能、擴充性方面，都超過其他資料庫連接池，包括DBCP、C3P0、BoneCP、Proxool、JBoss DataSource。Druid已經在阿里巴巴部署了超過600個應用，經過一年多生產環境大規模部署的嚴苛考驗。

同時Druid不僅僅是一個資料庫連接池，它包括四個部分：

    Druid是一個JDBC組件，它包括三個部分：

    基於Filter－Chain模式的外掛程式體系。

    DruidDataSource 高效可管理的資料庫連接池。

    SQLParser

Druid的功能

1、替換DBCP和C3P0。Druid提供了一個高效、功能強大、可擴充性好的資料庫連接池。

2、可以監控資料庫訪問效能，Druid內建提供了一個功能強大的StatFilter外掛程式，能夠詳細統計SQL的執行效能，這對於線上分析資料庫訪問效能有協助。

3、資料庫密碼加密。直接把資料庫密碼寫在設定檔中，這是不好的行為，容易導致安全問題。DruidDruiver和DruidDataSource都支援PasswordCallback。

4、SQL執行日誌，Druid提供了不同的LogFilter，能夠支援Common-Logging、Log4j和JdkLog，你可以按需要選擇相應的LogFilter，監控你應用的資料庫訪問情況。

5、擴充JDBC，如果你要對JDBC層有編程的需求，可以通過Druid提供的Filter機制，很方便編寫JDBC層的擴充外掛程式。

DRUID介紹

    DRUID是阿里巴巴開源平台上一個資料庫連接池實現，它結合了C3P0、DBCP、PROXOOL等DB池的優點，同時加入了日誌監控，可以很好的監控DB池串連和SQL的執行情況，可以說是針對監控而生的DB串連池(據說是目前最好的串連池,不知道速度有沒有BoneCP快)。

  配置參數

和其它串連池一樣DRUID的DataSource類為：com.alibaba.druid.pool.DruidDataSource，基本配置參數如下：

配置 預設值 說明 name
配置這個屬性的意義在於，如果存在多個資料來源，監控的時候可以通過名字來區分開來。 
如果沒有配置，將會產生一個名字，格式是："DataSource-" + System.identityHashCode(this) jdbcUrl
串連資料庫的url，不同資料庫不一樣。例如： 
mysql : jdbc:mysql://10.20.153.104:3306/druid2 
oracle : jdbc:oracle:thin:@10.20.149.85:1521:ocnauto username
串連資料庫的使用者名稱 password
串連資料庫的密碼。如果你不希望密碼直接寫在設定檔中，可以使用ConfigFilter。詳細看這裡：https://github.com/alibaba/druid/wiki/%E4%BD%BF%E7%94%A8ConfigFilter driverClassName 根據url自動識別 這一項可配可不配，如果不配置druid會根據url自動識別dbType，然後選擇相應的driverClassName(建議配置下) initialSize 0 初始化時建立物理串連的個數。初始化發生在顯示調用init方法，或者第一次getConnection時 maxActive 8 最大串連池數量 maxIdle 8 已經不再使用，配置了也沒效果 minIdle
最小串連池數量 maxWait
擷取串連時最大等待時間，單位毫秒。配置了maxWait之後，預設啟用公平鎖，並發效率會有所下降，如果需要可以通過配置useUnfairLock屬性為true使用非公平鎖。 poolPreparedStatements false 是否緩衝preparedStatement，也就是PSCache。PSCache對支援遊標的資料庫效能提升巨大，比如說oracle。在mysql下建議關閉。 maxOpenPreparedStatements -1 要啟用PSCache，必須配置大於0，當大於0時，poolPreparedStatements自動觸發修改為true。在Druid中，不會存在Oracle下PSCache佔用記憶體過多的問題，可以把這個數值配置大一些，比如說100 validationQuery
用來檢測串連是否有效sql，要求是一個查詢語句。如果validationQuery為null，testOnBorrow、testOnReturn、testWhileIdle都不會其作用。 testOnBorrow true 申請串連時執行validationQuery檢測串連是否有效，做了這個配置會降低效能。 testOnReturn false 歸還串連時執行validationQuery檢測串連是否有效，做了這個配置會降低效能 testWhileIdle false 建議配置為true，不影響效能，並且保證安全性。申請串連的時候檢測，如果空閑時間大於timeBetweenEvictionRunsMillis，執行validationQuery檢測串連是否有效。 timeBetweenEvictionRunsMillis
有兩個含義： 
1) Destroy線程會檢測串連的間隔時間2) testWhileIdle的判斷依據，詳細看testWhileIdle屬性的說明 numTestsPerEvictionRun
不再使用，一個DruidDataSource只支援一個EvictionRun minEvictableIdleTimeMillis

connectionInitSqls
物理串連初始化的時候執行的sql exceptionSorter 根據dbType自動識別 當資料庫拋出一些不可恢複的異常時，拋棄串連 filters
屬性類型是字串，通過別名的方式配置擴充外掛程式，常用的外掛程式有： 
監控統計用的filter:stat日誌用的filter:log4j防禦sql注入的filter:wall proxyFilters

類型是List<com.alibaba.druid.filter.Filter>，如果同時配置了filters和proxyFilters，是組合關係，並非替換關係

  使用方法

DB資料來源的使用方法也就是2種，一種是在代碼中寫死通過NEW操作符建立DataSSource，然後set一些串連屬性，這裡不在累述;另外一種是基於SPRING的配置方法，然後讓SPRING的Context自動載入配置（以下設定檔預設都在項目根目錄下conf檔案夾中）

1、屬性檔案:application.properties(DataSource串連參數)

jdbc.driverClassName=com.mysql.jdbc.Driver jdbc.url=jdbc:mysql://127.0.0.1:3306/test jdbc.username=root jdbc.password=1qaz!QAZ

2、SPRING設定檔：spring-base.xml

<?xml version="1.0" encoding="UTF-8"?> <beans xmlns=" http://www.springframework.org/schema/beans"  xmlns:xsi=" http://www.w3.org/2001/XMLSchema-instance" xmlns:batch=" http://www.springframework.org/schema/batch"  xsi:schemaLocation=" http://www.springframework.org/schema/beans            http://www.springframework.org/schema/beans/spring-beans-4.0.xsd">  <bean id="propertyConfigure"   class="org.springframework.beans.factory.config.PropertyPlaceholderConfigurer">   <property name="locations">    <list>     <value>./conf/application.properties</value>    </list>   </property>  </bean>  <bean id="dataSource" class="com.alibaba.druid.pool.DruidDataSource"   init-method="init" destroy-method="close">   <property name="driverClassName" value="${jdbc.driverClassName}" />   <property name="url" value="${jdbc.url}" />   <property name="username" value="${jdbc.username}" />   <property name="password" value="${jdbc.password}" />   <!-- 配置初始化大小、最小、最大 -->   <property name="initialSize" value="1" />   <property name="minIdle" value="1" />   <property name="maxActive" value="10" />  <!-- 配置擷取串連等待逾時的時間 -->   <property name="maxWait" value="10000" />  <!-- 配置間隔多久才進行一次檢測，檢測需要關閉的空閑串連，單位是毫秒 -->   <property name="timeBetweenEvictionRunsMillis" value="60000" />  <!-- 配置一個串連在池中最小生存的時間，單位是毫秒 -->   <property name="minEvictableIdleTimeMillis" value="300000" />  <property name="testWhileIdle" value="true" />  <!-- 這裡建議配置為TRUE，防止取到的串連不可用 -->   <property name="testOnBorrow" value="true" />   <property name="testOnReturn" value="false" />  <!-- 開啟PSCache，並且指定每個串連上PSCache的大小 -->   <property name="poolPreparedStatements" value="true" />   <property name="maxPoolPreparedStatementPerConnectionSize"    value="20" />  <!-- 這裡配置提交方式，預設就是TRUE，可以不用配置 -->  <property name="defaultAutoCommit" value="true" />  <!-- 驗證串連有效與否的SQL，不同的資料配置不同 -->   <property name="validationQuery" value="select 1 " />   <property name="filters" value="stat" />   <property name="proxyFilters">    <list>     <ref bean="logFilter" />    </list>   </property>  </bean>  <bean id="logFilter" class="com.alibaba.druid.filter.logging.Slf4jLogFilter">   <property name="statementExecutableSqlLogEnable" value="false" />  </bean></beans>

上面紅色標註部分為監控DB池串連執行監控，後面在做詳細說明. 監控方式

1、WEB方式監控配置

 

<servlet>      <servlet-name>DruidStatView</servlet-name>      <servlet-class>com.alibaba.druid.support.http.StatViewServlet</servlet-class>  </servlet>  <servlet-mapping>      <servlet-name>DruidStatView</servlet-name>      <url-pattern>/druid/*</url-pattern>  </servlet-mapping>  <filter>   <filter-name>druidWebStatFilter</filter-name>   <filter-class>com.alibaba.druid.support.http.WebStatFilter</filter-class>   <init-param>    <param-name>exclusions</param-name>    <param-value>/public/*,*.js,*.css,/druid*,*.jsp,*.swf</param-value>   </init-param>   <init-param>    <param-name>principalSessionName</param-name>    <param-value>sessionInfo</param-value>   </init-param>   <init-param>    <param-name>profileEnable</param-name>    <param-value>true</param-value>   </init-param>  </filter>  <filter-mapping>   <filter-name>druidWebStatFilter</filter-name>   <url-pattern>/*</url-pattern>  </filter-mapping>

把上面servlet配置添加到項目web.xml即可。然後運行Tomcat，瀏覽器輸入 http://IP:PROT/druid

就可以開啟Druid的監控頁面了.

2、記錄檔監控

Druid提供了多種記錄檔監控 commons-logging、log4j等，這裡我們主要使用slf4j和logback來進行日誌監控配置。

首先要引入slf4j和logback相關的jar檔案（從Maven公用倉庫下載 http://search.maven.org/）

<slf4j.version>1.7.7</slf4j.version> 
<logback.version>1.1.2</logback.version>

 

<dependency> 
    <groupId>org.slf4j</groupId> 
    <artifactId>slf4j-api</artifactId> 
    <version>${slf4j.version}</version> 
 </dependency> 
<dependency> 
    <groupId>ch.qos.logback</groupId> 
    <artifactId>logback-access</artifactId> 
    <version>${logback.version}</version> 
</dependency> 
<dependency> 
    <groupId>ch.qos.logback</groupId> 
    <artifactId>logback-core</artifactId> 
    <version>${logback.version}</version> 
</dependency> 
<dependency> 
    <groupId>ch.qos.logback</groupId> 
    <artifactId>logback-classic</artifactId> 
    <version>${logback.version}</version> 
</dependency> 

 

接下配置logback的設定檔(./conf/logback.xml)

 

<configuration>

 <appender name="STDOUT" class="ch.qos.logback.core.ConsoleAppender"> 
  <layout class="ch.qos.logback.classic.PatternLayout"> 
   <Pattern>%d{HH:mm:ss.SSS} [%thread] %-5level %logger{36} - %msg%n 
   </Pattern> 
  </layout> 
 </appender>

 <appender name="FILE" class="ch.qos.logback.core.FileAppender"> 
  <file>./logs/druid_info.log</file> 
  <layout class="ch.qos.logback.classic.PatternLayout"> 
   <Pattern>%d{HH:mm:ss.SSS} [%thread] %-5level %logger{36} - %msg%n</Pattern> 
  </layout> 
  <filter class="ch.qos.logback.classic.filter.ThresholdFilter"> 
   <level>debug</level> 
  </filter> 
 </appender>

 <root level="DEBUG"> 
  <appender-ref ref="FILE" /> 
 </root> 
</configuration>

 

最後就是寫一個測試類別進行測試

public class TestMain {

 public static void loadLoggerContext() { 
  System.getProperties().put("logback.configurationFile", "./conf/logback.xml"); 
  LoggerContext lc = (LoggerContext) LoggerFactory.getILoggerFactory(); 
  StatusPrinter.setPrintStream(System.err); 
  StatusPrinter.print(lc); 
 }

 public static void main(String[] args) { 
  try { 
   loadLoggerContext(); 
   FileSystemXmlApplicationContext context = new FileSystemXmlApplicationContext("./conf/spring-base.xml"); 

  } catch (Exception e) { 
   System.out.println(e); 
  } 
 } 
}

註：Druid的參考配置：

<bean id="dataSource" class="com.alibaba.druid.pool.DruidDataSource" init-method="init" destroy-method="close">       <property name="url" value="${jdbc_url}" />      <property name="username" value="${jdbc_user}" />      <property name="password" value="${jdbc_password}" />             <property name="filters" value="stat" />         <property name="maxActive" value="20" />      <property name="initialSize" value="1" />      <property name="maxWait" value="60000" />      <property name="minIdle" value="1" />         <property name="timeBetweenEvictionRunsMillis" value="60000" />      <property name="minEvictableIdleTimeMillis" value="300000" />         <property name="validationQuery" value="SELECT 'x'" />      <property name="testWhileIdle" value="true" />      <property name="testOnBorrow" value="false" />      <property name="testOnReturn" value="false" />             <property name="poolPreparedStatements" value="true" />      <property name="maxPoolPreparedStatementPerConnectionSize" value="50" />  </bean>  

以上在上面的配置中，通常你需要配置url、username、password、maxActive這幾項。 
在DruidDataSource中，你可以不配置DriverClass，它根據url自動識別。Druid能夠自動識別20多中url，常見的JDBC Driver都包括了。

從DBCP遷移最方便，把org.apache.commons.dbcp.BasicDataSource修改為com.alibaba.druid.pool.DruidDataSource就好了。