SpringBoot配置Druid監控
首先我們的項目是基於Druid連接池
Druid 具有以下特點:
- 亞秒級 OLAP 查詢,包括多維過濾、Ad-hoc 的屬性分組、快速聚合數據等等。
- 實時的數據消費,真正做到數據攝入實時、查詢結果實時。
- 高效的多租戶能力,最高可以做到幾千用戶同時在線查詢。
- 擴展性強,支持 PB 級數據、千億級事件快速處理,支持每秒數千查詢並發。
- 極高的高可用保障,支持滾動升級。
1.在application.yml文件中添加連接池的配置信息
# spring 配置 spring: application: name: imodule-nexus-service # DataSource Config 數據源配置 datasource: # 數據連接池類型 type: com.alibaba.druid.pool.DruidDataSource # driver-class-name: com.mysql.jdbc.Driver # mysql-connector-java 8.0+ 使用這個新的接口 driver-class-name: com.mysql.cj.jdbc.Driver url: ${db.nexus.url} username: ${db.nexus.username} password: ${db.nexus.password} # 初始化時建立物理連接的個數。初始化發生在顯示調用init方法,或者第一次getConnection時 initial-size: 10 # 最大連接池連接數量,最大活躍連接數 max-active: 150 # 最小連接池連接數量,最小空閑數量 min-idle: 10 # 配置獲取連接等待超時的時間 max-wait: 5000 # 是否緩存preparedStatement,也就是PSCache。PSCache對支持游標的數據庫性能提升巨大,比如說oracle。在mysql下建議關閉。 pool-prepared-statements: false # 指定每個連接上PSCache的大小 # max-pool-prepared-statement-per-connection-size: 20 # 和上面的等價 # max-open-prepared-statements: # 指定檢測連接sql,如果是null,會影響testWhileIdle、testOnBorrow、testOnReturn失效,如果底層代碼use-ping-method是true,默認使用ping validation-query: SELECT 1 validation-query-timeout: 500 # 申請連接時會使用validationQuery檢測連接是否有效,true會降低性能,如果是true,並且檢測到連接已關閉,會獲取其它的可用的連接 test-on-borrow: false # 歸還連接時會使用validationQuery檢測連接是否有效,true會降低性能,如果是true,並且檢測到連接已關閉,會獲取其它的可用的連接,放回數據庫線程池 test-on-return: false # 建議配置為true,不影響性能,並且保證安全性。申請連接的時候檢測,如果此連接空閑時間大於timeBetweenEvictionRunsMillis,執行validationQuery檢測連接是否有效。 test-while-idle: true # 1)配合testWhileIdle=true時使用,如果當前jdbc使用間隔大於timeBetweenEvictionRunsMillis配置的空閑連接過期時間,執行validationQuery檢測連接是否有效。 # 數據庫會主動超時並斷開連接,因此建議timeBetweenEvictionRunsMillis小於數據庫的連接主動斷開時間(如mysql的wait_timeout和interactive_timeout) # 2)配置間隔多久才進行一次檢測,Destroy線程檢測需要關閉的空閑連接的時間,單位是毫秒 time-between-eviction-runs-millis: 60000 # 配置一個連接在池中最小生存的時間,單位是毫秒 min-evictable-idle-time-millis: 30000 # max-evictable-idle-time-millis: # 屬性類型是字符串,通過別名的方式配置擴展插件,常用的插件有: 監控統計用的filter:stat日志用的filter:log4j防御sql注入的filter:wall # 配置多個英文逗號分隔 filters: stat,wall,log4j # 通過connectProperties屬性來打開mergeSql功能;記錄慢SQL connectionProperties: druid.stat.mergeSql=true;druid.stat.slowSqlMillis=5000
2.新增配置類 DruidConfig.java
這里需要注意 @ConfigurationProperties(prefix = "spring.datasource") 指定的是Druid連接池配置信息application.yml 層級關系一定要對應好,后面會指出和這里相關的問題
package com.imodule.demo.service.configuration; import javax.sql.DataSource; import org.springframework.boot.context.properties.ConfigurationProperties; import org.springframework.boot.web.servlet.FilterRegistrationBean; import org.springframework.boot.web.servlet.ServletRegistrationBean; import org.springframework.context.annotation.Bean; import org.springframework.context.annotation.Configuration; import com.alibaba.druid.pool.DruidDataSource; import com.alibaba.druid.support.http.StatViewServlet; import com.alibaba.druid.support.http.WebStatFilter; /** * 線程池監控信息查看配置 */ @Configuration public class DruidConfig { @Bean public ServletRegistrationBean druidServlet() { // 主要實現WEB監控的配置處理 ServletRegistrationBean servletRegistrationBean = new ServletRegistrationBean( new StatViewServlet(), "/druid/*"); // 現在要進行druid監控的配置處理操作 servletRegistrationBean.addInitParameter("allow", "127.0.0.1,10.1.1.1"); // 白名單 // servletRegistrationBean.addInitParameter("deny", "192.168.1.200"); // 黑名單 servletRegistrationBean.addInitParameter("loginUsername", "admin"); // 用戶名 servletRegistrationBean.addInitParameter("loginPassword", "admin"); // 密碼 servletRegistrationBean.addInitParameter("resetEnable", "false"); // 是否可以重置數據源 return servletRegistrationBean ; } @Bean public FilterRegistrationBean filterRegistrationBean() { FilterRegistrationBean filterRegistrationBean = new FilterRegistrationBean() ; filterRegistrationBean.setFilter(new WebStatFilter()); filterRegistrationBean.addUrlPatterns("/*"); // 所有請求進行監控處理 filterRegistrationBean.addInitParameter("exclusions", "*.js,*.gif,*.jpg,*.css,/druid/*"); return filterRegistrationBean ; } @Bean @ConfigurationProperties(prefix = "spring.datasource") public DataSource druidDataSource() { return new DruidDataSource(); } }
3.項目中用到了Druid的話 肯定會先在pom里面引入相關依賴的,目前我們這個項目中引用的druid 1.1.15
pom.xml (下面兩個選一個就可以了,我試過兩種方案)
1. 使用組件common-dao層的依賴,統一引用的是 druid 1.1.15 (這個各公司的定義不同,意思就是說我們公司自定義的common包中包含了 druid 依賴,指定了版本號為1.1.15 ,所以我只需要直接引用common包就好了)
2.在引用公司的common包的時候排除druid依賴,然后再自己引入 druid-spring-boot-starter 包
保持一致,我使用的是方案一,整體統一哈哈哈哈(如果你們在使用的時候沒有其他包引用了druid ,自己手動將以下其中依賴信息添加到pom.xml即可,具體版本信息可能還需要對應一下哦)
<dependency> <groupId>com.alibaba</groupId> <artifactId>druid-spring-boot-starter</artifactId> <version>1.1.9</version> </dependency> <dependency> <groupId>com.alibaba</groupId> <artifactId>druid</artifactId> <version>1.1.15</version> </dependency>
4.啟動SpringBoot項目,執行main方法,啟動成功后訪問druid
druid監控訪問地址: http://ip:port/context-path/druid/index.html
eg:http://127.0.0.1:8080/demo/druid/login.html (這里的IP需要是上面配置文件中白名單指定的哦,多個可以使用逗號分割)
進入如下登錄頁面,用戶名及密碼就是在DruidConfig.java中配置的信息(本例中是:admin/admin)
登錄成功后,即可看到如下信息
5.配置Druid監控過程中出現過兩個問題
問題1:
Failed to bind properties under 'spring.datasource' to javax.sql.DataSource:
Property: spring.datasource.filters
Value: stat,wall,log4j
Origin: class path resource [application.yml]:53:14
Reason: org.apache.log4j.Logger
原因: spring.datasource下面的filters對日志的配置有問題,因為我項目中的日志為 slf4j,而連接池中配置的是log4j,所以出錯了
處理方案: 將 application.yml 里面的 spring.datasource.filter 的 log4j 更改為 slf4j
問題2:啟動沒報錯,也能正常訪問Druid,但是Druid監控里面sql信息沒有顯示出來,數據源配置顯示正常,連接池配置信息顯示不正常,如下圖所示
SQL監控:(執行查詢數據庫的腳本也沒有任何信息顯示)
這個問題糾結了我一上午了,查了無數遍,有人說是包的版本不對,也有人說是日志配置有問題... 都嘗試了,不行
后來我眼睛一精,發現原來是我的配置文件 application.yml里面的內容定義有問題
原版配置文件在指定數據源配置信息: spring.datasource.DBINFO spring.datasource.druid.DRUIDINFO
配置文件如下:
這個配置層級關系不對呀,在DruidConfig.java類中,我們指定的配置信息讀取路徑是 spring.datasource ,關於連接池信息又多了一層 druid(spring.datasource.druid),所以連接池相關配置信息沒有被讀取到,只讀取到了數據源信息,這就出現了上方問題2的錯誤現象了
處理方案: 將druid這一層移除,調整后的配置文件如下
6.調整之后再次啟動項目,訪問druid監控,發現一切都正常了
7.最后提供一下完整的關於druid監控的application.yml
# spring 配置 spring: application: name: demo-service # DataSource Config 數據源配置 datasource: # 數據連接池類型 type: com.alibaba.druid.pool.DruidDataSource # driver-class-name: com.mysql.jdbc.Driver # mysql-connector-java 8.0+ 使用這個新的接口 driver-class-name: com.mysql.cj.jdbc.Driver url: ${db.nexus.url} username: ${db.nexus.username} password: ${db.nexus.password} # 初始化時建立物理連接的個數。初始化發生在顯示調用init方法,或者第一次getConnection時 initial-size: 10 # 最大連接池連接數量,最大活躍連接數 max-active: 150 # 最小連接池連接數量,最小空閑數量 min-idle: 10 # 配置獲取連接等待超時的時間 max-wait: 5000 # 是否緩存preparedStatement,也就是PSCache。PSCache對支持游標的數據庫性能提升巨大,比如說oracle。在mysql下建議關閉。 pool-prepared-statements: false # 指定每個連接上PSCache的大小 # max-pool-prepared-statement-per-connection-size: 20 # 和上面的等價 # max-open-prepared-statements: # 指定檢測連接sql,如果是null,會影響testWhileIdle、testOnBorrow、testOnReturn失效,如果底層代碼use-ping-method是true,默認使用ping validation-query: SELECT 1 validation-query-timeout: 500 # 申請連接時會使用validationQuery檢測連接是否有效,true會降低性能,如果是true,並且檢測到連接已關閉,會獲取其它的可用的連接 test-on-borrow: false # 歸還連接時會使用validationQuery檢測連接是否有效,true會降低性能,如果是true,並且檢測到連接已關閉,會獲取其它的可用的連接,放回數據庫線程池 test-on-return: false # 建議配置為true,不影響性能,並且保證安全性。申請連接的時候檢測,如果此連接空閑時間大於timeBetweenEvictionRunsMillis,執行validationQuery檢測連接是否有效。 test-while-idle: true # 1)配合testWhileIdle=true時使用,如果當前jdbc使用間隔大於timeBetweenEvictionRunsMillis配置的空閑連接過期時間,執行validationQuery檢測連接是否有效。 # 數據庫會主動超時並斷開連接,因此建議timeBetweenEvictionRunsMillis小於數據庫的連接主動斷開時間(如mysql的wait_timeout和interactive_timeout) # 2)配置間隔多久才進行一次檢測,Destroy線程檢測需要關閉的空閑連接的時間,單位是毫秒 time-between-eviction-runs-millis: 60000 # 配置一個連接在池中最小生存的時間,單位是毫秒 min-evictable-idle-time-millis: 30000 # max-evictable-idle-time-millis: # 屬性類型是字符串,通過別名的方式配置擴展插件,常用的插件有: 監控統計用的filter:stat日志用的filter:log4j防御sql注入的filter:wall # 配置多個英文逗號分隔 filters: stat,wall,slf4j # 通過connectProperties屬性來打開mergeSql功能;記錄慢SQL connectionProperties: druid.stat.mergeSql=true;druid.stat.slowSqlMillis=5000