通過德魯伊druid給系統增加監控

 

系統在線上運行了一段時間后，比如一年半載的，我們發現系統可能存在某些問題，比如執行系統變慢了，比如某些spring的bean無法監控各種調用情況。

觸發到db的各種執行情況，這個時候，我們就需要一個工具，能將我們的系統監控起來，當然當前通過其他工具，也有很多，比如使用雲服務的雲上面就提供了執行各種SQL的監控管理界面。。

但是，我們當前使用的這個druid是內嵌在系統中的，且運行起來對系統無影響的一種插件式的工具。下面一一介紹。

1、引入jar包注意，之前系統中使用的是這個jar包，配置好整個系統后，SQL監控就是現實不出來。查了不少資料，最終在一個大神的博客中看到，這個版本，不能是這個版本。

於是修改為：

        <!-- 添加druid連接池包 -->
        <dependency>
            <groupId>com.alibaba</groupId>
            <artifactId>druid</artifactId>
            <version>1.0.29</version>
        </dependency>

 

2、web.xml配置。

這里主要是配置訪問監控的用戶名、密碼信息、以及訪問路徑。監控的內容，等。（藍色字體部分）

<?xml version="1.0" encoding="UTF-8"?>
<web-app xmlns="http://java.sun.com/xml/ns/javaee" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
    xsi:schemaLocation="http://java.sun.com/xml/ns/javaee
                      http://java.sun.com/xml/ns/javaee/web-app_3_0.xsd"
    version="3.0">
    
    <welcome-file-list>
        <welcome-file>index.do</welcome-file>
    </welcome-file-list>

    <listener>
        <description>Spring監聽器</description>
        <listener-class>org.springframework.web.context.ContextLoaderListener</listener-class>
    </listener>
    
    <!-- ContextLoaderListener初始化Spring上下文時需要使用到的contextConfigLocation參數 -->
    <context-param>
        <param-name>contextConfigLocation</param-name>
        <!-- 配置spring.xml和spring-mybatis.xml這兩個配置文件的位置，固定寫法 -->
        <param-value>
            classpath:spring.xml,
            classpath:spring-activitymq.xml,
            classpath:dubbo.xml,
            classpath:spring-redis.xml,
            classpath:spring-mongodb.xml,
            classpath:spring-mybatis.xml,
        </param-value>
    </context-param>
        
    <!-- 區分項目名稱，防止默認重名 -->
    <!-- <context-param>
        <param-name>webAppRootKey</param-name>
        <param-value>demo-system.root</param-value>
    </context-param> -->
    <context-param>   
        <param-name>log4jConfigLocation</param-name>   
        <param-value>classpath:log4j.properties</param-value>  
    </context-param> 
    <!-- Spring的log4j監聽器 -->
    <listener>
        <listener-class>org.springframework.web.util.Log4jConfigListener</listener-class>
    </listener>

    <!-- 字符集 過濾器  -->
    <filter>
        <filter-name>CharacterEncodingFilter</filter-name>
        <filter-class>org.springframework.web.filter.CharacterEncodingFilter</filter-class>
        <init-param>
            <param-name>encoding</param-name>
            <param-value>UTF-8</param-value>
        </init-param>
        <init-param>
            <param-name>forceEncoding</param-name>
            <param-value>true</param-value>
        </init-param>
    </filter>
    <filter-mapping>
        <filter-name>CharacterEncodingFilter</filter-name>
        <url-pattern>/*</url-pattern>
    </filter-mapping>
    <!-- Spring view分發器 -->
    <servlet>
        <servlet-name>dispatcher</servlet-name>
        <servlet-class>org.springframework.web.servlet.DispatcherServlet</servlet-class>
        <init-param>
            <param-name>contextConfigLocation</param-name>
            <param-value>/WEB-INF/dispatcher-servlet.xml</param-value>
        </init-param>
        <load-on-startup>1</load-on-startup>
    </servlet>
    <servlet-mapping>
        <servlet-name>dispatcher</servlet-name>
        <url-pattern>*.do</url-pattern>
    </servlet-mapping>
    
    <!--druid監控頁面 -->
     <filter>  
        <filter-name>DruidWebStatFilter</filter-name>  
        <filter-class>com.alibaba.druid.support.http.WebStatFilter</filter-class>  
        <init-param>  
            <param-name>exclusions</param-name>  
            <param-value>/static/*,*.js,*.gif,*.jpg,*.png,*.css,*.ico,/druid/*</param-value>  
        </init-param>  
    </filter>  
    <filter-mapping>  
        <filter-name>DruidWebStatFilter</filter-name>  
        <url-pattern>/*</url-pattern>  
    </filter-mapping>  
    <servlet>
        <servlet-name>DruidStatView</servlet-name>
        <servlet-class>com.alibaba.druid.support.http.StatViewServlet</servlet-class>
        <init-param>
            <!-- 不允許清空統計數據 -->
            <param-name>resetEnable</param-name>
            <param-value>false</param-value>
        </init-param>
        <init-param>
            <!-- 用戶名 -->
            <param-name>loginUsername</param-name>
            <param-value>adminDruid</param-value>
        </init-param>
        <init-param>
            <!-- 密碼 -->
            <param-name>loginPassword</param-name>
            <param-value>123456</param-value>
        </init-param>
    </servlet>
    <servlet-mapping>
        <servlet-name>DruidStatView</servlet-name>
        <url-pattern>/druid/*</url-pattern>
    </servlet-mapping>
    <!--druid監控頁面 -->
</web-app>

 

3、mybatis文件配置

我們系統采用的是spring+mybatis的控制。而這個druid是一個數據庫連接池。。。注意紅色文字部分

<?xml version="1.0" encoding="UTF-8"?>
<beans xmlns="http://www.springframework.org/schema/beans" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xmlns:tx="http://www.springframework.org/schema/tx" xmlns:aop="http://www.springframework.org/schema/aop" xsi:schemaLocation="
http://www.springframework.org/schema/beans 
http://www.springframework.org/schema/beans/spring-beans-3.0.xsd 
http://www.springframework.org/schema/tx 
http://www.springframework.org/schema/tx/spring-tx-3.0.xsd
http://www.springframework.org/schema/aop 
http://www.springframework.org/schema/aop/spring-aop-3.0.xsd
">
    <!-- 慢SQL記錄 -->
    <bean id="stat-filter" class="com.alibaba.druid.filter.stat.StatFilter">
        <!-- 慢sql時間設置,即執行時間大於200毫秒的都是慢sql -->
        <property name="slowSqlMillis" value="500"/>
        <property name="logSlowSql" value="true"/>  
        <property name="mergeSql" value="true" />  
    </bean>
    <bean id="log-filter" class="com.alibaba.druid.filter.logging.Log4jFilter">
        <property name="dataSourceLogEnabled" value="true" />
        <property name="statementExecutableSqlLogEnable" value="true" />
    </bean>
    <!-- JNDI方式配置數據源 -->
    <!-- <bean id="dataSource" class="org.springframework.jndi.JndiObjectFactoryBean"> <property name="jndiName" value="${jndiName}"></property> </bean> -->
    <!-- ========================================配置數據源========================================= -->
    <!-- 配置數據源，使用的是alibaba的Druid(德魯伊)數據源 -->
    <bean name="dataSource" class="com.alibaba.druid.pool.DruidDataSource" init-method="init" destroy-method="close">
        <property name="driverClassName" value="com.mysql.jdbc.Driver" />
        <property name="url" value="${jdbc_url}" />
        <property name="username" value="${jdbc_username}" />
        <property name="password" value="${jdbc_password}" />
        <!-- 初始化連接大小 -->
        <property name="initialSize" value="${maxActive}" />
        <!-- 連接池最大使用連接數量 -->
        <property name="maxActive" value="${maxActive}" />
        <!-- 連接池最小空閑 -->
        <property name="minIdle" value="0" />
        <!-- 獲取連接最大等待時間 -->
        <property name="maxWait" value="60000" />
        <!-- 
        <property name="poolPreparedStatements" value="true" /> 
        <property name="maxPoolPreparedStatementPerConnectionSize" value="33" /> 
        -->
        <property name="validationQuery" value="${validationQuery}" />
        <property name="testOnBorrow" value="false" />
        <property name="testOnReturn" value="false" />
        <property name="testWhileIdle" value="true" />
        <!-- 配置間隔多久才進行一次檢測，檢測需要關閉的空閑連接，單位是毫秒 -->
        <property name="timeBetweenEvictionRunsMillis" value="60000" />
        <!-- 配置一個連接在池中最小生存的時間，單位是毫秒 -->
        <property name="minEvictableIdleTimeMillis" value="25200000" />
        <!-- 打開removeAbandoned功能 -->
        <property name="removeAbandoned" value="true" />
        <!-- 1800秒，也就是30分鍾 -->
        <property name="removeAbandonedTimeout" value="1800" />
        <!-- 關閉abanded連接時輸出錯誤日志 -->
        <property name="logAbandoned" value="true" />
        <!-- 監控數據庫：做了如下配置，開啟了druid防火牆。 -->
        <property name="filters" value="stat,wall" />
        <!-- 保存監控日志過濾器 -->
        <property name="proxyFilters">
            <list>
                <ref bean="stat-filter"/>
                <ref bean="log-filter"/>
            </list>
        </property>
    </bean>
    
    <!-- ========================================分隔線========================================= -->
    
    <!-- ========================================針對myBatis的配置項============================== -->
    <!-- 配置sqlSessionFactory -->
    <bean id="sqlSessionFactory" class="org.mybatis.spring.SqlSessionFactoryBean">
        <!-- 實例化sqlSessionFactory時需要使用上述配置好的數據源以及SQL映射文件 -->
        <property name="dataSource" ref="dataSource" />
        <!-- 自動掃描chen/wei/xian/mapping/目錄下的所有SQL映射的xml文件, 省掉Configuration.xml里的手工配置
        value="classpath:chen/wei/xian/mapping/*.xml"指的是classpath(類路徑)下com.cwx.batchJob.mapping包中的所有xml文件
        UserMapper.xml位於com.cwx.batchJob.mapping包下，這樣UserMapper.xml就可以被自動掃描
         -->
        <property name="configLocation" value="classpath:mybatis-config.xml"/>
        <property name="mapperLocations" value="classpath:sqlmap/*.xml" />
    </bean>
    <!-- 配置掃描器 -->
    <bean class="org.mybatis.spring.mapper.MapperScannerConfigurer">
        <!-- 掃描com.cwx.batchJob.dao這個包以及它的子包下的所有映射接口類 -->
        <property name="basePackage" value="com.cwx.demo.dao" />
        <property name="sqlSessionFactoryBeanName" value="sqlSessionFactory" />
    </bean>
    
    <!-- ========================================分隔線========================================= -->
    <!-- 配置Spring的事務管理器 -->
    <bean id="transactionManager" class="org.springframework.jdbc.datasource.DataSourceTransactionManager">
        <property name="dataSource" ref="dataSource" />
    </bean>

    <!-- 注解方式配置事物,order表示執行的先后順序，數值越大越后面執行 -->
    <tx:annotation-driven transaction-manager="transactionManager" order="10" />

    <!-- 配置druid監控spring jdbc -->
    <bean id="druid-stat-interceptor" class="com.alibaba.druid.support.spring.stat.DruidStatInterceptor">
    </bean>
    <bean id="druid-stat-pointcut" class="org.springframework.aop.support.JdkRegexpMethodPointcut" scope="prototype">
        <property name="patterns">
            <list>
                <value>com.cwx.*.activityMq.*</value>
                <value>com.cwx.*.aop.*</value>
                <value>com.cwx.*.service.impl.*</value>
                <value>com.cwx.*.dao.*</value>
            </list>
        </property>
    </bean>
    <aop:config>
        <aop:advisor advice-ref="druid-stat-interceptor" pointcut-ref="druid-stat-pointcut" />
    </aop:config>
</beans>

 

 

4、日志文件修改

我們做了監控之后，如果應用一旦啟動，那么原來的監控信息將會丟失，所以我們需要將監控發現執行效率比較慢的SQL日志信息給保存起來。增加一個日志文件。配置如下。

#日志級別
log4j.rootLogger=info,debug,stdout,D,druid

#輸出SQL指定目錄
log4j.logger.com.iafclub=debug
#輸出SQL
log4j.logger.java.sql.Connection=debug
log4j.logger.java.sql.Statement=debug  
log4j.logger.java.sql.PreparedStatement=debug  
log4j.logger.java.sql.ResultSet=debug

#日志輸出到控制台
log4j.appender.stdout=org.apache.log4j.ConsoleAppender
log4j.appender.stdout.Target=System.out
log4j.appender.stdout.layout=org.apache.log4j.PatternLayout
log4j.appender.stdout.layout.ConversionPattern=%-5p %d{yyyy-MM-dd HH:mm:ss} [%T] %c %m (%F:%L) %n
#日志輸出到文件
log4j.appender.D=org.apache.log4j.DailyRollingFileAppender
log4j.appender.D.File=D:/logs/demo/demo-system.log
log4j.appender.D.DatePattern='.'yyyy-MM-dd
#拓展LOG4J后的日志%T標識輸出線程號%t線程名
log4j.appender.D.layout=org.apache.log4j.PatternLayout
log4j.appender.D.layout.ConversionPattern=%-5p %d{yyyy-MM-dd HH:mm:ss} [%T] %c %m (%F:%L) %n
# Druid log4j.logger.druid.sql=WARN,druid log4j.logger.druid.sql.DataSource=WARN,druid log4j.logger.druid.sql.Connection=WARN,druid log4j.logger.druid.sql.Statement=WARN,druid log4j.appender.druid=org.apache.log4j.DailyRollingFileAppender log4j.appender.druid.layout=org.apache.log4j.PatternLayout

log4j.appender.druid.layout.ConversionPattern= [%d{HH\:mm\:ss}] %c{1} - %m%n 
log4j.appender.druid.datePattern='.'yyyy-MM-dd 
log4j.appender.druid.Threshold = WARN 
log4j.appender.druid.append=true 
log4j.appender.druid.File=D:/logs/demo/demo-system-sql.log

 

5、發布工程到tomcat下。例如本人通過機器名訪問

訪問地址：http://chenweixian-pc:8580/demo-system/

訪問監控地址：http://chenweixian-pc:8580/demo-system/druid/

會彈出如下界面。然后輸入用戶名、密碼，就是我們在web.xml中配置的用戶名密碼：adminDruid、123456

登錄成功后，界面如下：展示出數據源信息。

然后點擊了幾下我的系統，有了幾個操作，執行了幾條SQL。。調用了那些url，訪問了那些javabean都會清晰在監控界面中展示。

 

 

 

 

 

至此，大工搞成。。。