zoukankan      html  css  js  c++  java
  • 数据库连接池Druid的介绍,配置分析对比总结

    Druid的简介

    Druid首先是一个数据库连接池。Druid是目前最好的数据库连接池,在功能、性能、扩展性方面,都超过其他数据库连接池,包括DBCP、C3P0、BoneCP、Proxool、JBoss DataSource。Druid已经在阿里巴巴部署了超过600个应用,经过一年多生产环境大规模部署的严苛考验。Druid是阿里巴巴开发的号称为监控而生的数据库连接池!

    Druid的功能

    1、替换DBCP和C3P0。Druid提供了一个高效、功能强大、可扩展性好的数据库连接池。

    2、可以监控数据库访问性能,Druid内置提供了一个功能强大的StatFilter插件,能够详细统计SQL的执行性能,这对于线上分析数据库访问性能有帮助。

    3、数据库密码加密。直接把数据库密码写在配置文件中,这是不好的行为,容易导致安全问题。DruidDruiver和DruidDataSource都支持PasswordCallback。

    4、SQL执行日志,Druid提供了不同的LogFilter,能够支持Common-Logging、Log4j和JdkLog,你可以按需要选择相应的LogFilter,监控你应用的数据库访问情况。

    5、扩展JDBC,如果你要对JDBC层有编程的需求,可以通过Druid提供的Filter机制,很方便编写JDBC层的扩展插件。

    所以Druid可以:
    1、充当数据库连接池。
    2、可以监控数据库访问性能
    3、获得SQL执行日志

    工程配置如下:

    1、工程引入druid-1.0.15.jar

        <dependency>
            <groupId>com.alibaba</groupId>
            <artifactId>druid</artifactId>
            <version>${druid-version}</version>
        </dependency>
    

    2、数据源配置

    <bean id="dataSource" class="com.alibaba.druid.pool.DruidDataSource" destroy-method="close">  
        <property value="${jdbc_url}" name="url"></property>  
        <property value="${jdbc_user}" name="username"></property>  
        <property value="${jdbc_password}" name="password"></property>  
       
        <property value="stat" name="filters"></property>  
       
        <property value="20" name="maxActive"></property>  
        <property value="1" name="initialSize"></property>  
        <property value="60000" name="maxWait"></property>  
        <property value="1" name="minIdle"></property>  
       
        <property value="60000" name="timeBetweenEvictionRunsMillis"></property>  
        <property value="300000" name="minEvictableIdleTimeMillis"></property>  
       
        <property value="SELECT 'x'" name="validationQuery"></property>  
        <property value="true" name="testWhileIdle"></property>  
        <property value="false" name="testOnBorrow"></property>  
        <property value="false" name="testOnReturn"></property>  
        <property value="true" name="poolPreparedStatements"></property>  
        <property value="20" name="maxPoolPreparedStatementPerConnectionSize"></property>  
    </bean> 
    
    配置缺省值说明
    name 配置这个属性的意义在于,如果存在多个数据源,监控的时候
    可以通过名字来区分开来。如果没有配置,将会生成一个名字,
    格式是:”DataSource-” + System.identityHashCode(this)
    jdbcUrl 连接数据库的url,不同数据库不一样。例如:
    mysql : jdbc:mysql://10.20.153.104:3306/druid2 
    oracle : jdbc:oracle:thin:@10.20.149.85:1521:ocnauto
    username 连接数据库的用户名
    password 连接数据库的密码。如果你不希望密码直接写在配置文件中,
    可以使用ConfigFilter。详细看这里:
    https://github.com/alibaba/druid/wiki/%E4%BD%BF%E7%94%A8ConfigFilter
    driverClassName根据url自动识别这一项可配可不配,如果不配置druid会根据url自动识别dbType,
    然后选择相应的driverClassName
    initialSize0初始化时建立物理连接的个数。初始化发生在显示调用init方法,
    或者第一次getConnection时
    maxActive8最大连接池数量
    maxIdle8已经不再使用,配置了也没效果
    minIdle 最小连接池数量
    maxWait 获取连接时最大等待时间,单位毫秒。配置了maxWait之后,
    缺省启用公平锁,并发效率会有所下降,
    如果需要可以通过配置useUnfairLock属性为true使用非公平锁。
    poolPreparedStatementsfalse是否缓存preparedStatement,也就是PSCache。
    PSCache对支持游标的数据库性能提升巨大,比如说oracle。
    在mysql5.5以下的版本中没有PSCache功能,建议关闭掉。
    5.5及以上版本有PSCache,建议开启。
    maxOpenPreparedStatements-1要启用PSCache,必须配置大于0,当大于0时,
    poolPreparedStatements自动触发修改为true。
    在Druid中,不会存在Oracle下PSCache占用内存过多的问题,
    可以把这个数值配置大一些,比如说100
    validationQuery 用来检测连接是否有效的sql,要求是一个查询语句。
    如果validationQuery为null,testOnBorrow、testOnReturn、
    testWhileIdle都不会其作用。
    testOnBorrowtrue申请连接时执行validationQuery检测连接是否有效,
    做了这个配置会降低性能。
    testOnReturnfalse归还连接时执行validationQuery检测连接是否有效,
    做了这个配置会降低性能
    testWhileIdlefalse建议配置为true,不影响性能,并且保证安全性。
    申请连接的时候检测,如果空闲时间大于
    timeBetweenEvictionRunsMillis,
    执行validationQuery检测连接是否有效。
    timeBetweenEvictionRunsMillis 有两个含义:
    1) Destroy线程会检测连接的间隔时间
     2) testWhileIdle的判断依据,详细看testWhileIdle属性的说明
    numTestsPerEvictionRun 不再使用,一个DruidDataSource只支持一个EvictionRun
    minEvictableIdleTimeMillis  
    connectionInitSqls 物理连接初始化的时候执行的sql
    exceptionSorter根据dbType自动识别当数据库抛出一些不可恢复的异常时,抛弃连接
    filters 属性类型是字符串,通过别名的方式配置扩展插件,
    常用的插件有:
    监控统计用的filter:stat 
    日志用的filter:log4j
     防御sql注入的filter:wall
    proxyFilters 类型是List<com.alibaba.druid.filter.Filter>,
    如果同时配置了filters和proxyFilters,
    是组合关系,并非替换关系

    3、Web.xml配置

    	<servlet>
          <servlet-name>DruidStatView</servlet-name>
          <servlet-class>com.alibaba.druid.support.http.StatViewServlet</servlet-class>
        </servlet>
        <servlet-mapping>
          <servlet-name>DruidStatView</servlet-name>
          <url-pattern>/druid/*</url-pattern>
        </servlet-mapping>
    

    至此基本配置完成,可以查看内置监控页面了,路径是/druid/index.html,
    完整路径是http://127.0.0.1:8080/druid/index.html
    如果还需要使用Web应用、URI监控、Session监控、Spring监控等则还需要继续增加配置。

    4、Wen应用配置
    WebStatFilter用于采集web-jdbc关联监控的数据

    在Web.xml中增加配置,就可以使用Web应用、URI监控、Session监控等功能

    <filter>
        <filter-name>DruidWebStatFilter</filter-name>
        <filter-class>com.alibaba.druid.support.http.WebStatFilter</filter-class>
        <init-param>
            <param-name>exclusions</param-name>
            <param-value>*.js,*.gif,*.jpg,*.png,*.css,*.ico,/druid/*</param-value>
        </init-param>
        <init-param>
        	<param-name>profileEnable</param-name>
        	<param-value>true</param-value>
    	</init-param>
    	<init-param>
            <param-name>principalCookieName</param-name>
            <param-value>USER_COOKIE</param-value>
        </init-param>
        <init-param>
            <param-name>principalSessionName</param-name>
            <param-value>USER_SESSION</param-value>
        </init-param>
    </filter>
    
    <filter-mapping>
     <filter-name>DruidWebStatFilter</filter-name>
     <url-pattern>/*</url-pattern>
    </filter-mapping>
    

    5、Spring监控配置
    在Spring配置文件中增加

    <bean id="druid-stat-interceptor" class="com.alibaba.druid.support.spring.stat.DruidStatInterceptor">
        </bean>
    <bean id="druid-stat-pointcut" class="org.springframework.aop.support.JdkRegexpMethodPointcut" scope="prototype">
       <property name="patterns">
           <list>
               <value>com.company.bussines.service.*</value>
               <value>com.company.bussines.dao.*</value>
           </list>
       </property>
    </bean>
    
    <aop:config proxy-target-class="true">
       <aop:advisor advice-ref="druid-stat-interceptor" pointcut-ref="druid-stat-pointcut" />
    </aop:config>
    

    所有配置完成。


    1. Druid是什么?

    Druid是Java语言中最好的数据库连接池。Druid能够提供强大的监控和扩展功能。

    2. 在哪里下载druid

    3. 怎么获取Druid的源码

    Druid是一个开源项目,源码托管在github上,源代码仓库地址是 https://github.com/alibaba/druid。同时每次Druid发布正式版本和快照的时候,都会把源码打包,你可以从上面的下载地址中找到相关版本的源码

    4. 怎么配置maven

    Druid 0.1.18 之后版本都发布到maven中央仓库中,所以你只需要在项目的pom.xml中加上dependency就可以了。例如:

        <dependency>
            <groupId>com.alibaba</groupId>
            <artifactId>druid</artifactId>
            <version>${druid-version}</version>
        </dependency>
    

    也可以选择 Maven仓库查找公共的仓库地址:http://www.mvnrepository.com/artifact/com.alibaba/druid

    5. 怎么打开Druid的监控统计功能

    Druid的监控统计功能是通过filter-chain扩展实现,如果你要打开监控统计功能,配置StatFilter,具体看这里:https://github.com/alibaba/druid/wiki/%E9%85%8D%E7%BD%AE_StatFilter

    6. 怎样使用Druid的内置监控页面

    内置监控页面是一个Servlet,具体配置看这里:https://github.com/alibaba/druid/wiki/%E9%85%8D%E7%BD%AE_StatViewServlet%E9%85%8D%E7%BD%AE

    7. 内置监控中的Web和Spring关联监控怎么配置?

    8. 怎么配置防御SQL注入攻击

    Druid提供了WallFilter,它是基于SQL语义分析来实现防御SQL注入攻击的。具体配置看这里:https://github.com/alibaba/druid/wiki/%E9%85%8D%E7%BD%AE-wallfilter

    9. Druid有没有参考配置

    不同的业务场景需求不同,你可以使用我们的参考配置,但建议你仔细阅读相关文档,了解清楚之后做定制配置。https://github.com/alibaba/druid/wiki/%E9%85%8D%E7%BD%AE_DruidDataSource%E5%8F%82%E8%80%83%E9%85%8D%E7%BD%AE

    10. 我想日志记录JDBC执行的SQL,如何配置

    Druid提供了Log4jFilter、CommonsLogFilter和Slf4jFilter,具体配置看这里https://github.com/alibaba/druid/wiki/%E9%85%8D%E7%BD%AE_LogFilter

    11. 我的程序可能产生连接泄漏了,有什么办法?

    Druid提供了多种监测连接泄漏的手段,具体看这里:https://github.com/alibaba/druid/wiki/%E8%BF%9E%E6%8E%A5%E6%B3%84%E6%BC%8F%E7%9B%91%E6%B5%8B

    12. 在Druid中使用PSCache会有内存占用过大问题么?

    连接Oracle数据库,打开PSCache,在其他的数据库连接池都会存在内存占用过多的问题,Druid是唯一解决这个问题的连接池。具体看这里:https://github.com/alibaba/druid/wiki/Oracle%E6%95%B0%E6%8D%AE%E5%BA%93%E4%B8%8BPreparedStatementCache%E5%86%85%E5%AD%98%E9%97%AE%E9%A2%98%E8%A7%A3%E5%86%B3%E6%96%B9%E6%A1%88

    13. 有没有和其他数据库连接池的对比?

    14. 从其他连接池迁移要注意什么?

    15. Druid中有没有类似Jboss DataSource中的ExceptionSorter

    ExceptionSorter是JBoss DataSource中的优秀特性,Druid也有一样功能的ExceptionSorter,但不用手动配置,自动识别生效的。具体看这里:https://github.com/alibaba/druid/wiki/ExceptionSorter_cn

    16. Druid中的maxIdle为什么是没用的?

    maxIdle是Druid为了方便DBCP用户迁移而增加的,maxIdle是一个混乱的概念。连接池只应该有maxPoolSize和minPoolSize,druid只保留了maxActive和minIdle,分别相当于maxPoolSize和minPoolSize。

    17. 我的应用配置的是JNDI数据源,可以用DruidDataSource么?

    DruidDataSource支持JNDI配置,具体看这里:https://github.com/alibaba/druid/wiki/%E9%85%8D%E7%BD%AE_JNDI_Tomcat 
    具体实现的类是这个:com.alibaba.druid.pool.DruidDataSourceFactory,你可以阅读代码加深理解。

    18. 我的应用已使用DBCP,是代码中写死的,怎样更换为Druid?

    可以的,Druid提供了一个中完全平滑迁移DBCP的办法。

    这种用法,使得可以在一些非自己开发的应用中使用Druid,例如在sonar中部署druid,sonar是一个使用jruby开发的web应用,写死了DBCP,只能够通过这种方法来更换。

    19. 我想试用快照版本,怎么获取?

    直接获取快照版本的地址是:http://code.alibabatech.com/mvn/snapshots/com/alibaba/druid/ ,使用快照版本建议加入我们QQ群 92748305,遇到问题直接反馈给我们。

    20. 有一些SQL执行很慢,我希望日志记录下来,怎么设置?

    在StatFilter配置中有慢SQL执行日志记录,看这里https://github.com/alibaba/druid/wiki/%E9%85%8D%E7%BD%AE_StatFilter

    21. 我希望加密我的数据库密码怎么办?

    运维和DBA都不希望把密码明文直接写在配置文件中,Druid提供了数据库秘密加密的功能。具体看这里:https://github.com/alibaba/druid/wiki/%E4%BD%BF%E7%94%A8ConfigFilter

    22. 如何参与Druid的开发

    Druid是一个通过github开源的项目,github的特性,使得你很容易参与其中。这里有详细说明https://github.com/alibaba/druid/wiki/%E5%A6%82%E4%BD%95%E5%8F%82%E4%B8%8E

    23. Druid的发布周期是怎样?

    Druid是一个活跃的项目,长期维护。每个月有一个发布窗口,除非遇到重大bug和非常紧急的需求,否则都是每个月最多发布一次。如果没有足够多的需求,发布窗口就不会被使用。

    24. 如果DruidDataSource在init的时候失败了,不再使用,是否需要close

    是的,如果DruidDataSource不再使用,必须调用close来释放资源,释放的资源包括关闭Create和Destory线程。

    25. DruidDataSource支持哪些数据库?

    理论上说,支持所有有jdbc驱动的数据库。实际测试过的有

    数据库 支持状态
    mysql 支持,大规模使用
    oracle 支持,大规模使用
    sqlserver 支持
    postgres 支持
    db2 支持
    h2 支持
    derby 支持
    sqlite 支持
    sybase 支持

    26. Oracle下jdbc executeBatch时,更新行数计算不正确

    使用jdbc的executeBatch 方法,如果数据库为oracle,则无论是否成功更新到数据,返回值都是-2,而不是真正被sql更新到的记录数,这是Oracle JDBC Driver的问题,Druid不作特殊处理。

    27. Druid如何自动根据URL自动识别DriverClass的

    Druid是根据url前缀来识别DriverClass的,这样使得配置更方便简洁。

    前缀 DriverCLass 描述信息
    jdbc:odps com.aliyun.odps.jdbc.OdpsDriver  
    jdbc:derby org.apache.derby.jdbc.EmbeddedDriver  
    jdbc:mysql com.mysql.jdbc.Driver  
    jdbc:oracle oracle.jdbc.driver.OracleDriver  
    jdbc:microsoft com.microsoft.jdbc.sqlserver.SQLServerDriver  
    jdbc:sybase:Tds com.sybase.jdbc2.jdbc.SybDriver  
    jdbc:jtds net.sourceforge.jtds.jdbc.Driver  
    jdbc:postgresql org.postgresql.Driver  
    jdbc:fake com.alibaba.druid.mock.MockDriver  
    jdbc:mock com.alibaba.druid.mock.MockDriver  
    jdbc:hsqldb org.hsqldb.jdbcDriver  
    jdbc:db2 COM.ibm.db2.jdbc.app.DB2Driver DB2的JDBC Driver十分混乱,这个匹配不一定对
    jdbc:sqlite org.sqlite.JDBC  
    jdbc:ingres com.ingres.jdbc.IngresDriver  
    jdbc:h2 org.h2.Driver  
    jdbc:mckoi com.mckoi.JDBCDriver  
    jdbc:cloudscape COM.cloudscape.core.JDBCDriver  
    jdbc:informix-sqli com.informix.jdbc.IfxDriver  
    jdbc:timesten com.timesten.jdbc.TimesTenDriver  
    jdbc:as400 com.ibm.as400.access.AS400JDBCDriver  
    jdbc:sapdb com.sap.dbtech.jdbc.DriverSapDB  
    jdbc:JSQLConnect com.jnetdirect.jsql.JSQLDriver  
    jdbc:JTurbo com.newatlanta.jturbo.driver.Driver  
    jdbc:firebirdsql org.firebirdsql.jdbc.FBDriver  
    jdbc:interbase interbase.interclient.Driver  
    jdbc:pointbase com.pointbase.jdbc.jdbcUniversalDriver  
    jdbc:edbc ca.edbc.jdbc.EdbcDriver  
    jdbc:mimer:multi1 com.mimer.jdbc.Driver  

    28. 如何保存监控记录

    https://github.com/alibaba/druid/wiki/%E6%80%8E%E4%B9%88%E4%BF%9D%E5%AD%98Druid%E7%9A%84%E7%9B%91%E6%8E%A7%E8%AE%B0%E5%BD%95

    29. 我想Log输出SQL执行的信息怎么办?

    https://github.com/alibaba/druid/wiki/%E9%85%8D%E7%BD%AE_LogFilter

    30. 如何配置Druid内置的log实现

    https://github.com/alibaba/druid/wiki/%E9%85%8D%E7%BD%AEdruid%E5%86%85%E7%BD%AE%E7%9A%84log%E5%AE%9E%E7%8E%B0

    附:示例项目:

    https://github.com/windwant/spring-dubbo-service.git
    https://github.com/windwant/spring-boot-service.git
    https://github.com/windwant/spring-cloud-service.git


  • 相关阅读:
    HTML/CSS基础教程 一
    linux鼠标闪烁问题解决
    Linux运行级别(runlevel)
    linux命令——umask
    linux命令——ulimit
    算法学习(二)——二分查找
    c++(一) :从c到c++
    shell编程(二)输入,输出和算术拓展
    shell编程(一)基础
    第二次Soring冲刺计划第一天(团队)
  • 原文地址:https://www.cnblogs.com/both-eyes/p/11057798.html
Copyright © 2011-2022 走看看