AI 助理
备案控制台
开发者社区 数据库 文章 正文

Druid连接池简介和配置

2017-12-04 10145
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
本文涉及的产品
云数据库 RDS MySQL，集群系列 2核4GB
推荐场景：
搭建个人博客
RDS MySQL Serverless 基础系列，0.5-2RCU 50GB
推荐场景：
学生管理系统数据库设计 搭建个人博客
云数据库 RDS MySQL，高可用系列 2核4GB
简介： Druid是什么？有什么作用？  Druid首先是一个数据库连接池，但它不仅仅是一个数据库连接池，它还包含一个ProxyDriver，一系列内置的JDBC组件库，一个SQL Parser。 Druid的项目背景？目前的项目团队情况？开源目的？  2010年开始，我负责设计一个叫做Dragoon的监控系统，需要一些监控组件，监控应用程序的运行情况，包括Web URI、Spring、JDBC等。

Druid是什么？有什么作用？ Top

Druid首先是一个数据库连接池，但它不仅仅是一个数据库连接池，它还包含一个ProxyDriver，一系列内置的JDBC组件库，一个SQL Parser。

Druid的项目背景？目前的项目团队情况？开源目的？ Top

2010年开始，我负责设计一个叫做Dragoon的监控系统，需要一些监控组件，监控应用程序的运行情况，包括Web URI、Spring、JDBC等。为了监控SQL执行情况，我做了一个Filter-Chain模式的ProxyDriver，缺省提供StatFilter。当时我还做了一个SQL Parser。老板说，不如我们来一个更大的计划，把连接池、SQL Parser、Proxy Driver合起来做一个项目，命名为Druid，于是Druid就诞生了。

2011年2月春节期间，我完成了连接池（DruidDataSource）的第一个版本，4月开始在生产环境测试，2012年第一季度开始大规模实施。

提交过代码的开发者有5个人，主要代码是我维护，有一人专门负责内部实施。

通过开源，希望有更多使用场景，更多的反馈，更多人参与其中，共同打造最好的数据库连接池。

Druid支持哪些数据库？ Top

Druid支持所有JDBC兼容的数据库，包括Oracle、MySql、Derby、Postgresql、SQL Server、H2等等。

Druid针对Oracle和MySql做了特别优化，比如Oracle的PS Cache内存占用优化，MySql的ping检测优化。

Druid是如何扩展JDBC的? Top

Druid在DruidDataSourc和ProxyDriver上提供了Filter-Chain模式的扩展API，类似Serlvet的Filter，配置Filter拦截JDBC的方法调用。

为什么说Druid是“最好的数据库连接池”?体现在哪些方面？这是如何实现的？ Top

阿里巴巴是一个重度使用关系数据库的公司，我们在生产环境中大量的使用Druid，通过长期在极高负载的生产环境中实际使用、修改和完善，让Druid逐步发展成最好的数据库连接池。Druid在监控、可扩展性、稳定性和性能方面都有明显的优势。

首先，强大的监控特性，通过Druid提供的监控功能，可以清楚知道连接池和SQL的工作情况。

  • 监控SQL的执行时间、ResultSet持有时间、返回行数、更新行数、错误次数、错误堆栈信息。
  • SQL执行的耗时区间分布。什么是耗时区间分布呢？比如说，某个SQL执行了1000次，其中0~1毫秒区间50次，1~10毫秒800次，10~100毫秒100次，100~1000毫秒30次，1~10秒15次，10秒以上5次。通过耗时区间分布，能够非常清楚知道SQL的执行耗时情况。
  • 监控连接池的物理连接创建和销毁次数、逻辑连接的申请和关闭次数、非空等待次数、PSCache命中率等。

其次，方便扩展。Druid提供了Filter-Chain模式的扩展API，可以自己编写Filter拦截JDBC中的任何方法，可以在上面做任何事情，比如说性能监控、SQL审计、用户名密码加密、日志等等。

Druid内置提供了用于监控的StatFilter、日志输出的Log系列Filter、防御SQL注入攻击的WallFilter。

阿里巴巴内部实现了用于数据库密码加密的CirceFilter，以及和Web、Spring关联监控的DragoonStatFilter。


第三，Druid集合了开源和商业数据库连接池的优秀特性，并结合阿里巴巴大规模苛刻生产环境的使用经验进行优化。

  • ExceptionSorter。当一个连接产生不可恢复的异常时，例如Oracle error_code_28 session has been killed，必须立刻从连接池中逐出，否则会产生大量错误。目前只有Druid和JBoss DataSource实现了ExceptionSorter。
  • PSCache内存占用优化对于支持游标的数据库（Oracle、SQL Server、DB2等，不包括MySql），PSCache可以大幅度提升SQL执行性能。一个PreparedStatement对应服务器一个游标，如果PreparedStatement被缓存起来重复执行，PreparedStatement没有被关闭，服务器端的游标就不会被关闭，性能提高非常显著。在类似“SELECT * FROM T WHERE ID = ?”这样的场景，性能可能是一个数量级的提升。但在Oracle JDBC Driver中，其他的数据库连接池（DBCP、JBossDataSource）会占用内存过多，极端情况可能大于1G。Druid调用OracleDriver提供管理PSCache内部API。
  • LRU是一个性能关键指标，特别Oracle，每个Connection对应数据库端的一个进程，如果数据库连接池遵从LRU，有助于数据库服务器优化，这是重要的指标。Druid、DBCP、Proxool、JBoss是遵守LRU的。BoneCP、C3P0则不是。BoneCP在mock环境下性能可能还好，但在真实环境中则就不好了。

Druid的性能如何？能否给出一些测试对比数据？ Top

性能不是Druid的设计目标，但是测试数据表明，Druid性能比DBCP、C3P0、Proxool、JBoss都好。

这里有一些测试数据： http://code.alibabatech.com/wiki/pages/viewpage.action?pageId=2916539

谈谈Druid的SQL解析功能？效率如何？ Top

Druid提供了MySql、Oracle、Postgresql、SQL-92的SQL的完整支持，这是一个手写的高性能SQL Parser，支持Visitor模式，使得分析SQL的抽象语法树很方便。

简单SQL语句用时10微秒以内，复杂SQL用时30微秒。

通过Druid提供的SQL Parser可以在JDBC层拦截SQL做相应处理，比如说分库分表、审计等。Druid防御SQL注入攻击的WallFilter就是通过Druid的SQL Parser分析语义实现的。

Druid的扩展性如何？ Top

Druid提供Filter-Chain模式的插件框架，通过编写Filter配置到DruidDataSource中就可以拦截JDBC的各种API，从而实现扩展。Druid提供了一系列内置Filter。

在SQL注入防御方面，Druid的优势是什么？实现原理是什么？ Top

Druid的优势是在JDBC最低层进行拦截做判断，不会遗漏。

Druid实现了Oracle、MySql、Postgresql、SQL-92的Parser，基于SQL语法分析实现，理解其中的SQL语义，智能、准确、误报率低。

具体细节参考这里： http://code.alibabatech.com/wiki/display/Druid/WallFilter

目前Druid的应用（部署）情况？ Top

Druid是阿里巴巴监控系统Dragoon的副产品，从Dragoon监控系统的数据来看，在阿里巴巴已经部署了600多个应用。在阿里巴巴外部也有很多Druid的用户，外部用户没有正式统计数据，但经常有反馈。

我想将其中的某个模块（比如监控模块）用到其他连接池，是否可以？模块的独立性如何？ Top

可以通过DruidDriver把内置的Filter用在其他连接池中。在2011年上半年DruidDataSource不成熟的时候，我们也是这么做的。在其他连接池中使用内置的Filter，需要修改jdbc-url，使用DruidDriver作为一个ProxyDriver。

我想在项目中使用，应该注意哪些事项？能否用于商业项目？ Top

Druid是一个开源项目，基于Apache 2.0协议，你可以免费自由使用。Druid只支持JDK 6以上版本，不支持JDK 1.4和JDK 5.0。

 

 

 

 

 

Druid集连接池，监控于一体整好复合当前项目的需要，项目是ssh结构，之前是用C3p0的，现在换一个连接池也是很简单的，首先spring配置DataSource，配置如下：

[html]  view plain  copy
 
  1. <bean id="dataSource" class="com.alibaba.druid.pool.DruidDataSource" init-method="init" destroy-method="close">   
  2.     <!-- 基本属性 url、user、password -->  
  3.     <property name="url" value="${jdbc_url}" />  
  4.     <property name="username" value="${jdbc_user}" />  
  5.     <property name="password" value="${jdbc_password}" />  
  6.         
  7.     <!-- 配置初始化大小、最小、最大 -->  
  8.     <property name="initialSize" value="1" />  
  9.     <property name="minIdle" value="1" />   
  10.     <property name="maxActive" value="20" />  
  11.    
  12.     <!-- 配置获取连接等待超时的时间 -->  
  13.     <property name="maxWait" value="60000" />  
  14.    
  15.     <!-- 配置间隔多久才进行一次检测，检测需要关闭的空闲连接，单位是毫秒 -->  
  16.     <property name="timeBetweenEvictionRunsMillis" value="60000" />  
  17.    
  18.     <!-- 配置一个连接在池中最小生存的时间，单位是毫秒 -->  
  19.     <property name="minEvictableIdleTimeMillis" value="300000" />  
  20.     
  21.     <property name="validationQuery" value="SELECT 'x'" />  
  22.     <property name="testWhileIdle" value="true" />  
  23.     <property name="testOnBorrow" value="false" />  
  24.     <property name="testOnReturn" value="false" />  
  25.    
  26.     <!-- 打开PSCache，并且指定每个连接上PSCache的大小 -->  
  27.     <property name="poolPreparedStatements" value="true" />  
  28.     <property name="maxPoolPreparedStatementPerConnectionSize" value="20" />  
  29.    
  30.     <!-- 配置监控统计拦截的filters，去掉后监控界面sql无法统计 -->  
  31.     <property name="filters" value="stat" />   
  32. </bean>  

 

目前这样的配置已经能够使用连接池，注意不要忘记了jar文件，下载地址：http://code.alibabatech.com/mvn/releases/com/alibaba/druid/

 

然后是监控的配置：

web.xml

[html]  view plain  copy
 
  1.   </span><filter>  
  2.         <filter-name>DruidWebStatFilter</filter-name>  
  3.         <filter-class>com.alibaba.druid.support.http.WebStatFilter</filter-class>  
  4.         <init-param>  
  5.             <param-name>exclusions</param-name>  
  6.             <param-value>*.js,*.gif,*.jpg,*.png,*.css,*.ico,/druid/*</param-value>  
  7.         </init-param>  
  8.       </filter>  
  9.       <filter-mapping>  
  10.         <filter-name>DruidWebStatFilter</filter-name>  
  11.         <url-pattern>/*</url-pattern>  
  12.       </filter-mapping>  

filter可以监控webURl 访问

 

[html]  view plain  copy
 
  1.     <servlet>  
  2.         <servlet-name>DruidStatView</servlet-name>  
  3.         <servlet-class>com.alibaba.druid.support.http.StatViewServlet</servlet-class>  
  4.     </servlet>  
  5.     <servlet-mapping>  
  6.         <servlet-name>DruidStatView</servlet-name>  
  7.         <url-pattern>/druid/*</url-pattern>  
  8.     </servlet-mapping>  

该配置可以访问监控界面

 

配置好后访问 http://ip：port/projectName/druid/index.html

经过上面的配置，我们已经能够达到连接池的使用和监控

文章标签：
云数据库 RDS MySQL 版
测试技术
SQL
关系型数据库
监控
数据库
相关实践学习
如何在云端创建MySQL数据库
开始实验后，系统会自动创建一台自建MySQL的 源数据库 ECS 实例和一台 目标数据库 RDS。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心，利用清洁计算为万物互联的新世界提供源源不断的能源动力，目前开服的区域包括中国（华北、华东、华南、香港）、新加坡、美国（美东、美西）、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程，来了解阿里云能够为你的业务带来哪些帮助 &nbsp; &nbsp; 相关的阿里云产品：云服务器ECS 云服务器 ECS（Elastic Compute Service）是一种弹性可伸缩的计算服务，助您降低 IT 成本，提升运维效率，使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
炉火纯青
目录
相关文章
夏志121
|
6月前
|
druid Java 数据库连接
数据库连接池及Druid使用步骤
数据库连接池及Druid使用步骤
夏志121
664 2
开发工程师
|
Oracle druid 关系型数据库
阿里Druid连接池的坑。。
Druid的坑 当查询数据库的Clob转换为Oracle Clob类型的时候。
开发工程师
573 0
小盒子的技术分享
|
SQL Prometheus 监控
数据库连接池选型 Druid vs HikariCP
springboot 现在官方默认的数据库连接池是 HikariCP，HikariCP的性能从测试的数据上来看也是最高的。
小盒子的技术分享
4283 0
数据库连接池选型 Druid vs HikariCP
李Muzi
|
2月前
|
SQL 监控 druid
Druid连接池学习
Druid学习笔记，使用Druid进行密码加密。参考文档：https://github.com/alibaba/druid
李Muzi
317 84
ha_lydms
|
SQL Java 数据库连接
自定义HikariCP连接池
自定义HikariCP连接池
ha_lydms
511 0
一百减一是零
|
6月前
|
监控 druid 数据库连接
数据库连接池选择：HikariCP vs Druid
数据库连接池选择：HikariCP vs Druid
一百减一是零
657 0
害恶细君
|
druid Java 关系型数据库
Druid连接池的基本配置与使用
Druid连接池的基本配置与使用
害恶细君
3642 0
Druid连接池的基本配置与使用
笑小枫
|
运维 druid 中间件
springboot+maybatis+多数据源配置使用druid连接池
springboot+maybatis+多数据源配置使用druid连接池
笑小枫
451 0
攻城狮Chova
|
SQL 监控 druid
Druid数据库连接池的详细解析！分析说明数据库连接池Druid的参数配置和基本架构
本篇文章中介绍了数据库连接池Alibaba Druid的组成部分以及Druid的作用和基本配置。详细说明了Druid的基本架构，分别介绍了Druid中的实时节点，历史节点，查询节点，协调节点以及索引服务。通过本篇文章的学习，可以对数据库连接池Druid的参数配置和基本架构有清楚的认识。
攻城狮Chova
1620 34
Druid数据库连接池的详细解析！分析说明数据库连接池Druid的参数配置和基本架构
阿里云叶秋
|
druid Java 数据库连接
使用Druid数据库连接池的配置和JDBC连接详情
使用Druid数据库连接池的配置和JDBC连接详情
阿里云叶秋
327 0