连接池原理设计并不难

简介: 什么是连接? 连接,代表上游对下游的通信或会话。比如客户端连接服务器、服务器连接数据存储等
目录
  • 连接
  • 连接池产生原因
  • 连接池实现原理
  • 小结
一、连接

什么是连接?
连接,代表上游对下游的通信或会话。比如客户端连接服务器、服务器连接数据存储等

连接其通信的基本步骤,很类似 HTTP 操作:

1、上游对下游建立一个连接(客户端与服务器需要建立连接。比如点击某个超级链接)
2、上游通过连接,发送请求(建立连接后,客户端发送请求给服务器)
3、上游通过连接,收到响应(服务器接到请求后,响应其响应信息)
4、上游关闭连接,释放连接资源(客户端接收服务器所返回的信息通过浏览器显示在用户的显示屏上,然后客户机与服务器断开连接)

file

再深入点,HTTP 持久连接是什么?HTTP 持久连接是指用同一个 HTTP 底层的 TCP 连接来发送/接收多个 HTTP 请求/响应。扩展点,只需要在头部设置:

Connection: Keep-Alive

为什么要有持久连接?每次都是从建立连接开始也可以达到结果,并且最后是关闭连接释放资源。这就是引出连接池产生原因。

二、连接池产生原因

先看一下常见的 mysql-connector-java 包驱动下面 ConnectionImpl 源码:

trackConnection()

execSQL()
commit()

close()

对 MySQL 多半是进行连接(connection),增删改查并提交(execSQL、commit),关闭连接(close)操作,然后实现业务相关逻辑。其操作也很清晰:

1、建立连接
2、发送请求(数据的 CRUD 操作)
3、关闭连接

但,为啥会需要有连接池?
其实在业务量流量不大,并发量也不大的情况下,连接临时建立完全可以。
但并发量起来,达到百级、千级,其中建立连接、关闭连接的操作会造成性能瓶颈,所以得考虑连接池来优化上述 1 和 3 操作:

1、取出连接(业务服务启动时,初始化若干个连接,放在连接存储中)
2、发送请求(当有请求,从连接存储中中取出)
3、放回连接(执行完毕,连接放回连接存储中)

这里对连接存储的数据结构,并维护连接,就是连接池。

三、连接池实现原理

连接池原理,可以具体看下阿里巴巴 Druid 包的 DruidDataSource 源码:

DruidConnectionHolder[] connections;

createConnection()
getConnection()
recycle()

连接池实现原理也不难,DruidDataSource 即德鲁伊连接池,可以核心设计接口:

1、createConnection:服务启动 init ,会创建一批指定数量的连接放入 connections 数组
2、getConnection:这样每次请求,不会新建一个连接。而是从 DruidConnectionHolder[] connections 数组中取出一个连接
3、recycle:每次请求结束后,不是关闭连接,而是回收连接到 connections 数组

其中有个重入锁 ReetrantLock,具体作用如下:

  • 获取一个连接,锁住
  • 返回该连接,使用连接
  • 使用完毕,回收连接,并释放锁

image

四、小结

核心连接池也就这么点东西,具体还需要考虑其他点如下:

  • 连接池连接设计遵守 LRU 策略,性能的关键点是连接是否 LRU 方式重用。LRU 资料:https://yq.aliyun.com/articles/70456
  • 通过 Hash 去连接,实现串行化
  • 可以自动扩容连接数
  • 连接数过多,可以自动关闭连接,释放资源
  • 等等

文章来源:https://my.oschina.net/jeffli1993/blog/3029248

20181212_02

相关文章
|
存储 缓存 算法
缓存层设计套路(一)
对于传统的后端业务场景或者单机应用中访问量以及对响应时间的要求均不高通常只使用DB即可满足要求。这种架构简单便于快速部署很多网站发展初期均考虑使用这种架构。但是随着访问量的上升以及对响应时间的要求提升单DB无法再满足要求。
3609 0
|
25天前
|
算法 Java 数据库连接
Java连接池技术,从基础概念出发,解析了连接池的工作原理及其重要性
本文详细介绍了Java连接池技术,从基础概念出发,解析了连接池的工作原理及其重要性。连接池通过复用数据库连接,显著提升了应用的性能和稳定性。文章还展示了使用HikariCP连接池的示例代码,帮助读者更好地理解和应用这一技术。
37 1
|
2月前
|
存储 缓存 Java
什么是线程池?从底层源码入手,深度解析线程池的工作原理
本文从底层源码入手,深度解析ThreadPoolExecutor底层源码,包括其核心字段、内部类和重要方法,另外对Executors工具类下的四种自带线程池源码进行解释。 阅读本文后,可以对线程池的工作原理、七大参数、生命周期、拒绝策略等内容拥有更深入的认识。
143 29
什么是线程池?从底层源码入手,深度解析线程池的工作原理
|
4月前
|
缓存 Java
浅析JAVA日志中的性能实践与原理解释问题之AsyncAppender的配置方式的问题是如何解决的
浅析JAVA日志中的性能实践与原理解释问题之AsyncAppender的配置方式的问题是如何解决的
|
6月前
|
druid 网络协议 Java
再有人问你数据库连接池的原理,这篇文章甩给他!
在 Spring Boot 项目中,数据库连接池已经成为标配,然而,我曾经遇到过不少连接池异常导致业务错误的事故。很多经验丰富的工程师也可能不小心在这方面出现问题。 在这篇文章中,我们将探讨数据库连接池,深入解析其实现机制,以便更好地理解和规避潜在的风险。
|
4月前
|
druid Java 数据库连接
Java面试题:解释数据库连接池的概念及其作用,讨论常见的连接池实现。
Java面试题:解释数据库连接池的概念及其作用,讨论常见的连接池实现。
85 0
|
6月前
|
消息中间件 并行计算 Go
skynet设计原理
skynet设计原理
|
6月前
|
监控 Java 数据库连接
数据库访问: 解释一下连接池的概念。
数据库访问: 解释一下连接池的概念。
95 1
|
设计模式 架构师 Java
深扒!用6部分讲完Java性能调优:多线程+设计模式+数据库
Java性能调优 Java性能调优,是一个老生常谈的话题。可能有些人觉得没用,一些细小的地方没有好修改的,改与不改对于代码的运行效率有什么影响呢? Java性能调优不单单是学一门编程语言那么简单,没有办法通过直线式的思维去掌握并运用,对架构师的技术和深度都是有较高的要求的。互联网的时代,一个简单的系统囊括了应用程序、数据库、操作系统、网络等很多技术,如果线上一旦出现什么问题的话,可能就要去协调多方面的组件去进行优化,这又将是一个问题。
76 0
深扒!用6部分讲完Java性能调优:多线程+设计模式+数据库
|
6月前
|
Web App开发 JavaScript 安全
【面试题】 阿里面试官:请设计一个不能操作DOM和调接口的环境
【面试题】 阿里面试官:请设计一个不能操作DOM和调接口的环境