Java数据库链接池实现原理

时间 2019-11-09

标签 java 数据库链接实现原理栏目 Java 繁體版

原文原文链接

通常来讲，Java应用程序访问数据库的过程是：
　　①装载数据库驱动程序；
　　②经过jdbc创建数据库链接；
　　③访问数据库，执行sql语句；

　　④断开数据库链接。java

[java] view plain copy

print ?

public class DBConnection {
private Connection con; //定义数据库链接类对象
private PreparedStatement pstm;
private String user="root"; //链接数据库用户名
private String password="123456"; //链接数据库密码
private String driverName="com.mysql.jdbc.Driver"; //数据库驱动
private String url="jdbc:mysql://localhost:3306/qingqingtuan";
//链接数据库的URL,后面的是为了防止插入数据库出现乱码，?useUnicode=true&characterEncoding=UTF-8
//构造函数
public DBConnection(){
}
/**建立数据库链接*/
public Connection getConnection(){
try{
Class.forName("com.mysql.jdbc.Driver");
}catch(ClassNotFoundException e){
System.out.println("加载数据库驱动失败！");
e.printStackTrace();
}
try {
con=DriverManager.getConnection(url,user,password); //获取数据库链接
} catch (SQLException e) {
System.out.println("建立数据库链接失败！");
con=null;
e.printStackTrace();
}
return con; //返回数据库链接对象
}
List<Shop> mShopList=new ArrayList<Shop>();
mConnection=new DBConnection().getConnection();
if(mConnection!=null){
try {
String sql="select * from shop";
PreparedStatement pstm=mConnection.prepareStatement(sql);
ResultSet rs=pstm.executeQuery();
while(rs.next()){
......//封装PoPj的操做
}
rs.close();
pstm.close();
} catch (SQLException e) {
e.printStackTrace();
}finally{
try {
if(mConnection!=null){
mConnection.close();
}
} catch (SQLException e) {
e.printStackTrace();
}
}

程序开发过程当中，存在不少问题：mysql

首先，每一次web请求都要创建一次数据库链接。创建链接是一个费时的活动，每次都得花费0.05s～1s的时间，并且系统还要分配内存资源。这个时间对于一次或几回数据库操做，或许感受不出系统有多大的开销。web

但是对于如今的web应用，尤为是大型电子商务网站，同时有几百人甚至几千人在线是很正常的事。在这种状况下，频繁的进行数据库链接操做势必占用不少的系统资源，网站的响应速度一定降低，严重的甚至会形成服务器的崩溃。不是危言耸听，这就是制约某些电子商务网站发展的技术瓶颈问题。其次，对于每一次数据库链接，使用完后都得断开。不然，若是程序出现异常而未能关闭，将会致使数据库系统中的内存泄漏，最终将不得不重启数据库sql

经过上面的分析，咱们能够看出来，“数据库链接”是一种稀缺的资源，为了保障网站的正常使用，应该对其进行妥善管理。实现getConnection()从链接库中获取一个可用的链接
③ returnConnection(conn) 提供将链接放回链接池中方法数据库

ConnectionPool.java服务器

[java] view plain copy

print ?

//////////////////////////////// 数据库链接池类 ConnectionPool.java ////////////////////////////////////////
/*
这个例子是根据POSTGRESQL数据库写的，
请用的时候根据实际的数据库调整。
调用方法以下：
①　ConnectionPool connPool
= new ConnectionPool("com.microsoft.jdbc.sqlserver.SQLServerDriver"
,"jdbc:microsoft:sqlserver://localhost:1433;DatabaseName=MyDataForTest"
,"Username"
,"Password");
②　connPool .createPool();
Connection conn = connPool .getConnection();
connPool.returnConnection(conn);
connPool.refreshConnections();
connPool.closeConnectionPool();
*/
import java.sql.Connection;
import java.sql.DatabaseMetaData;
import java.sql.Driver;
import java.sql.DriverManager;
import java.sql.SQLException;
import java.sql.Statement;
import java.util.Enumeration;
import java.util.Vector;
public class ConnectionPool {
private String jdbcDriver = ""; // 数据库驱动
private String dbUrl = ""; // 数据 URL
private String dbUsername = ""; // 数据库用户名
private String dbPassword = ""; // 数据库用户密码
private String testTable = ""; // 测试链接是否可用的测试表名，默认没有测试表
private int initialConnections = 10; // 链接池的初始大小
private int incrementalConnections = 5;// 链接池自动增长的大小
private int maxConnections = 50; // 链接池最大的大小
private Vector connections = null; // 存放链接池中数据库链接的向量 , 初始时为 null
// 它中存放的对象为 PooledConnection 型
/**
* 构造函数
*
* @param jdbcDriver
* String JDBC 驱动类串
* @param dbUrl
* String 数据库 URL
* @param dbUsername
* String 链接数据库用户名
* @param dbPassword
* String 链接数据库用户的密码
*
*/
public ConnectionPool(String jdbcDriver, String dbUrl, String dbUsername,
String dbPassword) {
this.jdbcDriver = jdbcDriver;
this.dbUrl = dbUrl;
this.dbUsername = dbUsername;
this.dbPassword = dbPassword;
}
/**
* 返回链接池的初始大小
*
* @return 初始链接池中可得到的链接数量
*/
public int getInitialConnections() {
return this.initialConnections;
}
/**
* 设置链接池的初始大小
*
* @param 用于设置初始链接池中链接的数量
*/
public void setInitialConnections(int initialConnections) {
this.initialConnections = initialConnections;
}
/**
* 返回链接池自动增长的大小、
*
* @return 链接池自动增长的大小
*/
public int getIncrementalConnections() {
return this.incrementalConnections;
}
/**
* 设置链接池自动增长的大小
*
* @param 链接池自动增长的大小
*/
public void setIncrementalConnections(int incrementalConnections) {
this.incrementalConnections = incrementalConnections;
}
/**
* 返回链接池中最大的可用链接数量
*
* @return 链接池中最大的可用链接数量
*/
public int getMaxConnections() {
return this.maxConnections;
}
/**
* 设置链接池中最大可用的链接数量
*
* @param 设置链接池中最大可用的链接数量值
*/
public void setMaxConnections(int maxConnections) {
this.maxConnections = maxConnections;
}
/**
* 获取测试数据库表的名字
*
* @return 测试数据库表的名字
*/
public String getTestTable() {
return this.testTable;
}
/**
* 设置测试表的名字
*
* @param testTable
* String 测试表的名字
*/
public void setTestTable(String testTable) {
this.testTable = testTable;
}
/**
*
* 建立一个数据库链接池，链接池中的可用链接的数量采用类成员 initialConnections 中设置的值
*/
public synchronized void createPool() throws Exception {
// 确保链接池没有建立
// 若是链接池己经建立了，保存链接的向量 connections 不会为空
if (connections != null) {
return; // 若是己经建立，则返回
}
// 实例化 JDBC Driver 中指定的驱动类实例
Driver driver = (Driver) (Class.forName(this.jdbcDriver).newInstance());
DriverManager.registerDriver(driver); // 注册 JDBC 驱动程序
// 建立保存链接的向量 , 初始时有 0 个元素
connections = new Vector();
// 根据 initialConnections 中设置的值，建立链接。
createConnections(this.initialConnections);
// System.out.println(" 数据库链接池建立成功！ ");
}
/**
* 建立由 numConnections 指定数目的数据库链接 , 并把这些链接放入 connections 向量中
*
* @param numConnections
* 要建立的数据库链接的数目
*/
private void createConnections(int numConnections) throws SQLException {
// 循环建立指定数目的数据库链接
for (int x = 0; x < numConnections; x++) {
// 是否链接池中的数据库链接的数量己经达到最大？最大值由类成员 maxConnections
// 指出，若是 maxConnections 为 0 或负数，表示链接数量没有限制。
// 若是链接数己经达到最大，即退出。
if (this.maxConnections > 0
&& this.connections.size() >= this.maxConnections) {
break;
}
// add a new PooledConnection object to connections vector
// 增长一个链接到链接池中（向量 connections 中）
try {
connections.addElement(new PooledConnection(newConnection()));
} catch (SQLException e) {
System.out.println(" 建立数据库链接失败！ " + e.getMessage());
throw new SQLException();
}
// System.out.println(" 数据库链接己建立 ......");
}
}
/**
* 建立一个新的数据库链接并返回它
*
* @return 返回一个新建立的数据库链接
*/
private Connection newConnection() throws SQLException {
// 建立一个数据库链接
Connection conn = DriverManager.getConnection(dbUrl, dbUsername,
dbPassword);
// 若是这是第一次建立数据库链接，即检查数据库，得到此数据库容许支持的
// 最大客户链接数目
// connections.size()==0 表示目前没有链接己被建立
if (connections.size() == 0) {
DatabaseMetaData metaData = conn.getMetaData();
int driverMaxConnections = metaData.getMaxConnections();
// 数据库返回的 driverMaxConnections 若为 0 ，表示此数据库没有最大
// 链接限制，或数据库的最大链接限制不知道
// driverMaxConnections 为返回的一个整数，表示此数据库容许客户链接的数目
// 若是链接池中设置的最大链接数量大于数据库容许的链接数目 , 则置链接池的最大
// 链接数目为数据库容许的最大数目
if (driverMaxConnections > 0
&& this.maxConnections > driverMaxConnections) {
this.maxConnections = driverMaxConnections;
}
}
return conn; // 返回建立的新的数据库链接
}
/**
* 经过调用 getFreeConnection() 函数返回一个可用的数据库链接 , 若是当前没有可用的数据库链接，而且更多的数据库链接不能创
* 建（如链接池大小的限制），此函数等待一会再尝试获取。
*
* @return 返回一个可用的数据库链接对象
*/
public synchronized Connection getConnection() throws SQLException {
// 确保链接池己被建立
if (connections == null) {
return null; // 链接池还没建立，则返回 null
}
Connection conn = getFreeConnection(); // 得到一个可用的数据库链接
// 若是目前没有可使用的链接，即全部的链接都在使用中
while (conn == null) {
// 等一会再试
// System.out.println("Wait");
wait(250);
conn = getFreeConnection(); // 从新再试，直到得到可用的链接，若是
// getFreeConnection() 返回的为 null
// 则代表建立一批链接后也不可得到可用链接
}
return conn;// 返回得到的可用的链接
}
/**
* 本函数从链接池向量 connections 中返回一个可用的的数据库链接，若是当前没有可用的数据库链接，本函数则根据
* incrementalConnections 设置的值建立几个数据库链接，并放入链接池中。若是建立后，全部的链接仍都在使用中，则返回 null
*
* @return 返回一个可用的数据库链接
*/
private Connection getFreeConnection() throws SQLException {
// 从链接池中得到一个可用的数据库链接
Connection conn = findFreeConnection();
if (conn == null) {
// 若是目前链接池中没有可用的链接
// 建立一些链接
createConnections(incrementalConnections);
// 从新从池中查找是否有可用链接
conn = findFreeConnection();
if (conn == null) {
// 若是建立链接后仍得到不到可用的链接，则返回 null
return null;
}
}
return conn;
}
/**
* 查找链接池中全部的链接，查找一个可用的数据库链接，若是没有可用的链接，返回 null
*
* @return 返回一个可用的数据库链接
*/
private Connection findFreeConnection() throws SQLException {
Connection conn = null;
PooledConnection pConn = null;
// 得到链接池向量中全部的对象
Enumeration enumerate = connections.elements();
// 遍历全部的对象，看是否有可用的链接
while (enumerate.hasMoreElements()) {
pConn = (PooledConnection) enumerate.nextElement();
if (!pConn.isBusy()) {
// 若是此对象不忙，则得到它的数据库链接并把它设为忙
conn = pConn.getConnection();
pConn.setBusy(true);
// 测试此链接是否可用
if (!testConnection(conn)) {
// 若是此链接不可再用了，则建立一个新的链接，
// 并替换此不可用的链接对象，若是建立失败，返回 null
try {
conn = newConnection();
} catch (SQLException e) {
System.out.println(" 建立数据库链接失败！ " + e.getMessage());
return null;
}
pConn.setConnection(conn);
}
break; // 己经找到一个可用的链接，退出
}
}
return conn;// 返回找到到的可用链接
}
/**
* 测试一个链接是否可用，若是不可用，关掉它并返回 false 不然可用返回 true
*
* @param conn
* 须要测试的数据库链接
* @return 返回 true 表示此链接可用， false 表示不可用
*/
private boolean testConnection(Connection conn) {
try {
// 判断测试表是否存在
if (testTable.equals("")) {
// 若是测试表为空，试着使用此链接的 setAutoCommit() 方法
// 来判断链接否可用（此方法只在部分数据库可用，若是不可用 ,
// 抛出异常）。注意：使用测试表的方法更可靠
conn.setAutoCommit(true);
} else {// 有测试表的时候使用测试表测试
// check if this connection is valid
Statement stmt = conn.createStatement();
stmt.execute("select count(*) from " + testTable);
}
} catch (SQLException e) {
// 上面抛出异常，此链接己不可用，关闭它，并返回 false;
closeConnection(conn);
return false;
}
// 链接可用，返回 true
return true;
}
/**
* 此函数返回一个数据库链接到链接池中，并把此链接置为空闲。全部使用链接池得到的数据库链接均应在不使用此链接时返回它。
*
* @param 需返回到链接池中的链接对象
*/
public void returnConnection(Connection conn) {
// 确保链接池存在，若是链接没有建立（不存在），直接返回
if (connections == null) {
System.out.println(" 链接池不存在，没法返回此链接到链接池中 !");
return;
}
PooledConnection pConn = null;
Enumeration enumerate = connections.elements();
// 遍历链接池中的全部链接，找到这个要返回的链接对象
while (enumerate.hasMoreElements()) {
pConn = (PooledConnection) enumerate.nextElement();
// 先找到链接池中的要返回的链接对象
if (conn == pConn.getConnection()) {
// 找到了 , 设置此链接为空闲状态
pConn.setBusy(false);
break;
}
}
}
/**
* 刷新链接池中全部的链接对象
*
*/
public synchronized void refreshConnections() throws SQLException {
// 确保链接池己创新存在
if (connections == null) {
System.out.println(" 链接池不存在，没法刷新 !");
return;
}
PooledConnection pConn = null;
Enumeration enumerate = connections.elements();
while (enumerate.hasMoreElements()) {
// 得到一个链接对象
pConn = (PooledConnection) enumerate.nextElement();
// 若是对象忙则等 5 秒 ,5 秒后直接刷新
if (pConn.isBusy()) {
wait(5000); // 等 5 秒
}
// 关闭此链接，用一个新的链接代替它。
closeConnection(pConn.getConnection());
pConn.setConnection(newConnection());
pConn.setBusy(false);
}
}
/**
* 关闭链接池中全部的链接，并清空链接池。
*/
public synchronized void closeConnectionPool() throws SQLException {
// 确保链接池存在，若是不存在，返回
if (connections == null) {
System.out.println(" 链接池不存在，没法关闭 !");
return;
}
PooledConnection pConn = null;
Enumeration enumerate = connections.elements();
while (enumerate.hasMoreElements()) {
pConn = (PooledConnection) enumerate.nextElement();
// 若是忙，等 5 秒
if (pConn.isBusy()) {
wait(5000); // 等 5 秒
}
// 5 秒后直接关闭它
closeConnection(pConn.getConnection());
// 从链接池向量中删除它
connections.removeElement(pConn);
}
// 置链接池为空
connections = null;
}
/**
* 关闭一个数据库链接
*
* @param 须要关闭的数据库链接
*/
private void closeConnection(Connection conn) {
try {
conn.close();
} catch (SQLException e) {
System.out.println(" 关闭数据库链接出错： " + e.getMessage());
}
}
/**
* 使程序等待给定的毫秒数
*
* @param 给定的毫秒数
*/
private void wait(int mSeconds) {
try {
Thread.sleep(mSeconds);
} catch (InterruptedException e) {
}
}
/**
*
* 内部使用的用于保存链接池中链接对象的类此类中有两个成员，一个是数据库的链接，另外一个是指示此链接是否正在使用的标志。
*/
class PooledConnection {
Connection connection = null;// 数据库链接
boolean busy = false; // 此链接是否正在使用的标志，默认没有正在使用
// 构造函数，根据一个 Connection 构告一个 PooledConnection 对象
public PooledConnection(Connection connection) {
this.connection = connection;
}
// 返回此对象中的链接
public Connection getConnection() {
return connection;
}
// 设置此对象的，链接
public void setConnection(Connection connection) {
this.connection = connection;
}
// 得到对象链接是否忙
public boolean isBusy() {
return busy;
}
// 设置对象的链接正在忙
public void setBusy(boolean busy) {
this.busy = busy;
}
}
}

//////////////////////////////// 数据库链接池类 ConnectionPool.java ////////////////////////////////////////

ConnectionPoolUtils.java

[java] view plain copy

print ?

/*链接池工具类，返回惟一的一个数据库链接池对象,单例模式*/
public class ConnectionPoolUtils {
private ConnectionPoolUtils(){};//私有静态方法
private static ConnectionPool poolInstance = null;
public static ConnectionPool GetPoolInstance(){
if(poolInstance == null) {
poolInstance = new ConnectionPool(
"com.mysql.jdbc.Driver",
"jdbc:mysql://localhost:3306/test?useUnicode=true&characterEncoding=utf-8",
"root", "123456");
try {
poolInstance.createPool();
} catch (Exception e) {
// TODO Auto-generated catch block
e.printStackTrace();
}
}
return poolInstance;
}
}

ConnectionPoolTest.java

[java] view plain copy

print ?

import java.sql.Connection;
import java.sql.DriverManager;
import java.sql.ResultSet;
import java.sql.SQLException;
import java.sql.Statement;
public class ConnectionTest {
/**
* @param args
* @throws Exception
*/
public static void main(String[] args) throws Exception {
try {
/*使用链接池建立100个链接的时间*/
/*// 建立数据库链接库对象
ConnectionPool connPool = new ConnectionPool("com.mysql.jdbc.Driver","jdbc:mysql://localhost:3306/test", "root", "123456");
// 新建数据库链接库
connPool.createPool();*/
ConnectionPool connPool=ConnectionPoolUtils.GetPoolInstance();//单例模式建立链接池对象
// SQL测试语句
String sql = "Select * from pet";
// 设定程序运行起始时间
long start = System.currentTimeMillis();
// 循环测试100次数据库链接
for (int i = 0; i < 100; i++) {
Connection conn = connPool.getConnection(); // 从链接库中获取一个可用的链接
Statement stmt = conn.createStatement();
ResultSet rs = stmt.executeQuery(sql);
while (rs.next()) {
String name = rs.getString("name");
// System.out.println("查询结果" + name);
}
rs.close();
stmt.close();
connPool.returnConnection(conn);// 链接使用完后释放链接到链接池
}
System.out.println("通过100次的循环调用，使用链接池花费的时间:"+ (System.currentTimeMillis() - start) + "ms");
// connPool.refreshConnections();//刷新数据库链接池中全部链接，即无论链接是否正在运行，都把全部链接都释放并放回到链接池。注意：这个耗时比较大。
connPool.closeConnectionPool();// 关闭数据库链接池。注意：这个耗时比较大。
// 设定程序运行起始时间
start = System.currentTimeMillis();
/*不使用链接池建立100个链接的时间*/
// 导入驱动
Class.forName("com.mysql.jdbc.Driver");
for (int i = 0; i < 100; i++) {
// 建立链接
Connection conn = DriverManager.getConnection(
"jdbc:mysql://localhost:3306/test", "root", "123456");
Statement stmt = conn.createStatement();
ResultSet rs = stmt.executeQuery(sql);
while (rs.next()) {
}
rs.close();
stmt.close();
conn.close();// 关闭链接
}
System.out.println("通过100次的循环调用，不使用链接池花费的时间:"
+ (System.currentTimeMillis() - start) + "ms");
} catch (SQLException e) {
e.printStackTrace();
} catch (ClassNotFoundException e) {
e.printStackTrace();
}
}