Python数据库链接池DButils

　　DButils是python的一个实现数据库链接池的模块

　　两种模式：

　　1.为每个线程建立一个连接，即便线程即便调用了close()方法，也不会关闭，只是把线程放到链接池，供本身再次使用，当链接关闭时，线程链接自动关闭。

 1 from DBUtils.PersistentDB import PersistentDB  2 import pymysql  3 PooL = PersistentDB(  4     creator = pymysql,  #使用连接数据库的模块
 5     maxusage = None, #一个连接最多被使用的次数，None表示无限制
 6     setsession = [], #开始会话前执行的命令
 7     ping = 0, #ping MySQL服务端,检查服务是否可用
 8     closeable = False, #conn.close()实际上被忽略，供下次使用，直到线程关闭，自动关闭连接，而等于True时，conn.close()真的被关闭
 9     threadlocal = None, # 本线程独享值的对象，用于保存连接对象
10     host = '127.0.0.1', 11     port = 3306, 12     user = 'root', 13     password = '123', 14     database = 'ok1', 15     charset = 'utf8'
16 ) 17 def func(): 18     conn = PooL.connection() 19     cursor = conn.cursor() 20     cursor.execute('select * from book') 21     result = cursor.fetchall() 22     print(result) 23  cursor.close() 24  conn.close() 25 import threading 26 for i in range(5): 27     t = threading.Thread(target=func) 28     t.start()

模式一

　　2.建立一批链接到链接池，供全部线程共享使用

　　注意：因为pymysql,mysqlDB中的threadsafety值为1，全部线程共享链接

 1 import time  2 import pymysql  3 import threading  4 from DBUtils.PooledDB import PooledDB,SharedDBConnection  5 
 6 POOL = PooledDB(  7     creator = pymysql, #使用连接数据库的模块
 8     maxconnections = 6,  #链接池容许的最大链接数，0和None表示没有限制
 9     mincached = 2, #初始化时，链接池至少建立的空闲的链接，0表示不建立
10     maxcached = 5, #链接池空闲的最多链接数，0和None表示没有限制
11     maxshared = 3, #链接池中最多共享的链接数量，0和None表示所有共享，ps:其实并无什么用，由于pymsql和MySQLDB等模块中的threadsafety都为1，全部值不管设置多少，_maxcahed永远为0，因此永远是全部连接共享
12     blocking = True, #连接池中若是没有可用共享链接后，是否阻塞等待，True表示等待，False表示不等待而后报错
13     setsession = [],#开始会话前执行的命令列表
14     ping = 0,#ping Mysql 服务端，检查服务是否可用
15     host = '127.0.0.1', 16     port = 3306, 17     user = 'root', 18     password = '123', 19     database = 'ok1', 20     charset = 'utf8'
21 ) 22 def func(): 23     #检测当前正在运行的链接数是否小于最大的链接数，若是不小于则等待链接或者抛出raise TooManyConnections异常
24     #不然优先去初始化时建立的链接中获取链接SteadyDBConnection
25     #而后将SteadyDBConnection对象封装到PooledDedicatedDBConnection中并返回
26     #若是最开始建立的链接没有连接，则去建立SteadyDBConnection对象，再封装到PooledDedicatedDBConnection中并返回
27     #一旦关闭连接后，链接就返回到链接池让后续线程继续使用
28     conn = POOL.connection() 29     cursor = conn.cursor() 30     cursor.execute('select * from book') 31     result = cursor.fetchall() 32     print(result) 33  conn.close() 34 func()

模式二

　　PS：关于pymysql模块，若是没有单线程的状况，链接MySQL数据库没有问题，但若是要是多线程，就须要加锁，一旦加锁，后面的线程就得等待，势必会下降使用效率。

 1 import pymysql  2 import threading  3 from threading import RLock  4 LOCK = RLock()  5 CONN = pymysql.connect(host='127.0.0.1',  6                        port = 3306,  7                        user = 'root',  8                        password = '123',  9                        database = 'ok1', 10                        charset = 'utf8'
11  ) 12 def task(arg): 13  with LOCK: 14         cursor = CONN.cursor() 15         cursor.execute('select * from book') 16         result = cursor.fetchall() 17  cursor.close() 18         print(result) 19 for i in range(10): 20     t = threading.Thread(target=task,args=(i,)) 21     t.start()

加锁

 1 import pymysql  2 import threading  3 CONN = pymysql.connect(host='127.0.0.1',  4                        port=3306,  5                        user='root',  6                        password='123',  7                        database='ok1',  8                        charset='utf8')  9 
10 def task(arg): 11     cursor = CONN.cursor() 12     cursor.execute('select * from book') 13     result = cursor.fetchall() 14  cursor.close() 15     print(result) 16 for i in range(10):  #1时不会报错
17     t = threading.Thread(target=task, args=(i,)) 18     t.start()

不加锁