Python數據庫連接池DButils


  DButils是python的一個實現數據庫連接池的模塊

  兩種模式:

  1.為每一個線程創建一個鏈接,即使線程即使調用了close()方法,也不會關閉,只是把線程放到連接池,供自己再次使用,當連接關閉時,線程連接自動關閉。

 1 from DBUtils.PersistentDB import PersistentDB
 2 import pymysql
 3 PooL = PersistentDB(
 4     creator = pymysql,  #使用鏈接數據庫的模塊
 5     maxusage = None, #一個鏈接最多被使用的次數,None表示無限制
 6     setsession = [], #開始會話前執行的命令
 7     ping = 0, #ping MySQL服務端,檢查服務是否可用
 8     closeable = False, #conn.close()實際上被忽略,供下次使用,直到線程關閉,自動關閉鏈接,而等於True時,conn.close()真的被關閉
 9     threadlocal = None, # 本線程獨享值的對象,用於保存鏈接對象
10     host = '127.0.0.1',
11     port = 3306,
12     user = 'root',
13     password = '123',
14     database = 'ok1',
15     charset = 'utf8'
16 )
17 def func():
18     conn = PooL.connection()
19     cursor = conn.cursor()
20     cursor.execute('select * from book')
21     result = cursor.fetchall()
22     print(result)
23     cursor.close()
24     conn.close()
25 import threading
26 for i in range(5):
27     t = threading.Thread(target=func)
28     t.start()
模式一

  2.創建一批連接到連接池,供所有線程共享使用

  注意:由於pymysql,mysqlDB中的threadsafety值為1,所有線程共享連接

 1 import time
 2 import pymysql
 3 import threading
 4 from DBUtils.PooledDB import PooledDB,SharedDBConnection
 5 
 6 POOL = PooledDB(
 7     creator = pymysql, #使用鏈接數據庫的模塊
 8     maxconnections = 6,  #連接池允許的最大連接數,0和None表示沒有限制
 9     mincached = 2, #初始化時,連接池至少創建的空閑的連接,0表示不創建
10     maxcached = 5, #連接池空閑的最多連接數,0和None表示沒有限制
11     maxshared = 3, #連接池中最多共享的連接數量,0和None表示全部共享,ps:其實並沒有什么用,因為pymsql和MySQLDB等模塊中的threadsafety都為1,所有值無論設置多少,_maxcahed永遠為0,所以永遠是所有鏈接共享
12     blocking = True, #鏈接池中如果沒有可用共享連接后,是否阻塞等待,True表示等待,False表示不等待然后報錯
13     setsession = [],#開始會話前執行的命令列表
14     ping = 0,#ping Mysql 服務端,檢查服務是否可用
15     host = '127.0.0.1',
16     port = 3306,
17     user = 'root',
18     password = '123',
19     database = 'ok1',
20     charset = 'utf8'
21 )
22 def func():
23     #檢測當前正在運行的連接數是否小於最大的連接數,如果不小於則等待連接或者拋出raise TooManyConnections異常
24     #否則優先去初始化時創建的連接中獲取連接SteadyDBConnection
25     #然后將SteadyDBConnection對象封裝到PooledDedicatedDBConnection中並返回
26     #如果最開始創建的連接沒有鏈接,則去創建SteadyDBConnection對象,再封裝到PooledDedicatedDBConnection中並返回
27     #一旦關閉鏈接后,連接就返回到連接池讓后續線程繼續使用
28     conn = POOL.connection()
29     cursor = conn.cursor()
30     cursor.execute('select * from book')
31     result = cursor.fetchall()
32     print(result)
33     conn.close()
34 func()
模式二

  PS:關於pymysql模塊,如果沒有單線程的情況,連接MySQL數據庫沒有問題,但如果要是多線程,就需要加鎖,一旦加鎖,后面的線程就得等待,勢必會降低使用效率。

 1 import pymysql
 2 import threading
 3 from threading import RLock
 4 LOCK = RLock()
 5 CONN = pymysql.connect(host='127.0.0.1',
 6                        port = 3306,
 7                        user = 'root',
 8                        password = '123',
 9                        database = 'ok1',
10                        charset = 'utf8'
11                        )
12 def task(arg):
13     with LOCK:
14         cursor = CONN.cursor()
15         cursor.execute('select * from book')
16         result = cursor.fetchall()
17         cursor.close()
18         print(result)
19 for i in range(10):
20     t = threading.Thread(target=task,args=(i,))
21     t.start()
加鎖
 1 import pymysql
 2 import threading
 3 CONN = pymysql.connect(host='127.0.0.1',
 4                        port=3306,
 5                        user='root',
 6                        password='123',
 7                        database='ok1',
 8                        charset='utf8')
 9 
10 def task(arg):
11     cursor = CONN.cursor()
12     cursor.execute('select * from book')
13     result = cursor.fetchall()
14     cursor.close()
15     print(result)
16 for i in range(10):  #1時不會報錯
17     t = threading.Thread(target=task, args=(i,))
18     t.start()
不加鎖

 


免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM