用sqlalchemy構(gòu)建Django連接池的實例
都知道django每次請求都會連接數(shù)據(jù)庫和釋放數(shù)據(jù)庫連接。Django為每個請求使用新的數(shù)據(jù)庫連接。一開始這個方法行得通。然而隨著服務(wù)器上的負(fù)載的增加,創(chuàng)建/銷毀連接數(shù)據(jù)庫開始花大量的時間。要避免這個,你可以使用數(shù)據(jù)庫連接池,這里使用SQLAlchemy的連接池。使Django持久化數(shù)據(jù)庫連接。
但這種方法會改變django的代碼。對框架有侵入
方法 1
實現(xiàn)方法如下:
把django/db/backends/mysql文件夾全部拷貝出來,放在項目的一個libs/mysql下面,然后修改base.py文件。
或者把django/db/backends/mysql文件夾在django/db/backends/下面復(fù)制為mysql_pool文件夾,將base.py中所以import中的mysql替換為mysql_pool,這樣可以直接在settings.py中設(shè)置'ENGINE':'django.db.backends.mysql_pool'
找到
try:
import MySQLdb as Database
except ImportError as e:
from django.core.exceptions import ImproperlyConfigured
raise ImproperlyConfigured("Error loading MySQLdb module: %s" % e)
這段代碼,在下面添加:
from sqlalchemy import pool Database = pool.manage(Database[,recycle=DATABASE_WAIT_TIMEOUT-1]) #其中DATABASE_WAIT_TIMEOUT為你定義的連接超時時間,必須小于等于mysql里面的wait_timeout()
結(jié)果如下
try:
import MySQLdb as Database
except ImportError as e:
from django.core.exceptions import ImproperlyConfigured
raise ImproperlyConfigured("Error loading MySQLdb module: %s" % e)
from sqlalchemy import pool
Database = pool.manage(Database)
然后找到get_connection_params(self)函數(shù)代碼:
def get_connection_params(self):
kwargs = {
'conv':django_conversions,
'charset':utf8
}
...
修改為:
def get_connection_params(self):
kwargs = {
'charset':utf8
}
...
注意:如果不改變此處的kwargs,將會出現(xiàn):TypeError:unhashable type:'dict' 的錯誤。
原樣用kwargs傳的話,sqlalchemy的pool會報unhashable錯誤,那是因為kwargs中有個key(conv)對應(yīng)的value(django_conversions)是個字典,在pool中會把(key,value)組成元組作為新的key保存在pool中,但是因為value(django_conversions)是dict,不允許作為key的
在mysql里使用 show status 或 show processlist查看連接情況
方法 2
直接在settings.py同級目錄下的init.py文件中添加如下代碼
from django.conf import settings
from django.db.utils import load_backend
import sqlalchemy.pool as pool
import logging
pool_initialized=False
def init_pool():
if not globals().get('pool_initialized', False):
global pool_initialized
pool_initialized = True
try:
backendname = settings.DATABASES['default']['ENGINE']
backend = load_backend(backendname)
#replace the database object with a proxy.
backend.Database = pool.manage(backend.Database)
backend.DatabaseError = backend.Database.DatabaseError
backend.IntegrityError = backend.Database.IntegrityError
logging.info("Connection Pool initialized")
except:
logging.exception("Connection Pool initialization error")
init_pool()
然后修改django/db/backends/mysql/base.py文件
找到get_connection_params(self)函數(shù)代碼:
修改為:
def get_connection_params(self):
kwargs = {
'charset':utf8
}
...
同理,不修改kwargs將會出現(xiàn):TypeError:unhashable type:'dict' 的錯誤。
以上兩種方法都要改變django的代碼,有一定入侵性,第二種方法改變要小一點
django 1.7
python 2.7
sqlalchemy 1.0
這篇用sqlalchemy構(gòu)建Django連接池的實例就是小編分享給大家的全部內(nèi)容了,希望能給大家一個參考,也希望大家多多支持腳本之家。
相關(guān)文章
在Python中使用AOP實現(xiàn)Redis緩存示例
本篇文章主要介紹了在Python中使用AOP實現(xiàn)Redis緩存示例,小編覺得挺不錯的,現(xiàn)在分享給大家,也給大家做個參考。一起跟隨小編過來看看吧2017-07-07
使用actor-critic方法來控制CartPole-V0 游戲詳解
這篇文章主要為大家介紹了使用actor-critic方法來控制CartPole-V0 游戲詳解,有需要的朋友可以借鑒參考下,希望能夠有所幫助,祝大家多多進步,早日升職加薪2023-04-04
python 如何利用argparse解析命令行參數(shù)
這篇文章主要介紹了python 利用argparse解析命令行參數(shù)的步驟,幫助大家更好的理解和學(xué)習(xí)python,感興趣的朋友可以了解下2020-09-09
pygame實現(xiàn)井字棋之第二步邏輯實現(xiàn)
這篇文章主要介紹了pygame實現(xiàn)井字棋之第二步邏輯實現(xiàn),文中有非常詳細的代碼示例,對正在學(xué)習(xí)python的小伙伴們有非常好的幫助,需要的朋友可以參考下2021-05-05
Python Selenium 之關(guān)閉窗口close與quit的方法
今天小編就為大家分享一篇Python Selenium 之關(guān)閉窗口close與quit的方法,具有很好的參考價值,希望對大家有所幫助。一起跟隨小編過來看看吧2019-02-02
詳談Python中列表list,元祖tuple和numpy中的array區(qū)別
下面小編就為大家分享一篇詳談Python中列表list,元祖tuple和numpy中的array區(qū)別,具有很好的參考價值,希望對大家有所幫助。一起跟隨小編過來看看吧2018-04-04

