python中aioysql(異步操作MySQL)的方法
python異步IO初探
探索異步IO執(zhí)之前,先說說IO的種類
1.阻塞IO最簡單,即讀寫數(shù)據(jù)時,需要等待操作完成,才能繼續(xù)執(zhí)行。進階的做法就是用多線程來處理需要IO的部分,缺點是開銷會有些大。
2.非阻塞IO,即讀寫數(shù)據(jù)時,如果暫時不可讀寫,則立刻返回,而不等待。因為不知道什么時候是可讀寫的,所以輪詢時可能會浪費CPU時間。
3.IO復用,即在讀寫數(shù)據(jù)前,先檢查哪些描述符是可讀寫的,再去讀寫。select 和 poll 就是這樣做的,它們會遍歷所有被監(jiān)視的描述符,查看是否滿足,這個檢查的過程是阻塞的。而 epoll、kqueue 和/dev/poll 則做了些改進,事先注冊需要檢查哪些描述符的哪些事件,當狀態(tài)發(fā)生變化時,內(nèi)核會調(diào)用對應的回調(diào)函數(shù),將這些描述符保存下來;下次獲取可用的描述符時,直接返回這些發(fā)生變化的描述符即可。
4.信號驅(qū)動,即描述符就緒時,內(nèi)核發(fā)送SIGIO信號,再由信號處理程序處理這些信號即可。不過信號處理的時機是從內(nèi)核態(tài)返回用戶態(tài)時,感覺也得把這些事件收集起來才好處理,有點想模擬IO復用了。
5.最后時異步IO,即讀寫數(shù)據(jù)時,只注冊事件,內(nèi)核完成讀寫后(讀取的數(shù)據(jù)會復制到用戶態(tài)),再調(diào)用事件處理函數(shù)。這整個過程都不會阻塞調(diào)用線程。
Python 3.4 開始,標準庫里又新增了 asyncio 這個模塊。
從原理上來說,它和 Tornado 其實差不多,都是注冊 IO 事件,然后在 IO loop 中等待事件發(fā)生,然后調(diào)用相應的處理函數(shù)。
aiomysql說明
1. poll
此庫提供一個簡單的連接對象用法:
import asyncio
import aiomysql
loop = asyncio.get_event_loop()
@asyncio.coroutine
def go()
pool = yield from aiomysql.create_pool(host='127.0.0.1', port=3306,
user='root', password='',
db='mysql', loop=loop)
with (yield from pool) as conn:
cur = yield from conn.cursor()
yield from cur.execute("SELECT 10")
# print(cur.description)
(r,) = yield from cur.fetchone()
assert r == 10
pool.close()
yield from pool.wait_closed()
loop.run_until_complete(go())
解釋:
create_pool(minsize=1, maxsize=10, loop=None, **kwargs)
一個協(xié)程,創(chuàng)建連接池,連接database
參數(shù):
minsize(int)最小的池子 , 反之maxsize(int)
loop一個可選的事件循環(huán)實例,若未循環(huán),使用 asyncio.get_event_loop()
echo(bool)默認log執(zhí)行SQL查詢
kwargs
Class pool:最重要的是獲得連接:
with (yield from pool) as conn: cur = yield from conn.cursor()
2. aiomysql — API Reference
connection
該庫用來連接MySQL,使用簡單的aiomysql.connect(),可以連接一個數(shù)據(jù)庫或者關(guān)聯(lián)池子以連接更多
import asyncio # 舉例說明
import aiomysql
loop = asyncio.get_event_loop()
@asyncio.coroutine
def test_example():
conn = yield from aiomysql.connect(host='127.0.0.1', port=3306,
user='root', password='', db='mysql',
loop=loop)
cur = yield from conn.cursor()
yield from cur.execute("SELECT Host,User FROM user")
print(cur.description)
r = yield from cur.fetchall()
print(r)
yield from cur.close()
conn.close()
loop.run_until_complete(test_example())
3. Cursors 游標
import asyncio
import aiomysql
loop = asyncio.get_event_loop()
@asyncio.coroutine
def test_example():
conn = yield from aiomysql.connect(host='127.0.0.1', port=3306,
user='root', password='',
db='mysql', loop=loop)
# create default cursor
cursor = yield from conn.cursor()
# execute sql query # 執(zhí)行sql查詢
yield from cursor.execute("SELECT Host, User FROM user")
# fetch all results
r = yield from cursor.fetchall()
# detach cursor from connection
yield from cursor.close()
# close connection
conn.close()
loop.run_until_complete(test_example())
總結(jié)
以上所述是小編給大家介紹的aioysql(異步操作MySQL)-python,希望對大家有所幫助,如果大家有任何疑問歡迎給我留言,小編會及時回復大家的!
相關(guān)文章
關(guān)于Python中*args和**kwargs的深入理解
這篇文章主要給大家介紹了關(guān)于Python中*args和**kwargs的相關(guān)資料,*args和**kwargs代表的是變量, 變量前面的 *(星號)才是必須的,也可以寫成*v和**vs;寫成*args和**kwargs只是一個常用的書寫方式,需要的朋友可以參考下2021-08-08
Python實現(xiàn)快速排序和插入排序算法及自定義排序的示例
這篇文章主要介紹了Python實現(xiàn)快速排序和插入排序算法及自定義排序的示例,自定義排序用到了Python的sort和sorted函數(shù),需要的朋友可以參考下2016-02-02
Python實現(xiàn)將多張圖片合成視頻并加入背景音樂
這篇文章主要為大家介紹了如何利用Python實現(xiàn)將多張圖片合成mp4視頻,并加入背景音樂。文中的示例代碼講解詳細,感興趣的小伙伴可以了解一下2022-04-04
Python?Bokeh實現(xiàn)實時數(shù)據(jù)可視化
在數(shù)據(jù)分析和科學計算中,數(shù)據(jù)可視化是不可或缺的一部分,本文將通過簡潔的語言和具體的代碼示例,介紹如何使用Bokeh庫進行實時數(shù)據(jù)可視化,感興趣的可以了解下2024-12-12
如何使用python爬取B站排行榜Top100的視頻數(shù)據(jù)
本文章向大家介紹python爬取b站排行榜,包括python爬取b站排行榜的具體代碼,對大家的學習或工作具有一定的參考價值,需要的朋友可以參考一下2021-09-09

