使用异步 I/O 大大提高应用程序的性能
Linux? 中最常用的輸入/輸出(I/O)模型是同步 I/O。在這個模型中,當(dāng)請求發(fā)出之后,應(yīng)用程序就會阻塞,直到請求滿足為止。這是很好的一種解決方案,因?yàn)檎{(diào)用應(yīng)用程序在等待 I/O 請求完成時不需要使用任何中央處理單元(CPU)。但是在某些情況中,I/O 請求可能需要與其他進(jìn)程產(chǎn)生交疊。可移植操作系統(tǒng)接口(POSIX)異步 I/O(AIO)應(yīng)用程序接口(API)就提供了這種功能。在本文中,我們將對這個 API 概要進(jìn)行介紹,并來了解一下如何使用它。
目錄
AIO 簡介
Linux 異步 I/O 是 Linux 內(nèi)核中提供的一個相當(dāng)新的增強(qiáng)。它是 2.6 版本內(nèi)核的一個標(biāo)準(zhǔn)特性,但是我們在 2.4 版本內(nèi)核的補(bǔ)丁中也可以找到它。AIO 背后的基本思想是允許進(jìn)程發(fā)起很多 I/O 操作,而不用阻塞或等待任何操作完成。稍后或在接收到 I/O 操作完成的通知時,進(jìn)程就可以檢索 I/O 操作的結(jié)果。
I/O 模型
在深入介紹 AIO API 之前,讓我們先來探索一下 Linux 上可以使用的不同 I/O 模型。這并不是一個詳盡的介紹,但是我們將試圖介紹最常用的一些模型來解釋它們與異步 I/O 之間的區(qū)別。圖 1 給出了同步和異步模型,以及阻塞和非阻塞的模型。
圖 1. 基本 Linux I/O 模型的簡單矩陣
每個 I/O 模型都有自己的使用模式,它們對于特定的應(yīng)用程序都有自己的優(yōu)點(diǎn)。本節(jié)將簡要對其一一進(jìn)行介紹。
同步阻塞 I/O
I/O 密集型與 CPU 密集型進(jìn)程的比較
I/O 密集型進(jìn)程所執(zhí)行的 I/O 操作比執(zhí)行的處理操作更多。CPU 密集型的進(jìn)程所執(zhí)行的處理操作比 I/O 操作更多。Linux 2.6 的調(diào)度器實(shí)際上更加偏愛 I/O 密集型的進(jìn)程,因?yàn)樗鼈兺ǔl(fā)起一個 I/O 操作,然后進(jìn)行阻塞,這就意味著其他工作都可以在兩者之間有效地交錯進(jìn)行。
最常用的一個模型是同步阻塞 I/O 模型。在這個模型中,用戶空間的應(yīng)用程序執(zhí)行一個系統(tǒng)調(diào)用,這會導(dǎo)致應(yīng)用程序阻塞。這意味著應(yīng)用程序會一直阻塞,直到系統(tǒng)調(diào)用完成為止(數(shù)據(jù)傳輸完成或發(fā)生錯誤)。調(diào)用應(yīng)用程序處于一種不再消費(fèi) CPU 而只是簡單等待響應(yīng)的狀態(tài),因此從處理的角度來看,這是非常有效的。
圖 2 給出了傳統(tǒng)的阻塞 I/O 模型,這也是目前應(yīng)用程序中最為常用的一種模型。其行為非常容易理解,其用法對于典型的應(yīng)用程序來說都非常有效。在調(diào)用 read 系統(tǒng)調(diào)用時,應(yīng)用程序會阻塞并對內(nèi)核進(jìn)行上下文切換。然后會觸發(fā)讀操作,當(dāng)響應(yīng)返回時(從我們正在從中讀取的設(shè)備中返回),數(shù)據(jù)就被移動到用戶空間的緩沖區(qū)中。然后應(yīng)用程序就會解除阻塞(read 調(diào)用返回)。
圖 2. 同步阻塞 I/O 模型的典型流程
從應(yīng)用程序的角度來說,read 調(diào)用會延續(xù)很長時間。實(shí)際上,在內(nèi)核執(zhí)行讀操作和其他工作時,應(yīng)用程序的確會被阻塞。
同步非阻塞 I/O
同步阻塞 I/O 的一種效率稍低的變種是同步非阻塞 I/O。在這種模型中,設(shè)備是以非阻塞的形式打開的。這意味著 I/O 操作不會立即完成,read 操作可能會返回一個錯誤代碼,說明這個命令不能立即滿足(EAGAIN 或EWOULDBLOCK),如圖 3 所示。
圖 3. 同步非阻塞 I/O 模型的典型流程
非阻塞的實(shí)現(xiàn)是 I/O 命令可能并不會立即滿足,需要應(yīng)用程序調(diào)用許多次來等待操作完成。這可能效率不高,因?yàn)樵诤芏嗲闆r下,當(dāng)內(nèi)核執(zhí)行這個命令時,應(yīng)用程序必須要進(jìn)行忙碌等待,直到數(shù)據(jù)可用為止,或者試圖執(zhí)行其他工作。正如圖 3 所示的一樣,這個方法可以引入 I/O 操作的延時,因?yàn)閿?shù)據(jù)在內(nèi)核中變?yōu)榭捎玫接脩粽{(diào)用read 返回?cái)?shù)據(jù)之間存在一定的間隔,這會導(dǎo)致整體數(shù)據(jù)吞吐量的降低。
異步阻塞 I/O
另外一個阻塞解決方案是帶有阻塞通知的非阻塞 I/O。在這種模型中,配置的是非阻塞 I/O,然后使用阻塞 select 系統(tǒng)調(diào)用來確定一個 I/O 描述符何時有操作。使 select 調(diào)用非常有趣的是它可以用來為多個描述符提供通知,而不僅僅為一個描述符提供通知。對于每個提示符來說,我們可以請求這個描述符可以寫數(shù)據(jù)、有讀數(shù)據(jù)可用以及是否發(fā)生錯誤的通知。
圖 4. 異步阻塞 I/O 模型的典型流程 (select)
select 調(diào)用的主要問題是它的效率不是非常高。盡管這是異步通知使用的一種方便模型,但是對于高性能的 I/O 操作來說不建議使用。
異步非阻塞 I/O(AIO)
最后,異步非阻塞 I/O 模型是一種處理與 I/O 重疊進(jìn)行的模型。讀請求會立即返回,說明 read 請求已經(jīng)成功發(fā)起了。在后臺完成讀操作時,應(yīng)用程序然后會執(zhí)行其他處理操作。當(dāng)read 的響應(yīng)到達(dá)時,就會產(chǎn)生一個信號或執(zhí)行一個基于線程的回調(diào)函數(shù)來完成這次 I/O 處理過程。
圖 5. 異步非阻塞 I/O 模型的典型流程
在一個進(jìn)程中為了執(zhí)行多個 I/O 請求而對計(jì)算操作和 I/O 處理進(jìn)行重疊處理的能力利用了處理速度與 I/O 速度之間的差異。當(dāng)一個或多個 I/O 請求掛起時,CPU 可以執(zhí)行其他任務(wù);或者更為常見的是,在發(fā)起其他 I/O 的同時對已經(jīng)完成的 I/O 進(jìn)行操作。
下一節(jié)將深入介紹這種模型,探索這種模型使用的 API,然后展示幾個命令。
異步 I/O 的動機(jī)
從前面 I/O 模型的分類中,我們可以看出 AIO 的動機(jī)。這種阻塞模型需要在 I/O 操作開始時阻塞應(yīng)用程序。這意味著不可能同時重疊進(jìn)行處理和 I/O 操作。同步非阻塞模型允許處理和 I/O 操作重疊進(jìn)行,但是這需要應(yīng)用程序根據(jù)重現(xiàn)的規(guī)則來檢查 I/O 操作的狀態(tài)。這樣就剩下異步非阻塞 I/O 了,它允許處理和 I/O 操作重疊進(jìn)行,包括 I/O 操作完成的通知。
除了需要阻塞之外,select 函數(shù)所提供的功能(異步阻塞 I/O)與 AIO 類似。不過,它是對通知事件進(jìn)行阻塞,而不是對 I/O 調(diào)用進(jìn)行阻塞。
Linux 上的 AIO 簡介
本節(jié)將探索 Linux 的異步 I/O 模型,從而幫助我們理解如何在應(yīng)用程序中使用這種技術(shù)。
在傳統(tǒng)的 I/O 模型中,有一個使用惟一句柄標(biāo)識的 I/O 通道。在 UNIX? 中,這些句柄是文件描述符(這對等同于文件、管道、套接字等等)。在阻塞 I/O 中,我們發(fā)起了一次傳輸操作,當(dāng)傳輸操作完成或發(fā)生錯誤時,系統(tǒng)調(diào)用就會返回。
Linux 上的 AIO
AIO 在 2.5 版本的內(nèi)核中首次出現(xiàn),現(xiàn)在已經(jīng)是 2.6 版本的產(chǎn)品內(nèi)核的一個標(biāo)準(zhǔn)特性了。
在異步非阻塞 I/O 中,我們可以同時發(fā)起多個傳輸操作。這需要每個傳輸操作都有惟一的上下文,這樣我們才能在它們完成時區(qū)分到底是哪個傳輸操作完成了。在 AIO 中,這是一個aiocb(AIO I/O Control Block)結(jié)構(gòu)。這個結(jié)構(gòu)包含了有關(guān)傳輸?shù)乃行畔?#xff0c;包括為數(shù)據(jù)準(zhǔn)備的用戶緩沖區(qū)。在產(chǎn)生 I/O (稱為完成)通知時,aiocb 結(jié)構(gòu)就被用來惟一標(biāo)識所完成的 I/O 操作。這個 API 的展示顯示了如何使用它。
AIO API
AIO 接口的 API 非常簡單,但是它為數(shù)據(jù)傳輸提供了必需的功能,并給出了兩個不同的通知模型。表 1 給出了 AIO 的接口函數(shù),本節(jié)稍后會更詳細(xì)進(jìn)行介紹。
| aio_read | 請求異步讀操作 |
| aio_error | 檢查異步請求的狀態(tài) |
| aio_return | 獲得完成的異步請求的返回狀態(tài) |
| aio_write | 請求異步寫操作 |
| aio_suspend | 掛起調(diào)用進(jìn)程,直到一個或多個異步請求已經(jīng)完成(或失敗) |
| aio_cancel | 取消異步 I/O 請求 |
| lio_listio | 發(fā)起一系列 I/O 操作 |
每個 API 函數(shù)都使用 aiocb 結(jié)構(gòu)開始或檢查。這個結(jié)構(gòu)有很多元素,但是清單 1 僅僅給出了需要(或可以)使用的元素。
清單 1. aiocb 結(jié)構(gòu)中相關(guān)的域
struct aiocb {int aio_fildes; // File Descriptor int aio_lio_opcode; // Valid only for lio_listio (r/w/nop) volatile void *aio_buf; // Data Buffer size_t aio_nbytes; // Number of Bytes in Data Buffer struct sigevent aio_sigevent; // Notification Structure /* Internal fields */...};sigevent 結(jié)構(gòu)告訴 AIO 在 I/O 操作完成時應(yīng)該執(zhí)行什么操作。我們將在 AIO 的展示中對這個結(jié)構(gòu)進(jìn)行探索。現(xiàn)在我們將展示各個 AIO 的 API 函數(shù)是如何工作的,以及我們應(yīng)該如何使用它們。
aio_read
aio_read 函數(shù)請求對一個有效的文件描述符進(jìn)行異步讀操作。這個文件描述符可以表示一個文件、套接字甚至管道。aio_read 函數(shù)的原型如下:
int aio_read( struct aiocb *aiocbp );aio_read 函數(shù)在請求進(jìn)行排隊(duì)之后會立即返回。如果執(zhí)行成功,返回值就為 0;如果出現(xiàn)錯誤,返回值就為 -1,并設(shè)置errno 的值。
要執(zhí)行讀操作,應(yīng)用程序必須對 aiocb 結(jié)構(gòu)進(jìn)行初始化。下面這個簡短的例子就展示了如何填充aiocb 請求結(jié)構(gòu),并使用 aio_read 來執(zhí)行異步讀請求(現(xiàn)在暫時忽略通知)操作。它還展示了aio_error 的用法,不過我們將稍后再作解釋。
清單 2. 使用 aio_read 進(jìn)行異步讀操作的例子
#include <aio.h> ...int fd, ret;struct aiocb my_aiocb;fd = open( "file.txt", O_RDONLY );if (fd < 0) perror("open");/* Zero out the aiocb structure (recommended) */bzero( (char *)&my_aiocb, sizeof(struct aiocb) );/* Allocate a data buffer for the aiocb request */my_aiocb.aio_buf = malloc(BUFSIZE+1);if (!my_aiocb.aio_buf) perror("malloc");/* Initialize the necessary fields in the aiocb */my_aiocb.aio_fildes = fd;my_aiocb.aio_nbytes = BUFSIZE;my_aiocb.aio_offset = 0;ret = aio_read( &my_aiocb );if (ret < 0) perror("aio_read");while ( aio_error( &my_aiocb ) == EINPROGRESS ) ;if ((ret = aio_return( &my_iocb )) > 0) {/* got ret bytes on the read */} else {/* read failed, consult errno */}在清單 2 中,在打開要從中讀取數(shù)據(jù)的文件之后,我們就清空了 aiocb 結(jié)構(gòu),然后分配一個數(shù)據(jù)緩沖區(qū)。并將對這個數(shù)據(jù)緩沖區(qū)的引用放到aio_buf 中。然后,我們將 aio_nbytes 初始化成緩沖區(qū)的大小。并將aio_offset 設(shè)置成 0(該文件中的第一個偏移量)。我們將 aio_fildes 設(shè)置為從中讀取數(shù)據(jù)的文件描述符。在設(shè)置這些域之后,就調(diào)用 aio_read 請求進(jìn)行讀操作。我們?nèi)缓罂梢哉{(diào)用aio_error 來確定 aio_read 的狀態(tài)。只要狀態(tài)是EINPROGRESS,就一直忙碌等待,直到狀態(tài)發(fā)生變化為止。現(xiàn)在,請求可能成功,也可能失敗。
使用 AIO 接口來編譯程序
我們可以在 aio.h 頭文件中找到函數(shù)原型和其他需要的符號。在編譯使用這種接口的程序時,我們必須使用 POSIX 實(shí)時擴(kuò)展庫(librt)。
注意使用這個 API 與標(biāo)準(zhǔn)的庫函數(shù)從文件中讀取內(nèi)容是非常相似的。除了 aio_read 的一些異步特性之外,另外一個區(qū)別是讀操作偏移量的設(shè)置。在傳統(tǒng)的read 調(diào)用中,偏移量是在文件描述符上下文中進(jìn)行維護(hù)的。對于每個讀操作來說,偏移量都需要進(jìn)行更新,這樣后續(xù)的讀操作才能對下一塊數(shù)據(jù)進(jìn)行尋址。對于異步 I/O 操作來說這是不可能的,因?yàn)槲覀兛梢酝瑫r執(zhí)行很多讀請求,因此必須為每個特定的讀請求都指定偏移量。
aio_error
aio_error 函數(shù)被用來確定請求的狀態(tài)。其原型如下:
int aio_error( struct aiocb *aiocbp );這個函數(shù)可以返回以下內(nèi)容:
- EINPROGRESS,說明請求尚未完成
- ECANCELLED,說明請求被應(yīng)用程序取消了
- -1,說明發(fā)生了錯誤,具體錯誤原因可以查閱errno
aio_return
異步 I/O 和標(biāo)準(zhǔn)塊 I/O 之間的另外一個區(qū)別是我們不能立即訪問這個函數(shù)的返回狀態(tài),因?yàn)槲覀儾]有阻塞在 read 調(diào)用上。在標(biāo)準(zhǔn)的 read 調(diào)用中,返回狀態(tài)是在該函數(shù)返回時提供的。但是在異步 I/O 中,我們要使用aio_return 函數(shù)。這個函數(shù)的原型如下:
ssize_t aio_return( struct aiocb *aiocbp );只有在 aio_error 調(diào)用確定請求已經(jīng)完成(可能成功,也可能發(fā)生了錯誤)之后,才會調(diào)用這個函數(shù)。aio_return 的返回值就等價于同步情況中read 或 write 系統(tǒng)調(diào)用的返回值(所傳輸?shù)淖止?jié)數(shù),如果發(fā)生錯誤,返回值就為-1)。
aio_write
aio_write 函數(shù)用來請求一個異步寫操作。其函數(shù)原型如下:
int aio_write( struct aiocb *aiocbp );aio_write 函數(shù)會立即返回,說明請求已經(jīng)進(jìn)行排隊(duì)(成功時返回值為 0,失敗時返回值為 -1,并相應(yīng)地設(shè)置errno)。
這與 read 系統(tǒng)調(diào)用類似,但是有一點(diǎn)不一樣的行為需要注意。回想一下對于 read 調(diào)用來說,要使用的偏移量是非常重要的。然而,對于 write 來說,這個偏移量只有在沒有設(shè)置O_APPEND 選項(xiàng)的文件上下文中才會非常重要。如果設(shè)置了 O_APPEND,那么這個偏移量就會被忽略,數(shù)據(jù)都會被附加到文件的末尾。否則,aio_offset 域就確定了數(shù)據(jù)在要寫入的文件中的偏移量。
aio_suspend
我們可以使用 aio_suspend 函數(shù)來掛起(或阻塞)調(diào)用進(jìn)程,直到異步請求完成為止,此時會產(chǎn)生一個信號,或者發(fā)生其他超時操作。調(diào)用者提供了一個aiocb 引用列表,其中任何一個完成都會導(dǎo)致 aio_suspend 返回。 aio_suspend 的函數(shù)原型如下:
int aio_suspend( const struct aiocb *const cblist[],int n, const struct timespec *timeout );aio_suspend 的使用非常簡單。我們要提供一個 aiocb 引用列表。如果任何一個完成了,這個調(diào)用就會返回 0。否則就會返回 -1,說明發(fā)生了錯誤。請參看清單 3。
清單 3. 使用 aio_suspend 函數(shù)阻塞異步 I/O
struct aioct *cblist[MAX_LIST]/* Clear the list. */ bzero( (char *)cblist, sizeof(cblist) );/* Load one or more references into the list */ cblist[0] = &my_aiocb;ret = aio_read( &my_aiocb );ret = aio_suspend( cblist, MAX_LIST, NULL );注意,aio_suspend 的第二個參數(shù)是 cblist 中元素的個數(shù),而不是 aiocb 引用的個數(shù)。cblist 中任何NULL 元素都會被 aio_suspend 忽略。
如果為 aio_suspend 提供了超時,而超時情況的確發(fā)生了,那么它就會返回 -1,errno 中會包含 EAGAIN。
aio_cancel
aio_cancel 函數(shù)允許我們?nèi)∠麑δ硞€文件描述符執(zhí)行的一個或所有 I/O 請求。其原型如下:
int aio_cancel( int fd, struct aiocb *aiocbp );要取消一個請求,我們需要提供文件描述符和 aiocb 引用。如果這個請求被成功取消了,那么這個函數(shù)就會返回AIO_CANCELED。如果請求完成了,這個函數(shù)就會返回 AIO_NOTCANCELED。
要取消對某個給定文件描述符的所有請求,我們需要提供這個文件的描述符,以及一個對 aiocbp 的NULL 引用。如果所有的請求都取消了,這個函數(shù)就會返回 AIO_CANCELED;如果至少有一個請求沒有被取消,那么這個函數(shù)就會返回 AIO_NOT_CANCELED;如果沒有一個請求可以被取消,那么這個函數(shù)就會返回AIO_ALLDONE。我們?nèi)缓罂梢允褂?aio_error 來驗(yàn)證每個 AIO 請求。如果這個請求已經(jīng)被取消了,那么 aio_error 就會返回-1,并且 errno 會被設(shè)置為 ECANCELED。
lio_listio
最后,AIO 提供了一種方法使用 lio_listio API 函數(shù)同時發(fā)起多個傳輸。這個函數(shù)非常重要,因?yàn)檫@意味著我們可以在一個系統(tǒng)調(diào)用(一次內(nèi)核上下文切換)中啟動大量的 I/O 操作。從性能的角度來看,這非常重要,因此值得我們花點(diǎn)時間探索一下。lio_listio API 函數(shù)的原型如下:
int lio_listio( int mode, struct aiocb *list[], int nent,struct sigevent *sig );mode 參數(shù)可以是 LIO_WAIT 或LIO_NOWAIT。LIO_WAIT 會阻塞這個調(diào)用,直到所有的 I/O 都完成為止。在操作進(jìn)行排隊(duì)之后,LIO_NOWAIT 就會返回。list 是一個aiocb 引用的列表,最大元素的個數(shù)是由 nent 定義的。注意 list 的元素可以為 NULL,lio_listio 會將其忽略。sigevent 引用定義了在所有 I/O 操作都完成時產(chǎn)生信號的方法。
對于 lio_listio 的請求與傳統(tǒng)的 read 或 write 請求在必須指定的操作方面稍有不同,如清單 4 所示。
清單 4. 使用 lio_listio 函數(shù)發(fā)起一系列請求
struct aiocb aiocb1, aiocb2; struct aiocb *list[MAX_LIST];.../* Prepare the first aiocb */ aiocb1.aio_fildes = fd; aiocb1.aio_buf = malloc( BUFSIZE+1 ); aiocb1.aio_nbytes = BUFSIZE; aiocb1.aio_offset = next_offset; aiocb1.aio_lio_opcode = LIO_READ;...bzero( (char *)list, sizeof(list) ); list[0] = &aiocb1; list[1] = &aiocb2;ret = lio_listio( LIO_WAIT, list, MAX_LIST, NULL );對于讀操作來說,aio_lio_opcode 域的值為 LIO_READ。對于寫操作來說,我們要使用 LIO_WRITE,不過 LIO_NOP 對于不執(zhí)行操作來說也是有效的。
AIO 通知
現(xiàn)在我們已經(jīng)看過了可用的 AIO 函數(shù),本節(jié)將深入介紹對異步通知可以使用的方法。我們將通過信號和函數(shù)回調(diào)來探索異步函數(shù)的通知機(jī)制。
使用信號進(jìn)行異步通知
使用信號進(jìn)行進(jìn)程間通信(IPC)是 UNIX 中的一種傳統(tǒng)機(jī)制,AIO 也可以支持這種機(jī)制。在這種范例中,應(yīng)用程序需要定義信號處理程序,在產(chǎn)生指定的信號時就會調(diào)用這個處理程序。應(yīng)用程序然后配置一個異步請求將在請求完成時產(chǎn)生一個信號。作為信號上下文的一部分,特定的aiocb 請求被提供用來記錄多個可能會出現(xiàn)的請求。清單 5 展示了這種通知方法。
清單 5. 使用信號作為 AIO 請求的通知
void setup_io( ... ) {int fd;struct sigaction sig_act;struct aiocb my_aiocb;.../* Set up the signal handler */sigemptyset(&sig_act.sa_mask);sig_act.sa_flags = SA_SIGINFO;sig_act.sa_sigaction = aio_completion_handler;/* Set up the AIO request */bzero( (char *)&my_aiocb, sizeof(struct aiocb) );my_aiocb.aio_fildes = fd;my_aiocb.aio_buf = malloc(BUF_SIZE+1);my_aiocb.aio_nbytes = BUF_SIZE;my_aiocb.aio_offset = next_offset;/* Link the AIO request with the Signal Handler */my_aiocb.aio_sigevent.sigev_notify = SIGEV_SIGNAL;my_aiocb.aio_sigevent.sigev_signo = SIGIO;my_aiocb.aio_sigevent.sigev_value.sival_ptr = &my_aiocb;/* Map the Signal to the Signal Handler */ret = sigaction( SIGIO, &sig_act, NULL );...ret = aio_read( &my_aiocb );}void aio_completion_handler( int signo, siginfo_t *info, void *context ) {struct aiocb *req;/* Ensure it's our signal */if (info->si_signo == SIGIO) {req = (struct aiocb *)info->si_value.sival_ptr;/* Did the request complete? */if (aio_error( req ) == 0) {/* Request completed successfully, get the return status */ret = aio_return( req );}}return; }在清單 5 中,我們在 aio_completion_handler 函數(shù)中設(shè)置信號處理程序來捕獲SIGIO 信號。然后初始化 aio_sigevent 結(jié)構(gòu)產(chǎn)生SIGIO 信號來進(jìn)行通知(這是通過 sigev_notify 中的 SIGEV_SIGNAL 定義來指定的)。當(dāng)讀操作完成時,信號處理程序就從該信號的si_value 結(jié)構(gòu)中提取出 aiocb,并檢查錯誤狀態(tài)和返回狀態(tài)來確定 I/O 操作是否完成。
對于性能來說,這個處理程序也是通過請求下一次異步傳輸而繼續(xù)進(jìn)行 I/O 操作的理想地方。采用這種方式,在一次數(shù)據(jù)傳輸完成時,我們就可以立即開始下一次數(shù)據(jù)傳輸操作。
使用回調(diào)函數(shù)進(jìn)行異步通知
另外一種通知方式是系統(tǒng)回調(diào)函數(shù)。這種機(jī)制不會為通知而產(chǎn)生一個信號,而是會調(diào)用用戶空間的一個函數(shù)來實(shí)現(xiàn)通知功能。我們在 sigevent 結(jié)構(gòu)中設(shè)置了對 aiocb 的引用,從而可以惟一標(biāo)識正在完成的特定請求。請參看清單 6。
清單 6. 對 AIO 請求使用線程回調(diào)通知
void setup_io( ... ) {int fd;struct aiocb my_aiocb;.../* Set up the AIO request */bzero( (char *)&my_aiocb, sizeof(struct aiocb) );my_aiocb.aio_fildes = fd;my_aiocb.aio_buf = malloc(BUF_SIZE+1);my_aiocb.aio_nbytes = BUF_SIZE;my_aiocb.aio_offset = next_offset;/* Link the AIO request with a thread callback */my_aiocb.aio_sigevent.sigev_notify = SIGEV_THREAD;my_aiocb.aio_sigevent.notify_function = aio_completion_handler;my_aiocb.aio_sigevent.notify_attributes = NULL;my_aiocb.aio_sigevent.sigev_value.sival_ptr = &my_aiocb;...ret = aio_read( &my_aiocb );}void aio_completion_handler( sigval_t sigval ) {struct aiocb *req;req = (struct aiocb *)sigval.sival_ptr;/* Did the request complete? */if (aio_error( req ) == 0) {/* Request completed successfully, get the return status */ret = aio_return( req );}return; }在清單 6 中,在創(chuàng)建自己的 aiocb 請求之后,我們使用 SIGEV_THREAD 請求了一個線程回調(diào)函數(shù)來作為通知方法。然后我們將指定特定的通知處理程序,并將要傳輸?shù)纳舷挛募虞d到處理程序中(在這種情況中,是個對aiocb 請求自己的引用)。在這個處理程序中,我們簡單地引用到達(dá)的 sigval 指針并使用 AIO 函數(shù)來驗(yàn)證請求已經(jīng)完成。
對 AIO 進(jìn)行系統(tǒng)優(yōu)化
proc 文件系統(tǒng)包含了兩個虛擬文件,它們可以用來對異步 I/O 的性能進(jìn)行優(yōu)化:
- /proc/sys/fs/aio-nr 文件提供了系統(tǒng)范圍異步 I/O 請求現(xiàn)在的數(shù)目。
- /proc/sys/fs/aio-max-nr 文件是所允許的并發(fā)請求的最大個數(shù)。最大個數(shù)通常是 64KB,這對于大部分應(yīng)用程序來說都已經(jīng)足夠了。
結(jié)束語
使用異步 I/O 可以幫助我們構(gòu)建 I/O 速度更快、效率更高的應(yīng)用程序。如果我們的應(yīng)用程序可以對處理和 I/O 操作重疊進(jìn)行,那么 AIO 就可以幫助我們構(gòu)建可以更高效地使用可用 CPU 資源的應(yīng)用程序。盡管這種 I/O 模型與在大部分 Linux 應(yīng)用程序中使用的傳統(tǒng)阻塞模式都不同,但是異步通知模型在概念上來說卻非常簡單,可以簡化我們的設(shè)計(jì)。
總結(jié)
以上是生活随笔為你收集整理的使用异步 I/O 大大提高应用程序的性能的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: Linux内存管理之mmap详解
- 下一篇: libev实现分析