本文描述通過一種叫做Zore Copy的技術(shù)來提升運行在Linux和UNIX上的Java程序的IO性能。
Zero copy避免冗余的數(shù)據(jù)拷貝并減少用戶態(tài)和內(nèi)核態(tài)之間的上下文切換。
很多WEB應(yīng)用都服務(wù)大量的靜態(tài)文件,這些靜態(tài)文件大多從磁盤讀取并返回到socket中。這些操作需要相對較少的CPU,但是比較低效:kernel讀取磁盤數(shù)據(jù)并通過用戶態(tài)返回給應(yīng)用,之后應(yīng)用通過用戶態(tài)把數(shù)據(jù)寫到socket。事實上,應(yīng)用作為一個低消的中間介質(zhì)將數(shù)據(jù)從磁盤讀取并返回給socket。
每一次通過用戶態(tài)的數(shù)據(jù)傳輸,數(shù)據(jù)都必須要被復(fù)制,并且消耗CPU核內(nèi)存帶寬。幸運的是可以通過zore copy來減少拷貝次數(shù)。使用zore copy要求內(nèi)核直接從磁盤復(fù)制數(shù)據(jù)并寫入socket,而不通過應(yīng)用程序。Zero copy減少用戶態(tài)和內(nèi)核態(tài)的上下文切換,減少拷貝次數(shù)來提升性能。
Java類庫通過Linux和UNIX系統(tǒng)的tranferTo()來支持zore copy??梢酝ㄟ^transferTo()方法直接從一個channel寫到目標channel,并不需要數(shù)據(jù)通過應(yīng)用程序。本文首先說明用傳統(tǒng)方法傳輸簡單文件的過高開銷,然后展示如何通過zore copy的transferTo()方法來獲得更好的性能。
Data transfer: Thre traditional approach
考慮讀取一個文件并通過網(wǎng)絡(luò)傳輸?shù)搅硪粋€程序,其核心的操作如list 1中所示。
File.read(fileDesc, buf, len);
Socket.send(socket, buf, len);
主要就是讀取文件內(nèi)容到buffer中,之后將buffer數(shù)據(jù)發(fā)送到socket。
下圖展示整個過程中數(shù)據(jù)的拷貝:
延伸閱讀
- ssh框架 2016-09-30
- 阿里移動安全 [無線安全]玩轉(zhuǎn)無線電——不安全的藍牙鎖 2017-07-26
- 消息隊列NetMQ 原理分析4-Socket、Session、Option和Pipe 2024-03-26
- Selective Search for Object Recognition 論文筆記【圖片目標分割】 2017-07-26
- 詞向量-LRWE模型-更好地識別反義詞同義詞 2017-07-26
- 從棧不平衡問題 理解 calling convention 2017-07-26
- php imagemagick 處理 圖片剪切、壓縮、合并、插入文本、背景色透明 2017-07-26
- Swift實現(xiàn)JSON轉(zhuǎn)Model - HandyJSON使用講解 2017-07-26
- 阿里移動安全 Android端惡意鎖屏勒索應(yīng)用分析 2017-07-26
- 集合結(jié)合數(shù)據(jù)結(jié)構(gòu)來看看(二) 2017-07-26