并行文件系統(tǒng)Lustre的I-O研究.pdf

1、伴隨著各種大型應(yīng)用領(lǐng)域?qū)Υ髷?shù)據(jù)量存儲(chǔ)需求的增長(zhǎng)，有限的主存空間無法容納全部數(shù)據(jù)，因此利用多磁盤的并行來滿足存儲(chǔ)容量和I/O性能需求的并行文件系統(tǒng)具有越來越重要的作用。高吞吐量、高I/O帶寬、可擴(kuò)展的并行文件系統(tǒng)將多個(gè)結(jié)點(diǎn)上的磁盤組織成為全局的存儲(chǔ)系統(tǒng)，提供更大的存儲(chǔ)容量和I/O帶寬，并可以隨著系統(tǒng)規(guī)模的擴(kuò)大而擴(kuò)展。
　　 本文采用的并行文件系統(tǒng)Lustre是一個(gè)透明的全局文件系統(tǒng)?？蛻舳丝梢酝该鞯卦L問集群文件系統(tǒng)中的數(shù)據(jù)，而無需

2、知道這些數(shù)據(jù)的實(shí)際存儲(chǔ)位置。Lustre并行文件系統(tǒng)采用的并行存儲(chǔ)模式對(duì)粗粒度I/O性能良好，但在進(jìn)行細(xì)粒度讀寫時(shí)，性能與粗粒度I/O相比，有著明顯的低下，因此細(xì)粒度I/O性能的優(yōu)化成為并行文件系統(tǒng)整體I/O性能優(yōu)化的關(guān)鍵。
　　 本文針對(duì)Lustre文件系統(tǒng)，仔細(xì)分析了其I/O訪問模式、細(xì)粒度I/O服務(wù)流程、頁面替換算法等方面，增加了對(duì)細(xì)粒度I/O的支持，提出了改進(jìn)的FGF-LRU方法，在OST端及Client端的頁高速緩存中