集群監(jiān)控中的數(shù)據(jù)采集技術(shù)研究.pdf

1、當(dāng)前集群系統(tǒng)已經(jīng)成為高性能計算機體系結(jié)構(gòu)發(fā)展的趨勢，但在實際中應(yīng)用集群系統(tǒng)時為便于對集群進行管理維護，需要能對構(gòu)成集群的各個結(jié)點以及相關(guān)設(shè)備的狀態(tài)進行實時監(jiān)控。因此研究集群監(jiān)控中的數(shù)據(jù)采集技術(shù)并設(shè)計一個監(jiān)控系統(tǒng)對集群技術(shù)的發(fā)展和應(yīng)用具有重要的現(xiàn)實意義。 以Lustre存儲集群為背景，對存儲集群環(huán)境下的遠程監(jiān)控技術(shù)進行了分析，并在此基礎(chǔ)上實現(xiàn)了一個針對Lustre存儲集群的監(jiān)控系統(tǒng)原型ClusterMonitor。ClusterM

2、onitor集群監(jiān)控系統(tǒng)基于CIM/WBEM（Common Information Model/Web Based Enterprise Management）架構(gòu)，由節(jié)點駐留程序MonDaemon，監(jiān)控服務(wù)端程序MonServer，遠程用戶程序MonGui三個部分組成。對CIM/WBEM架構(gòu)的遵循使得ClusterMonitor具有良好的可擴展性，而且不再依賴于傳統(tǒng)的數(shù)據(jù)庫。 監(jiān)控數(shù)據(jù)采集包括監(jiān)控數(shù)據(jù)的獲取和監(jiān)控數(shù)據(jù)的匯集。監(jiān)

3、控數(shù)據(jù)獲取方面，設(shè)計了一個基于Linux內(nèi)核模塊的內(nèi)核態(tài)監(jiān)控數(shù)據(jù)獲取方案，可以通過一個統(tǒng)一接口獲取所有監(jiān)控數(shù)據(jù)，并且不需要解析文本文件；監(jiān)控數(shù)據(jù)匯集方面，為適應(yīng)大規(guī)模集群監(jiān)控的需要，設(shè)計了一個二叉樹自收斂的監(jiān)控數(shù)據(jù)匯集協(xié)議，采用這種協(xié)議節(jié)點能自動發(fā)現(xiàn)數(shù)據(jù)匯集代理并產(chǎn)生優(yōu)化的匯集路徑。 通過實驗以對內(nèi)存信息的獲取為例驗證了內(nèi)核態(tài)監(jiān)控數(shù)據(jù)獲取方案的可行性，對二叉樹自收斂匯集協(xié)議的定量分析表明了將該匯集協(xié)議應(yīng)用于大規(guī)模的集群監(jiān)控時將具