內存云分級混合存儲架構數據遷移策略.pdf

1、隨著信息時代的到來，以社交網絡為代表的在線數據密集型應用迅速發(fā)展，在線密集型數據對數據的實時性、交互性、準確性有著較高的要求，而現有的存儲系統采用的磁盤訪問具有很高的延遲，已經成為大數據時代影響計算機性能的瓶頸。NoSQL等新型數據庫系統以及云計算的出現，以及虛擬化、分布式的處理方式，大大提高了計算機系統的服務性能，但是都未能從根本上解決計算機磁盤的延遲問題。
　　近年來隨著硬件技術的發(fā)展，內存快速傳輸的特點成為了替代磁盤的選擇之

2、一。內存云RAMCloud是由內存作為服務器存儲介質的云系統，它將云系統的數據中心從磁盤遷移至內存中，實現數據在內存系統中的快速訪問，摒棄了磁盤訪問時延大的缺點，從根本上解決了磁盤瓶頸危機。但是在內存云這一特殊的云服務器上，內存高昂的價格和較低容量比使得大規(guī)模的內存云集群成本過高，無法大規(guī)模應用于海量在線密集型應用的數據存儲。
　　為了實現在線海量數據的高效存儲與訪問,增加內存云數據存儲容量，本文采用分級存儲管理的思想，引入SSD

3、作為二級存儲介質，與內存、HDD構成三級混合存儲架構，并在內存云分級存儲架構下，提出基于數據重要性排名的自適應遷移策略。首先對系統數據的重要性指標進行建模MMDS，通過數據本身的大小、時間重要性、用戶訪問總量等因素對數據本身的重要性進行計算；其次，采用了推薦系統中相似用戶和PageRank算法中的重要性排名思想對數據的潛在價值進行評估，數據重要性和潛在價值共同決定了數據的重要程度。然后基于數據的重要性排名，設計了自適應的數據遷移策略。實