面向智能電網(wǎng)云存儲的副本技術研究.pdf

1、近年來隨著國家智能電網(wǎng)的發(fā)展，智能電網(wǎng)采集到的數(shù)據(jù)成倍增長，不僅包括結構化數(shù)據(jù)，而且包括一些半結構化、非結構化的音頻視頻數(shù)據(jù)。如何安全的存儲和高效的處理這些數(shù)據(jù)，成為智能電網(wǎng)發(fā)展亟待解決的問題。云存儲系統(tǒng)具有安全性高、數(shù)據(jù)存儲量大、易擴展等特點，能夠有效的存儲智能電網(wǎng)采集的海量數(shù)據(jù)。云存儲副本技術，可以有效的保證數(shù)據(jù)存儲的安全性與處理任務的并發(fā)性，然而副本技術又帶來了諸如副本一致性，負載均衡，副本訪問代價等一系列問題。而良好的數(shù)據(jù)放置策

2、略可以解決負載均衡問題，數(shù)據(jù)選擇策略可以選擇代價最小的數(shù)據(jù)副本。智能電網(wǎng)云存儲系統(tǒng)中的數(shù)據(jù)放置策略以及數(shù)據(jù)選擇策略是本文研究的重點。
　　首先，給出了基于相對存儲能力的副本放置策略與基于訪問熱度的調整策略。由于智能電網(wǎng)云存儲系統(tǒng)數(shù)據(jù)副本放置的不規(guī)范性，根據(jù)異構節(jié)點的相對存儲能力進行數(shù)據(jù)存儲，保證了負載均衡；并且根據(jù)智能電網(wǎng)采集數(shù)據(jù)的相關性，通過設置相關系數(shù)，將相關聯(lián)數(shù)據(jù)進行集中存放，確保了關聯(lián)查詢速度；根據(jù)智能電網(wǎng)數(shù)據(jù)處理任務對副

3、本數(shù)目的動態(tài)需求性，通過自適應反饋機制，根據(jù)數(shù)據(jù)的訪問熱度，對數(shù)據(jù)副本進行增減，平衡了讀取負載以及節(jié)約了存儲空間。
　　其次，給出了基于局部最小化代價數(shù)據(jù)選擇算法，由于智能電網(wǎng)數(shù)據(jù)處理任務在選擇數(shù)據(jù)副本時，隨機選擇副本，而不考慮副本訪問代價問題。該算法根據(jù)數(shù)據(jù)副本訪問代價的不同，在數(shù)據(jù)的不同副本中選擇代價最小的作為處理任務數(shù)據(jù)輸入；并且優(yōu)化了MapReduce并行編程模型，根據(jù)前文中相關聯(lián)數(shù)據(jù)集中存放，將數(shù)據(jù)連接操作在Map階段進