基于HDFS的影像數(shù)據(jù)金字塔構(gòu)建及存儲技術(shù)研究.pdf

1、當今遙感影像數(shù)據(jù)在林業(yè)資源的管理與預測等方面扮演著越來越重要的角色，在數(shù)據(jù)量不斷膨脹的背景下，如何有效地對遙感數(shù)據(jù)進行管理是當前最需要解決的問題。但是在林業(yè)資源數(shù)據(jù)中，不僅僅只有遙感數(shù)據(jù)，森林資源調(diào)查數(shù)據(jù)也是林業(yè)數(shù)據(jù)中重要的數(shù)據(jù)源，通過將兩種資源進行整合，實現(xiàn)數(shù)據(jù)的綜合利用也是未來發(fā)展的趨勢。通過研究分布式技術(shù)與領(lǐng)域分析技術(shù)的原理及方法，對于解決遙感數(shù)據(jù)管理技術(shù)上的問題以及平臺的搭建有著十分重要的意義。
　　本文主要研究影像金字塔

2、的并行構(gòu)建技術(shù)以及林業(yè)綜合數(shù)據(jù)管理的關(guān)鍵技術(shù)。其中影像金字塔的并行構(gòu)建方面，首先對四叉樹編碼進行了介紹，并且對遙感影像數(shù)據(jù)采用線性四又樹編碼進行處理。經(jīng)過編碼后，通過對傳統(tǒng)影像金字塔并行構(gòu)建時的缺點進行分析，設(shè)計了一種分布式構(gòu)建予金字塔的策略。在此基礎(chǔ)上結(jié)合MapReduce并行處理模型對金字塔的構(gòu)建算法進行設(shè)計，最終實現(xiàn)金字塔的并行構(gòu)建。
　　林業(yè)綜合數(shù)據(jù)管理方面，對其分別在應(yīng)用層、中間層與底層結(jié)構(gòu)上進行了分析。其中應(yīng)用層方面通

3、過領(lǐng)域分析技術(shù)對平臺的搭建進行了解釋說明，從而實現(xiàn)最大化的軟件復用;中間層結(jié)構(gòu)上，論文基于Hbase數(shù)據(jù)庫提出采用peano空間填充型曲線進行數(shù)據(jù)索引，通過這種索引方式能夠保證基于四叉樹編碼的數(shù)據(jù)實現(xiàn)物理地址相鄰，提高檢索效率。并且對分布式文件系統(tǒng)底層存儲結(jié)構(gòu)進行糾刪碼優(yōu)化，通過此優(yōu)化能夠有效地利用存儲空間。最終進行數(shù)據(jù)存儲的過程中通過建立基于Hbase的存儲模型，以實現(xiàn)MapReduce下數(shù)據(jù)的快速存儲，從而實現(xiàn)林業(yè)綜合數(shù)據(jù)管理的設(shè)計