基于Hadoop平臺的視頻轉(zhuǎn)碼系統(tǒng)設(shè)計與實現(xiàn).pdf

1、隨著當(dāng)前移動互聯(lián)網(wǎng)技術(shù)的迅猛發(fā)展，傳統(tǒng)的廣電行業(yè)正逐漸向新媒體領(lǐng)域拓展，他們需要同時向手機電視、互聯(lián)網(wǎng)、網(wǎng)絡(luò)電視臺等多個業(yè)務(wù)平臺提供視頻內(nèi)容。然而，不同業(yè)務(wù)平臺對視頻文件格式有著不同的要求，最常見的是對編碼格式、分辨率、碼率等參數(shù)的要求不同。為了滿足這種要求，廣電行業(yè)必須將原始視頻文件進(jìn)行格式轉(zhuǎn)換。當(dāng)前常用的傳統(tǒng)視頻轉(zhuǎn)碼系統(tǒng)一般采用一臺或幾臺高性能機器對統(tǒng)一存儲的視頻文件進(jìn)行離線轉(zhuǎn)碼，但這種轉(zhuǎn)碼方案存在著處理能力有限、一次只能轉(zhuǎn)一種格式

2、、當(dāng)處理大批量轉(zhuǎn)碼任務(wù)時消耗時間較長等缺點。因此，急需一種靈活高效的轉(zhuǎn)碼方案來滿足當(dāng)前廣電行業(yè)的轉(zhuǎn)碼需求。目前，云技術(shù)得到了不斷的發(fā)展和成熟，它因其具有強大的并行處理能力、靈活的擴展性和低廉的成本等優(yōu)點，必將在未來得到廣泛應(yīng)用。
　　本文首先描述了杭州電視臺全臺網(wǎng)下的轉(zhuǎn)碼系統(tǒng)，及其面臨的問題，提出采用Hadoop技術(shù)處理視頻轉(zhuǎn)碼任務(wù)的方法。然后，通過分析HDFS和MapReduce兩大Hadoop核心技術(shù)的特點，結(jié)合視頻編解碼技術(shù)

3、和文件封裝原理，提出基于GOP組的分片策略，將原始視頻文件分割成若干視頻片段存儲在HDFS上，利用MapReduce編程原理對視頻分片進(jìn)行分布式轉(zhuǎn)碼，并采用工作流的方式對整個轉(zhuǎn)碼系統(tǒng)進(jìn)行靈活的配置和管理。這樣既充分利用了集群的并行計算能力，解決了單機性能瓶頸問題，又很好的滿足了杭州電視臺對于轉(zhuǎn)碼同時生成多種格式視頻文件的需要。
　　最后本文通過對分布式轉(zhuǎn)碼系統(tǒng)的測試，驗證了基于 Hadoop的視頻轉(zhuǎn)碼系統(tǒng)能夠有效的降低視頻大文件處