大數(shù)據(jù)備份歸檔系統(tǒng)

項目背景：

隨著5G+8k 的到來，數(shù)據(jù)越來越龐大，而且數(shù)據(jù)越來越重要，關于數(shù)據(jù)的管理，備份，歸檔也就越來越重要， 隨著業(yè)務開展，中廣天擇節(jié)目制作積累了大量的影視節(jié)目數(shù)據(jù)文件，但隨著時間推移，大量歷史影視節(jié)目數(shù)據(jù)的訪問頻度變得越來越低，但基于業(yè)務部門要求，這些節(jié)目數(shù)據(jù)不僅需要長久保存，更能隨時調閱，所以建立一套可以長期使用的高效、可靠、節(jié)能、維護成本底的數(shù)據(jù)存儲平臺非常有必要，其系統(tǒng)需滿足以下基本要求：

• 針對媒資系統(tǒng)的數(shù)據(jù)存儲平臺，在線可被直接訪問節(jié)目數(shù)據(jù)的存儲容量為200TB，歷史歸檔數(shù)據(jù)量為300TB，這些歷史歸檔數(shù)據(jù)在進行存儲時需要保存兩份

• 采用萬兆網(wǎng)絡方式實現(xiàn)在線存儲數(shù)據(jù)和歷史歸檔數(shù)據(jù)的共享訪問

• 存儲平臺需要具備極強的擴展能力和節(jié)能效果，確保逐年遞增的節(jié)目數(shù)據(jù)的管理需求，包括在線存儲及歸檔管理需求。

案例簡介：

天擇傳媒成立于2007年，是長沙廣播電視集團國有控股的全媒體視頻內容制作與營銷公司，主營除新聞外的電視、互聯(lián)網(wǎng)和手機電視等視頻內容的制作、發(fā)行和營銷；以自主生產的視頻內容為核心的衍生價值的開發(fā)；大型商業(yè)活動、娛樂活動、文化活動的策劃、實施和衍生價值的開發(fā)。2013年10月，“湖南長廣天擇傳媒有限公司”完成股份制改造變更為“中廣天擇傳媒股份有限公司”。2015年12月22日，國家廣播電影電視總局《中國廣播影視》雜志社主辦“TV地標(2015)”，發(fā)布中國電視媒體綜合實力大型調研成果中，中廣天擇傳媒董事長曾雄獲選“年度廣電人物（媒體機構）”、中廣天擇傳媒榮獲“年度優(yōu)秀節(jié)目制作機構”獎，《星動亞洲》摘得“年度制作機構優(yōu)秀節(jié)目”獎。 

方案實施 

針對媒資應用的特點，本次數(shù)據(jù)存儲平臺采用大型磁帶庫結合在線存儲組成的混合存儲方案，混合存儲系統(tǒng)可根據(jù)數(shù)據(jù)訪問活躍度實現(xiàn)存儲分層管理，經(jīng)常訪問的節(jié)目數(shù)據(jù)將存儲在磁盤陣列本地，而對于一些不經(jīng)常被訪問的節(jié)目數(shù)據(jù)，將自動基于預先制定的數(shù)據(jù)存儲管理策略將不活躍節(jié)目數(shù)據(jù)搬遷存儲到大容量磁帶庫存儲設備的磁帶介質中。

在混合存儲管理平臺中，用戶的各類應用服務器，包括非編工作站、媒資服務器、轉碼服務器可通過基于FC網(wǎng)絡或IP網(wǎng)絡實現(xiàn)影視節(jié)目數(shù)據(jù)的直接訪問，而無需關注具體數(shù)據(jù)的存儲位置。

在本方案中，媒資數(shù)據(jù)存儲平臺將包含可用容量為200TB磁盤陣列在線存儲和300TB（已經(jīng)考慮歸檔數(shù)據(jù)的鏡像存儲 ）磁帶庫近線存儲。這一數(shù)據(jù)存儲平臺由于采用大容量低成本的磁帶庫設備實現(xiàn)非活躍影視節(jié)目數(shù)據(jù)的歸檔存儲管理，因此可大大降低數(shù)據(jù)存儲成本，同時歸檔存儲數(shù)據(jù)實現(xiàn)了雙份離線保存，可確保影視節(jié)數(shù)據(jù)安全。

媒資系統(tǒng)數(shù)據(jù)存儲管理平臺的拓撲結構圖如下：

如上圖，

1)   在本方案中，數(shù)據(jù)中心部署了一套混合數(shù)據(jù)存儲系統(tǒng)。這套系統(tǒng)包括一套數(shù)據(jù)存儲管理服務器設備、一套磁盤陣列設備，以及一臺高可擴展性的磁帶庫設備，系統(tǒng)具備極強的擴展能力。

2)   作為在線數(shù)據(jù)存儲的磁盤陣列包含一個主控模塊和三個擴展模塊，配置雙控雙活控制器和48塊6TB磁盤，采用10+2的RAID6實現(xiàn)數(shù)據(jù)保護，在線可用容量為240TB，通過數(shù)據(jù)存儲管理服務器設備中安裝的數(shù)據(jù)存儲管理軟件的管理，構建一個可被其他業(yè)務服務器共享訪問的存儲池，用于影視節(jié)目數(shù)據(jù)的在線存儲，可充分滿足用戶媒資系統(tǒng)數(shù)據(jù)的在線存儲需求；

3)   作為近線存儲設備的磁帶庫設備，配置了一個主控模塊，磁帶庫設備配置了2臺磁帶驅動器，并激活100個磁帶槽位，使用磁帶介質（單盤磁帶不壓縮容量為6TB），可提供超過600T的近線存儲容量，滿足用戶300TB歸檔數(shù)據(jù)雙份保存的存儲需求。

4)   數(shù)據(jù)存儲管理平臺提供統(tǒng)一的影視節(jié)目數(shù)據(jù)的歷史歸檔存儲管理，可實現(xiàn)影視節(jié)目數(shù)據(jù)文件在磁盤陣列和磁帶庫設備之間的歸檔及回遷管理

5)   磁帶庫設備配置一臺磁帶掃描驅動器，通過定制磁帶介質掃描策略，自動在后臺掃描已經(jīng)記錄數(shù)據(jù)的磁帶介質，確保在需求回遷數(shù)據(jù)時，磁帶介質中記錄的數(shù)據(jù)是可用的。

設備清單