CobiNet(寧波)推薦文章：

過去二十年，從看文字資(zi)訊，到后(hou)來(lai)看圖片(pian)集錦，再到現在看視頻，互(hu)聯網(wang)內容不斷(duan)更新迭代，信息量變得越(yue)(yue)來(lai)越(yue)(yue)大(da)、可視性也越(yue)(yue)來(lai)越(yue)(yue)強。短(duan)視頻也因此應(ying)運而(er)生，并且迅(xun)速占(zhan)據我們工作、生活之(zhi)余的(de)(de)大(da)部分碎片(pian)時間，目(mu)前，單獨一個短(duan)視頻平(ping)臺的(de)(de)日播放量就能(neng)高達到100億次。

在短視(shi)頻業務快速擴張的(de)(de)(de)背后(hou)，是(shi)各種(zhong)技(ji)術的(de)(de)(de)不斷(duan)革新包括移動終端性(xing)能的(de)(de)(de)提升，移動網(wang)絡的(de)(de)(de)提速，當然還(huan)有后(hou)端計(ji)算平臺的(de)(de)(de)日益(yi)強勁和穩健。

當我們從看圖時(shi)代轉(zhuan)向視頻時(shi)代時(shi)，又(you)需要什(shen)么樣(yang)的變革來(lai)適(shi)應新的業(ye)務應用(yong)？

開(kai)展短視頻業務前，你需要先了解這些數(shu)字

每月PB級(ji)的數據存在哪？

相對于(yu)文字(zi)和圖片，視頻(pin)的(de)存(cun)儲(chu)(chu)需(xu)要更(geng)大的(de)空(kong)間。以國內某(mou)短視頻(pin)平(ping)(ping)臺(tai)的(de)對外(wai)公開(kai)數(shu)據(ju)來看，其平(ping)(ping)臺(tai)注冊(ce)用(yong)戶超過5億，日活(huo)躍人數(shu)8000萬(wan)，每天新(xin)增的(de)段視頻(pin)數(shu)量1000萬(wan)，按照1條57s的(de)視頻(pin)大小(xiao)6MB左右來算，僅從存(cun)儲(chu)(chu)的(de)視頻(pin)容量來看，平(ping)(ping)臺(tai)每月(yue)新(xin)增的(de)短視頻(pin)容量都將超過1PB.那(nei)我們再(zai)算下，按照單塊(kuai)硬盤8T，每臺(tai)服務(wu)器12塊(kuai)硬盤，那(nei)么每月(yue)僅為了(le)存(cun)儲(chu)(chu)這些視頻(pin)就新(xin)增12臺(tai)服務(wu)器。

如何面對80%的 冷 卻不(bu)可(ke)舍棄的數據？

視頻行業(ye)，不論是短視頻，還是直播，又或(huo)是視頻網站，他們的數(shu)(shu)據(ju)(ju)都有著一個共同的特(te)點 數(shu)(shu)據(ju)(ju)的熱度不均(jun)且變化(hua)較(jiao)快(kuai)。比如據(ju)(ju)統計，大部(bu)分上傳(chuan)的數(shu)(shu)據(ju)(ju)的高熱度狀(zhuang)態僅能保持1周甚至更短的時間。在數(shu)(shu)據(ju)(ju)中心中熱數(shu)(shu)據(ju)(ju)、溫數(shu)(shu)據(ju)(ju)和冷數(shu)(shu)據(ju)(ju)占(zhan)(zhan)總(zong)數(shu)(shu)據(ju)(ju)量的比例約為5%、15%、80%.冷數(shu)(shu)據(ju)(ju)也可以被叫做(zuo) 低價值度的數(shu)(shu)據(ju)(ju) ，因為它(ta)們占(zhan)(zhan)用著大部(bu)分的存儲空間，但(dan)是通常不會再產生價值（被觀看）。

但(dan)是，從一方(fang)面(mian)來看短視頻從本質上來講類似QQ空(kong)間(jian)、微(wei)信朋友圈(quan)，是一種(zhong)記(ji)錄(lu)生活的(de)平臺，因(yin)此(ci)平臺需要保(bao)證保(bao)有的(de)數據(ju)不會(hui)被刪除，因(yin)此(ci)這80%的(de)數據(ju)成為 沒有價值 但(dan)是不能被舍棄(qi)的(de) 雞肋 數據(ju)。

如何安全且低(di)成本地保存(cun)這些低(di)價值度的視頻數據？

高功耗的(de)存儲服務器將(jiang)帶來(lai)居高不下的(de)運營成本

服務器產品(pin)在(zai)維護(hu)(hu)階(jie)段(duan)具有周(zhou)期長、維護(hu)(hu)成本高的(de)特點，一般而言2年的(de)維護(hu)(hu)成本就會超過(guo)購買成本。所以(yi)在(zai)設備運行過(guo)程中降低耗電量(liang)和簡(jian)化維護(hu)(hu)成了必(bi)須(xu)重視的(de)工作。

目前(qian)國內大部分的(de)(de)(de)存(cun)儲服務器仍是采(cai)用通用服務器的(de)(de)(de)配置，并沒有針對溫冷數(shu)據的(de)(de)(de)存(cun)儲應用進行優化(hua)。因(yin)此目前(qian)大多數(shu)數(shu)據中心(xin)中的(de)(de)(de)存(cun)儲系統都處于低負載(zai)卻高(gao)功耗的(de)(de)(de)狀態，如何(he)把(ba)存(cun)儲集(ji)群的(de)(de)(de)功耗降下來，是把(ba)數(shu)據中心(xin)從成本中心(xin)轉為(wei)利潤(run)中心(xin)的(de)(de)(de)關鍵之一(yi)。

浪潮SA5224M4存儲集群

短視頻(pin)背后的(de)(de)數據中心需要怎樣的(de)(de)存儲(chu)架(jia)構(gou)

計算和存儲分離，讓專業的(de)機器(qi)做專業的(de)事(shi)

短視頻(pin)背(bei)后的(de)數據中心架構其實并不是特別復(fu)雜，從(cong)視頻(pin)采集(ji)端到客戶端，編解(jie)碼、用戶特征分(fen)析由專門的(de)計算節(jie)點(dian)完成(cheng)；CDN節(jie)點(dian)負責熱點(dian)視頻(pin)的(de)緩存(cun)加(jia)速和分(fen)發；高密度的(de)存(cun)儲節(jie)點(dian)用于存(cun)儲平臺的(de)視頻(pin)數據。

CDN節(jie)點(dian)(dian)，考慮如何讓熱點(dian)(dian)數據最快(kuai)發出(chu)

由于視頻流(liu)量(liang)大(da)，因(yin)此(ci)CDN節點(dian)所承載的(de)(de)(de)(de)吞吐量(liang)較(jiao)大(da)，因(yin)此(ci)對于存(cun)儲(chu)(chu)容量(liang)和(he)擴容的(de)(de)(de)(de)便捷度(du)要(yao)求更高。另外由于CDN需要(yao)存(cun)儲(chu)(chu)的(de)(de)(de)(de)數據(ju)熱度(du)不一(yi)，比(bi)如1年(nian)前的(de)(de)(de)(de)自拍(pai)視頻，和(he)最(zui)熱網紅的(de)(de)(de)(de)最(zui)新出品(pin)的(de)(de)(de)(de)點(dian)擊(ji)率有天(tian)壤之別。因(yin)此(ci)，視頻數據(ju)需要(yao)分(fen)級存(cun)儲(chu)(chu)，將不同(tong)熱度(du)數據(ju)放(fang)在不同(tong)的(de)(de)(de)(de)存(cun)儲(chu)(chu)介質中，充分(fen)發揮部(bu)件的(de)(de)(de)(de)利用效率，提升存(cun)儲(chu)(chu)能效比(bi)。

對(dui)于CDN服務(wu)器的選擇，通(tong)常會需要計算和存儲(chu)兩(liang)類服務(wu)器來支撐：計算型主要用于處理分發(fa)任務(wu)等，CPU采用較高主頻即可，對(dui)于內存和硬盤(pan)容量(liang)(liang)的要求(qiu)并(bing)不高；存儲(chu)型則用于在(zai)關鍵(jian)節點的數據存儲(chu)和快速(su)分發(fa)，因(yin)此(ci)要求(qiu)IT架(jia)構中需要大容量(liang)(liang)的SSD或者高速(su)HDD來應對(dui)。

在服(fu)務(wu)(wu)器(qi)的(de)選擇上可以考慮(lv)浪潮SA5212M5這種(zhong)計(ji)算存儲均(jun)衡類(lei)服(fu)務(wu)(wu)器(qi)，。在存儲性能上，SA5212M5搭(da)配(pei)12塊大(da)容量(liang)SATA硬(ying)盤(pan)(pan)，單(dan)(dan)塊容量(liang)達到(dao)8T，單(dan)(dan)機可容納96T的(de)CDN數據(ju)，滿足(zu)CDN集群(qun)的(de)龐(pang)容量(liang)需求。而對于(yu)相對熱的(de)數據(ju)，SA5212M5中(zhong)可加入的(de)4塊2.5寸(cun)SSD盤(pan)(pan)位，將提升系統整(zheng)體響應(ying)速度，經(jing)實測，使(shi)用SSD固態(tai)硬(ying)盤(pan)(pan)后(hou)單(dan)(dan)臺服(fu)務(wu)(wu)器(qi)的(de)服(fu)務(wu)(wu)能力提升了(le)1倍以上。

高密存儲(chu)節點(dian)，考慮如何提升存儲(chu)能(neng)效比

作(zuo)為(wei)存儲節點的高密度服(fu)務器(qi)本身(shen)不需要(yao)太(tai)高的計算處(chu)理性能(neng)，因(yin)此可以(yi)選擇基(ji)于Intel Xeon-D處(chu)理器(qi)家族的SA5224M4機型(xing)，搭配單顆D-1521 CPU，借助Xeon-D的SOC特性和低功(gong)耗優勢，通過大容量8T硬盤的使用，以(yi)追求更優的TCO收益。

從實際測試數據來(lai)看來(lai)看，搭載D-1531 CPU的(de)SA5224M4的(de)計算性(xing)能(neng)(neng)已經達到原E5-2620V3 平臺(tai)服務器(qi)的(de)80%左右，但是單CPU的(de)TDP（散熱(re)設計功耗(hao)）只用45W，相比傳統(tong)E5 CPU功耗(hao)降低35W以上。一般服務器(qi)的(de)生(sheng)命周期為三年，這樣算下來(lai)，1000臺(tai)的(de)存儲服務器(qi)集群就能(neng)(neng)節省下至少1050萬的(de)電費。

高硬盤IO和網絡IO

在短(duan)視(shi)頻的(de)傳(chuan)遞鏈條中，從用(yong)戶端上(shang)傳(chuan)的(de)視(shi)頻可以直接存入(ru)4U36盤位組成的(de)存儲集群(qun)中，并通過(guo)分布在各(ge)地(di)的(de)CDN節點傳(chuan)送給用(yong)戶端觀看，這樣自然對后(hou)端存儲服務器的(de)硬(ying)盤IO表現有著較(jiao)高的(de)要(yao)求。而(er)目前應用(yong)的(de)SA5224M4機(ji)型，其36盤位順序寫(xie)的(de)總帶寬接近4.8GB，順序讀接近6GB，有力支撐了(le)這種硬(ying)盤高IO讀寫(xie)的(de)性(xing)能需(xu)求。此外，借助SA5224M4的(de)板載萬兆優勢，可構(gou)建起10Gb的(de)內部高速互聯網絡(luo)，保障了(le)數(shu)據(ju)訪問和傳(chuan)輸所需(xu)的(de)網絡(luo)帶寬。

更高的機柜部署密度

同時，衡量服務(wu)器(qi)的(de)磁(ci)盤(pan)(pan)密(mi)度(du)不僅要(yao)看每U空間支持的(de)磁(ci)盤(pan)(pan)數(shu)量，更要(yao)放在機(ji)(ji)房供(gong)電(dian)環境下評估單機(ji)(ji)柜(ju)支持的(de)磁(ci)盤(pan)(pan)密(mi)度(du)。基于(yu)Intel Xeon-D平臺(tai)的(de)集成性和低功(gong)耗優勢(shi)，在20A的(de)機(ji)(ji)柜(ju)中，42U的(de)空間內，SA5224M4可部署9-10臺(tai)，單機(ji)(ji)柜(ju)磁(ci)盤(pan)(pan)部署密(mi)度(du)提升25%，即(ji)以(yi)往雙路4U36需要(yao)部署5個(ge)機(ji)(ji)柜(ju)的(de)磁(ci)盤(pan)(pan)密(mi)度(du)，當(dang)前4個(ge)機(ji)(ji)柜(ju)就能解決。不僅提高(gao)了(le)單機(ji)(ji)柜(ju)供(gong)電(dian)利用效率(lv)，更減少了(le)租賃(lin)機(ji)(ji)柜(ju)的(de)數(shu)量，節省服務(wu)器(qi)生命(ming)周期內的(de)運營成本。

基于(yu)Xeon-D平臺的(de)浪潮SA5224M4高密(mi)存儲服(fu)務(wu)器

短視(shi)頻無疑(yi)是(shi)2017年投資的(de)風口，在互聯網巨(ju)頭爭相布局的(de)同時，不妨審視(shi)一下自(zi)己的(de)數(shu)據中(zhong)心：你真的(de)為海量視(shi)頻資源找到理(li)想的(de)存儲選擇(ze)了嗎？

文章編輯：CobiNet(寧波)  
本公司專注于電訊配件,銅纜綜合布線系列領域產品研發生產超五類，六類,七類線，屏蔽模塊，配線架及相關模塊(kuai)配件(jian)的(de)研發和生產。

歡迎來電咨詢0574 88168918,郵箱sales@aliance.cn，網址aliance.cn