挑戰(zhàn)高清時代 海量存儲技術(shù)突圍
來源:中安網(wǎng) 作者:windy 編輯:數(shù)字音視工程 2011-02-11 00:00:00 加入收藏
數(shù)字化視頻監(jiān)控涉及到巨量數(shù)據(jù)的采集、存儲和使用。因此,一個高效能的視頻監(jiān)控系統(tǒng)必須具備高效能的數(shù)據(jù)存儲系統(tǒng),這關(guān)系著數(shù)據(jù)管理的效率、數(shù)據(jù)安全以及數(shù)據(jù)利用的效率。而日益逼近的高清監(jiān)控時代更需要強(qiáng)大、可靠的存儲平臺。在監(jiān)控網(wǎng)絡(luò)化和集成化的過程中,存儲技術(shù)也必須不斷適應(yīng)安防監(jiān)控的應(yīng)用特點,存儲技術(shù)和監(jiān)控技術(shù)的整合已是大勢所趨。
視頻監(jiān)控技術(shù)作為一種重要的安防手段日益普及,隨著視頻監(jiān)控技術(shù)的發(fā)展,全數(shù)字化的網(wǎng)絡(luò)視頻監(jiān)控系統(tǒng)已經(jīng)逐漸取代傳統(tǒng)的模擬監(jiān)控系統(tǒng)成為視頻監(jiān)控系統(tǒng)的主流。數(shù)字化監(jiān)控的應(yīng)用越來越廣、規(guī)模越來越大,采用何種存儲方式對數(shù)字視頻信息進(jìn)行保存逐漸成為廠商以及用戶關(guān)注的焦點。
要達(dá)到存儲系統(tǒng)獨立的數(shù)據(jù)管理目標(biāo),對存儲系統(tǒng)的特性則有如下幾個方面的要求,按照重要性排列分別是:
1、可靠性。數(shù)據(jù)集中到存儲系統(tǒng)中,必然對系統(tǒng)設(shè)備的可靠性提出更高的要求。同時需要建立數(shù)據(jù)備份、容災(zāi)系統(tǒng)進(jìn)行配合,提高數(shù)據(jù)安全性。
2、可擴(kuò)展性。網(wǎng)絡(luò)時代業(yè)務(wù)發(fā)展的不確定性和數(shù)據(jù)的高速膨脹,對獨立于計算系統(tǒng)之外的存儲系統(tǒng),必然提出高可擴(kuò)展性的要求。這種擴(kuò)展性并非是簡單的容量擴(kuò)展,同時還必須包括數(shù)據(jù)處理能力、數(shù)據(jù)交換帶寬和數(shù)據(jù)管理功能的擴(kuò)展。
3、兼容性。雖然存儲系統(tǒng)已分離于計算系統(tǒng)之外,但今天主機(jī)系統(tǒng)對數(shù)據(jù)的使用方式,仍舊以文件系統(tǒng),數(shù)據(jù)庫系統(tǒng)為主要手段。存儲系統(tǒng)要適應(yīng)各種主機(jī)系統(tǒng)的數(shù)據(jù)I/O要求,就必須要能夠兼容各種操作系統(tǒng)、文件系統(tǒng)、數(shù)據(jù)庫系統(tǒng)等各種傳統(tǒng)數(shù)據(jù)管理手段。
4、可管理性。支持各種主流的管理協(xié)議和管理架構(gòu),能夠與網(wǎng)絡(luò)、計算機(jī)等各種設(shè)備統(tǒng)一管理和集中管理,能夠在各種復(fù)雜的環(huán)境中實現(xiàn)方便統(tǒng)一的設(shè)備和數(shù)據(jù)管理功能。
5、性能。能夠根據(jù)不同應(yīng)用類型要求提供帶寬、IOPS(IO Per Second,每秒IO操作數(shù))、OPS(Operations Per Second,每秒并發(fā)操作數(shù))、ORT(Overall Response Time,總響應(yīng)時間)等不同指標(biāo)側(cè)重點的性能服務(wù)。高端系統(tǒng)還應(yīng)能夠?qū)ο到y(tǒng)性能進(jìn)行動態(tài)的擴(kuò)展和調(diào)整。
6、功能。各種數(shù)據(jù)遷移、數(shù)據(jù)分發(fā)、數(shù)據(jù)版本管理、數(shù)據(jù)復(fù)制、在線擴(kuò)容等數(shù)據(jù)管理功能。
網(wǎng)絡(luò)存儲技術(shù)的三種基本類型
隨著安防市場的迅速發(fā)展和技術(shù)的不斷創(chuàng)新,視頻監(jiān)控技術(shù)也在向著高清化、數(shù)字化、網(wǎng)絡(luò)化、智能化的方向發(fā)展。而畫面質(zhì)量的提高、視頻線路的增加等諸多因素,都會令視頻監(jiān)控系統(tǒng)的存儲容量成倍增長,存儲設(shè)備正在成為網(wǎng)絡(luò)視頻監(jiān)控未來發(fā)展的決定性因素。
網(wǎng)絡(luò)存儲技術(shù)是基于數(shù)據(jù)存儲的一種通用網(wǎng)絡(luò)術(shù)語。網(wǎng)絡(luò)存儲結(jié)構(gòu)大致分為三種:直連式存儲(DAS:Direct Attached Storage)、網(wǎng)絡(luò)存儲設(shè)備(NAS:Network Attached Storage)和存儲網(wǎng)絡(luò)(SAN:Storage Area Network)。
直連式存儲(DAS)
是直接將DAS存儲設(shè)備連接到服務(wù)器后端,用于擴(kuò)展應(yīng)用服務(wù)器的存儲容量。其擴(kuò)展成本最低、物理連接簡單,但是也存在存儲資源歸屬于某一臺或幾臺服務(wù)器、資源利用率低、后續(xù)擴(kuò)展性差等問題。DAS較適用于存儲系統(tǒng)結(jié)構(gòu)簡單且相對固定的應(yīng)用場景,比如某一存儲空間要求穩(wěn)定的服務(wù)器擴(kuò)展其存儲空間。
網(wǎng)絡(luò)附件存儲(NAS)
是通過網(wǎng)絡(luò)文件系統(tǒng),構(gòu)建文件級聯(lián)網(wǎng)存儲,實現(xiàn)客戶端主機(jī)(如監(jiān)控系統(tǒng)中的編碼設(shè)備)與NAS網(wǎng)絡(luò)設(shè)備間的數(shù)據(jù)直接傳輸。NAS由于其協(xié)議兼容性高,配置、維護(hù)簡單的特點,適用于文件共享、小規(guī)模系統(tǒng)存儲等應(yīng)用場景。
存儲區(qū)域網(wǎng)絡(luò)(SAN)
是一種通過網(wǎng)絡(luò)方式連接存儲設(shè)備和應(yīng)用服務(wù)器的存儲構(gòu)架,這個網(wǎng)絡(luò)專用于主機(jī)(如監(jiān)控系統(tǒng)中的編碼設(shè)備或錄像管理服務(wù)器)和存儲設(shè)備之間的訪問。當(dāng)有數(shù)據(jù)存取需求時,數(shù)據(jù)可以通過存儲區(qū)域網(wǎng)絡(luò)在主機(jī)和后臺存儲設(shè)備之間高速傳輸。根據(jù)傳輸協(xié)議的不同,又可分為FC SAN和IP SAN。SAN存儲方式,具有存儲資源集中管理、擴(kuò)展便利、數(shù)據(jù)塊級傳輸效率高、兼容性高等特點。一般來講,其技術(shù)復(fù)雜程度高,系統(tǒng)建設(shè)和維護(hù)成本也高。由于SAN系統(tǒng)將存儲設(shè)備的存儲空間當(dāng)成物理硬盤交由主機(jī)管理,存儲傳輸網(wǎng)絡(luò)的可靠性程度、主機(jī)文件系統(tǒng)的不同,對存儲系統(tǒng)的可靠性影響極大。SAN存儲方案,由于其技術(shù)領(lǐng)先特性,適用于構(gòu)建大型的存儲系統(tǒng),為大規(guī)模數(shù)據(jù)存儲、應(yīng)用服務(wù)。
對于高清網(wǎng)絡(luò)攝像機(jī)的高清圖像記錄就需要網(wǎng)絡(luò)存儲系統(tǒng)(包括存儲服務(wù)器和存儲設(shè)備)。其中IP SAN方式一方面采用IP架構(gòu)的以太網(wǎng)絡(luò)傳輸,具備良好的擴(kuò)展性、共享性和較低的分?jǐn)倯?yīng)用成本,是目前大中型集中監(jiān)控存儲主要采用的技術(shù)之一。另一方面,IT上使用的主流數(shù)據(jù)硬盤容量已達(dá)TB級以上,2TB的數(shù)據(jù)硬盤也逐步走進(jìn)大家的視線(按每小時數(shù)據(jù)量1G計算,1TB的數(shù)據(jù)硬盤大約可存儲720P的視頻圖像1000小時或者1000路攝像機(jī)錄像1個小時的數(shù)據(jù))。
這三類存儲技術(shù)手段,各存儲系統(tǒng)都有著自己的特點,對比如下表所示:
海量存儲解決方案
隨著高清視頻的推廣應(yīng)用,基于IP的視頻錄像海量存儲解決方案也逐漸浮出水面。針對視頻監(jiān)控海量存儲的方式主要有以下幾種模式:
分布式存儲集中管理
對于大規(guī)模的城市聯(lián)網(wǎng)監(jiān)控系統(tǒng),通常采用多個層次型的監(jiān)控中心體系,每個基層的監(jiān)控中心管理其轄區(qū)內(nèi)的監(jiān)控資源并進(jìn)行存儲,因此會采用分布式存儲集中管理的模式進(jìn)行構(gòu)建,這種模式有助于減輕網(wǎng)絡(luò)的壓力,同時將設(shè)備資源分發(fā)下沉,有助于戰(zhàn)略部門掌握更多的資源和信息。一級監(jiān)控中心統(tǒng)一管理所有的視頻資源和錄像文件,二級、三級監(jiān)控中心可以分發(fā)和瀏覽視頻。
集中存儲分布式管理
對于只有一個集中管理中心的中小規(guī)模聯(lián)網(wǎng)監(jiān)控系統(tǒng),如縣/地級市、某大城市公安分局、某大型工礦企業(yè),數(shù)據(jù)一般集中存儲在一級監(jiān)控中心,其他的基層監(jiān)控中心安裝系統(tǒng)平臺的分控客戶端進(jìn)行瀏覽和管理部分前端。在這種情況下,存儲服務(wù)器集中放置在一級監(jiān)控中心,通過虛擬卷和網(wǎng)格存儲技術(shù),形成一個無限容量的虛擬存儲池,使存儲擴(kuò)展對用戶透明。
大型混合型存儲
所謂混合型存儲解決方案是將前面兩種方式進(jìn)行結(jié)合,以分布式存儲作為基礎(chǔ),同時在一級監(jiān)控中心設(shè)置網(wǎng)絡(luò)存儲服務(wù)器。短期的數(shù)據(jù)臨時存放在基層監(jiān)控中心的網(wǎng)絡(luò)存儲服務(wù)器內(nèi),長期的數(shù)據(jù)存儲于上傳一級監(jiān)控中心的網(wǎng)絡(luò)存儲服務(wù)器中。重要監(jiān)控點位的視頻資料不僅存儲在基層監(jiān)控中心的網(wǎng)絡(luò)存儲服務(wù)器,也實時地傳輸?shù)揭患壉O(jiān)控中心的網(wǎng)絡(luò)存儲服務(wù)器中作為備份。在基層監(jiān)控中心建立備份計劃,采用定時自動備份的方式,將超過規(guī)定時間的視頻文件備份到網(wǎng)絡(luò)存儲服務(wù)器相對應(yīng)的目錄中。
監(jiān)控存儲技術(shù)的應(yīng)用未來
隨著安防監(jiān)控技術(shù)與用戶需求相結(jié)合的趨勢愈加明顯,在安防監(jiān)控產(chǎn)品集成實施過程中,存儲技術(shù)也必須不斷適應(yīng)安防監(jiān)控的應(yīng)用特點,不斷地完善自己,存儲產(chǎn)品和安防監(jiān)控技術(shù)整合已經(jīng)是大勢所趨。除了上文提到的幾種網(wǎng)絡(luò)存儲方式,一種被稱之為“云存儲”的概念,開始逐漸走進(jìn)監(jiān)控行業(yè),其表明了存儲和監(jiān)控相融合的發(fā)展趨勢。
據(jù)了解,云存儲可以實現(xiàn)存儲完全虛擬化,大大簡化應(yīng)用環(huán)節(jié),節(jié)省客戶建設(shè)成本,同時提供更強(qiáng)的存儲和共享功能。云狀存儲中所有設(shè)備對使用者完全透明,任何地方任何被授權(quán)用戶都可以通過一根接入線與云存儲連接,進(jìn)行空間與數(shù)據(jù)訪問。用戶無需關(guān)心存儲設(shè)備型號、數(shù)量、網(wǎng)絡(luò)結(jié)構(gòu)、存儲協(xié)議、應(yīng)用接口等,操作簡單透明。
監(jiān)控云存儲的出現(xiàn),突破了傳統(tǒng)存儲方式的性能和容量瓶頸,使云存儲提供商能夠聯(lián)接網(wǎng)絡(luò)中大量各種不同類型的存儲設(shè)備形成異常強(qiáng)大的存儲能力,實現(xiàn)性能與容量的線型擴(kuò)展,讓海量數(shù)據(jù)的存儲成為了可能,從而讓企業(yè)擁有相當(dāng)于整片云的存儲能力,成功解決存儲難題。
云存儲作為一種新興的商業(yè)模型,正逐步改變著傳統(tǒng)存儲的提供與使用方式。借助云會議廠家提供的監(jiān)控云存儲服務(wù),企業(yè)有望擺脫在硬件存儲設(shè)備上的巨額投入,減少在系統(tǒng)維護(hù)上的人力支出,節(jié)省運營成本,提升企業(yè)競爭力。屆時,用戶只需支付少量的儲存費用,就能把超大容量的數(shù)據(jù)存在“云端”,并根據(jù)需要設(shè)置相關(guān)權(quán)限,隨時隨地共享給需要共享的人員,在減少數(shù)據(jù)傳輸時間的同時,借助廠家更為出色的加密技術(shù),避免傳輸過程中造成的丟包、泄密等事故的產(chǎn)生,全面保證了數(shù)據(jù)的安全性。
評論comment