在安防領(lǐng)域,隨著平安城市建設(shè)的不斷推進,監(jiān)控點位越來越多,從最初的幾千路,到幾萬路,甚至于到現(xiàn)在幾十萬路的規(guī)模,視頻和卡口產(chǎn)生海量的數(shù)據(jù)。
在智能安防時代中,隨著高清的普及,對于視頻存儲的時長與數(shù)據(jù)分析的要求越來越高。目前的視頻監(jiān)控系統(tǒng)中,90%以上的數(shù)據(jù)是海量非結(jié)構(gòu)化數(shù)據(jù),解決海量數(shù)據(jù)的存取對存儲系統(tǒng)的可靠性、性能、擴展能力提出了新挑戰(zhàn)。
視頻監(jiān)控的存儲變革
人臉識別、行為識別、車牌識別、目標分類等人工智能算法的快速發(fā)展,使得安防智能化成為了近兩年最為明顯的一個發(fā)展趨勢,AI攝像頭將持續(xù)高速增長,并大量替換傳統(tǒng)攝像頭。
在智能安防時代中,隨著高清的普及,對于視頻存儲的時長與數(shù)據(jù)分析的要求越來越高。這種組合需求正在提升視頻監(jiān)控存儲方案的成本,并對整體智能安防解決方案的可伸縮性及可管理性帶來巨大的壓力。
當前需要滿足海量高清的視頻數(shù)據(jù)存儲,高清視頻數(shù)據(jù)如720P、1080P、5MP、8MP等高分辨率IPC的接入,大路數(shù)并發(fā)大碼流的實時數(shù)據(jù)讀寫,傳統(tǒng)存儲的性能面臨極大的挑戰(zhàn)。
這也意味著數(shù)據(jù)存儲能力和計算處理性能的提升,存儲產(chǎn)品要求具備高性能、高容量、高可靠性以及可擴展性。同時需要實現(xiàn)與安防行業(yè)應用的深度結(jié)合,滿足安防系統(tǒng)海量視頻數(shù)據(jù)管理的特殊業(yè)務(wù)應用。
AI安防存儲的需求與挑戰(zhàn)
隨著AI智慧安防的風起云涌,一方面,存儲對象由最早單純的原始視頻變到了視頻、圖片、AI分析后的結(jié)構(gòu)化半結(jié)構(gòu)化數(shù)據(jù)。對象的改變,使得存儲系統(tǒng)要更多的考慮,如何更好地去適配多樣化的存儲對象?如何最高效地去存儲各類型數(shù)據(jù),并提供可靠的保護?海量小文件混合存儲的時候,如何避免傳統(tǒng)存儲中性能的大打折扣?
另一方面,存儲的寫讀模型也發(fā)生了大變化。原先的原始視頻存入存儲后基本不會被調(diào)閱,寫讀模型基本為10:1,但AI技術(shù)的出現(xiàn)徹底激活了這些數(shù)據(jù),存入的視頻可以被高性能分析服務(wù)器提取進行人臉分析、車型分析、結(jié)構(gòu)化分析,寫讀模型也變成了1:1甚至1:N。在這樣的寫讀模型下,對存儲設(shè)備也提出了更高要求,存儲不再是單單考慮如何存的更快存的更多,而是要考慮如何與AI業(yè)務(wù)融合,最優(yōu)結(jié)合。
而當AI技術(shù)對數(shù)據(jù)價值進行提煉后,提煉出來的數(shù)據(jù)價值就發(fā)生了變化。例如:可能原始視頻只需要保留30天,但是經(jīng)過結(jié)構(gòu)化分析后的涉案嫌疑人圖片的重要性就不言而喻了。需要永久保存。所以當一套存儲系統(tǒng)中存在這樣那樣不同重要程度的數(shù)據(jù)時,完善的生命周期管理體系、如何來區(qū)分數(shù)據(jù)的重要性,并提供有層次的保護技術(shù)就變得尤為重要。
當上面的種種挑戰(zhàn)出現(xiàn)后我們還將直面一個現(xiàn)實問題:在爆炸量的數(shù)據(jù)、超高的性能要求和翻倍的成本面前,我們?nèi)绾稳プ非笮阅苋萘康淖顑?yōu)配比,找到最低TCO(總擁有成本)的方案,實現(xiàn)最優(yōu)解。
傳統(tǒng)存儲架構(gòu)不再適用
安防行業(yè)的邊界在不斷消融,場景的擴展、技術(shù)的跨界、資源的調(diào)配等等都在使其發(fā)展成為一個全生態(tài)的現(xiàn)代化概念。
數(shù)據(jù)對存儲系統(tǒng)的需求發(fā)生變化,傳統(tǒng)存儲架構(gòu)已經(jīng)不適應于當前的存儲和應用。著眼于容量、性能,數(shù)據(jù)價值提升、運維管理等訴求,需要做到多設(shè)備資源池化、資源統(tǒng)一管理分配,容量和性能線性增長等。
隨著云計算、大數(shù)據(jù)、物聯(lián)網(wǎng)、人工智能等業(yè)務(wù)的發(fā)展,數(shù)據(jù)呈幾何級增長。同時,數(shù)據(jù)的形態(tài)也出現(xiàn)了很多的變化,從原來的結(jié)構(gòu)化數(shù)據(jù)變?yōu)楝F(xiàn)在的半結(jié)構(gòu)化數(shù)據(jù)。
其中,云存儲方案可以將原來單一設(shè)備的資源進行池化,達到資源共享的目的。不同于傳統(tǒng)擴展模式,它采用全對稱的分布式架構(gòu),支持在線擴容。
分布式存儲現(xiàn)商機
因為云計算、5G、物聯(lián)網(wǎng)、數(shù)據(jù)中心、智能計算中心等都在新基建建設(shè)下走向千行百業(yè),這時分布式存儲也迎來春天。
業(yè)內(nèi)最新的分布式統(tǒng)一存儲集群架構(gòu),將SAN和NAS統(tǒng)一在一起,同時支持通過光纖通道FC、IP等存儲區(qū)域網(wǎng)絡(luò)(SAN)和網(wǎng)絡(luò)附加存儲(NAS)。提供用戶所需的存儲資源,從而使其存儲環(huán)境具有無與倫比的靈活性,同時最大限度地降低復雜度和成本。
提供的實時遠程數(shù)據(jù)異步鏡像功能,可根據(jù)應用容災需求,靈活設(shè)定不同同步間隔的容災方式,確保了應用的高可用性。利用集中控制管理平臺實現(xiàn)數(shù)據(jù)集中存儲、集中管理、統(tǒng)一監(jiān)控維護。隨著存儲節(jié)點增加,存儲的容量、計算、性能都會呈線性增加。
云存儲與對象存儲被視為是新的最優(yōu)選擇,但對于大型的視頻監(jiān)控系統(tǒng),從前端到上云的巨額成本讓人望而止步,使得用戶與集成商對于可擴展的邊緣存儲需求持續(xù)增長。
目前監(jiān)控市場的用戶、集成商或技術(shù)合作伙伴仍然與數(shù)據(jù)中心或其他IT市場存在較大的差異,這意味著在存儲上最優(yōu)方案仍有待商榷與時間驗證。
云存儲不會完全取代傳統(tǒng)存儲
而云存儲誕生后,目前硬盤廠商的爭霸也已經(jīng)塵埃落定,西數(shù)和希捷擁有無可爭議的行業(yè)霸主地位。
而面對安防存儲的逐漸云化的現(xiàn)狀,希捷和西數(shù)近年來針對安防行業(yè)推出了多種新技術(shù),比如雙磁臂技術(shù)、大數(shù)據(jù)分析技術(shù)、云應用技術(shù)等。硬盤的容量也進一步得到提升,目前18、20TB的硬盤已經(jīng)廣泛應用于安防行業(yè),并持續(xù)帶來價值。
目前其實存儲行業(yè)的競爭已經(jīng)接近尾聲,云存儲不可能完全取代傳統(tǒng)存儲,而傳統(tǒng)硬盤存儲行業(yè)也已經(jīng)洗牌完畢,雙方這種互相競爭、互相進步的格局,恐怕還要持續(xù)很長一段時間。
下一代AI安防存儲
人工智能技術(shù)與安防行業(yè)的融合日趨深入,算力、算法、數(shù)據(jù)等新技術(shù)革命的地基已經(jīng)牢固,各種新的應用已經(jīng)開始落地。但圍繞著傳統(tǒng)視頻監(jiān)控數(shù)據(jù)的兩大難題——海量數(shù)據(jù)及非結(jié)構(gòu)化特征,已經(jīng)給目前的數(shù)據(jù)存儲、傳輸、運用帶來嚴峻的挑戰(zhàn)。
從AI安防存儲的特點而言,下一代存儲硬盤需滿足三點基本要求,一是要適配海量數(shù)存儲及調(diào)用的讀寫性能,二是要有更大的容量支撐數(shù)據(jù)存儲需求,三是要控制成本,推動AI普惠落地。
下一代安防視頻存儲解決方案,需進一步優(yōu)化安防視頻工作負載,通過軟硬結(jié)合的方式讓硬盤有強大的能力,支撐大量智能視頻應用的部署。可以預測,一頭數(shù)據(jù)存儲,一頭應用創(chuàng)新,將是未來巨頭們重新定義安防存儲的抓手,推動智能安防更快速的發(fā)展及落地。