大數據在安防行業的應用使得安防更加智能化,大數據的技術一般分為數據采集、存儲、挖掘和分析技術。其中,智能分析居于核心地位。而智能分析是安防大數據區別于IT大數據的重點之一,只有利用智能分析技術將安防大數據的非結構化數據轉換為結構化數據,才能將IT大數據成熟的技術體系應用到安防大數據中,充分發揮安防大數據的作用。
安防存儲技術發展現狀
存儲在安防行業的發展過程中經歷了磁帶存儲、DVR、NVR、SAN直存等產品形態,新興的軟件定義、云存儲等概念也是層出不窮,但無論怎樣發展,存儲起到的作用始終是是寫入和讀取兩個功能。傳統的分布式存儲如DVR、NVR產品,只能對監控點位分散的結構通過劃分若干監控區域進行分布式存儲,保證基本的寫入需求,對于大規模讀取的性能無法按需滿足;監控領域的集中式存儲主要指SAN、一體機設備,這類設備通過RAID、增加擴展柜的方式獲得了單機的大規模寫入空間,滿足了高密度的需求,但是對于視頻的讀取仍無法做到按需分配;云存儲的架構真正做到視頻的寫入、讀取按需分配、線性擴展,增加獨立的存儲節點即可獲得更高的讀和寫性能。
從實際實用的角度來看,用戶對于存儲的主要需求是建、存、讀、管、維。由于監控行業高端存儲如云存儲仍處于起步階段,沒有統一標準,市場上存在著存儲產品參差不齊的狀況。這幾個標準對應的衡量標準可以作以下幾點總結:
1)、建的瓶頸體現在上線部署便利程度,能否做到分鐘級快速部署,能否降低設備分批上線的難易程度;
2)、存的瓶頸體現在能否滿足海量規模存儲,單一的錄像、復雜的小尺寸圖片等,既能保證空間又能保證性能;
3)、讀的瓶頸體現在能否按需讀取,特別是給予視頻監控進行的實戰業務部署,讀取的性能線性增長,存儲能否給予保證;
4)、管的瓶頸體現在易用性,能否實時準確獲取設備狀態,能否把傳統存儲不友好的人機界面變成更加親切的交互;
5)、維的瓶頸在于保證設備的高可用性,如何在云存儲系統把發生的故障當作一種常態并兼顧數據安全和成本二者的平衡點。
云存儲的發展現狀
云存儲的概念與云計算類似,它是指通過集群應用、網格技術或分布式文件系統等功能,將網絡中大量各種不同類型的存儲設備通過應用軟件集合起來協同工作,共同對外提供數據存儲和業務訪問功能的一個系統,保證數據的安全性,并節約存儲空間。與傳統的存儲設備相比,云存儲不僅僅是一個硬件,而是一個網絡設備、存儲設備、服務器、應用軟件、公用訪問接口、接入網和客戶端程序等多個部分組成的復雜系統。各部分以存儲設備為核心,通過應用軟件來對外提供數據存儲和業務訪問服務。從嚴格意義上講,云存儲不是存儲,而是服務。云存儲已經成為未來存儲發展的一種趨勢,云計算和云存儲正引起一場技術革命,安防行業也不例外。
當前安防行業大規模的高清視頻監控系統應用中,需要滿足海量高清的視頻數據存儲,高清視頻數據如720P、1080P、5MP、8MP等高分辨率IPC的接入,大路數并發大碼流的實時數據讀寫,傳統存儲的性能面臨極大的挑戰;
安防監控視頻圖像的高清顯示、海量非結構化的數據存儲、多元信息融合、音視頻圖像的分析挖掘、大規模數據的智能分析及決策需要引入云計算、云存儲等多種先進技術,尤其在平安城市、智能交通、智慧城市以及跨地域的大規模行業應用當中,對于這些行業中海量的視頻圖片等非結構化數據存儲系統的需求,意味著數據存儲能力和計算處理性能的提升,存儲產品要求具備高性能、高容量、高可靠性以及可擴展性,同時需要實現與安防行業應用的深度結合,滿足安防系統海量視頻數據管理的特殊業務應用。
目前,云存儲在各大行業安防市場中,都已有規模性的部署和使用。例如,智慧城市和平安城市的建設,就要求在視頻監控方面,需提供海量的存儲系統,能并充分利用好存儲的數據進行深入的分析處理。傳統的存儲技術無法滿足社會發展的需求,云存儲在安防領域的應用將會成為必然的選擇。
安防云存儲的技術優勢
云存儲在視頻監控前景越來越廣闊,云存儲的作為未來發展的風向標,與傳統存儲相比,安防云存儲主要有以下優勢:
高速存取
安防云存儲需要面臨高并發、高碼率的數據存儲要求,面對的都是高清、高碼率的視頻存儲,存儲系統需要提供高性能的數據吞吐能力。安防云存儲通過采用數據離散式存儲機制,每一個監控點的錄像都以分塊形式,并發存儲于不同的存儲節點中,在讀取時,這些存儲節點將并發提供服務,避免了單臺設備讀取的瓶頸,速度比傳統存儲快幾十倍,可以滿足平安城市等大型安防項目中,海量并發存儲、讀取的需求。
安防集成
在實際應用中,安防云存儲與各項業務系統結合非常緊密,如圖偵、視頻智能分析等,在存儲陣列中直接集成視頻錄像管理、視頻回放和媒體轉發業務,充分利用云存儲高可靠硬件和網絡。同時,安防云存儲提供標準sdk接口,可以方便讓客戶對安防業務系統進行二次開發,與安防業務系統更為緊密的集成。
碼流直存
安防云存儲由于其使用場所、用戶的固定性以及用戶對視頻高效應用的要求,一般都會采用碼流直存的方式,從而簡化系統的架構,降低故障點,提升系統部署的效率以及運維成本,而且云存儲一般也是架設于專網之中,更能保障錄像的質量。
檢索迅速
針對系統中會產生PB級海量監控數據,存儲設備的數量達數十臺上百臺,因此管理方式的科學高效顯得十分重要。云存儲可提供基于集群管理技術的多設備集中管理工具,具有設備集中監控、集群管理、系統軟硬件運行狀態的監控、主動報警,圖像化系統檢測等功能。在海量視頻存儲檢索應用中,檢索性能尤為重要,因此數據檢索的速度對安防存儲顯得至關重要。
安全可靠
當在線存儲系統出現故障后,熱備機可以立即接替服務,當故障恢復時,服務和數據回遷;若故障機數據需要調用,可以將故障機的磁盤插入到冷備機中,實現所有數據的立即可用。
云存儲在智能分析中的作用
目前在安防行業,智能分析主要有兩類:一類是對視頻圖像等非結構化信息的處理和分析,包括視頻智能分析工具、視頻摘要、圖像清晰化工具、視頻清晰化工具、視頻轉碼工具、視頻編輯工具等等;另一類則是對結構化、半結構化信息的大數據分析處理工具,此類處理和分析工具是安防行業吸取IT行業在處理大數據方面的架構和經驗,比較流行的如Hadoop,Spark大數據處理的框架,以及數據挖掘工具,以對結構化和半結構化的數據可以實現快速和準確的數據分析和挖掘。
大數據在安防行業的應用使得安防更加智能化,大數據的技術一般分為數據采集、存儲、挖掘和分析技術。其中,智能分析居于核心地位。
智能分析是安防大數據區別于IT大數據的重點之一,只有利用智能分析技術將安防大數據的非結構化數據轉換為結構化數據,才能將IT大數據成熟的技術體系應用到安防大數據中,充分發揮安防大數據的作用。對于視頻圖像等非結構化數據的分析和處理,目前可能更多地是把它歸屬到智能分析的范疇,這些技術很多已在初期應用中不斷改進和完善,很多更新的智能分析技術仍處在研發過程中,對這類數據的分析和處理也將成為安防大數據的核心價值點。日益豐富的智能算法將大大提高視頻監控攝像機的使用范圍和價值,處于應用初級階段的智能視頻監控,也將隨著智能算法的日益豐富而快速發展。而數字處理芯片、編解碼能力以及壓縮算法,是影響圖像處理技術的重要因素。
智能分析產生海量的結構化數據、非結構化數據、半結構化數據等,海量數據必須擁有能夠進行可靠、可保證效率且擁有快速的讀寫以及響應能力的存儲,傳統的集中存儲式架構已無法滿足智能分析所產生的數據的存儲,云存儲面向海量的非結構化數據,具備高可靠、高性能、大容量、彈性擴展、自動化管理等特點,輕松滿足海量的數據存儲和彈性變化的業務需求。