都說好事多磨，那么阻礙著安防行業(yè)真正進入大數(shù)據(jù)時代的那些“磨難”都有什么?安防大數(shù)據(jù)又該如何擺脫好事多磨的窘境?現(xiàn)在就讓我們來探討一下這些問題。
隨著IT技術的發(fā)展，大數(shù)據(jù)時代正在IT行業(yè)內如火如荼的開展著，然而安防行業(yè)卻只有一只腳邁入了大數(shù)據(jù)時代。都說好事多磨，那么阻礙著安防行業(yè)真正進入大數(shù)據(jù)時代的那些“磨難”都有什么?安防大數(shù)據(jù)又該如何擺脫好事多磨的窘境?現(xiàn)在就讓我們來探討一下這些問題。
一、大數(shù)據(jù)的今天
1、應用領域
杭州海康威視系統(tǒng)技術有限公司(以下簡稱海康威視)的趙世范介紹說，在安防行業(yè)內，大數(shù)據(jù)可進行交通分析，即通過對交通卡口采集的海量過車記錄進行分析，發(fā)現(xiàn)車輛的行車軌跡，發(fā)現(xiàn)異常行為，為案件研判、交通誘導等提供信息支撐。
英特爾亞太研發(fā)有限公司物聯(lián)網解決方案與產品事業(yè)部商務開發(fā)經理(以下簡稱英特爾)顧典告訴我們，我們所居住的城市中有無數(shù)的高清攝像頭，涉及治安監(jiān)控、指揮通信、偵查破案、規(guī)范執(zhí)法、社會服務等，視頻接入規(guī)模從幾千到幾十萬，每天產生海量數(shù)據(jù)。
卡口
蘇州科達科技股份有限公司產品推廣經理(以下簡稱科達)吳映霞認為目前大數(shù)據(jù)在安防行業(yè)內應用較多的主要還是針對卡口方面的應用，如碰撞分析、隨車分析、假牌套**、初次入城分析等等，這些應用應該說是在實踐中有明確和迫切需要的，且應用起來還是很有效的。
公安執(zhí)法
此外，大數(shù)據(jù)不但可為公安偵查提供人、車、物和時空的相關性，在這些信息的分析和比對中發(fā)現(xiàn)有價值的線索信息;同時還可利用數(shù)據(jù)分析進行事前預警防范，如人臉識別比對系統(tǒng)，通過搭建人臉識別比對，建立人臉捕捉數(shù)據(jù)庫，將人臉信息歸檔，并與個人身份建立關系，在實際運用過程中采用人臉搜索、黑名單布防、陌生人識別等多項智能分析技術，大大提高視頻監(jiān)控的防范功效，可讓犯罪分子無可遁形。
2、大數(shù)據(jù)的組成及特征
在安防行業(yè)，涉及的數(shù)據(jù)信息類型很多，以數(shù)據(jù)的結構類型來看，包括各類非結構化、結構化及半結構化信息。其中，非結構化數(shù)據(jù)主要包括視頻錄像和圖片記錄，如監(jiān)控視頻錄像，報警錄像，摘要錄像，車輛卡口圖片，人臉抓拍圖片，報警抓拍圖片等;結構化數(shù)據(jù)則包括報警記錄，系統(tǒng)日志記錄，運維數(shù)據(jù)記錄，摘要分析結構化描述記錄，以及各種相關的信息數(shù)據(jù)庫，如人口信息，地理數(shù)據(jù)信息，車駕管信息等;半結構化數(shù)據(jù)則如人臉建模數(shù)據(jù)，指紋記錄等。
對IT大數(shù)據(jù)來說，其特征通常用4V(Velocity、Variety、Volume、Veracity)來概括，但對于安防大數(shù)據(jù)來說，它有自己獨特的特點。首先，安防大數(shù)據(jù)以非結構化的視頻監(jiān)控數(shù)據(jù)為主，因而它更側重于對非結構化數(shù)據(jù)的信息分析、提取挖掘以及處理能力;其次，就數(shù)據(jù)容量而言，以視頻錄像為主的安防大數(shù)據(jù)對傳輸、存儲和計算過程中需要的帶寬以及存儲空間要求都更高;再次，以數(shù)據(jù)量基礎做比較，安防大數(shù)據(jù)中的信息價值密度更低，從海量的圖像信息中快速和準確地檢測或者挖掘出有用信息的難度更大;最后，視頻監(jiān)控數(shù)據(jù)7×24小時都在持續(xù)不斷地更新積累，其時效性更高。
3、應用/實施狀況
英特爾的顧典認為，截至目前，許多智能化功能和大數(shù)據(jù)應用已在技術上得到實現(xiàn)，主要包括入侵檢測、徘徊檢測、遺棄物檢測、人流統(tǒng)計、車流統(tǒng)計、車牌識別、視頻診斷等;此外還有未遂檢測、停止檢測、方向檢測、顏色識別等高級智能分析功能，這些技術正在廣泛地運用于安防領域。而目前智能化的市場正在通過部分典型應用進行拓展，例如智能交通的車輛統(tǒng)計和車流分析、公共場所的人數(shù)統(tǒng)計和警戒設置、商鋪家居的常規(guī)防范等。隨著更多智能化功能的不斷完善，大數(shù)據(jù)的智能化處理正在從專業(yè)市場向民用及商業(yè)市場快速推進。
二、安防大數(shù)據(jù)相關技術
大數(shù)據(jù)在安防行業(yè)的應用使得安防更加智能化，大數(shù)據(jù)的技術一般分為數(shù)據(jù)采集、存儲、挖掘和計算(算法)技術。
處理分析工具
科達吳映霞認為，安防界大數(shù)據(jù)的處理和分析工具主要有兩類，一類是對視頻圖像等非結構化信息的處理和分析工具，包括視頻智能分析工具、視頻摘要工具、圖像清晰化工具、視頻清晰化工具、視頻轉碼工具、視頻編輯工具等等;另一類則是對結構化、半結構化信息的大數(shù)據(jù)分析處理工具，此類處理和分析工具安防界吸取了IT界在處理大數(shù)據(jù)方面的架構和經驗，比較流行的如Hadoop，Spark大數(shù)據(jù)處理的框架，以及Mahout、R數(shù)據(jù)挖掘工具，以對結構化和半結構化的數(shù)據(jù)可以實現(xiàn)快速和準確的數(shù)據(jù)分析和挖掘。
page
英特爾顧典則介紹到，英特爾的理念是在端到端的安防行業(yè)，全面實現(xiàn)數(shù)據(jù)價值的挖掘。所謂“端到端”，包括前端視頻采集、分析、存儲以及后端數(shù)據(jù)中心處理。區(qū)別于單個設備的解決方案，英特爾以其優(yōu)越的性能、靈活的設計為設備制造商和系統(tǒng)集成商提供整套系統(tǒng)化解決方案，從數(shù)據(jù)獲取、存儲、分析到應用各個層面均有覆蓋。從硬件角度，英特爾提供的全系列處理器涵蓋入門級的凌動、酷睿以及高性能的至強處理器，隨著夸克產品線的推出，在前端的應用將更具性能功耗比優(yōu)勢。此外，英特爾聚焦于通過GPU進行媒體處理工作負載的整合，如編解碼的硬件加速，從而實現(xiàn)更高密度的視頻流集成，使系統(tǒng)整體性能得到優(yōu)化。在軟件層面，英特爾擁有多種媒體處理工具，如異步IPP、媒體處理開發(fā)套件(MediaSDK)以及OpenCL開發(fā)套件。同時，對于開源大數(shù)據(jù)基礎軟件ApacheHadoop，英特爾提供了很多算法上的優(yōu)化，還可根據(jù)客戶的特定業(yè)務需求對運行Hadoop的基于英特爾至強系列芯片的服務器進行硬件的深度優(yōu)化，為海量數(shù)據(jù)的存儲和處理提供靈活支持，使之更適用于交通和安防行業(yè)的應用，合作伙伴也可在這個開放的平臺之上自如地融入自己的創(chuàng)新。
核心技術
在筆者問道大數(shù)據(jù)的核心技術是什么時，受訪人不約而同地給出了同一個答案：智能分析。海康威視趙世范認為智能分析是安防大數(shù)據(jù)區(qū)別于IT大數(shù)據(jù)的根本點，只有利用智能分析技術將安防大數(shù)據(jù)的非結構化數(shù)據(jù)轉換為結構化數(shù)據(jù)，才能將IT大數(shù)據(jù)成熟的技術體系應用到安防大數(shù)據(jù)中，充分發(fā)揮安防大數(shù)據(jù)的作用。科達吳映霞介紹說對于視頻圖像等非結構化數(shù)據(jù)的分析和處理，目前可能更多地是把它歸屬到智能分析的范疇，這些技術很多已在初期應用中不斷改進和完善，很多更新的智能分析技術仍處在研發(fā)過程中，對這類數(shù)據(jù)的分析和處理也將成為安防大數(shù)據(jù)的核心價值點。英特爾顧典也說日益豐富的智能算法將大大提高視頻監(jiān)控攝像機的使用范圍和價值，處于應用初級階段的智能視頻監(jiān)控，也將隨著智能算法的日益豐富而快速發(fā)展。而數(shù)字處理芯片、編解碼能力以及壓縮算法，是影響圖像處理技術的重要因素。安防智能化的核心還體現(xiàn)在VA(視頻分析或圖像分析)，而VA需要底層算法的支持并運用單元執(zhí)行，這可提高視頻分析的效率。
此外，大華股份研發(fā)中心云計算產品總監(jiān)(以下簡稱大華)王海豐認為，對于大數(shù)據(jù)時代的安防行業(yè)來說，存儲技術同樣處于不可或缺的位置。他認為，海量數(shù)據(jù)必須擁有能夠進行可靠、可保證效率且擁有快速的讀寫以及響應能力的存儲。
三、大數(shù)據(jù)成長路上的“磨難”
對任何一個新事物來說，它在出現(xiàn)和發(fā)展過程中都不可能是一帆風順的，安防大數(shù)據(jù)在其成長路上又在經歷著哪些“磨難”的考驗呢?
數(shù)據(jù)共享問題
大華王海豐認為目前安防行業(yè)內各系統(tǒng)以及各領域之間比較孤立，數(shù)據(jù)與數(shù)據(jù)之間并沒有互通，從而形成了一個個數(shù)據(jù)孤島，這導致各個系統(tǒng)按照大數(shù)據(jù)的方式使用起來比較困難。他認為，如果利用云存儲技術對大數(shù)據(jù)進行統(tǒng)一管理，把視頻與存儲進行分離并做成一個通用的共享層，對安防大數(shù)據(jù)來說將不失為一大進步。
篩選有效數(shù)據(jù)問題
眾所周知，以視頻監(jiān)控數(shù)據(jù)為主的安防擁有著海量的數(shù)據(jù)，然而，在這海量的數(shù)據(jù)中，可利用的、有價值的數(shù)據(jù)卻是少之又少的，如何在海量數(shù)據(jù)中高效地篩選出有效數(shù)據(jù)便成為一個非常困難的問題。四川艾普視達數(shù)碼科技有限公司產品市場部范清華認為，如何在大數(shù)據(jù)中快速高效地篩選有效信息正是目前安防大數(shù)據(jù)技術發(fā)展的問題所在。他認為，安防的數(shù)據(jù)量大，且傳統(tǒng)的安防多是事后查證，于是把所有有用無用的數(shù)據(jù)全存儲下來，其造成檢索查找不便。眾多廠商都在致力于探索如何從安防大數(shù)據(jù)中提取有價值的數(shù)據(jù)信息。
深圳中興力維技術有限公司產品經理汪洋說，大數(shù)據(jù)的最終目標是盡可能快速地利用各種數(shù)據(jù)來做出最好的決策。當前需要高效篩選安防數(shù)據(jù)，依然需要對安防監(jiān)控關注的業(yè)務對象進行人工監(jiān)督的建模，基于業(yè)務對象建模反向指導數(shù)據(jù)采集匯聚與分析。當前有兩種決策分析模型，一種是基于假設的模型，要關注哪些高價值數(shù)據(jù)，關注相關領域的數(shù)據(jù)，關注那些能夠提升效率的數(shù)據(jù);另一種模型就是一種不是基于假設的模型，是一種機器學習(如神經網絡算法等)的模型，大數(shù)據(jù)帶來的變化是分析必須減少對于固有數(shù)據(jù)的依賴，分析模型將能夠根據(jù)數(shù)據(jù)流中的動態(tài)數(shù)據(jù)自適應。這種模型跟假設模型完全不同，兩種模型暫時無法相互替代。從長期來看，一定會有更多的數(shù)據(jù)需要我們去關注。對安防大數(shù)據(jù)來說，它能夠不斷增加安防監(jiān)控量，幫助我們基于數(shù)據(jù)做出更合理的決策，這是它的優(yōu)勢。他認為，經過長時間數(shù)據(jù)和技術的發(fā)展，機器學習方式可能會取代假設模型。
科達吳映霞則告訴我們，安防廠商想要在大數(shù)據(jù)中快速高效地篩選出有效信息，需要兩個基礎來保證：于非結構化信息的分析、識別和提取等處理要準確和高效;對大量結構化信息，或者半結構化信息的綜合搜索要準確和快速。因此，安防廠商首先需要提升對非結構化信息的處理能力和效率，準確和快速地處理視頻圖像、人臉特征建模等數(shù)據(jù)，從里面提取出有用的信息，并且能夠進行信息的某種表述，在大數(shù)據(jù)的存儲層面上完成數(shù)據(jù)信息的提取和存儲工作，以便進行后續(xù)的數(shù)據(jù)信息檢索，分析和挖掘業(yè)務。其次，通過使用并且針對性地改進目前的大數(shù)據(jù)處理技術以及平臺框架，提供針對安防數(shù)據(jù)信息的快速檢索機制，形成有針對性的海量安防數(shù)據(jù)信息處理架構，從這些大量的結構化和半結構化信息中進行快速檢索和分析。
智能分析困難
英特爾顧典認為，在安防大數(shù)據(jù)中，如何對海量數(shù)據(jù)進行智能分析是關鍵。現(xiàn)階段，如何平衡網絡帶寬承載、降低系統(tǒng)存儲成本則成為處理海量數(shù)據(jù)的前提性要求。在實際應用中，視頻圖像的分析處理需求日益增加，如車牌識別、人臉識別等，對圖像質量提出了更高的要求，也對芯片的解碼能力提出了更大的挑戰(zhàn)。解決方案不單單是一個芯片就可以完成的，它是一個完整的架構。目前，數(shù)據(jù)分析往往在數(shù)據(jù)中心執(zhí)行，市場缺少一個端到端的計算架構，使不同攝像設備的關鍵信息被快速關聯(lián)起來，從而迅速、及時地進行分析。如何有效提取高質量的視頻信息以及實現(xiàn)更高效的數(shù)據(jù)中心智能搜索和分析正在成為業(yè)界的重要訴求。而在前端設備中使用更高性能、整合了GPU(圖形處理單元)的CPU(中央處理器)的芯片，通過相應的開發(fā)工具使GPU和CPU的能力得到充分利用，可使前端視頻的解析更有效率;同時，在后端使用對于開源或其它ApacheHadoop商用版(如Cloundera)深度優(yōu)化的至強系列服務器集群，可以合理地分配系統(tǒng)整體的計算資源，使圖像視頻處理及智能分析得以高效實現(xiàn)。
安防系統(tǒng)性能問題
科達吳映霞認為，安防大數(shù)據(jù)以視頻數(shù)據(jù)為主，然而視頻數(shù)據(jù)則對帶寬有著很高的要求，海量視頻數(shù)據(jù)的快速調取對高分辨率視頻數(shù)據(jù)的處理能力也有著很高的要求。目前安防行業(yè)對圖像信息的分析處理過程中，應用的性能瓶頸雖然會出現(xiàn)在計算層面，但對于大容量的數(shù)據(jù)上傳而言，下載和調度也是一個重要的瓶頸。
數(shù)據(jù)安全問題
在IT行業(yè)中，數(shù)據(jù)安全問題很是令人擔憂的，這個問題在安防行業(yè)內同樣不容忽視。大華王海豐認為數(shù)據(jù)安全問題主要分為三個方面：數(shù)據(jù)丟失、數(shù)據(jù)篡改以及數(shù)據(jù)泄露。針對這些問題，除了可采用多副本存儲、算法容錯技術之外，還可采用視頻水印及進行信道加密、存儲加密、數(shù)據(jù)加密技術等。
科達吳映霞則認為，對于安防領域而言，數(shù)據(jù)量大，圖像信息蘊含的信息量更多，且還涉及到個人隱私，公共安全等問題。所以，在系統(tǒng)安全方面更不容忽視。在安防領域，由于其公共安全的特性，除一般的如采用信息加密、傳輸加密、數(shù)據(jù)冗余、安全賬號控制、系統(tǒng)安全檢測、入侵檢測等信息數(shù)據(jù)安全措施外，更需要一些特殊保護措施。如從法規(guī)層面的保護，即涉及個人隱私和公共安全視頻信息的使用和控制，要加強對重點領域敏感數(shù)據(jù)的監(jiān)管，特別是在公安和政府層面，需要明確重點領域數(shù)據(jù)內容和范圍，制定完善的重點領域數(shù)據(jù)庫管理和安全操作制度，加強日常對信息數(shù)據(jù)監(jiān)管。另外，還需要規(guī)劃信息敏感域，做好本域的信息隔離和保護工作，如使用安全邊界接入平臺等方式，切斷直接的數(shù)據(jù)通訊鏈接，減少甚至避免受攻擊的情況。實際上，數(shù)據(jù)安全問題的解決，并不是靠一個人，一個企業(yè)或者一個行業(yè)就能徹底解決的，而是需要整個社會，各行各業(yè)的共同努力。
四、大數(shù)據(jù)如何真正落地安防
大數(shù)據(jù)如何才能真正落地到安防行業(yè)?英特爾顧典為我們分享了他的觀點：
1、由于大數(shù)據(jù)基礎軟件ApacheHahoop是一個通用的平臺軟件，所以安防行業(yè)的廠商如軟件供應商、系統(tǒng)集成商仍需和最終客戶之間有深入的交流，了解需求，根據(jù)客戶需求構建新的大數(shù)據(jù)解決方案。這樣可以把一個通用的數(shù)據(jù)平臺設計成更加符合安防行業(yè)應用的數(shù)據(jù)平臺，并考慮設計一些標準的API，使系統(tǒng)能夠靈活地應對將來的業(yè)務擴展。
2、大數(shù)據(jù)的應用還涉及到一些新的行業(yè)技術標準，如某些視頻信息抽象出的元數(shù)據(jù)等。有了這些針對數(shù)據(jù)處理的行業(yè)標準才可能使系統(tǒng)在處理海量異構數(shù)據(jù)時減少由于不必要的數(shù)據(jù)轉換帶來的系統(tǒng)資源損耗，使系統(tǒng)更加專注于分析、挖掘，從而更有效率地實現(xiàn)數(shù)據(jù)帶來的價值，如提高應用的實時性。
3、因大數(shù)據(jù)技術相對較新，產業(yè)鏈中包括方案提供商、系統(tǒng)集成商以及客戶本身，都需要增加熟悉大數(shù)據(jù)軟硬件的技術人才。比如，方案提供商需要有熟悉ApacheHadoop基礎平臺軟件的開發(fā)人員，需要有熟悉如何將基于ApacheHadoop的應用與現(xiàn)有的其它業(yè)務流程進行系統(tǒng)對接的應用開發(fā)人員，而系統(tǒng)集成商和客戶也需要有相應的Hadoop基礎軟件平臺的維護人員。有了這些人才，才能使方案不斷、快速地優(yōu)化，從而實現(xiàn)穩(wěn)定及高效運作。
大數(shù)據(jù)時代，安防企業(yè)如何規(guī)劃未來發(fā)展之路?安防大數(shù)據(jù)又如何擺脫好事多磨的窘境?還讓我們且行且看!
京公網安備 11010502049343號