隨著IT技術的不斷發展,數據的生成方式也隨之發生變化。2000年以前,數據主要由各企業的ERP系統被動生成,數據總量可控;到了互聯網特時代(特別是移動互聯網時代),大量數據由個人主動生成,數據總量快速增加;而到了物聯網時代,海量數據由各類感應器、視頻攝像頭源源不斷地自動生成,數據總量呈幾何級數膨脹。面對需要存儲的海量數據,采用傳統存儲設備存儲雖然在性能和可靠性上有比較好的保障,但海量數據的存儲成本給各信息主管部門帶來了巨大的經濟壓力,用戶迫切需要一種新型的存儲技術來應對這個挑戰。因此,云存儲技術運應而生,然而在信息化建設中數據互不兼容、自成一體現象,無統一的標準將該領域的相關業務體系連成一個有機整體,讓全國范圍內多層次的信息資源變得易于存取、便于共享。
為盡快解決行業燃眉之急,2014年9月,公安部科技信息化局和云存儲專業委員會聯手組織部分地方公安廳局和云存儲專委會發起單位初志科技及其5家成員單位,開始著手打造警務云存儲系統的行業標準,2015年10月正式起草和制定《警務云平臺存儲總體技術要求》。
為什么云存儲的落地需要標準支撐
從技術實現的角度來看,實現云存儲系統的互聯、互通和互操作需要標準支撐。例如,云存儲系統需要構建一個共享式存儲資源池,只有通過標準化的南北向接口才能最大程度地管理和調度來自不同廠商、不同品牌的存儲設備,從而實現屏蔽上層業務系統對底層存儲設備的依賴,真正實現云存儲系統的存儲及服務的功能。
從用戶使用的角度來看。如何有效評估不同廠商提供的云存儲產品的成熟度、安全性和兼容性?如何指導用戶根據自身的需求合理地、分步驟地將業務系統從傳統存儲設備上遷移到云存儲系統中?如何在發生質量問題時界定問題邊界?都需要有相應的標準來指導。
從云存儲產業發展的角度來看,通過研制標準可以為云存儲設備提供商、云存儲服務提供商、云存儲用戶等云存儲產業鏈的各個環節提供清晰的入口和出口標準,為上下游的協調合作提供有力支撐,最終促進云存儲整個產業鏈的快速發展。
所以,研制云存儲系統相關標準對實現云存儲系統和推動云存儲技術的大規模應用都有著極其重要的作用。
警務云存儲標準的建設要求
近日,由工業和信息化部電子工業標準化研究院、公安部計算機與信息處理標準化技術委員會和云存儲專業委員會在京召開的中國云存儲標準與應用高層研討會上,公安部計算機與信息處理標準化技術委員會副主任張憲華首次對警務云存儲標準進行了對外介紹。
第一、警務云平臺存儲系統建設對總體技術的要求。
對存儲物理設備層的要求:存儲物理設備層是整個存儲系統的基礎層,它包含所有可用的存儲資源。
對存儲資源虛擬化層的要求:它通過虛擬化技術屏蔽南向存儲物理設備的異構性,將數據中心全部存儲資源組成統一管理的存儲資源池,并通過存儲接口層對外提供統一的服務、管理和監控。
對存儲能力層的要求:存儲能力層是警務云平臺存儲系統的核心層,它將后端存儲設備的能力,譬如卷廋分配、自動分級存儲、快照、復制、重刪等會被抽象為一個個原子服務能力,由警務云平臺管理員來將這些不同的原子服務能力組合成不同的服務目錄提供給客戶。
對存儲接口層的要求:提供完整的北向接口它包括:文件存儲接口(NFS、CIFS、POSIX)、對象存儲接口(S3、CDMI)、塊存儲接口(SCSI、iSCSI)、分布式數據庫存儲接口(SQL)、大數據分析接口(K-V、MapReduce、HQL等)。同時接口層還提供可編程的開放API,滿足上層管理平臺的自動化調用和編排需求,易于與現有的管理平臺對接。
對存儲資源管理模塊的要求:存儲資源管理平臺負責存儲資源的管理與監控,具體包括:設備管理、資源管理和服務管理三大類業務。
對安全管控模塊:負責為整個存儲系統提供端到端的安全管控能力,具體包括:存儲數據安全、存儲設備安全、存儲網絡安全和存儲業務安全。
第二、警務云平臺存儲系統建設對接口的規范要求。
警務云平臺存儲系統接口由塊存儲設備訪問接口、文件存儲設備訪問接口、對象存儲設備訪問接口、基于Key-Value的分布式數據庫存儲訪問接口、存儲設備資源管理協議等組成,其中,對象存儲訪問接口和基于Key-Value的分布式數據庫存儲訪問接口可直接引用已有國家標準:《信息技術云數據存儲和管理第5部分基于Key-Value的云數據管理應用接口》和《信息技術云數據存儲和管理第2部分基于對象的云存儲應用接口》,其余部分有些已立項國家標準,有些待研究提出。
本部分研究的內容包括:運維門戶,即整合運維管理平臺的功能應用,提供個性化的門戶展現;運維需求管理,負責云運維管理的需求的全生命周期流程化管理,包括需求獲取、需求處理、需求分析、需求驗證和需求后評估五個管理過程;運維服務管理,負責對云運維管理平臺提供的各種運維服務進行管理;資源管理,實現對各類存儲資源的全生命周期的靜態管理;資源策略管理(策略層面),負責管理SAN、NAS和對象存儲的資源納管、分配、調度和容量管理;統計分析,負責對各類存儲資源的各項信息進行多維度的統計分析;系統自管理,負責云運維管理平臺自身的各項管理,包括參數管理、日志管理、平臺監視、用戶管理、系統備份和恢復、版本控制管理等。
第三、警務云平臺存儲系統中分布式存儲系統技術要求。
云存儲系統不是某種單一的存儲產品(SAN、NAS或者對象存儲),而是由許許多多個存儲設備和服務器所構成的集合體,是通過分布式、虛擬化、智能配置等技術,實現可彈性擴展、低成本、低能耗的。它通過標準化的數據訪問接口協議,同時為多個不同的業務系統提供數據存儲與分析服務。
云存儲系統標準研制過程
本標準主要涉及的內容包括:分布式存儲系統技術架構、分布式存儲系統功能要求、分布式存儲系統擴展性要求、分布式存儲系統性能要求、分布式存儲系統可靠性要求、分布式存儲系統安全要求、分布式存儲系統可維護性要求。
在標準的編寫研制過程中,作為云存儲專業委員會的發起單位,初志及時配合云存儲專業委員會組織企業和公安用戶一起研究討論。截至目前,警務云平臺云存儲標準已經研制完成該標準的總則,其四個子標準中的接口和分布式、運維、安全標準正在研制過程中。2015年8月21日,公安部科技信息化局在北京召開警務云平臺存儲相關標準與國家標準對接工作會。現階段接口和分布式兩個標準已與國家標準完成對接,10月23日,警務云存儲標準研制情況也首次對外匯報。
結語:警務云存儲標準研制剛剛起步,尚有大量工作要做,初志科技將繼續配合公安部信標委和云存儲專業委員會,深入開展公安警務云存儲標準體系研究,并積極參與有關國家標準的討論、研制,為規范公安機關云存儲系統建設、應用、管理,為完善國家云存儲標準體系在技術支持上做出貢獻。