如今,隨著移動計算、云計算的發展,我們看到世界上的數據量正在不斷的增長。
雖然有這個各種新的技術出現,如閃存、磁盤和磁帶以及數據中心等。但可以說仍然很難滿足當前數據的需求,那么該如何使數據存儲更有效率呢?
隨著物聯網(IoT)行業的發展,數據的產生量是驚人的,很多人認為,數據蘊藏的價值,所以我們需要保護好這些數據。
但是這里,我要問的是:我們真的需要存儲這所有的數據嗎?真的需要存儲一切嗎?
IDC預測,到2020年,地球上將有44 ZB的數據。難道我們都需要記錄這些數據嗎?
如今,隨著物聯網技術的發展,機器就能夠自行的紀錄和收集這些數據。但是這些數據是否有壽命呢?多久的數據才是真的有用的呢?
例如,你需要從波音777的傳感器中收集你需要的數據,但是請記住,每個發動上可能有很多個傳感器,并且每隔幾毫秒就會產生數據,也許這些數據的確對于你有用,但是當這架飛機的壽命結束后呢?剩下的數據是否總結還是丟棄?你將為這些數據存儲多長時間,這些數據存儲將花費多少費用?與你的付出是否成比例呢?
其實,超過90%的數據人們只會看一次。
在物聯網時代設備和傳感器每天產生大量的數據,但是你必須要優先考慮和分析這些信的數據,而那些被存儲和已經分析過的邊緣數據,你應該適時的進行丟棄。
不是什么數據我們都需要長期存儲,我們應該找到數據存儲和丟棄的平衡點。數據存儲的費用可能比產生的價值更高。
一些數據,可能永遠不會長期保持在一個數據庫中,例如監測高速公路上的交通,如果你需要了解這條高速公路的最大交通流量,那么這些數據可能只需要保留一個相對較短的周期,并不需要長期的保留。
換句話說,在物聯網時代,并不是保存的數據越多越好,我們應該找到數據存儲價值的最高點,不但減少存儲的負擔,也讓你公司的數據分析效率達到最高值。
畢竟,數據分析的價值雖然是數據越多越好,但是隨著時間的延續,可能你分析出的價值也在打折扣,所以,在物聯網時代,數據并不需要我們全部的存儲。