一本名為《大數據時代》的書,正風靡全球,引起人們越來越強烈的關注。何為大數據?大數據,英文名big data,又稱巨量資料,是指其數據規模極其巨大,以致很難通過一般軟件工具加以擷取、管理、處理并整理成為有用資訊的海量數據。按目前業界公認說法,大數據特點有4個V:即,Volume(大量)、Velocity(高速)、Variety(多樣)、Value(價值)。日常工作生活中,切切實實感到“大數據”時代向我們步步“逼”來。
先說大量、高速。大量、高速到了什么程度?我們曉得,一個移動硬盤,容量大約為10個G。2001年,全球互聯網總流量大約為1EB,即10億個G。到了2004年,一個月流量即可達到1EB,而到了2007年,達到此流量時間是一周,到2013年,達到1EB的流量僅僅需要一天!換句話說,目前,全球互聯網一天產生的信息量,可以刻滿1.88億張DVD光盤!
再說多樣、價值。如此大量、高速的數據,其多樣性毋庸置疑,小到某人與某人的數分鐘通話,大到某公司與某公司的一筆巨額交易,雖然全是些風馬牛不相及的數字,但是,經過科學的收集、歸類,整理,再加以分析、排列、組合,這些數字就會神奇地演變成全新的極其有用的各種資訊!原始數據越大,處理難度自然越大,但是,處理后其應用價值亦越大。大數據這種無中生有、化腐朽為神奇的增值功能,既叫人稱奇,更令人神往!
正因大數據具有以上四項特性,世界經濟論壇報告將它認定為人類新世紀的“新財富”,甚至稱其價值“堪比石油”!也正因此,發達國家紛紛將開發利用大數據作為奪取新一輪競爭制高點的重要目標。美國政府于2012年3月發布了《大數據研究與發展倡議》報告,這是繼1993年宣布“信息高速公路”之后又一重大部署。歐盟及日本等國,也紛紛在大數據研發方面投入巨資,竭盡全力拼搶這一制高點。
大數據這塊餑餑,聞起來確實很香,但啃起來卻相當堅硬。其難度主要有四,一是數據收集難。這么無邊無際的海量信息,多而且雜,萬千角度,如何下手?二是數據存儲難。海量存儲,既要求低成本、低能耗,又要求高質量、高識別。三是數據處理難,信息如密網交織,錯綜復雜,處理如剝繭抽絲,穿針引線,其難度可想而知。四是數據呈現難,數據最終是要拿來使用的,所以,其呈現必須簡單、實用,無疑,這是又一個由繁入簡的艱巨工程。
好在,大數據應用已經初見曙光,歐美各國,均有成功先例,紛紛應用于實踐并卓有成效。有人曾設想,倘若我們將大數據應用于日常生活,那么,當你在北京或者某一城市打算購買某一產品時,只消將名稱輸入手機,大數據立即就會告訴你,你所需要的這些東西,此時此刻,在當地哪些商場有售,其價格分別是多少。于是,你可以馬上作出決策……這將給人們帶來多么大的方便,又將給商業流通帶來多么大的改變!
萬事雖然起頭難,堅持動手就不難。所謂大數據之“大”,不過是相對而言,著手于小,小可積大。目前,百度、阿里、騰訊等不少互聯網公司,已成立大數據研發機構。看到一資料,百度目前日處理數據量已達100PB,相當于一個圖書館2700萬冊藏書!而阿里則根據淘寶網上中小企業的交易狀況,利用先天掌握的大數據篩選出財務健康及講誠信企業,并對其發放無擔保貸款300多億元,其壞賬率僅0.3%,創造了金融業一個奇跡!這些都是大數據應用的范例。讓我們張開雙臂,迎接大數據時代的來臨吧!