當(dāng)世界杯遇上大數(shù)據(jù),注定要上演一場好戲,在世界杯期間,各家科技巨頭利用大數(shù)據(jù)預(yù)測比賽結(jié)果,再現(xiàn)“章魚保羅”雄風(fēng)。
世界杯結(jié)束了但大數(shù)據(jù)預(yù)測還會繼續(xù)。從夜觀天象到氣象預(yù)報,從童話里的水晶球到今日的科技預(yù)言家,從地震云的傳說再到科學(xué)家猛攻的地震預(yù)測,人類一直希望能夠更早突破局限看穿未來。隨著信息革命的深入,大數(shù)據(jù)時代的預(yù)測更加容易,人類的生活正在被大數(shù)據(jù)預(yù)測深刻改變。
預(yù)測是大數(shù)據(jù)核心價值
人們在談?wù)摯髷?shù)據(jù)的采集、存儲和挖掘時,最常見的應(yīng)用案例便是“預(yù)測股市”“預(yù)測流感”“預(yù)測消費者行為”,預(yù)測性分析是大數(shù)據(jù)最核心的功能。
大數(shù)據(jù)還擁有數(shù)據(jù)可視化和大數(shù)據(jù)挖掘的功能,對已發(fā)生的信息價值進(jìn)行挖掘并輔助決策。傳統(tǒng)的數(shù)據(jù)分析挖掘在做相似的事情,只不過效率會低一些或者說挖掘的深度、廣度和精度不夠。大數(shù)據(jù)預(yù)測則是基于大數(shù)據(jù)和預(yù)測模型去預(yù)測未來某件事情的概率。讓分析從“面向已經(jīng)發(fā)生的過去”轉(zhuǎn)向“面向即將發(fā)生的未來”是大數(shù)據(jù)與傳統(tǒng)數(shù)據(jù)分析的最大不同。
從天氣預(yù)報看大數(shù)據(jù)預(yù)測的四個條件
在互聯(lián)網(wǎng)之前便已經(jīng)有基于大數(shù)據(jù)的預(yù)測分析了:天氣預(yù)報。因為互聯(lián)網(wǎng),天氣預(yù)報為代表的大數(shù)據(jù)預(yù)測的以下幾個特征在更多領(lǐng)域得到體現(xiàn)。
1、大數(shù)據(jù)預(yù)測的時效性。天氣預(yù)報粒度從天縮短到小時,有嚴(yán)苛的時效要求,基于海量數(shù)據(jù)通過傳統(tǒng)方式進(jìn)行計算,得出結(jié)論時明天早已到來,預(yù)測并無價值。其他領(lǐng)域的大數(shù)據(jù)預(yù)測應(yīng)用特征對“時效性”有更高要求,譬如股市、實時定價,而云計算、分布式計算和超級計算機(jī)的發(fā)展則提供了這樣的高速計算能力。
2、大數(shù)據(jù)預(yù)測的數(shù)據(jù)源。天氣預(yù)報需要收集海量氣象數(shù)據(jù),氣象衛(wèi)星、氣象站臺負(fù)責(zé)收集,但整套系統(tǒng)的部署和運維耗資巨大。在互聯(lián)網(wǎng)之前鮮有領(lǐng)域具備這樣的數(shù)據(jù)收集能力。WEB1.0為中心化信息產(chǎn)生、WEB2.0為社會化創(chuàng)造、移動互聯(lián)網(wǎng)則是隨時隨地、社會化和多設(shè)備的數(shù)據(jù)上傳,每一次演化數(shù)據(jù)收集的成本都大幅降低,范圍和規(guī)模則大幅擴(kuò)大。大數(shù)據(jù)被引爆的同時,大數(shù)據(jù)預(yù)測所需數(shù)據(jù)源不再是問題。
3、大數(shù)據(jù)預(yù)測的動態(tài)性。不同時點的計算因子動態(tài)變化,任何變量都會引發(fā)整個系統(tǒng)變化,甚至產(chǎn)生蝴蝶效應(yīng)。如果某個變量對結(jié)果起決定性作用且難以捕捉,預(yù)測難上加難,譬如人為因素。大數(shù)據(jù)預(yù)測的應(yīng)用場景大都是極不穩(wěn)定的領(lǐng)域但有固定規(guī)律,譬如天氣、股市、疾病。這需要預(yù)測系統(tǒng)對每一個變量數(shù)據(jù)的精準(zhǔn)捕捉,并接近實時地調(diào)整預(yù)測。發(fā)達(dá)的傳感器網(wǎng)絡(luò)外加大數(shù)據(jù)計算能力讓上述兩點更加容易。
4、大數(shù)據(jù)預(yù)測的規(guī)律性。大數(shù)據(jù)預(yù)測與傳統(tǒng)的基于抽樣的預(yù)測不同之處在于,其基于海量歷史數(shù)據(jù)和實時動態(tài)數(shù)據(jù),發(fā)現(xiàn)數(shù)據(jù)與結(jié)果之間的規(guī)律,并假設(shè)此規(guī)律會延續(xù),捕捉到變量之后進(jìn)行預(yù)測。一個領(lǐng)域本身便有相對穩(wěn)定的規(guī)律,大數(shù)據(jù)預(yù)測才有機(jī)會得到應(yīng)用。古人夜觀天象就說明天氣是由規(guī)律可循的,因此氣象預(yù)報最早得到應(yīng)用。反面案例則是規(guī)律難以捉摸,數(shù)據(jù)源收集困難的地震預(yù)測,還有雙色球彩票。
D1Net評論:
從大數(shù)據(jù)預(yù)測天氣就可以看出,大數(shù)據(jù)預(yù)測的邏輯基礎(chǔ)是,每一種非常規(guī)的變化事前一定有征兆,每一件事情都有跡可循,如果找到了征兆與變化之間的規(guī)律,就可以進(jìn)行預(yù)測。大數(shù)據(jù)預(yù)測無法確定某件事情必然會發(fā)生,它更多是給出一個概率,并不能算是神機(jī)妙算。