如今，大數(shù)據(jù)越來越重要，因為企業(yè)需要處理來自多個來源的不斷增長的存儲數(shù)據(jù)。
采用大數(shù)據(jù)可以稱之為一場完美風(fēng)暴。廉價的存儲和大量的結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)的大量涌入，導(dǎo)致了諸多的大型數(shù)據(jù)工具得以開發(fā)，幫助企業(yè)“解鎖”他們積累的數(shù)據(jù)，從客戶記錄到產(chǎn)品性能的結(jié)果等更多的數(shù)據(jù)。
像傳統(tǒng)的商業(yè)智能（BI），這些新的大數(shù)據(jù)工具可以分析過去的趨勢，并幫助企業(yè)識別重要模式，如特定的銷售趨勢。許多大數(shù)據(jù)工具現(xiàn)在提供了一個新一代預(yù)測和規(guī)范性的見解，以及深埋在企業(yè)數(shù)據(jù)中心的所有數(shù)據(jù)。
對于人們面臨的挑戰(zhàn)，調(diào)查機(jī)構(gòu)Gartner公司分析師道格·蘭尼表示，人們還是不要用擴(kuò)展的基礎(chǔ)設(shè)施來處理所有這些數(shù)據(jù)，而是從各種數(shù)據(jù)本身進(jìn)行處理。
“對于真正的挑戰(zhàn)，企業(yè)對自己和客戶的交易數(shù)據(jù)進(jìn)行處理、整合，并共同構(gòu)建和理解輸入，加上來自合作伙伴和供應(yīng)商的數(shù)據(jù)，還有一些外源性數(shù)據(jù)，如社會媒體的開放數(shù)據(jù)和聚合數(shù)據(jù)等等，而這些只是觸及了表面。”蘭尼在一封電子郵件中說表示。
大數(shù)據(jù)是一個大問題：您的網(wǎng)絡(luò)準(zhǔn)備好了嗎？
盡管Gartner的客戶端通過一個2比1的比例說明各種數(shù)據(jù)是一個更大的問題，對他們來說數(shù)據(jù)增長的速度越來越快，而數(shù)據(jù)處理供應(yīng)商將會繼續(xù)提供資金更大、更快的解決方案。
ConstellationResearch公司分析師道格·亨森特表示，大數(shù)據(jù)解決方案肯定是不斷發(fā)展變化的。
“在我的書中，2014年是發(fā)布SQLHadoop公告的一年，但今年企業(yè)和銷售商開始認(rèn)識到大數(shù)據(jù)的機(jī)會不只是擴(kuò)大傳統(tǒng)的BI和數(shù)據(jù)庫。”亨森特說，“因此，ApacheSpark開源框架和其他的分析方案已在2015年超越了SQL。2015年，數(shù)百家供應(yīng)商和大公司開始采用ApacheSpark開源框架，IIBM公司擁抱是倡導(dǎo)其他分析選項最明顯的廠商，而其他致力于數(shù)據(jù)集成和大數(shù)據(jù)平臺的很多企業(yè)加入這個行列。”
事實上，大數(shù)據(jù)浪潮似乎來臨，每天都會供應(yīng)商推出的各種解決方案，其中也包括一些相對全面的設(shè)計。盡管很難得到一個全面的名單，這四個工具應(yīng)該出在用戶的應(yīng)用清單中。
（1）數(shù)據(jù)科學(xué)家的H2O.ai
H2O.ai是初創(chuàng)公司Oxdata在2014年底推出的一個獨(dú)立開源機(jī)器學(xué)習(xí)平臺，主要服務(wù)于數(shù)據(jù)科學(xué)家和開發(fā)者，為其應(yīng)用提供快速機(jī)器學(xué)習(xí)引擎。Oxdata公司表示，可以在商用硬件上對任何來源（如Hadoop，SQL）的數(shù)據(jù)進(jìn)行處理分析，甚至在上千個網(wǎng)絡(luò)節(jié)點(diǎn)或亞馬遜的AWS云運(yùn)行。個人可以嘗試并繼續(xù)免費(fèi)使用H2O.ai。Oxdata公司將收取企業(yè)用戶的費(fèi)用。
“很多公司使用Spark代替Hadoop短期記憶，這就像大數(shù)據(jù)的內(nèi)存一樣。”H2O公司市場營銷和增長副總裁奧列格·羅格斯科說，“在讀取你的短期記憶方面，h20.ai的功能超越了Spark，基本上提供了超快速的分析能力。”
羅格斯科說，H2O.ai是旨在提供預(yù)測分析的數(shù)據(jù)工具的一個新品種。他指出，SQL幫助推動了描述性數(shù)據(jù)分析的早期階段或“告訴我發(fā)生了什么”，其次是“預(yù)測期”的產(chǎn)品，看看發(fā)生了什么事，盡量幫助客戶預(yù)測接下來會發(fā)生什么-例如：庫存用完或產(chǎn)品突破等。
“我們在未來幾年將看到第三個階段是指令性的階段發(fā)揮作用，這個系統(tǒng)說，‘這是我的教訓(xùn)，我認(rèn)為未來會發(fā)生什么，你應(yīng)該最大限度地實現(xiàn)目標(biāo)。’”羅格斯科說，他還指出，谷歌地圖的主動建議替代路線的能力就是一個規(guī)范性解決方案的例子。
H20.ai將自己定位為各種行業(yè)數(shù)據(jù)科學(xué)家使用的一個預(yù)測工具和“盒子”。例如，網(wǎng)絡(luò)巨頭思科公司有6萬款預(yù)測購買決策的模型，該公司使用H2O.ai對這些模型評分。思科公司首席數(shù)據(jù)科學(xué)家表示，“其結(jié)果是太棒了，我們看到H2O.ai比我們的同類產(chǎn)品的性能要好3到7倍。在單獨(dú)建模評分方面，h2o.ai環(huán)境是upwards的10到15倍。”
（2）ThoughtSpot3–大數(shù)據(jù)應(yīng)用
借助谷歌公司這樣的搜索引擎，很容易在網(wǎng)上搜到用戶需要的社交數(shù)據(jù)和網(wǎng)絡(luò)數(shù)據(jù)，但企業(yè)數(shù)據(jù)一般難以查找，也更難以利用。為此，7位工程師共同成立了ThoughtSpot公司，目標(biāo)是開發(fā)一個類似于谷歌的搜索引擎，用于查找商業(yè)數(shù)據(jù)。
該公司在谷歌公司成立初期就為其提供硬件設(shè)備，在企業(yè)啟用防火墻后提供超快搜索功能。ThoughtSpot結(jié)合了新搜索引擎的應(yīng)用，它的功能是通過一個快速內(nèi)存數(shù)據(jù)庫來搜尋海量信息。該公司還計劃提供一個基于云的服務(wù)。
ThoughtSpot3起始售價為90000美元，是一種為企業(yè)快速尋找大數(shù)據(jù)的數(shù)據(jù)科學(xué)家依賴的工具。“我們已經(jīng)看到企業(yè)使用該產(chǎn)品的數(shù)據(jù)科學(xué)家正在增加。”ThoughtSpot公司營銷副總裁史葛霍爾頓說，“二十億人都在搜索，但在工作中，我們?nèi)匀灰蕾囉跀?shù)據(jù)專家。”
霍爾頓在加利福尼亞公司總部PaloAlto進(jìn)行了一個演示，顯示系統(tǒng)使用熟悉的搜索欄界面是如何工作的.剛剛發(fā)布的ThoughtSpot3.0具有一些新功能，包括“DataRank”的工作方式，類似于谷歌的PageRank和typeahead。該軟件使用機(jī)器學(xué)習(xí)算法建議的關(guān)鍵詞為客戶搜索，以加快這一進(jìn)程。
Popcharts無疑是最酷的新功能。當(dāng)你在搜索框中輸入“由東海岸銷售......”ThoughtSpot瞬間創(chuàng)建基于查詢相關(guān)的圖表，并利用機(jī)器學(xué)習(xí)給出10多個可以選擇的圖表。
另一個“即時”功能是AutoJoins，其目的是為一般都有數(shù)百個數(shù)據(jù)源的企業(yè)導(dǎo)航。AutoJoins使用ThoughtSpot的數(shù)據(jù)索引，通過索引模式和機(jī)器學(xué)習(xí)，以了解表格是否相關(guān)，并在一秒內(nèi)呈現(xiàn)研究結(jié)果。
霍爾頓說，ThoughtSpot更側(cè)重于對歷史數(shù)據(jù)的傳統(tǒng)BI分析（速度超快，使用十分方便），其預(yù)測性和規(guī)范性分析功能會在未來的軟件中體現(xiàn)。
（3）Connotate軟件
Connotate公司是一家為美聯(lián)社、路透社、道瓊斯等大型公司對全球上千個網(wǎng)站的非結(jié)構(gòu)化數(shù)據(jù)進(jìn)行實時分類和分析的企業(yè)。在Web數(shù)據(jù)抽取和監(jiān)控上，Connotate軟件是世界上最簡單、最合算的解決方案，以有效地利用海量數(shù)據(jù)，從中挖掘出對企業(yè)增長有價值的信息，并可以進(jìn)行高度可擴(kuò)展性的數(shù)據(jù)監(jiān)控和數(shù)據(jù)收集。
Gartner公司分析師道格·萊尼表示，Connotate和BrightPlanet在他所列的大數(shù)據(jù)工具名單上，因為它們有助于從企業(yè)自身的數(shù)據(jù)庫和互聯(lián)網(wǎng)上收割和構(gòu)建豐富多彩的內(nèi)容。
“隨著數(shù)字化和經(jīng)濟(jì)增長，企業(yè)認(rèn)識到只關(guān)注自己的數(shù)據(jù)不再是萬無一失的創(chuàng)新良方，他們越來越多地轉(zhuǎn)向外源數(shù)據(jù)（即公司外部的數(shù)據(jù)）。”萊尼說。
Connotate公司表示，其從網(wǎng)頁抽取內(nèi)容的專利技術(shù)遠(yuǎn)遠(yuǎn)超出了網(wǎng)頁抓取或自定義腳本。取而代之的是對于網(wǎng)站工作如何使用機(jī)器學(xué)習(xí)采用一種直觀的視覺理解，Connotate公司表示，使其內(nèi)容提取“準(zhǔn)確可靠，并且可擴(kuò)展。”
據(jù)該公司介紹，Connotate平臺”可以很容易處理成百上千的網(wǎng)站和百萬兆字節(jié)。”并提供與業(yè)務(wù)相關(guān)的有針對性的信息。其提供的內(nèi)容采集平均成本比傳統(tǒng)方法少55％。
例舉一個使用案例，Connotate幫助銷售情報提供者從數(shù)千個醫(yī)院網(wǎng)站提取聯(lián)系人資料（姓名，職務(wù)，電話，電子郵件和隸屬關(guān)系），并建立一個全國性的醫(yī)生檔案數(shù)據(jù)庫。
Connotate公司表示，其大數(shù)據(jù)解決方案賣給了幾家大型制藥公司，并沒有花費(fèi)額外的硬件或IT資源。大數(shù)據(jù)提取的規(guī)模化，甚至可以提供50萬名醫(yī)生的數(shù)據(jù)。
（4）BrightPlanet工具
BrightPlanet公司也從網(wǎng)絡(luò)中提取數(shù)據(jù)，該公司宣稱其搜索具有所謂的“深網(wǎng)”見解的能力。其深網(wǎng)可以挖掘那些具有密碼保護(hù)的網(wǎng)站和通常不會被傳統(tǒng)的搜索引擎索引的其他網(wǎng)站的數(shù)據(jù)。
BrightPlanet公司表示，其收集的數(shù)據(jù)條目數(shù)以百萬計，其中包括推特和新聞數(shù)據(jù)庫和醫(yī)學(xué)期刊的數(shù)據(jù)，并可以根據(jù)企業(yè)的具體需求和條件進(jìn)行過濾。
該公司為使用該軟件的數(shù)據(jù)采集工程師提供一個免費(fèi)的數(shù)據(jù)即服務(wù)（DaaS）咨詢，并介紹他們的服務(wù)是一個不錯的選擇。咨詢的目的是幫助企業(yè)數(shù)據(jù)中心找到合適的收集數(shù)據(jù)，并得到正確的格式，這樣客戶可以得到一個好主意的過程和結(jié)果。
最終用戶或客戶可以選擇哪些網(wǎng)站收獲的內(nèi)容。反過來，BrightPlanet公司又將其內(nèi)容進(jìn)行充實。例如，像在社交媒體網(wǎng)站評論這樣的非結(jié)構(gòu)化數(shù)據(jù)，通過一個自定義格式設(shè)計，使其在更便于使用的客戶端提交。
京公網(wǎng)安備 11010502049343號