大數(shù)據(jù)里蘊(yùn)藏的價(jià)值,一直是從事Hadoop和相關(guān)工具開發(fā)人員遇到困難時(shí),激勵(lì)自己的一個(gè)動(dòng)力。一家大數(shù)據(jù)及服務(wù)供應(yīng)商Wikibon做過一項(xiàng)調(diào)查,指出,很多公司的技術(shù)人員往往缺乏培訓(xùn)來有效的使用復(fù)雜的Hadoop。
來自Continnuity公司的創(chuàng)始人兼CEO Jonathan Gray對(duì)此表示,培訓(xùn)的目的不是要培養(yǎng)出許多的Hadoop專家,企業(yè)應(yīng)該專注于開發(fā)更好的工具,來幫助開發(fā)人員開發(fā)大數(shù)據(jù)軟件。
Continnuity公司2年前開始建立基于Hadoop的軟件開發(fā)平臺(tái)。公司位于加州的帕洛阿爾托,目前擁有30名員工,其中三分之二是工程師。
Gray表示:“我們是一個(gè)專注于Hadoop的公司,但我們的不同點(diǎn)就在于我們更關(guān)心的是開發(fā)者。”Gray告訴記者:“我們?cè)贖adoop上已經(jīng)構(gòu)建了中間件,以及一個(gè)應(yīng)用服務(wù)器。”
在2011年Continuuity聯(lián)合Nitin Motgi(雅虎的前身)之前,Gray曾是Facebook的軟件工程師,在哪他是早期開始使用Hadoop帶領(lǐng)公司HBase工程項(xiàng)目進(jìn)行開發(fā)的人。他們的任務(wù)就是讓開發(fā)人員更容易構(gòu)建Hadoop和管理應(yīng)用程序。
在Gray看來,今天很多的企業(yè)――尤其是電信、金融服務(wù)、零售和保險(xiǎn),這些公司都在數(shù)據(jù)中游泳,他們不清楚如何從中獲利。這些公司往往都是Hadoop早期的使用者,也是最有可能從大數(shù)據(jù)軟件中獲益的企業(yè)。“那么我們做什么呢”Gray補(bǔ)充道,“我們會(huì)授權(quán)給銀行10000個(gè)開發(fā)人員,但是在這些開發(fā)人員中只有3個(gè)是Hadoop的開發(fā)人員,我們就用這些來進(jìn)行開發(fā)。”
你會(huì)發(fā)現(xiàn)有大量的人是不需要有豐富的Hadoop專業(yè)知識(shí)的,也不需要培訓(xùn)成一個(gè)成熟的數(shù)據(jù)專家。相反,我們需要的是一個(gè)強(qiáng)大的用于開發(fā)大數(shù)據(jù)軟件的工具。這是Continuuity公司希望開拓的一塊市場(chǎng)。“我們將數(shù)據(jù)專家與開發(fā)人員分離,這是兩種不同的人員,很多人有點(diǎn)過于強(qiáng)調(diào)這個(gè)等式的科學(xué)部分,而沒有足夠重視開發(fā)人員。”
在我們的生活中你會(huì)看到,硬件設(shè)備的不斷創(chuàng)新,像可穿戴設(shè)備、智能汽車、智能家居,這些所展示的正是軟件數(shù)據(jù)所驅(qū)動(dòng)的。電信公司是一個(gè)擁有大量用戶數(shù)據(jù)的位置,Gray說:“他們擁有地理數(shù)據(jù)、人口數(shù)據(jù)、網(wǎng)頁瀏覽數(shù)據(jù)??梢哉f他們有著成“噸”的數(shù)據(jù)。但有意思的是,這些公司都在問,我們?cè)趺窗堰@堆數(shù)據(jù)變成美元?”
在大數(shù)據(jù)領(lǐng)域的競(jìng)爭(zhēng)是很激烈的,有大量的風(fēng)投公司將錢砸到Hadoop的公司里。Gray強(qiáng)調(diào):“我們區(qū)別于其他的Hadoop公司的地方是注重開發(fā)人員以及我們的大數(shù)據(jù)應(yīng)用。如果你看那些傳統(tǒng)的供應(yīng)商,像Cloudera和Hortonworks,他們賣的是數(shù)據(jù)倉庫,賣的是BI分析工具。”
“當(dāng)然,BI工具有它的價(jià)值所在,但你會(huì)發(fā)現(xiàn)很少有人關(guān)注產(chǎn)品和服務(wù)的數(shù)據(jù),這些都是關(guān)于應(yīng)用的,而大部分的市場(chǎng)沒有關(guān)注這些。這對(duì)我們來說也是一個(gè)挑戰(zhàn)。”
“不過,我們很有信心,因?yàn)槲覀兿嘈糯髷?shù)據(jù)應(yīng)用是正確的。”