在Big Data LDN的一個開場主題演講中，Cloudera首席架構(gòu)師Doug Cutting討論了數(shù)據(jù)轉(zhuǎn)型在追求數(shù)字化轉(zhuǎn)型中的重要性。

不要對任何科技產(chǎn)品抱得太緊;要時常想想怎樣才能取代它。畢竟，改變才是新常態(tài)。

企業(yè)和個人都在數(shù)據(jù)的旅途上

這一數(shù)據(jù)歷程代表了我們在社會和商業(yè)中所做的大部分工作，包括娛樂，商業(yè)，政府和企業(yè)等的數(shù)字化轉(zhuǎn)型的開始。這些不同的領(lǐng)域正在以驚人的速度采用技術(shù)，這是摩爾定律50年的頂峰，畢竟現(xiàn)在硬件和軟件已經(jīng)便宜到可以廣泛使用。然而，從商業(yè)和消費者的角度來看，我們還沒有充分利用這一點。事實上，我們才剛剛開始。這是科技領(lǐng)域最激動人心的時刻，就像工業(yè)革命時期的機械化一樣;但是發(fā)生得更快，而且遍及社會的各個方面。

數(shù)據(jù)軟件

數(shù)據(jù)軟件是這場技術(shù)革命的核心，但是，它最近一直在變化。僅僅在十年前，軟件的主導風格表示國家數(shù)據(jù)庫才是王道。今天，情況完全不同了。由于我們有來自不同來源的大量數(shù)據(jù)，關(guān)系數(shù)據(jù)庫現(xiàn)在是受到限制的，因此這種風格僅限于難以連接的孤立系統(tǒng)。Cloudera的首席架構(gòu)師ddoug Cutting在大數(shù)據(jù)LDN的主題演講中表示“顛覆的時機已經(jīng)成熟，需求已經(jīng)存在。但是，很難設(shè)計出一種解決方案，并在第一次就把它做好。事實證明，數(shù)據(jù)軟件的迭代方法更好。”

開源

開源軟件提供了一種更好的方法，可以通過協(xié)作為更通用的目的開發(fā)軟件。它創(chuàng)造了巨大的優(yōu)勢，通過削減后被稱為“軟件采用的類固醇”。重要的是，開源可以被企業(yè)使用，他們逐漸意識到了這一點。“現(xiàn)在的環(huán)境已經(jīng)和十年前不同了” Cutting表示。

在hadoop之上，現(xiàn)在有很多工具可以對其進行補充和替換——例如Apache Spark。而且，還有其他的存儲引擎。一個生態(tài)系統(tǒng)正在開發(fā)，它有一個共同的線程來支持更好的軟件開發(fā)。這些新工具適用于我們現(xiàn)有的各種數(shù)據(jù)——例如物聯(lián)網(wǎng)、傳感器數(shù)據(jù)、網(wǎng)絡數(shù)據(jù)。這些不是事務性數(shù)據(jù)源，因此關(guān)系數(shù)據(jù)庫可能不是最好的工具。“現(xiàn)在的進步是一種更有成效的方式。”Cutting繼續(xù)說道。

軟件開發(fā)公司的崛起

每個行業(yè)都是由軟件驅(qū)動的，每個企業(yè)都需要成為某種軟件開發(fā)公司。這種能力或稱為轉(zhuǎn)型，將為企業(yè)及其客戶提供獨特的價值，以應對顛覆。這通常與數(shù)據(jù)軟件有關(guān)。例如，亞馬遜(Amazon)和特斯拉(Tesla)(以及其他顛覆者)圍繞數(shù)據(jù)系統(tǒng)打造自己的公司。數(shù)據(jù)將是未來商業(yè)發(fā)展的核心。

充分利用你的數(shù)據(jù)

將人工智能方法附加到數(shù)據(jù)系統(tǒng)中可能有效，但是有很多更簡單的事情可以更快速地完成:分析(“基本上是計數(shù)”)、大規(guī)模的數(shù)據(jù)倉庫、數(shù)據(jù)科學(“花式計數(shù)，聰明的數(shù)學”)、機器學習(“用反饋和迭代來計算計數(shù) - 相當進化的用例”)。你需要有良好的數(shù)據(jù)，并理解這些數(shù)據(jù)，以便上述任何一項都能發(fā)揮作用，并提供真正的見解——它告訴了你什么，而沒有告訴你什么。”大多數(shù)人都建議慢慢來而不是一下子跳進深淵。

最根本的挑戰(zhàn)

許多組織，甚至是政府，都把不斷增長的技能視為需要攀登的大山。然而，據(jù)Cutting說，“人們可以學得相當快速。技能差距不是一個深層次的問題。”

行業(yè)知識，你知道如何改進你的業(yè)務，需要數(shù)年的成長和發(fā)展:你可以在幾周內(nèi)采用技術(shù)，但需要時間來了解這種技術(shù)如何與業(yè)務目標保持一致并解決常規(guī)挑戰(zhàn)。

然而，根本的挑戰(zhàn)圍繞著思維方式的商業(yè)文化更好的利用新技術(shù)。

人們低估了組織的結(jié)構(gòu):IT是如何管理的，誰擁有等等。要充分利用這一優(yōu)勢，就必須重新思考組織、實踐和理念。

至關(guān)重要的是，企業(yè)應該授權(quán)整個組織的人使用技術(shù)來做出決策。這種自助服務系統(tǒng)的理念與數(shù)十年來的IT文化背道而馳。

問題是:企業(yè)能夠適應并利用這種優(yōu)勢嗎?

新公司發(fā)展如此之快，是因為他們從一開始就有這種需要的心態(tài)——這是對更成熟的傳統(tǒng)行業(yè)的根本挑戰(zhàn)。

相關(guān)的挑戰(zhàn)是以一種道德的方式調(diào)整組織;維護用戶的信任，并且不背叛用戶。

這只是開始

企業(yè)和政府才剛剛開始考慮如何有效地整合這些技術(shù)。重要的是，需要有更多的監(jiān)管，科技公司也需要推動。Cutting說:“如果我們想成為我們想要的數(shù)字化社會，我們就需要關(guān)注人們的權(quán)利。云計算是一個擺脫傳統(tǒng)IT組織都會遇到的限制和文化問題的好方法——它可以讓很多事情變得更簡單，并加速轉(zhuǎn)型。”

數(shù)據(jù)的旅程

在組織踏上數(shù)據(jù)之旅之際，重要的是不要把目標定得過高。商業(yè)領(lǐng)袖需要用這些技術(shù)展望未來，但不是一夜之間。這是一場緩慢的革命，一場長期的革命。“讓迭代式的成功成長和傳播，”Cutting說，首先是個小的勝利。有必要讓高層參與進來，并允許項目進行——這些轉(zhuǎn)型項目需要以開放的方式進行。這最終是一個過程，但完美是無法實現(xiàn)的。這將永遠是一個持續(xù)的旅程。“不要太緊地擁抱任何科技產(chǎn)品;而是需要時常想想我們怎樣才能取代它，保持前進。畢竟，改變才是新常態(tài)。

這是數(shù)據(jù)旅程和數(shù)字化轉(zhuǎn)型工作的開始，它將使組織得以改進; 通過獲取數(shù)據(jù)，理解數(shù)據(jù)并使用它來優(yōu)化流程。