在2018年之前可能只有一少部分人在談“中臺(tái)”,從2018年下半年開始,隨著“BAJT”這些互聯(lián)網(wǎng)頭部公司的追捧,“中臺(tái)戰(zhàn)略”在中國(guó)迅速火了起來。2019 年的科技圈,最火概念之一就是「數(shù)據(jù)中臺(tái)」,也有人將2019年稱之為「數(shù)據(jù)中臺(tái)」的元年。
2018 年 9 月,騰訊宣布新成立云與智慧產(chǎn)業(yè)事業(yè)群(CSIG)和技術(shù)委員會(huì),后者將負(fù)責(zé)打造技術(shù)中臺(tái)。
2018 年 11 月,阿里云事業(yè)群升級(jí)為阿里云與智能事業(yè)群,并開始對(duì)外輸出中臺(tái)能力。
2018 年12月,百度調(diào)整組織架構(gòu),由百度創(chuàng)始人、董事長(zhǎng)李彥宏發(fā)信宣布:“百度將打造AI時(shí)代最領(lǐng)先的技術(shù)平臺(tái),實(shí)現(xiàn)前端業(yè)務(wù)和技術(shù)平臺(tái)的資源高效統(tǒng)籌及組織全面協(xié)同。”
緊接著,2019年初,京東集團(tuán)人力資源部發(fā)布關(guān)于京東商城組織架構(gòu)調(diào)整的公告,公告內(nèi)容稱:“在新的組織架構(gòu)下,京東商城將圍繞以客戶為中心,劃分為前中后臺(tái)。中臺(tái)為前臺(tái)業(yè)務(wù)運(yùn)營(yíng)和創(chuàng)新提供專業(yè)能力的共享平臺(tái)職能。”
據(jù)知名調(diào)研機(jī)構(gòu)Canalys2019年2月的相關(guān)數(shù)據(jù)報(bào)告,2018年全球云計(jì)算市場(chǎng)規(guī)模突破800億美元,達(dá)到804億美元,未來10-15年,“數(shù)據(jù)中臺(tái)”也許會(huì)超越今天的云計(jì)算市場(chǎng),形成一個(gè)萬億級(jí)市場(chǎng),同時(shí)中國(guó)也將誕生1—2家SAP級(jí)別企業(yè)。
這股數(shù)據(jù)中臺(tái)熱,讓很多科技企業(yè)都看到了這個(gè)「風(fēng)口」,相繼開啟了數(shù)據(jù)中臺(tái)的市場(chǎng)爭(zhēng)奪戰(zhàn),都希望成為那頭站在風(fēng)口插上翅膀的「豬」。在這股數(shù)據(jù)中臺(tái)熱之風(fēng)之下,很多企業(yè)也都躍躍欲試,希望借助數(shù)據(jù)中臺(tái)驅(qū)動(dòng)企業(yè)管理和業(yè)務(wù)創(chuàng)新,譜寫出一個(gè)造富神話。
二、數(shù)據(jù)中臺(tái)是什么?
- 有人說:數(shù)據(jù)中臺(tái)就是一個(gè)加強(qiáng)版的數(shù)據(jù)倉(cāng)庫(kù);
- 有人說:數(shù)據(jù)中臺(tái)是大數(shù)據(jù)平臺(tái)的延伸,是大數(shù)據(jù)的下一站;
- 有人說:數(shù)據(jù)中臺(tái)是數(shù)據(jù)資產(chǎn)的治理和應(yīng)用的平臺(tái);
- 有人說:數(shù)據(jù)中臺(tái)是提供場(chǎng)景驅(qū)動(dòng)的數(shù)據(jù)API、智能API的能力平臺(tái);
- 有人說:數(shù)據(jù)中臺(tái)是對(duì)內(nèi)進(jìn)行數(shù)據(jù)共享、對(duì)外提供數(shù)據(jù)開放的數(shù)據(jù)服務(wù)平臺(tái);
阿里的客戶畫像、產(chǎn)品推薦引擎,強(qiáng)調(diào)“千人前面”。在筆者看來「數(shù)據(jù)中臺(tái)」也應(yīng)當(dāng)是“千人千面”的,以上對(duì)于說法都有道理,都正確,只是在不同的應(yīng)用需求場(chǎng)景下的不同定義而已,不同的行業(yè)、不同的企業(yè)、不同的業(yè)務(wù),所需要的數(shù)據(jù)中臺(tái)并不同。
三、什么樣的企業(yè)需要數(shù)據(jù)中臺(tái)?
要說清楚哪些企業(yè)需要數(shù)據(jù)中臺(tái),我們不妨先看看都哪些企業(yè)在做數(shù)據(jù)中臺(tái)。
如上文,數(shù)據(jù)中臺(tái)的主要推動(dòng)力量首先是“BAJT”這些互聯(lián)網(wǎng)頭部公司;其次,部分大金融公司,例如興業(yè)銀行也在調(diào)整組織架構(gòu),建設(shè)數(shù)據(jù)中臺(tái)、推動(dòng)“互聯(lián)網(wǎng)+金融”的落地;第三,還有一些大型快消品的零售企業(yè)正在進(jìn)行數(shù)據(jù)中臺(tái)的探索,例如:百果園、耐克。我們不難發(fā)現(xiàn)不論是互聯(lián)網(wǎng)公司、大型金融企業(yè)(銀行、保險(xiǎn)公司)還是大型的零售企業(yè),他們都有以下幾個(gè)共同的特點(diǎn):
1、互聯(lián)網(wǎng)+
金融公司、品牌營(yíng)銷企業(yè)、電信運(yùn)營(yíng)商、大型零售企業(yè),以及BAJT等互聯(lián)網(wǎng)公司,這些企業(yè)不是原生的互聯(lián)網(wǎng)企業(yè)就是通過轉(zhuǎn)型基于互聯(lián)網(wǎng)來開展業(yè)務(wù)的企業(yè)。基于互聯(lián)網(wǎng)開展相關(guān)的業(yè)務(wù),尤其是移動(dòng)互聯(lián)網(wǎng)的應(yīng)用為企業(yè)的需求端(市場(chǎng)和銷售)帶來了更多的機(jī)遇和挑戰(zhàn)。互聯(lián)網(wǎng)+,讓企業(yè)有了驅(qū)動(dòng)創(chuàng)新、跨界融合、重塑生態(tài)的可能,企業(yè)將可共享業(yè)務(wù)能力的提煉和可沉淀的數(shù)據(jù)資產(chǎn)放在一起,構(gòu)建數(shù)據(jù)中臺(tái),以應(yīng)對(duì)前端多變的競(jìng)爭(zhēng)環(huán)境。數(shù)據(jù)中臺(tái)的建設(shè)對(duì)互聯(lián)網(wǎng)+下的企業(yè)人才、組織、服務(wù)、產(chǎn)品以及商業(yè)模式的創(chuàng)新、企業(yè)跨界融合和產(chǎn)業(yè)鏈的打通,重塑企業(yè)競(jìng)爭(zhēng)生態(tài)將起到基礎(chǔ)支撐作用。
2、數(shù)據(jù)量大
不論是金融、保險(xiǎn)、證券、電信運(yùn)營(yíng)商這類大型企業(yè),還是不“BAJT”這類大的互聯(lián)網(wǎng)公司,他們都是IT建設(shè)較早、多年來沉淀了大量的數(shù)據(jù)資產(chǎn)。如果要給這類企業(yè)打個(gè)標(biāo)簽的話“大數(shù)據(jù)”無疑是其中一個(gè)重要標(biāo)簽,此類企業(yè)的日產(chǎn)生數(shù)據(jù)量是以每天TB級(jí)別計(jì)算的;而這些數(shù)據(jù)來源也比較復(fù)雜,有的是來自企業(yè)內(nèi)部的各相關(guān)系統(tǒng),有的是從外部采集/采購(gòu)過來的數(shù)據(jù);數(shù)據(jù)形態(tài)是多樣的,呈現(xiàn)出結(jié)構(gòu)化/半結(jié)構(gòu)化/非結(jié)構(gòu)化數(shù)據(jù),實(shí)時(shí)/非實(shí)時(shí)數(shù)據(jù)并存的狀態(tài)。企業(yè)需要通過對(duì)數(shù)據(jù)進(jìn)行加工處理,形成高質(zhì)量的數(shù)據(jù)服務(wù),賦能業(yè)務(wù)、突破業(yè)務(wù)瓶頸,驅(qū)動(dòng)業(yè)務(wù)創(chuàng)新、釋放數(shù)據(jù)價(jià)值,數(shù)據(jù)中臺(tái)無疑是這類企業(yè)非常合適的解決方案。
3、IT能力強(qiáng)
企業(yè)的IT能力主要從三個(gè)方面評(píng)價(jià),①IT基礎(chǔ)設(shè)施的建設(shè)情況,網(wǎng)絡(luò)、云計(jì)算、應(yīng)用系統(tǒng)的建設(shè)情況;②IT組織與人才隊(duì)伍建設(shè)情況,IT人員占比、能力分布;③IT規(guī)模、信息化應(yīng)用水平以及ROI等。大概在8年前,工商銀行在實(shí)施統(tǒng)一開發(fā)平臺(tái)時(shí),當(dāng)時(shí)的IT技術(shù)人員規(guī)模就有2000多人,為工商銀行提供開發(fā)、實(shí)施、運(yùn)維等IT服務(wù)。這2000多人包括了工商銀行自身的IT團(tuán)隊(duì)和外包的信息化人員,從IT人員占比上來說像工商銀行這樣的企業(yè)就不是普通企業(yè)能夠比擬的。對(duì)于互聯(lián)網(wǎng)公司,可以說至少80%以上都是IT人員。所以,不論是金融、運(yùn)營(yíng)商還是互聯(lián)網(wǎng)公司,這些企業(yè)自身的IT能力都特別強(qiáng),強(qiáng)大的IT能力有利于推動(dòng)IT架構(gòu)的改進(jìn)和共性能力的沉淀。
4、組織機(jī)構(gòu)靈活
企業(yè)建設(shè)數(shù)據(jù)中臺(tái),最核心的是在企業(yè)級(jí)復(fù)用數(shù)據(jù)中臺(tái)的服務(wù)能力和共享數(shù)據(jù),而這些服務(wù)能否被有效復(fù)用,數(shù)據(jù)能否被有效共享,很大程度上取決于企業(yè)文化和組織體系的建設(shè)。筆者曾經(jīng)接觸過一個(gè)國(guó)內(nèi)大型集成商企業(yè),工作原因和該企業(yè)的多個(gè)部門都一些的往來,發(fā)現(xiàn)這家企業(yè)的每個(gè)部門都在搞自己的一套“基礎(chǔ)技術(shù)平臺(tái)”(可以理解為現(xiàn)在的技術(shù)中臺(tái))。對(duì)于“基礎(chǔ)技術(shù)平臺(tái)”他們各部門的定位和理解是比較一致的——提供各種底層基礎(chǔ)功能,為業(yè)務(wù)應(yīng)用的開發(fā)提供支撐。但每個(gè)部門都有自己的想法,搞法也不相同,有的是自己招人建團(tuán)隊(duì)在做,有的是采購(gòu)第三方供應(yīng)商產(chǎn)品。這家企業(yè)是典型的組織層級(jí)較深,組織間各種為政,這與“數(shù)據(jù)中臺(tái)”要求的靈活的組織體系是不符的,在不調(diào)整組織架構(gòu)的情況下,“數(shù)據(jù)中臺(tái)”也很難在該類企業(yè)落地。
四、數(shù)據(jù)中臺(tái)的演進(jìn)史
按照著名的“諾蘭模型”,「數(shù)據(jù)中臺(tái)」的產(chǎn)生并不是意外,而是信息技術(shù)發(fā)展的必然產(chǎn)物,而「數(shù)據(jù)中臺(tái)」也并非是一個(gè)新生的事物,按照「中臺(tái)」的核心思想“提供共性能力和共享數(shù)據(jù)的服務(wù)平臺(tái)”,不論是傳統(tǒng)的SOA、還是數(shù)據(jù)倉(cāng)庫(kù),其本質(zhì)的思想并沒有改變,只是隨著技術(shù)的發(fā)展,時(shí)代賦予了「數(shù)據(jù)中臺(tái)」的能力和職責(zé)更為明確和智能了。
按照“諾蘭模型”,「數(shù)據(jù)中臺(tái)」的演進(jìn)經(jīng)歷了以下階段:
1、單體應(yīng)用期
數(shù)據(jù)業(yè)務(wù)化并不神秘,它就是我們常說的信息化時(shí)期,這個(gè)時(shí)期是企業(yè)信息化從起步到建設(shè)的時(shí)期,會(huì)計(jì)電算化(核心是財(cái)務(wù)系統(tǒng)的建設(shè))、辦公自動(dòng)化(核心是OA系統(tǒng)的建設(shè))、企業(yè)資源規(guī)劃(ERP系統(tǒng)的建設(shè))……都是這個(gè)時(shí)期的產(chǎn)物。隨著信息系統(tǒng)的建設(shè)和應(yīng)用,數(shù)據(jù)也在企業(yè)逐步沉淀了下來。
信息化初期,數(shù)據(jù)庫(kù)是「數(shù)據(jù)中臺(tái)」的原始形態(tài),為應(yīng)用系統(tǒng)的提供數(shù)據(jù)的存儲(chǔ)。
2、數(shù)據(jù)集成期
隨著信息系統(tǒng)的建設(shè)和應(yīng)用,人們發(fā)現(xiàn)一個(gè)問題:以前的系統(tǒng)建設(shè)都是業(yè)務(wù)部門驅(qū)動(dòng)的,缺乏整體的規(guī)劃,各系統(tǒng)各自為政,標(biāo)準(zhǔn)不統(tǒng)一,形成了一個(gè)個(gè)煙囪式的孤島。企業(yè)業(yè)務(wù)的發(fā)展需要各應(yīng)用系統(tǒng)的協(xié)同,然而各系統(tǒng)從服務(wù)、流程、數(shù)據(jù)等層面都是割裂的,根本無法協(xié)同。領(lǐng)導(dǎo)想看企業(yè)的經(jīng)營(yíng)指標(biāo),需要切換到不同的系統(tǒng)才能看到,十分繁瑣且報(bào)表質(zhì)量無法保證。于是,就出現(xiàn)了以SOA為代表的各類系統(tǒng)集成工具和數(shù)據(jù)管理系統(tǒng),例如:Potal、ESB、BPM、DW、ETL、MDM等。
信息化中期,「數(shù)據(jù)中臺(tái)」的初步形態(tài)已經(jīng)顯現(xiàn),并表現(xiàn)為:以Potal、ESB、BPM為代表的企業(yè)級(jí)應(yīng)用集成;以主數(shù)據(jù)管理(MDM)、元數(shù)據(jù)管理為代表的數(shù)據(jù)治理;以數(shù)據(jù)倉(cāng)庫(kù)為代表的數(shù)據(jù)集中處理和初步的數(shù)據(jù)分析;SOA系列產(chǎn)品和工具的使用,一定程度上解決了企業(yè)的業(yè)務(wù)協(xié)同和報(bào)表分析的問題。
3、數(shù)據(jù)平臺(tái)期
隨著物聯(lián)網(wǎng)、社交網(wǎng)絡(luò)、云計(jì)算等技術(shù)不斷融入我們的生活以及現(xiàn)有的計(jì)算能力、存儲(chǔ)空間、網(wǎng)絡(luò)帶寬的高速發(fā)展,人類積累的數(shù)據(jù)在互聯(lián)網(wǎng)、通信、金融、商業(yè)、醫(yī)療等諸多領(lǐng)域不斷地增長(zhǎng)和累積。互聯(lián)網(wǎng)搜索引擎支持的數(shù)十億次web搜索每天處理數(shù)萬TB字節(jié)數(shù)據(jù)。全世界通信網(wǎng)的主干網(wǎng)上一天就有萬TB字節(jié)數(shù)據(jù)在傳輸。現(xiàn)代醫(yī)療行業(yè)如醫(yī)院、藥店等也都每天產(chǎn)生龐大的數(shù)據(jù)量如醫(yī)療記錄、病人資料、醫(yī)療圖像等。數(shù)據(jù)的量級(jí)不斷升級(jí)、應(yīng)用的不斷深入和大數(shù)據(jù)不可忽視的價(jià)值讓我們不得不探索如何才能讓我們更好的受益于這些數(shù)據(jù)。阿里巴巴馬云指出:“人類正從IT時(shí)代走向DT時(shí)代!”。但隨著數(shù)據(jù)越來越多,人們意識(shí)到,數(shù)據(jù)標(biāo)準(zhǔn)的不統(tǒng)一,垃圾數(shù)據(jù)的存在,讓系統(tǒng)集成起來困難重重,分析結(jié)果無法保證。終于,有人提出:大數(shù)據(jù)也許并非是企業(yè)資產(chǎn),如果不將數(shù)據(jù)治理做好,大數(shù)據(jù)只會(huì)是企業(yè)的包袱(數(shù)據(jù)的存儲(chǔ)、處理、管理維護(hù)都需要成本),而只有“數(shù)據(jù)資產(chǎn)化”才能為企業(yè)帶來價(jià)值。
信息化末期,人類正從IT時(shí)代走向DT時(shí)代。以Hadoop平臺(tái)、Spark平臺(tái)等為代表的大數(shù)據(jù)平臺(tái)在解決企業(yè)大數(shù)據(jù)的存儲(chǔ)和計(jì)算上提供基礎(chǔ)支撐;以元數(shù)據(jù)驅(qū)動(dòng)的大數(shù)據(jù)治理平臺(tái)實(shí)現(xiàn)大數(shù)據(jù)地圖的自動(dòng)生成,數(shù)據(jù)血緣分析、影響分析,一定程度上解決了大數(shù)據(jù)環(huán)境下的數(shù)據(jù)質(zhì)量問題。
4、智慧應(yīng)用期
在信息化時(shí)代,IT在企業(yè)中一直起的是業(yè)務(wù)支撐的作用,扮演的是配角的角色,當(dāng)然互聯(lián)網(wǎng)公司除外。而當(dāng)企業(yè)進(jìn)入數(shù)字化時(shí)代,企業(yè)的業(yè)務(wù)和管理是一切看數(shù)據(jù)說話,看數(shù)據(jù)作業(yè)、看數(shù)據(jù)決策,數(shù)據(jù)是驅(qū)動(dòng)整個(gè)企業(yè)的業(yè)務(wù)和管理的基礎(chǔ)引擎。IT的角色從配角走上了主角的舞臺(tái),“IT即業(yè)務(wù)”。進(jìn)入數(shù)字化時(shí)代,企業(yè)對(duì)于用數(shù)需求越來越高:以往看不見的數(shù)據(jù),現(xiàn)在希望隨時(shí)隨地實(shí)時(shí)查看;以往可能需要在不同系統(tǒng)才能看到的數(shù)據(jù),現(xiàn)在希望能夠組合成一個(gè)場(chǎng)景進(jìn)行展示;以往決策分析必須要到BI系統(tǒng)中看報(bào)表,現(xiàn)在希望在業(yè)務(wù)流程環(huán)節(jié)就能夠展示相關(guān)的數(shù)據(jù)報(bào)表;以往的數(shù)據(jù)分析只能是對(duì)歷史數(shù)據(jù)的可視化展現(xiàn),做好一點(diǎn)的能夠診斷部分業(yè)務(wù)問題,現(xiàn)在不僅需要看到歷史的數(shù)據(jù)、業(yè)務(wù)問題分析診斷,還要能夠?qū)ξ磥砑磳l(fā)生的事進(jìn)行預(yù)測(cè)……
數(shù)字化時(shí)代,「數(shù)據(jù)中臺(tái)」繼承了大數(shù)據(jù)平臺(tái)的海量數(shù)據(jù)存儲(chǔ)和技術(shù)的能力,提供數(shù)據(jù)算力服務(wù);繼承了元數(shù)據(jù)管理、主數(shù)據(jù)管理的數(shù)據(jù)治理能力,提供數(shù)據(jù)資產(chǎn)的全生命周期管理服務(wù);繼承了數(shù)據(jù)倉(cāng)庫(kù)的數(shù)據(jù)集成和分析能力,提供數(shù)據(jù)報(bào)表、數(shù)據(jù)分析服務(wù);同時(shí),「數(shù)據(jù)中臺(tái)」內(nèi)置的算法中心、標(biāo)簽體系,提供各種AI服務(wù),支持將數(shù)據(jù)場(chǎng)景化、智能化,全面驅(qū)動(dòng)企業(yè)的業(yè)務(wù)智能、決策智慧,幫助企業(yè)實(shí)現(xiàn)數(shù)字化轉(zhuǎn)型。
五、你的企業(yè)真的需要數(shù)據(jù)中臺(tái)嗎?
我們看到目前追捧「數(shù)據(jù)中臺(tái)」的互聯(lián)網(wǎng)公司、金融公司、運(yùn)營(yíng)商、大型零售企業(yè),他們有四個(gè)共同的特點(diǎn):互聯(lián)網(wǎng)+下需求端的業(yè)務(wù)多變;數(shù)據(jù)體量大;IT能力強(qiáng);組織機(jī)構(gòu)靈活。
- 有人問:“我們企業(yè)數(shù)據(jù)量沒有那么大,IT人員沒那么多,組織模式也比較固定,那我們是否需要建設(shè)數(shù)據(jù)中臺(tái)?”
- 有人問:“我們企業(yè)已經(jīng)建設(shè)了數(shù)據(jù)倉(cāng)庫(kù),實(shí)現(xiàn)了數(shù)據(jù)服務(wù)和數(shù)據(jù)分析,還有必要建設(shè)數(shù)據(jù)中臺(tái)嗎,需要怎么建、推到重來嗎?”
- 有人問:“我們企業(yè)是工業(yè)生產(chǎn)企業(yè),數(shù)據(jù)量是大,但多數(shù)是設(shè)計(jì)圖紙等非結(jié)構(gòu)化數(shù)據(jù)和生產(chǎn)設(shè)備的邊緣數(shù)據(jù);我們的產(chǎn)品屬于賣方市場(chǎng),產(chǎn)品不需要通過互聯(lián)網(wǎng)銷售,需求端的變化不大,那我們是否需要數(shù)據(jù)中臺(tái)?”
我們帶著這些問題,我們回到本文的主題:數(shù)據(jù)中臺(tái)“熱”下的“冷思考”。之所以“冷思考”,就是不能人云亦云,盲目跟風(fēng),而是要謹(jǐn)慎思考和對(duì)待。
- 數(shù)據(jù)中臺(tái)建設(shè)不是“照葫蘆畫瓢”生搬硬套,不同性質(zhì)、不同領(lǐng)域的數(shù)據(jù)中臺(tái)能長(zhǎng)的一樣嗎?顯然不是!
- 數(shù)據(jù)中臺(tái)建設(shè)需要將之前信息化建設(shè)成果推翻,重頭構(gòu)架?浪費(fèi)資源!
- 數(shù)據(jù)中臺(tái)建設(shè)采購(gòu)一套強(qiáng)大功能的數(shù)據(jù)中臺(tái)產(chǎn)品就能包治百病?哪有那么好的事!
從「數(shù)據(jù)中臺(tái)」的演進(jìn)史來看,它是信息化發(fā)展的必然產(chǎn)物,或許「數(shù)據(jù)中臺(tái)」是每個(gè)企業(yè)都需要的,只是不同的行業(yè)、不同的企業(yè)、不同的業(yè)務(wù),所需要的數(shù)據(jù)中臺(tái)并不同。互聯(lián)網(wǎng)企業(yè)的數(shù)據(jù)中臺(tái)再牛也并不一定適應(yīng)傳統(tǒng)工業(yè)企業(yè);而工業(yè)互聯(lián)的大數(shù)據(jù)平臺(tái)卻也是數(shù)據(jù)中臺(tái)的一種形態(tài)或基礎(chǔ)能力;數(shù)據(jù)中臺(tái)的建設(shè),技術(shù)和工具固然重要但也不能過于迷信;企業(yè)建設(shè)數(shù)據(jù)中臺(tái)還是應(yīng)當(dāng)從企業(yè)的業(yè)務(wù)需求出發(fā)構(gòu)建與企業(yè)相匹配的一套數(shù)據(jù)應(yīng)用的流程機(jī)制。
作者:石秀峰 專注于數(shù)據(jù)領(lǐng)域知識(shí)分享:數(shù)據(jù)治理,數(shù)字化轉(zhuǎn)型,數(shù)據(jù)分析等