“大數據就是在多樣的或大量的數據中快速獲取信息的能力”,”一樣的數據,不一樣的洞察”,“大數據不止是一切用數據說話,它能支持企業進行全面分析、管理、并且更加實時“。用友UAP大數據分析高級專家曾小青博士用這三句話來總結他所理解的大數據。
用友UAP大數據分析高級專家曾小青
有研究表明,決策依賴數據的公司,其運營狀況要比不重視數據的公司出色很多。數據正成為企業的一種資產,用數據驅動企業發展。同時,曾小青博士強調,企業要善于發現數據里的奧秘,因為他們看到的只是冰山一角,里面還隱藏著很多潛在的問題,或是有待挖掘的“寶藏”。即便是同一組數據,不同的企業看到的結果也不同,這取決于數據挖掘的能力。
曾小青博士告訴記者,如果對數據進行有效的深入挖掘,可以更好地進行客戶分析。比如,客戶價值的廣度管理,對客戶進行細分與流失分析。企業可以識別哪些是重要客戶,哪些是有價值的客戶或者是新來的客戶,哪些客戶可能會流失;從客戶價值的遠度,進行時間序列分析。根據客戶的歷史消費情況,以及它本身的特征,可以推測出未來的消費趨勢;客戶價值的深度管理,可實現交叉銷售分析、協同過濾推薦,深化客戶購買,挖掘客戶價值;結合結合社會網絡分析,比如,借用QQ和微信等,計算客戶的社會影響力,進行精準營銷,比如對不同影響力的客戶給予不同的優惠,并根據其偏好提供個性化的服務。
大數據可以讓企業看到他擁有的所有數據,產生快速的洞察力,進而采取最佳行動。并且,數據越挖掘越有價值??墒?,曾小青博士從近些年對大數據的研究發現,盡管大數據帶來的很大的價值,事實表明很多企業的處理能力,數據的復雜度,數據的計算方式等,都存在很多問題。比如,數據規模導致傳統算法失效,大數據復雜的數據關聯性導致高復雜度的計算;事務交易、分析和行動之間長時間延遲;復雜查詢以小時計,有時不能得到滿意的答案。
因此,從數據處理技術來看,應該由“一種架構支持所有應用”轉變成“多種架構支持多類應用”。這樣才可以及時應對企業遇到的大數據處理問題。
“傳統并行的計算朝著分布式方向發展,傳統的OldSQL變成了與NewSQL和NoSQL并行的多架構應用。在進行實時分析的時候,面臨很多挑戰”曾小青博士介紹,用友UAP做了很多的探索和創新,可以同時滿足“快”和“新”兩方面的實時要求,即不僅可以滿足數據分析的快速響應,而且是是基于最新的實時數據。“我們提供了從實時ETL到OLAP多維分析,從大數據的處理技術,比如Hadoop、spark,到數據挖掘、r語言集成分析,以及數據可視化等全方位的技術方案。”也正是因為這些技術,讓大數據得到更多細微的洞察。
記者了解到,曾小青所講的是用友UAP里面的商業分析平臺用友BQ。用友BQ利用大數據處理技術,能夠將各類數據進行快速整合,實現對海量數據的加速處理與實時分析,再通過豐富的數據可視化手段,提供商業分析決策支持所需的數據和信息,靈活快速地響應管理和業務變化,為企業和公共組織搭建一套靈活、完善的輔助決策分析體系。用友BQ采用列存、自適應壓縮、水平分區、智能索引、并行處理等技術,存儲引擎比傳統快10倍以上。
用友BQ大數據處理
用友BQ的數據挖掘架構是基于開源R平臺,有非常豐富的算法支持,算法的更新推出速度很快。里面預置了豐富的算法和模型,大大降低客戶實施數據挖掘的難度。在數據分析時,嵌入式分析,實時分析都是企業非常關心的問題。嵌入式分析可以使企業在做業務處理時體現出分析功能。曾小青博士舉了一個直觀的例子:企業在采購零件時,該選擇哪個供應商?他可以把供應商的歷史數據用圖例或表格的形式展示出來,再結合供應商評價選擇模型,并且按照企業需要的條件,比如都什么類型的零件,價格排序,供應商的區域分布等等,快速做出最佳決定。形成了分析和業務處理的閉環,充分發揮數據分析的價值。
曾小青介紹,很多大型企業基于用友BQ商業分析平臺和數據平臺,讓企業的數據變的更有價值,決策更及時更精準。陜西高速通過用友BQ商業分析與數據處理平臺,進行智能分析。通過商業分析系統完成業務數據可視化,對公司的經營預算執行情況進行監控和預警,對管理與業務決策提供數據支撐。