記者近日獲悉,恒豐銀行數據倉庫順利升級為基于Hadoop大數據技術的數據倉庫。這意味著國內銀行數據倉庫應用正式進入大數據時代。
隨著利率市場化進程加快和互聯網金融業態的飛速發展,傳統銀行與實體經濟的橫向聯系增多,信息融合進程不斷加快,商業銀行的業務數據洞察能力迫切需要得到提升。
恒豐銀行作為一家全國性股份制商業銀行,處于快速發展的新階段,業務模式的創新離不開數據的支持,也對企業數據信息服務的總體能力提出了更高要求。為貫徹“國際化、信息化、精細化、科技化、人才化”發展戰略思想,新的IT五年規劃明確提出要基于大數據、云計算技術構建全新的IT系統架構平臺,用大數據思維升級改造原有的渠道服務、授信管理、內部審計、客戶管理等應用系統,在客戶服務、風險管理、內部管控、流程優化、營銷管理等多個業務領域提升恒豐銀行的運營效率和市場競爭力。
經過大量的產品調研和技術預研,并花費三個月時間與相關廠商進行技術交流和嚴格的產品POC測試,恒豐銀行最終選擇星環科技公司作為大數據技術領域的戰略合作伙伴,共同打造企業級大數據應用平臺。做出該選擇主要基于如下兩點因素:
1)TDH產品融合了Hadoop/Spark相關技術特點,支持在X86集群搭建開放和高度并行化的數據處理平臺,表現出更好的性能優勢,總體技術方案具備更高性價比;既能適應高并發低延遲的移動互聯網實時數據檢索需求,又能滿足大體量數據的統計分析與業務建模需求,為企業級數據應用提供了一棧式的平臺解決方案。
2)星環科技公司作為一家國內高科技軟件企業,具備很強的自主研和服務支持能力,能較好地理解企業數據應用的復雜需求,較快地實現企業級應用所需的新產品特性,更好地支持企業應用創新。
由于TDH產品較好地支持了SQL2003標準和PL/SQL語法,恒豐銀行大數據應用項目團隊從2015年5月開始,僅僅花了幾十天時間,就順利完成了數據倉庫平臺從Oracle產品到TDH大數據產品的遷移工作。新的企業數據倉庫平臺,硬件投資僅為原來的三分之一,整體處理能力卻獲得了5-10倍的提升,解決了商業銀行數據應用困擾多時的若干問題:
1)以往受限于單臺服務器縱向升級代價太高,各應用系統的數據集市往往物理資源上獨立配置不能共享,造成重復存儲的冗余數據和較多信息孤島,加大了總體硬件資源投入成本。TDH產品可實現硬件資源橫向擴展,并在同一服務集群上有效獨立分配內存、CPU等各應用所需硬件資源。TDH可以在一套大數據平臺上搭建多個應用集市來滿足多個應用系統的處理需要,同時解決大體量數據統計分析應用響應很慢的問題,極大減輕各應用系統現有數據庫的處理資源瓶頸問題。
2)在TDH產品之上構建的業務數據探索集群,整合了數據可視化軟件和星環公司基于R-Studio開發的可視化并行數據挖掘工具,恒豐銀行業務團隊第一次具備了T+1時效的自主數據分析和快速業務建模能力
TDH平臺整體架構及功能性堪比硅谷同行,在國內獨樹一幟,于世界也處于領先水平。