任新勃 來(lái)源:ZD至頂網(wǎng)存儲(chǔ)頻道 【原創(chuàng)】 2016年01月05日
IT技術(shù)的進(jìn)步、互聯(lián)網(wǎng)的發(fā)展,衍生和擴(kuò)大了許多新應(yīng)用,新需求。人們的生活軌跡,工作軌跡都融入到互聯(lián)網(wǎng)中,與之產(chǎn)生了各種數(shù)據(jù),有信息、有圖片、有文檔、有視頻,在后來(lái)網(wǎng)上購(gòu)物,網(wǎng)上金融等,每個(gè)人無(wú)形中通過(guò)互聯(lián)網(wǎng)產(chǎn)生了大量的數(shù)據(jù)。那么當(dāng)全球數(shù)十億人產(chǎn)生的數(shù)據(jù)集合起來(lái)是一個(gè)什么概念?一個(gè)任何IT企業(yè)都不敢也不能處理的數(shù)據(jù)。
今天,IBM提出的大數(shù)據(jù)的5V特點(diǎn):Volume(大量)、Velocity(高速)、Variety(多樣)、Value(價(jià)值)Veracity(真實(shí)性)。
同樣來(lái)看金融行業(yè),在沒(méi)有IT設(shè)備之前就是通過(guò)大量的人力來(lái)管理數(shù)據(jù),金融行業(yè)的特性就是要求對(duì)數(shù)據(jù)的安全和一致性有著絕對(duì)的高要求。而今天互聯(lián)網(wǎng)的發(fā)展,最近更是出臺(tái)可以視頻辦理金融業(yè)務(wù)。如此更是對(duì)IT系統(tǒng)有了更高的要求。
那么如何讓金融已經(jīng)擁有的IT系統(tǒng)更好的服務(wù)今天的大數(shù)據(jù)?以及讓大數(shù)據(jù)反過(guò)來(lái)促進(jìn)金融服務(wù)降低成本,提升效率。成為今天IT面臨的問(wèn)題。
金融行業(yè)面臨兩個(gè)用戶部分,一個(gè)部分由業(yè)務(wù)/應(yīng)用用戶組成,他們?cè)噲D讓應(yīng)用程序滿足業(yè)務(wù)需求。如最基本的儲(chǔ)蓄業(yè)務(wù),以及今天的移動(dòng)支付。另一個(gè)部分是部門級(jí)或企業(yè)級(jí)的 IT 組織,他們?cè)噲D通過(guò)提供 IT 支持更有效地運(yùn)行這些應(yīng)用程序。這個(gè)就是金融系統(tǒng)的核心業(yè)務(wù)數(shù)據(jù)庫(kù)。
在業(yè)務(wù)和應(yīng)用程序用戶部分中,應(yīng)用程序越來(lái)越復(fù)雜。例如,金融產(chǎn)業(yè)的提供越來(lái)越多的應(yīng)用,就需要后臺(tái)提供更復(fù)雜的算法或添加更多的數(shù)據(jù)。
有時(shí)候當(dāng)你電話咨詢金融業(yè)務(wù)時(shí),是不是覺(jué)得客服中心很厲害,感覺(jué)她的回答完全就是針對(duì)你的問(wèn)題而來(lái)。這就是大數(shù)據(jù)的利用。當(dāng)你的電話打來(lái)時(shí),已經(jīng)不是隨機(jī)給你派送客服,而是根據(jù)你以前的業(yè)務(wù)咨詢來(lái)智能的為你提供專業(yè)的客服人員。
某銀行的附屬金融商務(wù)公司,主要業(yè)務(wù)為客戶服務(wù)中心、外呼營(yíng)銷中心、商戶收單、運(yùn)營(yíng)操作中心和資訊系統(tǒng)管理業(yè)務(wù)等非金融外包服務(wù)。所做的就是基于已有的呼叫中心歷史數(shù)據(jù),利用大數(shù)據(jù)技術(shù),服務(wù)于內(nèi)部流程優(yōu)化、生產(chǎn)運(yùn)營(yíng)管理及服務(wù)品質(zhì)提升。
Platform Computing能夠?qū)崿F(xiàn)對(duì)收集數(shù)據(jù)項(xiàng)的自定義條件的靈活查詢功能。根據(jù)對(duì)坐席界面點(diǎn)選、系統(tǒng)交易等信息的分析,形成每通電話的業(yè)務(wù)模型,從而系統(tǒng)自動(dòng)判斷來(lái)電原因。
通過(guò)分析客戶IVR使用習(xí)慣,為實(shí)施IVR菜單、路徑等優(yōu)化措施提供有效依據(jù),同時(shí)健全針對(duì)IVR的各項(xiàng)統(tǒng)計(jì)數(shù)據(jù)項(xiàng)及管理指標(biāo);依據(jù)一定規(guī)則篩選重復(fù)來(lái)電數(shù)據(jù),從通話時(shí)長(zhǎng)、來(lái)電原因、客戶信息等方面進(jìn)行分析,以提高一次解決率、防范升級(jí)投訴及服務(wù)質(zhì)量。
針對(duì)賬戶接管類風(fēng)險(xiǎn),依據(jù)歷史操作記錄分析行為軌跡,形成風(fēng)險(xiǎn)模型;篩選出風(fēng)險(xiǎn)賬戶、風(fēng)險(xiǎn)電話號(hào)碼的風(fēng)險(xiǎn)名單;業(yè)務(wù)依據(jù)風(fēng)險(xiǎn)名單通過(guò)主動(dòng)外呼等方式防范風(fēng)險(xiǎn)。
通過(guò)Platform Computing工作負(fù)載管理可以確保適當(dāng)工作負(fù)載得到適當(dāng)?shù)膬?yōu)先級(jí),然后為它們分配了適當(dāng)?shù)馁Y源。因此,首先需要了解供需雙方。才能提供正確的算法來(lái)最大程度地利用和優(yōu)化整體環(huán)境,從而交付完全自動(dòng)化和流程化的服務(wù)水平協(xié)議 (SLA)。實(shí)現(xiàn)對(duì)整體資源池的高度利用。
對(duì)于部門級(jí)或企業(yè)級(jí)的 IT 組織,所有這些復(fù)雜性促使企業(yè)需要更多的 IT 資源。通俗講就需要金融機(jī)構(gòu)花錢來(lái)買IT設(shè)備,包括存儲(chǔ)、服務(wù)器等設(shè)備以及相關(guān)服務(wù)軟件。但是對(duì)于銀行機(jī)構(gòu)來(lái)說(shuō),我每年已經(jīng)花了那么多錢,而且我的存儲(chǔ)系統(tǒng),計(jì)算能力是否飽和呢?IT設(shè)備我是需要新建,還是優(yōu)化舊有的系統(tǒng),如何整合新舊系統(tǒng)?有什么理由讓我花更多的錢呢?
比如某農(nóng)商行數(shù)據(jù)平臺(tái),新一代數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)需要建立高性能、高可靠的分析系統(tǒng)滿足對(duì)業(yè)務(wù)分析的需求,面臨這與就有的DB2 DPF數(shù)據(jù)庫(kù)系統(tǒng)以及已有的兩臺(tái)P750產(chǎn)品整合。要保障在同機(jī)房?jī)?nèi),將2套存儲(chǔ)組建成本地高可用,任意一臺(tái)發(fā)生故障,不影響上層應(yīng)用服務(wù)器使用,存儲(chǔ)設(shè)備恢復(fù)后,可實(shí)現(xiàn)2套存儲(chǔ)設(shè)備之間增量數(shù)據(jù)同步,保證數(shù)據(jù)一致性;
具備同城雙活能力,在不增加額外設(shè)備的情況下,支持將此次采購(gòu)的2套存儲(chǔ)中的其中一套直接搬運(yùn)、安裝至同城另一機(jī)房,在基礎(chǔ)通訊鏈路滿足要求的情況下,可直接實(shí)現(xiàn)同城兩個(gè)機(jī)房之間的存儲(chǔ)雙活極高的數(shù)據(jù)服務(wù)需求:配置存儲(chǔ)內(nèi)快照,跨存儲(chǔ)之間的存儲(chǔ)克隆、備份等功能,可實(shí)現(xiàn)將生產(chǎn)存儲(chǔ)設(shè)備中的數(shù)據(jù)通過(guò)克隆、備份等多種方式,向開發(fā)測(cè)試環(huán)境提供數(shù)據(jù)服務(wù);具有在線實(shí)時(shí)壓縮功能,應(yīng)對(duì)日益增長(zhǎng)的數(shù)據(jù)爆炸。
IBM Platform Computing 解決方案在分布式計(jì)算環(huán)境中為技術(shù)計(jì)算和分析提供了共享功能。 這個(gè)共享服務(wù)模型打破了筒倉(cāng)式應(yīng)用程序環(huán)境的概念,創(chuàng)建一個(gè)可供多個(gè)組使用的共享網(wǎng)格。
Platform Computing的共享服務(wù)模型提供了許多優(yōu)勢(shì)。會(huì)在一個(gè)較高的級(jí)別上為所有解決方案提供四個(gè)關(guān)鍵能力。
創(chuàng)建共享資源池,該資源池既適用于計(jì)算密集型應(yīng)用程序,也適用于數(shù)據(jù)密集型應(yīng)用程序,它實(shí)際上是異構(gòu)的資源池。該資源池包含物理的、虛擬的和云組件,為用戶提供便利。用戶并不知道他們正在使用共享網(wǎng)格。他們只知道自己需要時(shí)可以正確組合訪問(wèn)所有資源。
共享服務(wù)被傳送給多個(gè)用戶組和網(wǎng)站,很多情況下甚至可以全球傳送。可以讓用戶使用許多類型的應(yīng)用程序。靈活性對(duì)打破組織現(xiàn)有簡(jiǎn)倉(cāng)至關(guān)重要。Platform Computing提供許多管理方法確保用戶擁有正確的安全性和優(yōu)先級(jí),所有報(bào)告和分析都可以幫助用戶管理這些環(huán)境。
某銀行的數(shù)據(jù)倉(cāng)庫(kù)ETL工具采用DataStage,DataStage運(yùn)行在一個(gè)集群之上。DataStage集群在進(jìn)行數(shù)據(jù)的抽取、轉(zhuǎn)換、加載過(guò)程中,會(huì)產(chǎn)生一些中間數(shù)據(jù)和結(jié)果數(shù)據(jù),這些數(shù)據(jù)需保存在一個(gè)共享文件系統(tǒng)中。對(duì)于共享文件系統(tǒng)的要求:采用服務(wù)器掛本地盤組成分布式存儲(chǔ)資源池;可使用VMWare虛擬機(jī)作為分布式文件系統(tǒng)IO Server;集群中所有節(jié)點(diǎn)能夠高效訪問(wèn);高性能、高可靠、無(wú)限擴(kuò)展。
采用IBM的GPFS-FPO分布式文件系統(tǒng)。用VMWare虛擬機(jī)作為GPFS NSD Server。物理機(jī)掛接SAS磁盤,并直連到虛擬機(jī)上。實(shí)現(xiàn)了集群中每個(gè)節(jié)點(diǎn)可高效訪問(wèn)存儲(chǔ)資源池,不存在NAS機(jī)頭IO瓶頸。任意一個(gè)或多個(gè)節(jié)點(diǎn)故障不影響文件系統(tǒng)正常使用。能夠?qū)崿F(xiàn)容量及性能的在線橫向擴(kuò)展,不影響應(yīng)用對(duì)數(shù)據(jù)的訪問(wèn)。GPFS的多份拷貝功能,能夠滿足容災(zāi)的需求。真正實(shí)現(xiàn)存儲(chǔ)系統(tǒng)的高性能,高可靠,高擴(kuò)展以及數(shù)據(jù)備份。
Platform Computing還有一個(gè)重要的能力就是將靜態(tài)基礎(chǔ)架構(gòu)轉(zhuǎn)換為動(dòng)態(tài)基礎(chǔ)架構(gòu)。如果一個(gè)用戶擁有非專用的硬件,比如服務(wù)器或者臺(tái)式機(jī),那么可以采用智能的方式將它們加入到整體資源池中。通過(guò)內(nèi)部或者外部將工作負(fù)載分發(fā)給第三方云。還可以利用多個(gè)管理程序在某些地方利用虛擬化。用戶可以改變資源的性質(zhì),根據(jù)工作負(fù)載隊(duì)列來(lái)優(yōu)化共享系統(tǒng)的整體吞吐量。
通過(guò)案例和IBM Platform Computing 的共享計(jì)算功能來(lái)看,Platform Computing是一個(gè)管理大數(shù)據(jù)面臨的復(fù)雜計(jì)算的軟件,通俗來(lái)講就是計(jì)算密集型或者數(shù)據(jù)密集型軟件,通過(guò)優(yōu)化所有資源工作負(fù)載和大幅縮短獲得結(jié)果的時(shí)間,運(yùn)行在大型計(jì)算機(jī)網(wǎng)絡(luò)之上。
IBM Platform Computing 軟件提供了以下幾個(gè)重要優(yōu)勢(shì):
提高了利用率,因?yàn)槲覀儨p少了整個(gè)組織的 IT 簡(jiǎn)倉(cāng)數(shù)量
提高了由計(jì)算機(jī)網(wǎng)絡(luò)完成的工作的吞吐量
通過(guò)減少錯(cuò)誤數(shù)量提高了服務(wù)水平
更高的組織 IT 靈活性
特別是金融服務(wù)或風(fēng)險(xiǎn)管理。對(duì)于需要對(duì)大數(shù)據(jù)集進(jìn)行復(fù)雜分析的銀行和保險(xiǎn)公司而言,這些任務(wù)是必要任務(wù)。
在金融服務(wù)中,可以利用交易前分析 (pre-trade analysis) 和風(fēng)險(xiǎn)管理應(yīng)用程序幫助人們更好地實(shí)時(shí)制定決策。
通過(guò)IBM platform computing,讓銀行現(xiàn)有IT與新一代數(shù)據(jù)庫(kù)集合起來(lái),保障了性能和可靠性。IBM也是是唯一在功能和性能上都滿足的供應(yīng)商,同時(shí)構(gòu)建存儲(chǔ)虛擬化為基礎(chǔ)的一體化統(tǒng)一數(shù)據(jù)存儲(chǔ)/管理/運(yùn)維平臺(tái),運(yùn)用platform computing高效的數(shù)據(jù)分析資源池,滿足高性能數(shù)據(jù)分析需求,最后構(gòu)架的靈活性滿足系統(tǒng)平臺(tái)實(shí)現(xiàn)存儲(chǔ)高可用又可在未來(lái)實(shí)現(xiàn)跨站點(diǎn)的存儲(chǔ)雙活。
有關(guān)IBM platform computing對(duì)于大數(shù)據(jù)的加速應(yīng)用,請(qǐng)參考http://cio.zdnet.com.cn/special/IBM_Platform_Computing