前不久貴陽召開的國際大數據產業博覽會將人們對大數據的關注再一次點燃,近些年隨著數據的爆炸式增長,人們對數據的重視程度提升到了前所未有的高度。數據世界上最新的自然資源,如何利用好數據是致勝的關鍵。那些能夠從所有數據中快速獲得洞察,并將分析融入方方面面的組織,往往能夠獲得競爭優勢。
IBM作為一家IT領域中極具重量級的廠商,自然敏銳的捕捉到用戶對大數據的需求,早在2000年,IBM就推出了Symphony SOA網格計算中間件,2008年開始支持MapReduce,2010年支持Hadoop。如今,IBM堅持走開放路線,對業界主流的開源技術廣泛支持。如支持Linux、Hadoop、KVM、NoSQL和Mango DB等。更推出了PowerLinux服務器及OpenPOWER生態聯盟,將POWER架構的性能與可靠性優勢,與開源技術相結合,推出了一系列讓人耳目一新的云和大數據解決方案。與人們對IBM所持的“專有”、“封閉”的固有印象不同的是,IBM早在2001年就啟動了對Linux的支持計劃,并在十年間兩次投資10億美元到支持Linux。IBM的Linux on Power正帶給我們一種全新的思路和選擇。
為了讓廣大用戶對Linux on POWER有更深入的了解,51CTO與IBM一起在全國各地開展了一系列Linux on POWER體驗營開放日活動,IBM專家將在現場分享IBM專業技術并為現場觀眾進行技術演示。今天上午,體驗營開放日活動的首站在深圳成功舉辦。之所以第一站就選在深圳,也是被深圳在IT領域中的創造力和反應速度所吸引。深圳本地誕生出了很多著名的IT公司,具有非常濃厚的IT技術氣氛。
上午的體驗營活動以大數據話題為主題。活動一開始,資深媒體人田野作為本場活動的主持人就與一位來自神州數碼的用戶進行互動。分析出現在對大數據感興趣的用戶主要集中在三種類型:一類是高帥富型,這種企業擁有自己的技術人員和IT架構,可以自己實施部署大數據平臺。另一類是平民型,企業沒有很強大的技術團隊做支撐,需要專業的IT廠商來幫助自己部署大數據平臺。第三類是擁有一定資金和技術人員,但是每天面臨大量的數據,非常頭疼怎么存放這些數據,以及在這些數據中怎樣挖掘對自己有價值的數據。
面對這些不同的用戶,IBM技術專家為用戶帶來了IBM POWER架構在大數據各個領域中的創新和解決方案,帶領用戶重新認知了Linux on POWER。
IBM的系統架構師孫建分享了主題為《贏在開源 全堆棧Hadoop計算 認知及預測解決方案》的演講,從大數據及分析角度,為企業介紹了提供安全訪問、趨勢建模(模擬各種場景)、預測潛在威脅和商機且監控業績等解決方案。
IBM推出了大數據平臺實現架構,這個架構分為物理層、文件層、計算層、工具層和應用層,覆蓋了大數據涉及到的所有領域,是一個完整的大數據架構平臺。
IBM系統架構師賈子軒在隨后的分享中,探究Linux on Power的NoSQL解決方案,介紹了Linux on Power在NOSQL領域的成果和解決方案。他表示,NoSQL及Redis廣泛應用于中國互聯網企業,互聯網技術的發展,促進了分布式計算和應用的急速發展,技術架構演進促進了數據類型的演化,大數據類型的多元化急劇增長,傳統關系型SQL不滿足技術架構的適用性,NOSQL應用而生。
新浪微博就是一個非常好的應用案例,在微博中有一個計數器,贊轉評就是一個典型的大數據應用,Redis幫助實現了這一功能。此外,京東商城、騰訊、百度貼吧、嘀嘀打車都是應用了NoSQL方式。
但傳統NoSQL架構現在也面臨著挑戰,在橫向擴展時X86服務器內存容量受到限制,性能提升的瓶頸和集群可靠性的缺失,大規模橫向擴展帶來的成本不可控及復雜架構的可用性,處理能力及負載密度提升帶來了高成本。
IBM PowerSolution For NoSQL利用POWER 8服務器和Flash存儲,用內存+閃存替代,降低了內存成本。同時POWER RAS對比X86提供了高可用性和高可擴展性,POWER8 新特性CAPI技術將內存使用擴展到了緩存系統。此外,還擁有更少的管理成本、電力消耗和空間占用。
POWER 8的極速三劍客CAPI+FLASH+Redis實現了唯快至上的性能,構成了IBM NoSQL整體解決方案。
除了對開源技術和架構的支持外,POWER與IBM自家的DB2也進行了更多優化,更好地支持大數據應用環境。IBM資深架構師胡云飛在《贏在敏捷洞察 重新定義DB2 BLU數據管理》的演講中,介紹了DB2 BLU在分析查詢類業務中的七大技術特點:簡單易用、卓越的壓縮、充分利用CPU的SIMD特性、內核友好的并行化、優化內存緩存管理、數據跳過、列式存儲,擁有更快更容易的數據集市分析。重點突出添加列式功能的新技術、高速運行及壓縮等,并分享DB2 BLU給企業帶來的IT價值。
DB2 10.5 BLU版本針對POWER服務器進行了優化,列存儲后的數據在存儲的時候會充分考慮寄存器的大小,也會利用SIMD處理指令獲得更好的性能。此外,針對POWER的架構會使用一個為POWER特別優化過的單獨動態鏈接庫。
現場用戶與IBM專家交流
現場用戶向IBM專家提問
現場用戶在認真做筆記
在與現場用戶溝通時,記者發現參加活動的很多用戶都是來自于金融行業、傳統制造業和互聯網行業,他們中有很多都是POWER架構的忠實用戶,非常關注在POWER架構下如何支持大數據應用和Linux應用,通過本次活動獲得了POWER架構的最新訊息,加深了對POWER的認知和信心。
與其埋首于電腦前紙上談兵,不如現場觀摩實戰操練! 6月16日,武漢,Linux on Power 體驗營等你來!
《云領創新 Linux on Power體驗營》報名參加
《開放數據源動力 Linux on Power體驗營》報名參加