然而,玩轉“大數(shù)據(jù)”是需要云計算技術在數(shù)據(jù)存儲管理與分析等方面的強力支撐的。而作為全球領先的云計算服務提供商,亞馬遜AWS在面對大數(shù)據(jù)趨勢時表現(xiàn)得更加從容和淡定。亞馬遜AWS擁有最完整的大數(shù)據(jù)平臺,可提供一個廣泛的托管服務,幫助用戶快速、輕松地構建并保護大數(shù)據(jù)應用程序。無論用戶的應用程序是需要實時流式處理、批量數(shù)據(jù)處理,亦或是需要結構化數(shù)據(jù)和非結構化數(shù)據(jù),亞馬遜AWS都能提供完善的基礎設施和工具來處理用戶的大數(shù)據(jù)項目。下面的三個案例可以說明亞馬遜AWS在大數(shù)據(jù)處理和應用上所具有的價值和貢獻。
幫助頂級視頻網(wǎng)站應對內容暴增挑戰(zhàn)
作為國內領先的視頻網(wǎng)站,愛奇藝自2010年正式上線以來便構建了涵蓋電影、電視劇、綜藝、動漫、紀錄片等十余種類型的視頻內容庫。隨著數(shù)量的急劇增長,這些視頻內容已達PB量級,也致使愛奇藝自己的存儲系統(tǒng)開始面臨諸多挑戰(zhàn)。愛奇藝副總裁劉文峰說,“坦率地講,Amazon Glacier是我們的不二之選。”
使用Amazon Glacier作為冷備系統(tǒng)之后,愛奇藝的視頻數(shù)據(jù)和日志文件歸檔流程得到了極大的簡化。除此之外,歸檔數(shù)據(jù)的安全可靠是Amazon Glacier帶來的最大好處,這使得愛奇藝可以放心地把關鍵的視頻數(shù)據(jù)和日志文件存放在云端。此外,AWS分布在世界各地的數(shù)據(jù)中心也為愛奇藝的全球化服務提供了強有力的支持。
助力全球最大股票市場處理全球交易數(shù)據(jù)
而作為世界最大的股票市場之一,納斯達克也在每天用亞馬遜AWS大數(shù)據(jù)平臺收集、處理和分析數(shù)十億條記錄。自亞馬遜AWS于2006年成立以來,納斯達克便成為了其忠實的用戶。目前,納斯達克平均每天有50多億條數(shù)據(jù)記錄要運行到Amazon Redshift;甚至在2014年的10月,一天的數(shù)據(jù)處理峰值竟然達到了140億條。
除此之外,納斯達克還運用了Amazon S3 and Amazon EMR來實現(xiàn)獨立的數(shù)據(jù)計算和托管。Amazon S3擁有近乎99.999999999%的完美拓展性,可以不用花費太多成本,便可以讓數(shù)據(jù)橫跨多個區(qū)域、在不同的數(shù)據(jù)中心間自由穿梭。而且,納斯達克在Amazon EMR上的運用使得部署和管理Hadoop集群變得十分簡單。其可以根據(jù)自身企業(yè)需要,自由地控制集群的增長或者收縮,甚至在周末或假日期間將其關閉。亞馬遜AWS給予了納斯達克在大數(shù)據(jù)處理和維護上無限可能。
推動互聯(lián)網(wǎng)公司全球創(chuàng)新和擴張
不僅如此,近期一個很火的旅行房屋租賃網(wǎng)站及應用——Airbnb,也正在通過亞馬遜AWS的大數(shù)據(jù)平臺來逐步完善和升級自身的服務系統(tǒng)。為了支持需求,該公司將 200 個 Amazon Elastic Compute Cloud (Amazon EC2) 實例用于其應用程序、內存緩存和搜索服務器。為了每天輕松處理和分析 50 GB 的數(shù)據(jù),Airbnb 使用了 Amazon Elastic MapReduce (Amazon EMR)。Airbnb 還使用 Amazon Simple Storage Service (Amazon S3) 存儲備份和靜態(tài)文件,包括 10 TB 的用戶照片。
此外,Airbnb 已將其主要的 MySQL 數(shù)據(jù)庫遷移到了 Amazon Relational Database Service (Amazon RDS)。Airbnb 只需 15 分鐘的停機時間就可以將其整個數(shù)據(jù)庫遷移到 Amazon RDS。這種快速轉換對于快速增長的 Airbnb 非常重要。Airbnb 的工程師 TOBI Knaup 說:“因為使用了 AWS,我們一直可以輕松(在所需時間和成本方面)擴展我們的站點。”
毫無疑問,亞馬遜AWS能夠利用自身成熟技術,幫助企業(yè)自如地迎接大數(shù)據(jù)挑戰(zhàn)。更有價值的是亞馬遜AWS可以通過技術和平臺,激發(fā)用戶創(chuàng)新,“玩轉”大數(shù)據(jù),讓企業(yè)在暗涌翻騰的大數(shù)據(jù)時代立于不敗之地。當然,這是用戶的成功,也是亞馬遜AWS的勝利。