Hadoop并不完全代表云計(jì)算，所以，要用Hadoop搭建完整的云計(jì)算平臺(tái)，答案是不夠。我們常說云計(jì)算，實(shí)際上還是通過計(jì)算機(jī)的大規(guī)模或者說海量處理來為生活中各式各樣的人和各行各業(yè)服務(wù)——所以，核心在“服務(wù)”。關(guān)于服務(wù)，展開來就是常用的那3種(也是事實(shí)上的標(biāo)準(zhǔn))：SaaS,PaaS,IaaS。對(duì)云計(jì)算來說，公有和私有，虛擬和存儲(chǔ)，這其實(shí)是相對(duì)討論的核心。
回頭說Hadoop。在Google三大論文的直接刺激下，Hadoop社區(qū)興起，而在眾多的開源實(shí)現(xiàn)中，Hadoop(主項(xiàng)目)可以說是所有已知云計(jì)算方面開源項(xiàng)目的一個(gè)Top項(xiàng)目。
云計(jì)算中有哪些構(gòu)件?發(fā)展到目前的技術(shù)與規(guī)模，并沒有一個(gè)確切的定論，今天的說的話明天可能就不一樣了。但對(duì)Hadoop來說，實(shí)現(xiàn)了的部分，就是大部分企業(yè)在不斷發(fā)展中所遇到的大部分問題。直接上圖：
從整體生態(tài)系統(tǒng)的角度，從底層存儲(chǔ)，到中間的計(jì)算模型和框架，再到上層的邏輯處理和流、顯示，都有相應(yīng)開源的實(shí)現(xiàn)。這就是你說的構(gòu)件了。
包括我們看到的Hadoop2.0中，引入的新的處理框架，Spark，Storm，YARN(取代MR)，都是Hadoop生態(tài)系統(tǒng)的完善與實(shí)現(xiàn)。
Hadoop實(shí)現(xiàn)的是在簡(jiǎn)易硬件的基礎(chǔ)上進(jìn)行盡量高可用性海量計(jì)算與處理的中上層模型。Hadoop處理了存儲(chǔ)(也只是一部分)，虛擬化是沒有涉及的，而底層硬件Hadoop也是不涉及的，不管是Hadoop還是其他的項(xiàng)目，只是在軟件的層面想通過縱向或者橫向的拓展解決所有的問題是不現(xiàn)實(shí)的。Hadoop在硬件這方面，只是在實(shí)現(xiàn)中預(yù)留或者接入硬件特性，也就是在虛擬化這方面Hadoop只是個(gè)“APP”，不是“始作俑者”(用詞不當(dāng)了)。
那么，完整的云計(jì)算平臺(tái)呢?
按照企業(yè)級(jí)來說，是要看具體的企業(yè)方向和企業(yè)類型的，包括IBM和VMware都有提供不同的解決方案。大致上一定是由單點(diǎn)–>集群–>多層(準(zhǔn)分布式)–>硬件–>分布式(地域分布)來解決的。具體到Hadoop體系的技術(shù)，直接去對(duì)應(yīng)上圖就好了。
從云計(jì)算這個(gè)概念出現(xiàn)到今天，資料可以說“浩如煙海”了，但很多資料只是互相復(fù)制黏貼，并沒有說到云計(jì)算的核心。我想提出的一個(gè)觀點(diǎn)是，完整的云計(jì)算平臺(tái)，依賴的是業(yè)務(wù)，提供的是存儲(chǔ)與支持。
沒有業(yè)務(wù)需求而是照搬網(wǎng)上的資料或者自認(rèn)為“活用”了某些技術(shù)，都可能只是“娛人娛己”。我們看一下互聯(lián)網(wǎng)負(fù)載均衡技術(shù)是如何發(fā)展的就就更容易理解云計(jì)算：
客戶端緩存–>CDN緩存–>Apache&Nginx靜態(tài)頁(yè)面緩存–>PHP和Java動(dòng)態(tài)內(nèi)存–>Memcache&Other Nosql–>Mysql&Oracle–>HDFS&Other Big Table
從技術(shù)的角度看，所有問題解決起來都是層次化的(大家肯定都有寫Demo吧)，都是根據(jù)不同的需求引入不同的技術(shù)，在單層單點(diǎn)乃至集群都無法解決問題的時(shí)候，新的計(jì)算框架，云計(jì)算與網(wǎng)格計(jì)算乃至動(dòng)畫需要的大規(guī)模渲染都在需要的時(shí)候順理成章的引入。總之，完整的云計(jì)算平臺(tái)，對(duì)于不同的公司業(yè)務(wù)都是不同的，拿騰訊來說，平臺(tái)的組件多如牛毛，“平臺(tái)”只是提供最基礎(chǔ)的服務(wù)：存儲(chǔ)與支持，其他的都需要業(yè)務(wù)根據(jù)自身的特點(diǎn)在其上進(jìn)行構(gòu)建(相信大公司都是有自己的完整方案的，這里我就不能再說了……)，至于提高什么樣級(jí)別的這種“服務(wù)”，就要看公司的業(yè)務(wù)規(guī)模，需要支撐的體系，乃至公司的決策戰(zhàn)略了等等。
京公網(wǎng)安備 11010502049343號(hào)