借著公司被微軟收購(gòu)的掩護(hù),LinkedIn已經(jīng)悄悄開始啟動(dòng)一項(xiàng)有可能震驚整個(gè)數(shù)據(jù)中心硬件市場(chǎng)的內(nèi)部計(jì)劃。
LinkedIn的這項(xiàng)計(jì)劃與Facebook通過其“開放計(jì)算項(xiàng)目”(OCP)所做的工作有些類似。OCP打算開發(fā)一系列全新的“開源”數(shù)據(jù)中心硬件,為此Facebook已經(jīng)將很多家公司的工程師集合在一起,讓所有的人暢所欲言,集思廣益。
在過去的5年里,OCP已經(jīng)顛覆了數(shù)據(jù)中心市場(chǎng)并掀起一場(chǎng)類似邪教的大風(fēng)暴,以致于蘋果的連網(wǎng)團(tuán)隊(duì)都想要加入該組織,他們向蘋果提出了這一要求但遭到后者的反對(duì),結(jié)果整個(gè)團(tuán)隊(duì)毅然集體辭職,不久之后蘋果宣布加入OCP組織,但它流失的工程師人才卻找不回來了。
同樣,LinkedIn也想設(shè)計(jì)和生產(chǎn)數(shù)據(jù)中心所需的所有軟件和硬件,它正在從Facebook和Juniper挖人才。
Zaid Ali Kahn
LinkedIn的基礎(chǔ)設(shè)施架構(gòu)與運(yùn)作高級(jí)總監(jiān)扎伊德·阿里·卡恩(Zaid Ali Kahn)表示:“我們想生產(chǎn)服務(wù)器、交換機(jī)和數(shù)據(jù)中心需要的一切硬件,但這不是因?yàn)槲覀兿朐谶@方面做到精通,而是因?yàn)槲覀兿嘈胖挥羞@樣我們才能將命運(yùn)控制在自己手中。”
這是一個(gè)能夠令思科和Juniper等專業(yè)連網(wǎng)設(shè)備廠商恐懼的趨勢(shì)。過去,只有規(guī)模最大的那些互聯(lián)網(wǎng)公司比如亞馬遜、谷歌和Facebook才會(huì)這么做,從零起步設(shè)計(jì)它們自己的IT基礎(chǔ)設(shè)施。
LinkedIn的規(guī)模根本無法與這些巨頭相比。它也有幾個(gè)數(shù)據(jù)中心,分別位于加州、德克薩斯州和弗吉尼亞州。它的大部分?jǐn)?shù)據(jù)中心使用的空間都是從空間供應(yīng)商那里租借來的,直到最近才開始在新加坡和俄勒岡設(shè)計(jì)和生產(chǎn)自己的連網(wǎng)設(shè)備。它設(shè)在俄勒岡波特蘭的數(shù)據(jù)中心是最先進(jìn)的數(shù)據(jù)中心,其他的數(shù)據(jù)中心最終也將用新技術(shù)進(jìn)行升級(jí)。
LinkedIn內(nèi)部將這項(xiàng)計(jì)劃稱作“牛郎星計(jì)劃”(Project Altair),設(shè)計(jì)自己的連網(wǎng)軟件并在廉價(jià)商品硬件上運(yùn)行的計(jì)劃被稱作“隼計(jì)劃”(Project Falco)。
1美元的超快速網(wǎng)絡(luò)
Yuval Bachar
故事源自Facebook一位名叫尤瓦爾·巴卡(Yuval Bachar)的網(wǎng)絡(luò)硬件工程師,他在2013年的時(shí)候就是Facebook團(tuán)隊(duì)的一員,整個(gè)團(tuán)隊(duì)的目標(biāo)是將超高速計(jì)算機(jī)網(wǎng)絡(luò)的生產(chǎn)成本降低10倍。在加盟Facebook之前,他在思科和Juniper都干過。
他希望只用1美元就能買到1GB的存儲(chǔ)空間,或者只用100美元就能買到一臺(tái)連網(wǎng)設(shè)備,而現(xiàn)在這樣的連網(wǎng)設(shè)備需要2500美元才能買到。他曾在一次行業(yè)會(huì)議上公開宣布過他的這個(gè)目標(biāo)。
之后他就幫Facebook研制出改變整個(gè)行業(yè)的、廉價(jià)的和開源的Wedge交換機(jī),本月早些時(shí)候Facebook宣布公司已研制出第二代Wedge交換機(jī)。
就在巴卡宣布他的目標(biāo)時(shí),LinkedIn的連網(wǎng)團(tuán)隊(duì)仍在為它自己的網(wǎng)絡(luò)頭疼,他們的網(wǎng)絡(luò)已經(jīng)不能滿足隨著用戶增長(zhǎng)而水漲船高的需求。
卡恩在一篇博客文章中寫道:“產(chǎn)品技術(shù)運(yùn)營(yíng)(PEO)團(tuán)隊(duì)發(fā)現(xiàn),當(dāng)網(wǎng)絡(luò)路由器和交換機(jī)全部依賴于商業(yè)化廠商的時(shí)候,我們很難滿足各項(xiàng)應(yīng)用的需求,因?yàn)楦黜?xiàng)功能、配置以及修補(bǔ)漏洞都是由商業(yè)化廠商掌控著。”
2015年初,PEO團(tuán)隊(duì)開始研制自己的交換機(jī),他們給這款設(shè)備命名為“鴿子”(Pigeon)。同年秋天,卡恩加入了PEO團(tuán)隊(duì);它從今年初開始測(cè)試這款交換機(jī)設(shè)備。
鴿子交換機(jī)
似曾相識(shí)
與此同時(shí),作為OCP的一份子的巴卡提出了一個(gè)類似的計(jì)劃。OCP開始研制一種由成堆的計(jì)算機(jī)、存儲(chǔ)驅(qū)動(dòng)器和網(wǎng)絡(luò)交換機(jī)組成的開放式機(jī)架設(shè)備。
隨著一家公司的發(fā)展壯大,它只需要在這個(gè)開放式機(jī)架上添加更多的交換機(jī)、服務(wù)器和硬盤就行了。但是這種開放式機(jī)架本身的價(jià)格非常昂貴,有些東西是LinkedIn不需要的。
Facebook也面臨著同樣的問題,于是它又開發(fā)了一款精簡(jiǎn)版的21英寸機(jī)架,后來又為這款精簡(jiǎn)版機(jī)架設(shè)計(jì)了它自己的服務(wù)器和存儲(chǔ)設(shè)備。
但是幾乎沒有人能夠使用這種21英寸的機(jī)架。卡恩說:“可能99.5%的公司都在使用19英寸的機(jī)架。”
這意味著LinkedIn要想使用Facebook的機(jī)架,它就必須與供應(yīng)商談判,定制不同規(guī)格的設(shè)備。
這種情況給人一種似曾相識(shí)的感覺。巴卡主持了一個(gè)名為
Open 19
的項(xiàng)目,目的是開發(fā)廉價(jià)19英寸機(jī)架的開放標(biāo)準(zhǔn)。這種機(jī)架可以支持最多96臺(tái)服務(wù)器,總價(jià)大約為5萬美元,如果一個(gè)數(shù)據(jù)中心配備500臺(tái)這樣的機(jī)架,就可以省下2500萬美元的成本。
見識(shí)到OCP的影響力之后,很多廠商包括某些中國(guó)廠商和惠普企業(yè)都加入了進(jìn)來。
全速前進(jìn),絕不后退
微軟預(yù)計(jì)收購(gòu)LinkedIn的交易將在今年年底完成,微軟也是OCP組織的成員,它已經(jīng)將其21英寸機(jī)架和其他的OCP技術(shù)標(biāo)準(zhǔn)化。
卡恩不愿意評(píng)論這項(xiàng)收購(gòu)交易會(huì)帶來什么樣的影響,但是微軟已經(jīng)承諾會(huì)讓LinkedIn獨(dú)立運(yùn)營(yíng)。據(jù)知情人士透露,牛郎星計(jì)劃、隼計(jì)劃和Open 19計(jì)劃都在全力推進(jìn)之中。
這位知情人士指出,在9月份即宣布收購(gòu)交易的3個(gè)月之后,公司從Juniper那里挖來了道格·漢克斯(Doug Hanks)。漢克斯是Juniper的產(chǎn)品管理與戰(zhàn)略總監(jiān),編寫過不少與Juniper的技術(shù)有關(guān)的書。他現(xiàn)在是LinkedIn的工程技術(shù)總監(jiān)。
Doug Hanks
卡恩說:“漢克斯直接向我報(bào)告。他最近剛剛加入公司,我們很高興能夠邀得他的加盟。”
他說:“他的工作重心是建立網(wǎng)絡(luò)工程技術(shù)團(tuán)隊(duì)并將它發(fā)展壯大,執(zhí)行很多的計(jì)劃,他明白軟件和連網(wǎng)如何融合在一起。”
知情人士稱,漢克斯加盟后,LinkedIn計(jì)劃在18到24個(gè)月內(nèi)完成自主研發(fā)連網(wǎng)設(shè)備的任務(wù),然后義無反顧地前進(jìn)。
卡恩堅(jiān)持說LinkedIn的目標(biāo)與Facebook的目標(biāo)不同。他不想與思科領(lǐng)導(dǎo)的整個(gè)連網(wǎng)設(shè)備行業(yè)公開為敵。
實(shí)際上,他仍將從很多商業(yè)廠商那里購(gòu)買連網(wǎng)設(shè)備,當(dāng)然前提是它們?cè)试S他刪除商業(yè)連網(wǎng)設(shè)備上的軟件再裝上他自己的軟件。
他說:“很多廠商愿意接受這樣的條件,這樣才能滿足不同公司的各種需求。”
LinkedIn并沒有像OCP組織那樣承諾將它自主研發(fā)的基礎(chǔ)設(shè)施軟件、交換機(jī)設(shè)計(jì)或其他硬件開源。但是卡恩也并不排除他將公開分享其技術(shù)的可能性。
卡恩說:“LinkedIn的文化是開源,因此時(shí)機(jī)合適的時(shí)候,我們就會(huì)這樣做。”
實(shí)際上,LinkedIn是惠普企業(yè)的開源項(xiàng)目OpenSwitch的創(chuàng)始成員之一,該項(xiàng)目的目標(biāo)是開發(fā)一款基于Linux的交換機(jī)。OpenSwitch現(xiàn)在由Linux基金會(huì)負(fù)責(zé)執(zhí)行。
與此同時(shí),LinkedIn也一直在分享關(guān)于其網(wǎng)絡(luò)軟件的技術(shù)文章。
處于危險(xiǎn)關(guān)頭的巨額利潤(rùn)
使用商業(yè)化網(wǎng)絡(luò)設(shè)備的互聯(lián)網(wǎng)公司通常每年要花4000萬美元到1.4億美元的資金從思科、Arista和其他廠商那里購(gòu)買連網(wǎng)設(shè)備。
看到一家像LinkedIn這樣的小公司都能開發(fā)自己的連網(wǎng)設(shè)備,其他公司一定會(huì)受到鼓勵(lì)去做類似的嘗試。
另一位跟LinkedIn毫無關(guān)聯(lián)但是曾經(jīng)為全球最大的一家技術(shù)公司建了一個(gè)巨大的數(shù)據(jù)中心的專業(yè)人士稱,他的公司開始研制自己的網(wǎng)絡(luò)設(shè)備時(shí),它將數(shù)據(jù)中心的成本降到了原來的十分之一,從4萬美元一臺(tái)思科交換機(jī)降到了4000美元一臺(tái)廉價(jià)的商品交換機(jī),這些商品交換機(jī)能夠運(yùn)行它自主研發(fā)的軟件。
知情人士稱:“Arista、思科、Juniper,它們本身也都是推動(dòng)這場(chǎng)大風(fēng)暴的一份子。谷歌、亞馬遜和Facebook那些大規(guī)模的互聯(lián)網(wǎng)公司都是為了經(jīng)濟(jì)效益這么做。對(duì)它們來說,這關(guān)乎利潤(rùn)。這比開發(fā)它們自己的連網(wǎng)設(shè)備代價(jià)更低。在LinkedIn,成本根本不是需要最優(yōu)先考慮的事務(wù)。它們要的是完全掌控用戶體驗(yàn),掌控與用戶體驗(yàn)有關(guān)的一切,然后將它標(biāo)準(zhǔn)化。”