“宇宙，人類最后的邊疆。這是星艦企業(yè)號(hào)的航程。它繼續(xù)的任務(wù)是去探索未知的新世界，找尋新的生命和新的文明，勇敢地航向前人所未至的領(lǐng)域。”這是《星際迷航》里的經(jīng)典臺(tái)詞。第一次走進(jìn)星環(huán)科技的辦公室，就仿佛置身于科幻世界的太空飛船，到處彌漫著創(chuàng)新的沖動(dòng)。
《三體》中的星環(huán)集團(tuán)聚集了最優(yōu)秀的一批科學(xué)家
光陰好像流水飛快，不知不覺間我們已然涌入大數(shù)據(jù)的時(shí)代：凡事都在拿數(shù)據(jù)說話，就連我們平時(shí)吃飯用的筷子，也趕上了大數(shù)據(jù)的班車，可以神奇地鑒定出地溝油，更不用說可視眼鏡，智能手環(huán)什么的了。
《三體》中的星環(huán)集團(tuán)聚集了人類最優(yōu)秀的一批科學(xué)家，建造成太陽(yáng)系的第一艘超光速飛船——星環(huán)號(hào)，星環(huán)科技的創(chuàng)始人兼CTO孫元浩表示，星環(huán)科技故借此命名，希望匯聚最優(yōu)秀的研發(fā)團(tuán)隊(duì)，立志打造成國(guó)內(nèi)外領(lǐng)先的大數(shù)據(jù)基礎(chǔ)技術(shù)廠商。
在孫元浩眼里，創(chuàng)新一詞更多地與創(chuàng)業(yè)公司聯(lián)系在一起，他認(rèn)為每一次技術(shù)的演變都是源起于小公司為解決現(xiàn)實(shí)問題而進(jìn)行的新技術(shù)開拓。他認(rèn)為創(chuàng)業(yè)者們應(yīng)該滿懷信心地投身到改變世界的事業(yè)當(dāng)中，一旦有了idea以后，就需要努力嘗試把這些idea變成現(xiàn)實(shí)，這就是創(chuàng)新的要義所在，無論成功與否。
一直以來，從人們所艷羨的公司辭職，回歸于起步階段的初創(chuàng)企業(yè)，這樣的職業(yè)生涯轉(zhuǎn)變不僅需要極大的勇氣，更需要對(duì)行業(yè)未來趨勢(shì)有十足的把握。當(dāng)下，大數(shù)據(jù)創(chuàng)業(yè)需要的不是拉拉隊(duì)，而是實(shí)干家。孫元浩，正是一位有夢(mèng)想，有魄力的年輕實(shí)干家。通過和他近兩個(gè)小時(shí)的交流，可以看出他是一位邏輯思維能力超強(qiáng)的技術(shù)大咖，他陽(yáng)光，有激情，并且在他身上透著敏銳的市場(chǎng)洞察力，頑強(qiáng)的拼搏與不服輸?shù)陌詺狻?/p>
是否做了自己熱愛的事情？是否為實(shí)現(xiàn)自己的夢(mèng)想盡了最大的努力？這是創(chuàng)業(yè)者執(zhí)著的來源。
一直以來都堅(jiān)信終將有一款自己的產(chǎn)品，可以完全超越美國(guó)人
孫元浩，作為英特爾自研商用版Hadoop解決方案曾經(jīng)的團(tuán)隊(duì)領(lǐng)導(dǎo)者，一直以來都堅(jiān)信終將有一款中國(guó)自己的產(chǎn)品，可以完全超越美國(guó)人。這并不是一種盲目的自信。雖然截至目前，國(guó)內(nèi)大部分企業(yè)的核心數(shù)據(jù)庫(kù)系統(tǒng)還大都是來自國(guó)外公司的產(chǎn)品。但鑒于中國(guó)企業(yè)的應(yīng)用場(chǎng)景非常復(fù)雜，很少有國(guó)外產(chǎn)品能夠不經(jīng)修改就可以順暢運(yùn)行。而且在中國(guó)，由于用戶數(shù)量龐大，中國(guó)企業(yè)的數(shù)據(jù)量普遍要高于國(guó)外企業(yè)一個(gè)數(shù)量級(jí)。國(guó)外公司在進(jìn)行產(chǎn)品設(shè)計(jì)時(shí)，是根據(jù)國(guó)外仿真的用戶數(shù)來構(gòu)架的，遇到中國(guó)的用戶數(shù)量，系統(tǒng)出現(xiàn)問題的幾率就會(huì)大大增加。中國(guó)的電信運(yùn)營(yíng)商、銀行、交通等領(lǐng)域，數(shù)據(jù)量和復(fù)雜程度要遠(yuǎn)超國(guó)外同類企業(yè)，急需新一代數(shù)據(jù)處理技術(shù)來解圍，而目前國(guó)外公司的產(chǎn)品還不能很好地滿足國(guó)內(nèi)用戶的需求。
就技術(shù)而言，孫元浩和他的團(tuán)隊(duì)完全可以和國(guó)外公司站在同一個(gè)起跑線上：同步開發(fā)產(chǎn)品，同時(shí)開展競(jìng)爭(zhēng)。他相信團(tuán)隊(duì)有信心和能力做出優(yōu)秀的產(chǎn)品，為中國(guó)客戶提供更好的服務(wù)。
在中國(guó)這么一個(gè)巨大的市場(chǎng)，尤其是有如此多的問題需要解決，因此完全有必要有一家本土公司，能夠承擔(dān)起這樣的歷史使命，能推動(dòng)這個(gè)技術(shù)的變革，開發(fā)頂尖的技術(shù)。孫元浩希望星環(huán)能夠成為這樣一家偉大的公司，作為大數(shù)據(jù)的領(lǐng)先者，推動(dòng)這個(gè)產(chǎn)業(yè)的轉(zhuǎn)型，解決中國(guó)市場(chǎng)的一些特殊問題。同時(shí)也希望星環(huán)能夠去開拓全球市場(chǎng)。因?yàn)樵谥袊?guó)市場(chǎng)發(fā)展技術(shù)，會(huì)面對(duì)在其他市場(chǎng)所無法想象的挑戰(zhàn)，歐洲國(guó)家的基礎(chǔ)數(shù)據(jù)量及其復(fù)雜程度遠(yuǎn)低于中國(guó)，即使美國(guó)的數(shù)據(jù)量也比中國(guó)小一個(gè)數(shù)量級(jí)。能夠在中國(guó)的大數(shù)據(jù)領(lǐng)域取得成功的公司，從技術(shù)角度來看，其產(chǎn)品在世界范圍被廣泛應(yīng)用也是理所當(dāng)然的。
孫元浩一直堅(jiān)信中國(guó)一定會(huì)誕生這樣一家公司，去接受這樣的歷史使命。
2013年，星環(huán)科技創(chuàng)立，致力于Hadoop之上的高效計(jì)算引擎和數(shù)據(jù)分析算法的研發(fā)。作為公司創(chuàng)始人兼任CTO，而不是CEO。CTO孫元浩，是星環(huán)號(hào)的領(lǐng)航員。
Transwarp取自《星際迷航》中超光速飛船的曲率引擎
天下武功，唯快不破。武俠世界的金科玉律，同樣適用于當(dāng)前日趨激烈的商業(yè)競(jìng)爭(zhēng)，不敗的秘訣，就在于洞悉并快速響應(yīng)市場(chǎng)需求的變化。隨著現(xiàn)在傳感器網(wǎng)絡(luò)、物聯(lián)網(wǎng)的發(fā)展，數(shù)據(jù)產(chǎn)生的速度越來越快，當(dāng)然在互聯(lián)網(wǎng)里面早就有實(shí)時(shí)數(shù)據(jù)產(chǎn)生，使得實(shí)時(shí)大數(shù)據(jù)的技術(shù)慢慢開始得到更多的關(guān)注。
然而傳統(tǒng)處理方法是將電子儀器產(chǎn)生的數(shù)據(jù)存入數(shù)據(jù)庫(kù)后再統(tǒng)一分析，一旦設(shè)備增多和數(shù)據(jù)增長(zhǎng)，延時(shí)就越來越高。利用流處理技術(shù)在數(shù)據(jù)產(chǎn)生的時(shí)候就進(jìn)行實(shí)時(shí)處理可以極大地提高企業(yè)的反應(yīng)速度和工作效率。
而Hadoop、Spark等架構(gòu)就能夠滿足這樣的需求。它們提供節(jié)點(diǎn)通信，實(shí)現(xiàn)計(jì)算任務(wù)的分配，以及容錯(cuò)擴(kuò)展等等問題，最終實(shí)現(xiàn)對(duì)分布式系統(tǒng)中各個(gè)節(jié)點(diǎn)計(jì)算能力的聚合。尤其是Hadoop，在節(jié)點(diǎn)間傳遞計(jì)算過程，而不是傳遞數(shù)據(jù)，能夠用更少的帶寬更快地推進(jìn)大數(shù)據(jù)的處理。孫元浩表示，自去年星環(huán)科技就部署了較多的流處理集群，來處理從用戶產(chǎn)生的實(shí)時(shí)數(shù)據(jù)到傳感器產(chǎn)生的數(shù)據(jù)。其公司產(chǎn)品Transwarp Data Hub（TDH）正是基于Hadoop和Spark的分布式內(nèi)存分析引擎和實(shí)時(shí)在線大規(guī)模計(jì)算分析平臺(tái)，相比開源Hadoop版本有10x~100x倍性能提升，可處理GB到PB級(jí)別的數(shù)據(jù)。而其中的Transwarp正是取自《星際迷航》中超光速飛船的曲率引擎，就是努力將Spark打造成為Hadoop系統(tǒng)的下一代引擎。
據(jù)孫元浩介紹，星環(huán)與其合作伙伴為某省公安廳交通管理部門部署了全省范圍的交通監(jiān)控系統(tǒng)，采用分布式隊(duì)列實(shí)時(shí)采集全省各個(gè)交通卡口的車輛信息，使用流式計(jì)算集群對(duì)過車記錄進(jìn)行實(shí)時(shí)統(tǒng)計(jì)和監(jiān)測(cè)，并實(shí)現(xiàn)上述多種實(shí)時(shí)分析應(yīng)用，系統(tǒng)處理信息的端到端延時(shí)在2秒以內(nèi)，較好地提高了交通管理的效率。截止到目前，星環(huán)科技已經(jīng)部署了6個(gè)省，本月還會(huì)再部署兩個(gè)省。
星環(huán)在以Hadoop/Spark為代表的大數(shù)據(jù)底層技術(shù)領(lǐng)域功底扎實(shí)，在國(guó)內(nèi)已然擁有最多的企業(yè)級(jí)Hadoop實(shí)施案例，觸角已延伸到交通安全、金融、電信、醫(yī)療、能源等各行各業(yè)，中國(guó)正需要這樣一個(gè)能在大數(shù)據(jù)Hadoop領(lǐng)域不輸國(guó)外公司，甚至超越他們的基礎(chǔ)平臺(tái)級(jí)的技術(shù)公司，星環(huán)科技有望填補(bǔ)這一空白。
大數(shù)據(jù)和云計(jì)算終將走向融合，星環(huán)科技的目標(biāo)是要做中國(guó)的“甲骨文”
縱觀國(guó)外，已然涌現(xiàn)了一大批以大數(shù)據(jù)為依托的創(chuàng)業(yè)公司，加上IT界眾多老牌公司的加入，大家都想在大數(shù)據(jù)這一廣闊市場(chǎng)中分得一杯羹。而國(guó)內(nèi)的情況是，大數(shù)據(jù)領(lǐng)域內(nèi)的公司雖然很多，但大部分是以大數(shù)據(jù)應(yīng)用為主，敢于挑戰(zhàn)大數(shù)據(jù)Hadoop平臺(tái)技術(shù)的公司少之又少。星環(huán)是這少之又少中的一個(gè)佼佼者，孫元浩坦言，星環(huán)信息科技的目標(biāo)就是要做中國(guó)的“甲骨文”！
提到大數(shù)據(jù)，就必須要講到安全。國(guó)內(nèi)金融機(jī)構(gòu)對(duì)外資的高依賴度將直接導(dǎo)致金融數(shù)據(jù)被國(guó)外廠商掌控，威脅我國(guó)金融安全。此前，棱鏡門等事件暴露的國(guó)家信息安全問題，使得國(guó)內(nèi)“去IOE”掀起高潮，必須努力擺脫外資數(shù)據(jù)、技術(shù)公司的束縛，當(dāng)然包括金融界在內(nèi)的多個(gè)傳統(tǒng)行業(yè)對(duì)于IT的國(guó)產(chǎn)化需求也在不斷加大。在金融業(yè)，已經(jīng)有許多的銀行IT部門正在嘗試使用國(guó)產(chǎn)的基礎(chǔ)軟件或是開源的框架、產(chǎn)品，特別是數(shù)據(jù)庫(kù)領(lǐng)域，這種趨勢(shì)更加明顯。
孫元浩認(rèn)為，大數(shù)據(jù)技術(shù)在銀行的應(yīng)用前景被廣泛傳播，通過綜合處理銀行自有結(jié)構(gòu)化交易數(shù)據(jù)以及外部互聯(lián)網(wǎng)/政府?dāng)?shù)據(jù)，可以提升精細(xì)化客戶管理水平以及進(jìn)行大數(shù)據(jù)征信降低風(fēng)險(xiǎn)等。據(jù)他介紹，曾有股份制銀行把一些復(fù)雜的貸款風(fēng)險(xiǎn)控制邏輯在多個(gè)MPP數(shù)據(jù)庫(kù)和Hadoop發(fā)行版上進(jìn)行過嘗試，傳統(tǒng)數(shù)據(jù)庫(kù)對(duì)于龐大的數(shù)據(jù)量及其運(yùn)算表現(xiàn)得力不從心。可見，當(dāng)數(shù)據(jù)量與日俱增，而傳統(tǒng)的MPP數(shù)據(jù)庫(kù)形態(tài)卻未改變，企業(yè)面臨的將是已過時(shí)的技術(shù)緩慢地處理日新月異的數(shù)據(jù)，這在追求高效的大數(shù)據(jù)時(shí)代顯得岌岌可危，銀行需要一個(gè)更高效的數(shù)據(jù)處理工具。
在全球去IOE的大背景下，Hadoop技術(shù)已成為公認(rèn)的替代傳統(tǒng)數(shù)據(jù)庫(kù)的大數(shù)據(jù)產(chǎn)品。其開源Hadoop平臺(tái)親民的價(jià)格設(shè)置是其最具吸引力的特質(zhì)所在，而它容納全部數(shù)據(jù)類型的能力則是另一大亮點(diǎn)。Hadoop的誕生是劃時(shí)代的數(shù)據(jù)變革，但關(guān)系數(shù)據(jù)庫(kù)時(shí)代的存留也為Hadoop真正占領(lǐng)數(shù)據(jù)庫(kù)領(lǐng)域埋下了許多的障礙，因?yàn)闃I(yè)務(wù)人員對(duì)SQL語言及工具更加熟悉。對(duì)SQL（尤其是PL/SQL）的支持一直是Hadoop大數(shù)據(jù)平臺(tái)在接手舊數(shù)據(jù)時(shí)代時(shí)亟待解決的問題。Hadoop對(duì)SQL數(shù)據(jù)庫(kù)的支持度一直是企業(yè)用戶最關(guān)心的訴求點(diǎn)之一，也是他們選擇的Hadoop平臺(tái)的重要標(biāo)準(zhǔn)。
7月22日，由星環(huán)科技牽頭成立了國(guó)內(nèi)首個(gè)Hadoop技術(shù)及應(yīng)用推廣聯(lián)盟，希望打造一個(gè)完整的Hadoop技術(shù)與產(chǎn)業(yè)鏈，加速國(guó)內(nèi)Hadoop大數(shù)據(jù)技術(shù)的市場(chǎng)推廣。在第二天的中國(guó)Hadoop技術(shù)峰會(huì)上，孫元浩詳細(xì)介紹了如何在Hadoop上實(shí)現(xiàn)分布式事務(wù)處理，以保障分布式數(shù)據(jù)的一致性。他從十五年前EricBrewer的一篇演講入手，提出了Hadoop技術(shù)發(fā)展中分布式事務(wù)處理一致性的困難。他從CAP定理開始，提出了實(shí)現(xiàn)一致性的矛盾所在，尤其是保障一致性與可用性的困難。但是隨后孫元浩進(jìn)行了ACID詳解，理論上闡述了實(shí)現(xiàn)分布式一致性的可行性以及星環(huán)科技對(duì)分布式事務(wù)處理一致性的兩種解決方案。并同時(shí)通過演示展現(xiàn)了星環(huán)科技Transwarp Inceptor對(duì)當(dāng)前分布式事務(wù)處理一致性問題解決的處理方案及其優(yōu)越性。
他認(rèn)為，Hadoop的興起并不是一個(gè)產(chǎn)品代替另一個(gè)產(chǎn)品，而是在硬件發(fā)展到一定階段一種計(jì)算模式代替另一種計(jì)算模式。當(dāng)前，TDH已從數(shù)據(jù)倉(cāng)庫(kù)的補(bǔ)充轉(zhuǎn)變成了其替代品，已經(jīng)大大提升了數(shù)據(jù)分析的效率，當(dāng)然受益于其對(duì)SQL的完整支持以及對(duì)ACID數(shù)據(jù)一致性的支持，某股份制銀行開始把一些復(fù)雜的貸款風(fēng)險(xiǎn)控制邏輯遷移到TDH Hadoop平臺(tái)上進(jìn)行運(yùn)算。可見，Hadoop全面主導(dǎo)數(shù)據(jù)庫(kù)的時(shí)代開始了，這也是大數(shù)據(jù)時(shí)代真正來臨的標(biāo)志性突破。
自過去的一年，知名的云計(jì)算公司以及軟件、操作系統(tǒng)、系統(tǒng)集成廠商、配置管理軟件、大數(shù)據(jù)廠商以及開源軟件都在向Docker靠攏。微軟也稱將在下一個(gè)版本的Windows Server中支持Docker。孫元浩認(rèn)為，大數(shù)據(jù)和云計(jì)算終將走向融合。那星環(huán)又做了哪些準(zhǔn)備來應(yīng)對(duì)如此快速變化的市場(chǎng)呢？其正在為大數(shù)據(jù)應(yīng)用量身定做TOS云操作系統(tǒng)。在過去，Hadoop on Docker大數(shù)據(jù)平臺(tái)的部署，只在單機(jī)情況下實(shí)現(xiàn)過，而且過程繁瑣，耗時(shí)很長(zhǎng)。雖然類似Pivotal方案也實(shí)現(xiàn)過一鍵部署，但是單機(jī)的小規(guī)模部署對(duì)于Hadoop這樣的大數(shù)據(jù)平臺(tái)并不具有實(shí)際意義。TOS基于Docker和Kubernetes，支持一鍵部署TDH，讓TDH和其他Docker應(yīng)用共享集群，過去，幾百臺(tái)規(guī)模集群的Hadoop on Docker的部署，從未有人實(shí)現(xiàn)過，這也是Hadoop on Docker難以落地應(yīng)用的主要原因之一。而一鍵規(guī)模化部署則更是繞過了Hadoop on Docker在市場(chǎng)的適應(yīng)期，降低了安裝和使用的成本，使企業(yè)用戶可以更早更快地使用該技術(shù)，是在Hadoop技術(shù)發(fā)展和推廣中舉足輕重的一個(gè)技術(shù)突破。其基于優(yōu)先級(jí)的搶占式資源調(diào)度和細(xì)粒度資源分配，讓大數(shù)據(jù)應(yīng)用可以輕松的擁抱云服務(wù)。
產(chǎn)品創(chuàng)新就是功能定義+技術(shù)實(shí)現(xiàn)，需要有遠(yuǎn)大格局的具體實(shí)踐者
遠(yuǎn)=近=永恒。當(dāng)前，“互聯(lián)網(wǎng)+”給各個(gè)產(chǎn)業(yè)的創(chuàng)新發(fā)展帶來無限可能，但無論如何“+”，不變的還是產(chǎn)品本身的質(zhì)量、品牌、以及滿足用戶需求這些核心點(diǎn)。
孫元浩坦言，不管科技如何變化，模式如何變化，對(duì)于做產(chǎn)品而言，以功能定義+技術(shù)實(shí)現(xiàn)的本質(zhì)是不變的。弄懂了市場(chǎng)想要什么，就幾乎可以有針對(duì)性地提供創(chuàng)新產(chǎn)品和服務(wù)。
大數(shù)據(jù)帶來的挑戰(zhàn)也是跨行業(yè)、跨領(lǐng)域的。數(shù)據(jù)挖掘需要的是復(fù)合型人才。目前星環(huán)業(yè)務(wù)正在快速擴(kuò)展，已在北京等地設(shè)立分公司和辦事處。最后，孫元浩呼吁有激情的大數(shù)據(jù)人才，懷揣著共同的夢(mèng)想，能齊聚一堂，不做大數(shù)據(jù)的拉拉隊(duì)，立志都成為大數(shù)據(jù)的實(shí)干家！
訪后記
無論什么領(lǐng)域，引領(lǐng)穿越星際迷航，都是一次世界觀的改變。
京公網(wǎng)安備 11010502049343號(hào)