近日,英特爾在舊金山推出了Intel版Hadoop第三個版本。
英特爾認為,隨著大數據時代的到來,以至強和Atom處理器為基礎的Hadoop發行版在不久的將來將會迅速增長。
目前市場上的Hadoop發行版與開源版種類很多。IBM、Oracle、Microsoft、Intel、EMC等知名廠商都有著自己的Hadoop發行版,而英特爾則擁有在Apache開源版基礎上修訂的發行版和免費版兩個Hadoop版本。從處理器、固態硬盤以及網絡等入手幫助用戶提供一個完整的大數據解決方案。
Intel Hadoop發行版的觀點和目標
英特爾Hadoop發行版提供出色的安全性和靈活性。intel在發布會上還分享了Hadoop版本的發展歷程。這主要是根據客戶對這方面的要求,尤其是一些中國的客戶,如中國移動和中國電信等企業的支持。
Intel Hadoop發行版發展歷程
英特爾加強為數據中心提供了一個框架,可以連接和管理設備并實現一個可擴展的方式,Hadoop架構具有巨大的潛力,可以做為硬件基礎層存在,并在此之上構建可以實現水平分布的各式各樣的堆棧。
Intel Hadoop發行版架構
Intel Hadoop發行版使用AES-NI指令集竟傳輸速度提升20倍以外,同時,還能公戶SSD換存儲來實現優化,查詢速度比Hive快8.5倍,通過AVX和SSE 4.2進行硬件增強壓縮以及Active Tunner對集群進行自動調優。
Intel Hadoop發行版性能大幅度提升
以往分析1TB的數據需要4個多小時到如今只需要7分鐘就能處理完成,這主要是Intel對芯片、存儲系統、網絡和Hadoop的優化所取得結果,幫助用戶實現更高性能的計算。
Intel Hadoop發行版提升處理性能
英特爾在工作中有許多項目,包括將標準的SQL語言以及給Hadoop與AES加密部署。
Intel Hadoop發行版創新項目
英特爾的目標是使Hadoop更容易使用,英特爾也希望越來越多的客戶采用Hadoop集群,這樣將會帶來更多的芯片銷售。
Intel Hadoop發行版未來預計發展
總體而言,交通和建筑部門如今已經有越來越多的用戶開始建立Hadoop的大數據應用,英特爾將推動Hadoop技術的發展并幫助滿足客戶需求,這樣他們將能夠銷售更多的處理器芯片,從而甩開其競爭對手AMD和ARM。