精品国产一级在线观看,国产成人综合久久精品亚洲,免费一级欧美大片在线观看

不用HDFS能運行Hadoop分析嗎?

責任編輯:editor006

2015-03-31 14:41:16

摘自:TechTarget中國

George Crump:簡短的回答是你必須有Hadoop分布式文件系統來執行Hadoop分析。使用共享存儲基礎架構存儲Hadoop數據有很多好處,包括更好更有效地保護數據,多應用訪問存儲以及更好地保護Hadoop主結點。

George Crump:簡短的回答是你必須有Hadoop分布式文件系統來執行Hadoop分析。但是,通常問這個問題的時候,IT人員實際上想問的是如果存儲資源必須直接連接,哪一個是傳統的Hadoop設計。對于這個問題的答案是NO,而且還有一些很有力的理由來佐證我們不必遵從通常的設計。

什么是Hadoop分析?

Hadoop是一種用于業務分析處理的環境。允許大量的計算算來處理超大型非結構化數據集。這些數據可以來自于各種源,但是最常見的數據是通過作為物聯網的一部分的傳感器創造的數據。為了讓其分析處理是有價值的,Hadoop必須快速處理這些數據集,而且要通過Hadoop分布式文件系統(HDFS)實現。HDFS本質上將計算轉移到數據,而不是傳輸數據到計算。

大多數Hadoop環境由商用服務器集群組成,都有本地存儲。數據加載到這些結點,在那里處理那個數據集。這稱之為MapReduce功能。一旦每一個結點基于請求處理那個數據,結果就會從每一個結點發送,然后在一個主結點合并。主結點也存儲與集群管理相關的所有元數據。

Hadoop存儲替代

傳統Hadoop存儲架構的替代品利用了共享的存儲環境,這個環境是計算結點連接的。廠商提供了這種解決方案,既可以用他們自己的HDFS兼容的插件,也可以利用亞馬遜簡單存儲服務(S3)接口的Hadoop模式。

S3是一款本地的文件系統,用來讀取和編寫亞馬遜云存儲上的文件。很多對象存儲系統支持這個接口,最終可以支持運行在本地虛擬云上的Hadoop基礎架構,而不是在亞馬遜云中。這個文件系統的優勢在于Hadoop可以訪問文件,這個文件可以通過其他工具或者聯網的傳感器編寫。相反,其他的應用也可以使用Hadoop訪問文件編寫。

使用共享存儲基礎架構存儲Hadoop數據有很多好處,包括更好更有效地保護數據,多應用訪問存儲以及更好地保護Hadoop主結點。

鏈接已復制,快去分享吧

企業網版權所有?2010-2024 京ICP備09108050號-6京公網安備 11010502049343號

  • <menuitem id="jw4sk"></menuitem>

    1. <form id="jw4sk"><tbody id="jw4sk"><dfn id="jw4sk"></dfn></tbody></form>
      主站蜘蛛池模板: 屏边| 闸北区| 临夏县| 新乐市| 浪卡子县| 思茅市| 孝义市| 阿拉善右旗| 繁昌县| 山阳县| 灌阳县| 福贡县| 绩溪县| 武宁县| 敦煌市| 宜章县| 蒙山县| 定边县| 淮北市| 竹山县| 理塘县| 长寿区| 兴山县| 台前县| 贵州省| 双峰县| 曲阜市| 万盛区| 高唐县| 鲁甸县| 壶关县| 罗山县| 团风县| 哈巴河县| 类乌齐县| 长乐市| 屯门区| 津南区| 康平县| 青阳县| 秭归县|