精品国产一级在线观看,国产成人综合久久精品亚洲,免费一级欧美大片在线观看

不用HDFS能運行Hadoop分析嗎?

責任編輯:editor006

2015-03-31 14:41:16

摘自:TechTarget中國

George Crump:簡短的回答是你必須有Hadoop分布式文件系統來執行Hadoop分析。使用共享存儲基礎架構存儲Hadoop數據有很多好處,包括更好更有效地保護數據,多應用訪問存儲以及更好地保護Hadoop主結點。

George Crump:簡短的回答是你必須有Hadoop分布式文件系統來執行Hadoop分析。但是,通常問這個問題的時候,IT人員實際上想問的是如果存儲資源必須直接連接,哪一個是傳統的Hadoop設計。對于這個問題的答案是NO,而且還有一些很有力的理由來佐證我們不必遵從通常的設計。

什么是Hadoop分析?

Hadoop是一種用于業務分析處理的環境。允許大量的計算算來處理超大型非結構化數據集。這些數據可以來自于各種源,但是最常見的數據是通過作為物聯網的一部分的傳感器創造的數據。為了讓其分析處理是有價值的,Hadoop必須快速處理這些數據集,而且要通過Hadoop分布式文件系統(HDFS)實現。HDFS本質上將計算轉移到數據,而不是傳輸數據到計算。

大多數Hadoop環境由商用服務器集群組成,都有本地存儲。數據加載到這些結點,在那里處理那個數據集。這稱之為MapReduce功能。一旦每一個結點基于請求處理那個數據,結果就會從每一個結點發送,然后在一個主結點合并。主結點也存儲與集群管理相關的所有元數據。

Hadoop存儲替代

傳統Hadoop存儲架構的替代品利用了共享的存儲環境,這個環境是計算結點連接的。廠商提供了這種解決方案,既可以用他們自己的HDFS兼容的插件,也可以利用亞馬遜簡單存儲服務(S3)接口的Hadoop模式。

S3是一款本地的文件系統,用來讀取和編寫亞馬遜云存儲上的文件。很多對象存儲系統支持這個接口,最終可以支持運行在本地虛擬云上的Hadoop基礎架構,而不是在亞馬遜云中。這個文件系統的優勢在于Hadoop可以訪問文件,這個文件可以通過其他工具或者聯網的傳感器編寫。相反,其他的應用也可以使用Hadoop訪問文件編寫。

使用共享存儲基礎架構存儲Hadoop數據有很多好處,包括更好更有效地保護數據,多應用訪問存儲以及更好地保護Hadoop主結點。

鏈接已復制,快去分享吧

企業網版權所有?2010-2024 京ICP備09108050號-6京公網安備 11010502049343號

  • <menuitem id="jw4sk"></menuitem>

    1. <form id="jw4sk"><tbody id="jw4sk"><dfn id="jw4sk"></dfn></tbody></form>
      主站蜘蛛池模板: 绥滨县| 梨树县| 衡南县| 黎川县| 乐山市| 临沭县| 昌都县| 万荣县| 泰兴市| 濮阳市| 浦江县| 祥云县| 察雅县| 呈贡县| 剑河县| 兰溪市| 永康市| 措美县| 宁乡县| 肃宁县| 内江市| 天长市| 赤壁市| 海淀区| 鹤峰县| 惠来县| 新乡县| 泰安市| 札达县| 孟村| 噶尔县| 邯郸县| 高平市| 刚察县| 静安区| 峨眉山市| 昆明市| 象山县| 合阳县| 卓资县| 婺源县|