免费观看又色又爽又黄的小说免费_美女福利视频国产片_亚洲欧美精品_美国一级大黄大色毛片

hadoop學習筆記1---Hadoop體系介紹

1、Namenode

創新互聯專注于天心網站建設服務及定制,我們擁有豐富的企業做網站經驗。 熱誠為您提供天心營銷型網站建設,天心網站制作、天心網頁設計、天心網站官網定制、小程序開發服務,打造天心網絡公司原創品牌,更為您提供天心網站排名全網營銷落地服務。

HDFS的守護進程

記錄文件時如何分割成數據塊的,以及這些數據塊被存儲到哪些節點上

對內存和I/O進行集中管理

是個單點,發生故障將使集群崩潰

2、Secondary Namenode

監控HDFS狀態的輔助后臺程序

每個集群都有一個

與NameNode進行通訊定期保存HDFS元數據快照

當NameNode故障可以作為備用NameNode使用

3、DataNode

每臺從服務器都運行一個

負責把HDFS數據塊讀寫到本地文件系統

4、JobTracker

用于處理作業(用戶提交代碼)的后臺程序

決定有哪些文件參與處理,然后切割task并分配節點

監控task,重啟失敗的task(于不同的幾點)

每個集群只有唯一一個JobTracker,位于Master節點

5、TaskTracker

位于slave節點上,與datanode結合(代碼與數據一起的原則)

管理各自節點上的task(由jobtracker分配)

每個節點只有一個tasktracker,但一個tasktracker可以啟動多個JVM,用于并行執行map或reduce任務

與jobtracker交互

1.6、Master和Slave

Master:Namenode、Secondary Namenode、jobtracker。瀏覽器(用于觀看管理界面),其它Hadoop工具

Slave:Tasktracker、Datenode

Master不是唯一的

網站標題:hadoop學習筆記1---Hadoop體系介紹
網站地址:http://newbst.com/article12/jhcggc.html

成都網站建設公司_創新互聯,為您提供App設計標簽優化移動網站建設網站導航網站排名手機網站建設

廣告

聲明:本網站發布的內容(圖片、視頻和文字)以用戶投稿、用戶轉載內容為主,如果涉及侵權請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網站立場,如需處理請聯系客服。電話:028-86922220;郵箱:631063699@qq.com。內容未經允許不得轉載,或轉載時需注明來源: 創新互聯

外貿網站制作