成人免费xxxxx在线视频软件_久久精品久久久_亚洲国产精品久久久_天天色天天色_亚洲人成一区_欧美一级欧美三级在线观看

Hadoop機架感知及啟動停止方法詳解

開發 架構 Hadoop
Hadoop相信大家應該有所了解,那么Hadoop的機架感知你知道嗎,這里就向大家介紹一下Hadoop的機架感知以及如何啟動和停止Hadoop方面的內容。

在學習Hadoop的過程中,你可能會遇到Hadoop的機架感知方面的問題,本節就向大家介紹一下Hadoop的機架感知方面的知識以及Hadoop的啟動和停止的方法,歡迎大家一起來學習。下面是具體講解。

Hadoop的機架感知

HDFS和Map/Reduce的組件是能夠感知機架的。

NameNode和JobTracker通過調用管理員配置模塊中的APIresolve來獲取集群里每個slave的機架id。該API將slave的DNS名稱(或者IP地址)轉換成機架id。使用哪個模塊是通過配置項

topology.node.switch.mapping.impl來指定的。模塊的默認實現會調用topology.script.file.name配置項指定的一個的腳本/命令。如果topology.script.file.name未被設置,對于所有傳入的IP地址

,模塊會返回/default-rack作為機架id。在Map/Reduce部分還有一個額外的配置項mapred.cache.task.levels,該參數決定cache的級數(在網絡拓撲中)。例如,如果默認值是2,會建立兩級的cache-一級針對主機(主機->任務的映射)另一級針對機架(機架->任務的映射)。

啟動Hadoop

啟動Hadoop集群需要啟動HDFS集群和Map/Reduce集群。

格式化一個新的分布式文件系統:
$bin/hadoopnamenode-format

在分配的NameNode上,運行下面的命令啟動HDFS:
$bin/start-dfs.sh

bin/start-dfs.sh腳本會參照NameNode上${HADOOP_CONF_DIR}/slaves文件的內容,在所有列出的slave上啟動DataNode守護進程。

在分配的JobTracker上,運行下面的命令啟動Map/Reduce:
$bin/start-mapred.sh

bin/start-mapred.sh腳本會參照JobTracker上${HADOOP_CONF_DIR}/slaves文件的內容,在所有列出的slave上啟動TaskTracker守護進程。

停止Hadoop

在分配的NameNode上,執行下面的命令停止HDFS:
$bin/stop-dfs.sh

bin/stop-dfs.sh腳本會參照NameNode上${HADOOP_CONF_DIR}/slaves文件的內容,在所有列出的slave上停止DataNode守護進程。

在分配的JobTracker上,運行下面的命令停止Map/Reduce:
$bin/stop-mapred.sh


bin/stop-mapred.sh腳本會參照JobTracker上${HADOOP_CONF_DIR}/slaves文件的內容,在所有列出的slave上停止TaskTracker守護進程。

【編輯推薦】

  1. 技術分享 Hadoop集群搭建方法
  2. 實例講解Hadoop用法
  3. Hadoop集群與Hadoop性能優化
  4. HadoopHBase實現配置簡單的單機環境
  5. Hadoop命令大全

 

 

責任編輯:佚名 來源: csdn.net
相關推薦

2010-06-07 09:14:55

Hadoop集群

2010-06-03 15:39:47

Hadoop配置

2009-06-11 09:42:57

netbeans啟動參數

2010-10-19 09:45:23

SQL Server命

2010-06-07 09:26:32

Hadoop集群

2010-11-10 10:59:52

Sql Server服

2010-05-24 14:59:29

Hadoop集群

2010-06-03 17:38:03

Hadoop命令

2011-03-21 10:19:35

啟動停止Nagios

2010-01-28 13:43:48

Android啟動Ja

2020-10-14 10:25:20

深度學習機器學習神經網絡

2010-05-26 18:32:07

SVN庫

2011-03-03 16:18:29

VSFTPD啟動停止

2010-09-29 14:56:42

啟動DHCP服務

2020-07-30 12:50:06

RFID感知應用

2010-08-12 09:30:08

Flex內存泄露

2021-09-29 06:03:37

JavaScriptreduce() 前端

2009-08-28 16:01:20

C#啟動停止SQL數據

2014-08-06 09:57:15

hadoop ShelShell命令

2014-01-07 09:38:34

OpenFlowSDN測試
點贊
收藏

51CTO技術棧公眾號

主站蜘蛛池模板: 国产视频中文字幕 | 亚洲一区二区三区视频免费观看 | 日本人爽p大片免费看 | 精品免费 | 国产电影一区二区 | 欧美久久久久 | 欧美1区2区 | 亚洲精品福利在线 | 91免费在线 | 免费看黄色视屏 | 在线日韩视频 | 羞羞视频在线观看网站 | 999视频在线播放 | 久久国产精品无码网站 | 99久久精品一区二区成人 | 日本精品在线观看 | 一级毛片观看 | 日韩一区二区不卡 | 99久久99久久精品国产片果冰 | 国产欧美日韩精品在线观看 | 国产精品毛片 | 亚洲精品高清视频 | 亚洲精品久久国产高清情趣图文 | 古典武侠第一页久久777 | 欧美黄色免费网站 | 毛片高清 | 成人在线一区二区三区 | 久久最新 | 99国内精品| 日韩一二三区 | 日本h片在线观看 | 欧美日韩在线成人 | 成人欧美一区二区三区黑人孕妇 | 在线国产小视频 | 欧美国产一区二区 | 精品国产精品国产偷麻豆 | 午夜影院在线观看免费 | 91精品国产综合久久婷婷香蕉 | 99久久婷婷国产综合精品 | 欧美区在线 | 一区久久|