66
汽車大全
《Hadoop與大數據挖掘》一2.2.3 集群啟動關閉與監控
本節書摘來華章計算機《Hadoop與大數據挖掘》一書中的第2章 ,第2.2.3節,張良均 樊 哲 位文超 劉名軍 許國傑 周 龍 焦正升 著 更多章節內容可以訪問雲棲社區“華章計算機”公眾號查看。
2.2.3 集群啟動關閉與監控
啟動集群,隻需要在master節點(NameNode服務所在節點)直接進入Hadoop安裝目錄,分別執行如代碼清單2-16所示的命令即可。
代碼清單2-16 啟動Hadoop集群
cd $HADOOP_HOME // 進入Hadoop安裝目錄
bin/start-dfs.sh // 啟動HDFS相關服務
bin/start-yarn.sh // 啟動YARN相關服務
bin/mr-jobhistory-daemon.sh start historyserver // 啟動日誌相關服務
關閉集群,同樣隻需要在master節點(NameNode服務所在節點)直接進入Hadoop安裝目錄,分別執行如代碼清單2-17所示的命令即可(注意關閉順序)。
代碼清單2-17 關閉Hadoop集群
cd $HADOOP_HOME // 進入Hadoop安裝目錄
bin/stop-yarn.sh // 關閉YARN相關服務
bin/stop-dfs.sh // 關閉HDFS相關服務
bin/mr-jobhistory-daemon.sh stop historyserver // 關閉日誌相關服務
Hadoop集群相關服務監控如表2-2所示,其監控示意分別如圖2-17、圖2-18、圖2-19所示。
表2-2 Hadoop集群監控相關端口
服 務 Web接口 默 認 端 口
NameNode https://namenode_host:port/ 50070
ResourceManager https://resourcemanager_host:port/ 8088
MapReduce JobHistory Server https://jobhistoryserver_host:port/ 19888
最後更新:2017-06-26 09:32:02