455
汽車大全
《Hadoop與大數據挖掘》一2.2 Hadoop配置及IDE配置
本節書摘來華章計算機《Hadoop與大數據挖掘》一書中的第2章 ，第2.2節，張良均 樊 哲 位文超 劉名軍 許國傑 周 龍 焦正升 著 更多章節內容可以訪問雲棲社區“華章計算機”公眾號查看。
2.2 Hadoop配置及IDE配置
2.2.1 準備工作
相關軟件及版本如表2-1所示。
在安裝配置Hadoop集群前，需要先準備需要的機器。按照下麵的順序配置相關機器：
1）新建虛擬機master，安裝Linux係統（本書使用的是CentOS 6.7 64位）；
2）配置固定IP；
3）關閉防火牆；
4）安裝必要軟件；
5）克隆master到slave1、slave2、slave3；
6）修改slave1～slave3的IP，改為固定IP。
虛擬機參數配置如下。
1）master：1.5G～2G內存、20G硬盤、NAT、1～2核
2）slave1～slave3：1G內存、20G硬盤、NAT、1核
上麵的虛擬機參數配置隻是參考，可以根據自身機器的實際情況進行調整。
在配置好Hadoop集群所需機器後，先確認下集群拓撲，本次部署采用的集群拓撲如圖2-16所示。
如文中未做說明，則所有操作都是在root用戶下執行。但是，在生產環節，一般不會使用root用戶，這點需要注意。
最後更新：2017-06-26 09:31:58