閱讀470 返回首頁    go 阿裏雲 go 技術社區[雲棲]


[Hadoop係列]Hadoop的安裝-1.本地模式

  inkfish原創,請勿商業性質轉載,轉載請注明來源(https://blog.csdn.net/inkfish )。

  Hadoop是Apache基金會下的一個開源雲計算平台項目。當前最新版本是hadoop 0.20.1。下麵就hadoop 0.20.1為藍本,介紹在Ubuntu Linux 9.10下安裝hadoop的方法。(來源:https://blog.csdn.net/inkfish)

支持的平台:(來源:https://blog.csdn.net/inkfish)
  Linux,可作為開發和產品部署的平台;
  Windows,可作為開發平台。

事先需要的軟件:(來源:https://blog.csdn.net/inkfish)
  1.JavaTM1.6.x,必須安裝,建議選擇Sun公司發行的Java版本;
  2.ssh必須安裝,並保證sshd運行,hadoop將以ssh進行通訊;
  3.如果是windows,則需要裝Cygwin,用以支持shell命令。

安裝可用的模式:(來源:https://blog.csdn.net/inkfish)
  1.本地模式;
  2.偽分布模式;
  3.全分布模式。

本地模式安裝步驟:(來源:https://blog.csdn.net/inkfish)
  1.將hadoop安裝包解壓縮到某目錄下;
  2.修改conf/hadoop-env.sh文件,export JAVA_HOME= 那行設置正確的JAVA_HOME 位置,當然如果事先在操作係統已經set完JAVA_HOME ,可以忽略此步驟;


  本地模式安裝完了,就這麼簡單!

 

測試一下運行效果:(來源:https://blog.csdn.net/inkfish)

  $ mkdir input
  $ cp conf/*.xml input
  $ bin/hadoop jar hadoop-*-examples.jar grep input output 'dfs[a-z.]+'
  $ cat output/*

這個示例程序是hadoop自帶的,用於把conf下的xml文件拷貝到input目錄下,並且找到並顯示所有與最後一個參數的正則表達式相匹配的行,output是輸出文件夾。

最後更新:2017-04-02 04:01:44

  上一篇:go 讓技術人員看得懂的流程(2)——用例模型
  下一篇:go 你真的了解html嗎?--之script標簽介紹