Ubuntu安裝hadoop並做單機測試

1.配置jdk

見前文

2. 下載解壓hadoop

這裡以2.7.7版本為例，將文件剪切到/usr/local裡面並更改名字為hadoop方便後續配置

3. 為

hadoop

配置jdk版本呢

設置

hadoop

目錄下的

env

文件，

hadoop/etc/hadoop-env.sh

文件，注意這裡的

etc

是在

hadoop

目錄下的

etc

，大家注意命令執行的路徑，在裡面定義

jdk

目錄，建議將

hadoop_home

和

path

也定義一下

4. 為hadoop設置環境變數

這裡直接設置

~/.bashrc

,設置相關配置即可，

HADOOP_HOME

是我的

hadoop

文件路徑，大家根據個人情況更改即可，最後的

PATH

因為我在bashrc裡面同時配置了

jdk

、

hadoop

和

hbase

，所以如果有和我情況相同的小夥伴建議將PATH下在一起，像注釋那樣

5. 設置ip映射

配置

hosts

文件，為主機增加IP映射

6. 增加用戶並授權

一般我們測試的時候都會使用

hadoop

或者hduser一類的用戶，當測試的時候切換到對應用戶並進行操作，也可以使用其他用戶(主機用戶)，但是記得對用戶進行授權，否則當後面操作的時候會因為不能訪問文件而導致錯誤。

7. 單機測試

進入

hadoop

目錄，建立

input

文件夾，複製幾個文件當作輸入數據源(這裡採用的是

hadoop/etc/*.xml

),然後執行

haddop

自帶的關鍵字提取方法進行檢驗，將結果輸出到

output

文件當中，__注意：__二次實驗時需要事先刪除

output

文件

8. 結果

執行完畢後目錄下會出現

output

文件夾，查看裡面的文件的內容即可

喜歡這篇文章嗎？立刻分享出去讓更多人知道吧！