Linux系統安裝Hadoop具體步驟有哪些

這篇文章將為大家詳細講解有關Linux系統安裝Hadoop具體步驟有哪些，小編覺得挺實用的，因此分享給大家做個參考，希望大家閱讀完這篇文章后可以有所收獲。

Linux系統安裝hadoop具體步驟

1.關閉防火墻

1.1.Terminal : setup

14640959177050.jpg

1.2.選擇防火墻設置,關閉防火墻(空格鍵選擇, Tab 鍵移動)

14640959604181.jpg

1.3.測試防火墻是否關閉 Terminal : service iptables status 如果返回Firewall is not running.表示成功

2.修改 hosts

2.1.Terminal: gedit /etc/hosts 2.2.添加

3.設置 ssh 自動登錄

3.1.Terminal: gedit /etc/selinux/config 3.2.設置SELINUX=disabled 3.3.Terminal: ssh-keygen -t dsa 3.4.設置登錄密碼為空(多次回車確認即可) 3.5.Terminal:

     cd ~/.ssh     cat id_dsa.pub >>authorized_keys

3.6.重啟 3.7.驗證 Terminal:ssh localhost 如果不要求輸入密碼即為成功(首次執行可能要輸入 yes確認連接)

4.安裝 jdk

4.1.下載 jdk( 注意不是 jre)(測試成功版本1.6.0_24) 4.2.如果使用虛擬機,可以通過復制粘貼將安裝包傳到 Linux 中 4.3.修改權限 Terminal:chmod 777 jdk-6u24-linux-i586.bin 4.4.解壓 Terminal:

     mv jdk-6u24-linux-i586.bin /usr/local/     cd /usr/local/     ./jdk-6u24-linux-i586.bin

4.5.改名

     mv jdk1.6.0_24 jdk

4.6.配置環境變量 Terminal:gedit /etc/profile

4.7.添加:

 export JAVA_HOME=/usr/local/jdk export PATH=$PATH:$JAVA_HOME/bin

4.8.腳本生效 Terminal:soure /etc/profile 4.9.測試 Terminal:java -version

5.安裝 hadoop

4.1.下載 hadoop(測試成功版本 1.1.2) 4.2.如果使用虛擬機,可以通過復制粘貼將安裝包傳到 Linux 中 4.3.修改權限chmod 777 hadoop-1.1.2.tar.gz 4.4.移動mv hadoop-1.1.2.tar.gz /usr/local 4.5.解壓,并重命名為 hadoop(方便使用)

 tar -xvf hadoop-1.1.2.tar.gz mv hadoop-1.1.2 hadoop

4.6.配置環境變量gedit /etc/profile 添加:

 export HADOOP_HOME=/usr/local/hadoop export PATH=$PATH:$JAVA_HOME/bin:$HADOOP_HOME/bin

腳本生效 Terminal:soure /etc/profile

4.7.修改 hadoop 配置文件 cd /usr/local/hadoop/conf 分別在以下文件中添加內容 4.7.1.hadoop-env.sh export JAVA_HOME=/usr/local/jdk/

4.7.2.core-site.xml

 configuration>     property>         name>fs.default.namename>         value>hdfs://hadoop0:9000value>         description>change your own hostnamedescription>     property>     property>         name>hadoop.tmp.dirname>         value>/usr/local/hadoop/tmpvalue>     property>   configuration>

4.7.3.hdfs-site.xml

 configuration>     property>         name>dfs.replicationname>         value>1value>     property>     property>         name>dfs.permissionsname>         value>falsevalue>     property> configuration>

4.7.4.mapred-site.xml

 configuration>     property>         name>mapred.job.trackername>         value>hadoop0:9001value>         description>change your own hostnamedescription>     property> configuration>

4.8.啟動 hadoop 啟動:

 hadoop namenode -format start-all.sh

驗證:jps

如果JobTracker``DataNode\TaskTracker\SecondaryNameNode\NameNode 五個組件均啟動,則驗證成功.

注:如果缺少組件,一般為權限問題,把 hadoop 文件夾里的 temp\tmp 清空,權限設置為777再重新啟動 hadoop 試試.

關于“Linux系統安裝Hadoop具體步驟有哪些”這篇文章就分享到這里了，希望以上內容可以對大家有一定的幫助，使各位可以學到更多知識，如果覺得文章不錯，請把它分享出去讓更多的人看到。