中文字幕av专区_日韩电影在线播放_精品国产精品久久一区免费式_av在线免费观看网站

溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務條款》

sqoop2安裝啟動

發布時間:2020-06-08 15:28:50 來源:網絡 閱讀:566 作者:王上京小伙 欄目:大數據

(1)安裝環境

         操作系統:Linux(centos6.5)

         JDK版本:1.7.0_45

         Hadoop版本:hadoop2.6.0

         Sqoop2版本:sqoop-1.99.4-bin-hadoop200

         hadoop安裝目錄:/usr/local/hadoop/hadoop-2.2.0

         Sqoop2安裝目錄:/usr/local/sqoop/sqoop-1.99.4-bin-hadoop200

         Hadoop和Sqoop都是同一個用戶hadoop下面,hadoop用戶的的家目錄:/home/hadoop


       (2)修改Sqoop2的配置文件

          1、首先修改配置文件/home/hadoop/sqoop-1.99.4-bin-hadoop200/server/conf/sqoop.properties指定hadoop的配置文件所屬路徑。

          將原來的如下配置:

  1. # Hadoop configuration directory  

  2. org.apache.sqoop.submission.engine.mapreduce.configuration.directory=/etc/hadoop/conf/  

             修改為:

  1. # Hadoop configuration directory  

  2. org.apache.sqoop.submission.engine.mapreduce.configuration.directory=/usr/local/hadoop/hadoop-2.6.0/etc/hadoop/  

               2、修改配置文件/home/hadoop/sqoop-1.99.4-bin-hadoop200/server/conf/catalina.properties。

              這里即時把/home/hadoop/hadoop-2.2.0/share/hadoop下全部的*.jar包加入到sqoop2的類路徑中去。

          將原來的如下配置:


  1. common.loader=${catalina.base}/lib,${catalina.base}/lib/*.jar,${catalina.home}/lib,${catalina.home}/lib/*.jar,${catalina.home}/../lib/*.jar,/usr/lib/hadoop/*.jar,/usr/lib/hadoop/lib/*.jar,/usr/lib/hadoop-hdfs/*.jar,/usr/lib/hadoop-hdfs/lib/*.jar,/usr/lib/hadoop-mapreduce/*.jar,/usr/lib/hadoop-mapreduce/lib/*.jar,/usr/lib/hadoop-yarn/*.jar,/usr/lib/hadoop-yarn/lib/*.jar  

             修改為:


  1. common.loader=${catalina.base}/lib,${catalina.base}/lib/*.jar,${catalina.home}/lib,${catalina.home}/lib/*.jar,${catalina.home}/../lib/*.jar,/usr/local/hadoop/hadoop-2.6.0/share/hadoop/common/*.jar,/usr/local/hadoop/hadoop-2.6.0/share/hadoop/common/lib/*.jar,/usr/local/hadoop/hadoop-2.6.0/share/hadoop/hdfs/*.jar,/usr/local/hadoop/hadoop-2.6.0/share/hadoop/hdfs/lib/*.jar,/usr/local/hadoop/hadoop-2.6.0/share/hadoop/mapreduce/*.jar,/usr/local/hadoop/hadoop-2.6.0/share/hadoop/mapreduce/lib/*.jar,/usr/local/hadoop/hadoop-2.6.0/share/hadoop/tools/*.jar,/usr/local/hadoop/hadoop-2.6.0/share/hadoop/tools/lib/*.jar,/usr/local/hadoop/hadoop-2.6.0/share/hadoop/yarn/*.jar,/usr/local/hadoop/hadoop-2.6.0/share/hadoop/yarn/lib/*.jar,/usr/local/hadoop/hadoop-2.6.0/share/hadoop/httpfs/tomcat/lib/*.jar


       (3)修改環境變量

直接修改~/.bashrc在文件末尾追加如下內容即可:   

  1. export SQOOP_HOME=/usr/local/sqoop/sqoop-1.99.4-bin-hadoop200    

  2. export PATH=$SQOOP_HOME/bin:$PATH    

  3. export CATALINA_HOME=$SQOOP_HOME/server    

  4. export LOGDIR=$SQOOP_HOME/logs  


  當然完成上述修改后需要在hadoop用戶下執行命令來讓配置即可生效:


啟停sqoop-server:

$SQOOP2_HOME/bin/sqoop.sh server start
$SQOOP2_HOME/bin/sqoop.sh server stop
或者
$SQOOP2_HOME/bin/sqoop2-server start
$SQOOP2_HOME/bin/sqoop2-server stop

驗證是否啟動成功:

方式一:jps查看進程: Bootstrap 
方式二:http://hadoop000:12000/sqoop/version

方式三:wget -qO - hadoop000:12000/sqoop/version

啟動sqoop客戶端:

$SQOOP2_HOME/bin/sqoop.sh client
或者
$SQOOP2_HOME/bin/sqoop2-shell

 

為客戶端配置服務器

sqoop:000> set server --host hadoop000 --port 12000 --webapp sqoop

查看服務器端信息:

sqoop:000> show server --all




向AI問一下細節

免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。

AI

上栗县| 丰都县| 临夏市| 浠水县| 新乐市| 宜兴市| 武义县| 武山县| 谷城县| 兴隆县| 中牟县| 高淳县| 丽水市| 桂林市| 错那县| 云南省| 丽江市| 武强县| 都安| 双辽市| 台中市| 南城县| 兴业县| 佛坪县| 兴化市| 盈江县| 株洲县| 哈密市| 罗源县| 惠水县| 红安县| 嘉峪关市| 林口县| 泽普县| 通山县| 浮山县| 西宁市| 交口县| 邛崃市| 区。| 高碑店市|