溫馨提示×
您好，登錄后才能下訂單哦！
點擊 登錄注冊 即表示同意《億速云用戶服務條款》
您好，登錄后才能下訂單哦！
core-site.xml是全局配置；
hdfs-site.xml和mapred-site.xml分別是hdfs和mapred的局部配置；
HDFS端口
| 參數 | 描述 | 默認 | 配置文件 | 例子值 |
| fs.default.name | namenode RPC交互端口 | 8020 | core-site.xml | hdfs://master:8020/ |
| dfs.http.address | NameNode web管理端口 | 50070 | hdfs-site.xml | 0.0.0.0:50070 |
| dfs.datanode.address | datanode 控制端口 | 50010 | hdfs-site.xml | 0.0.0.0:50010 |
| dfs.datanode.ipc.address | datanode的RPC服務器地址和端口 | 50020 | hdfs-site.xml | 0.0.0.0:50020 |
| dfs.datanode.http.address | datanode的HTTP服務器和端口 | 50075 | hdfs-site.xml | 0.0.0.0:50075 |
MR端口
| 參數 | 描述 | 默認 | 配置文件 | 例子值 |
| mapred.job.tracker | job tracker交互端口 | 8021 | mapred-site.xml | hdfs://master:8021/ |
| mapred.job.tracker.http.address | job tracker的web管理端口 | 50030 | mapred-site.xml | 0.0.0.0:50030 |
| mapred.task.tracker.http.address | task tracker的HTTP端口 | 50060 | mapred-site.xml | 0.0.0.0:50060 |
其他端口
| 參數 | 描述 | 默認 | 配置文件 | 例子值 |
| dfs.secondary.http.address | secondary NameNode web管理端口 | 50090 | hdfs-site.xml | 0.0.0.0:28680 |
| 參數 | 描述 | 默認 | 配置文件 | 例子值 |
| dfs.name.dir | name node的元數據,以,號隔開,hdfs會把元數據冗余復制到這些目錄，一般這些目錄是不同的塊設備，不存在的目錄會被忽略掉 | {hadoop.tmp.dir} /dfs/name | hdfs-site.xm | /hadoop/hdfs/name |
| dfs.name.edits.dir | node node的事務文件存儲的目錄,以,號隔開,hdfs會把事務文件冗余復制到這些目錄，一般這些目錄是不同的塊設備，不存在的目錄會被忽略掉 | ${dfs.name.dir} | hdfs-site.xm | ${dfs.name.dir} |
| fs.checkpoint.dir | secondary NameNode的元數據以,號隔開,hdfs會把元數據冗余復制到這些目錄，一般這些目錄是不同的塊設備，不存在的目錄會被忽略掉 | ${hadoop.tmp.dir} /dfs/namesecondary | core-site.xml | /hadoop/hdfs/namesecondary |
| fs.checkpoint.edits.dir | secondary NameNode的事務文件存儲的目錄,以,號隔開,hdfs會把事務文件冗余復制到這些目錄 | ${fs.checkpoint.dir} | core-site.xml | ${fs.checkpoint.dir} |
| hadoop.tmp.dir | 臨時目錄,其他臨時目錄的父目錄 | /tmp/hadoop-${user.name} | core-site.xml | /hadoop/tmp/hadoop-${user.name} |
| dfs.data.dir | data node的數據目錄,以,號隔開,hdfs會把數據存在這些目錄下，一般這些目錄是不同的塊設備，不存在的目錄會被忽略掉 | ${hadoop.tmp.dir} /dfs/data | hdfs-site.xm | /hadoop/hdfs/data1/data, /hadoop/hdfs/data2/data |
| mapred.local.dir | MapReduce產生的中間數據存放目錄,以,號隔開,hdfs會把數據存在這些目錄下，一般這些目錄是不同的塊設備，不存在的目錄會被忽略掉 | ${hadoop.tmp.dir} /mapred/local | mapred-site.xml | /hadoop/hdfs/data1/mapred/local, /hadoop/hdfs/data2/mapred/local |
| mapred.system.dir | MapReduce的控制文件 | ${hadoop.tmp.dir} /mapred/system | mapred-site.xml | /hadoop/hdfs/data1/system |
| 參數 | 描述 | 默認 | 配置文件 | 例子值 |
| dfs.support.append | 支持文件append，主要是支持hbase | false | hdfs-site.xml | true |
| dfs.replication | 文件復制的副本數，如果創建時不指定這個參數，就使用這個默認值作為復制的副本數 | 3 | hdfs-site.xml | 2 |
分類: hadoop
免責聲明：本站發布的內容（圖片、視頻和文字）以原創、轉載和分享為主，文章觀點不代表本網站立場，如果涉及侵權請聯系站長郵箱：is@yisu.com進行舉報，并提供相關證據，一經查實，將立刻刪除涉嫌侵權內容。
