中文字幕av专区_日韩电影在线播放_精品国产精品久久一区免费式_av在线免费观看网站

溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務條款》

【總結】Hadoop配置文件core-site.xml

發布時間:2020-09-13 14:12:42 來源:網絡 閱讀:2129 作者:巧克力黒 欄目:大數據
<property>
<name>fs.defaultFS</name>
    <value>hdfs://ns1</value>
  <description>缺省文件服務的協議和NS邏輯名稱,和hdfs-site里的對應此配置替代了1.0里的
fs.default.name,ns1 與 
hdfs-site.xml中的dfs.nameservices配置項對應</description>
</property>

<property>
<name>hadoop.tmp.dir</name>
    <value>/hadoop/1/tmp/hadoop-${user.name}${hue.suffix}</value>
  <description>A base for other temporary 
directories.存放一些解壓jar包后的class文件,類似 
hadoop-unjar3569575687995621667,hdfs-site.xml配置文件中
dfs.namenode.name.dir;dfs.datanode.data.dir;dfs.namenode.checkpoint.dir等
配置項會用到該配置項內容</description>
</property>

<property>
        <name>io.compression.codecs</name>
        <value>
            org.apache.hadoop.io.compress.DefaultCodec,
            org.apache.hadoop.io.compress.GzipCodec,
            com.hadoop.compression.lzo.LzopCodec,
            org.apache.hadoop.io.compress.BZip2Codec,
            org.apache.hadoop.io.compress.SnappyCodec,
            org.apache.hadoop.io.compress.Lz4Codec
        </value>
        <description>提供壓縮/解壓的java工具</description>
</property>

<property>
        <name>io.file.buffer.size</name>
        <value>131072</value>  128M
        <description>SequenceFiles在讀寫中可以使用的緩存大小,在x86系統上一般配置4096倍數;決定了在讀寫過程當中,有多大的緩存</description>
</property>

<property>
        <name>ha.zookeeper.quorum</name>
        <value>nn1.cc.bi:2181,nn2.cc.bi:2181,s1.cc.bi:2181</value>
  
      <description>A list of ZooKeeper server addresses, separated
 by commas, that are to be used by the ZKFailoverController in automatic
 failover</description>
</property>

<property>
        <name>ipc.client.connection.maxidletime</name>
        <value>60000</value>
        <description>超出客戶端與服務器連接的最大空閑期maxidletime,斷開服務器與客戶端的連接</description>
</property>

<property>
        <name>io.seqfile.compression.type</name>
        <value>BLOCK</value>
  
      <description>Hadoop SequenceFile 
是一個由二進制形式key/value的字節流組成的存儲文件,SequenceFile可壓縮可切分,非常適合hadoop文件存儲特 
性,SequenceFile的寫入由SequenceFile.Writer來實現, 
根據壓縮類型SequenceFile.Writer又派生出兩個子類SequenceFile.BlockCompressWriter和 
SequenceFile.RecordCompressWriter, 
壓縮方式由SequenceFile類的內部枚舉類CompressionType來表示,定義了三種方式[NONE|RECORD|BLOCK],
CompressionType.NONE 時 記錄信息不壓縮
CompressionType.RECORD 時 記錄信息壓縮(單條記錄壓縮)
CompressionType.BLOCK  一個block內會有多條記錄組成,壓縮是作用在block之上的,比RECODE方式能獲得更好的壓縮比
</description>
</property>

<property>
    <name>topology.script.file.name</name>
    <value>/usr/local/hadoop/etc/hadoop/topology.sh</value>
    <description>機架識別腳本</description>
</property>




向AI問一下細節

免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。

AI

莒南县| 鄂托克前旗| 璧山县| 盐池县| 江山市| 清水河县| 介休市| 宁陕县| 青州市| 胶南市| 南投市| 吕梁市| 克山县| 黔西| 汶川县| 珠海市| 同江市| 洛浦县| 独山县| 新余市| 紫云| 漯河市| 七台河市| 夏河县| 穆棱市| 陆川县| 沽源县| 松溪县| 汝城县| 施甸县| 麻阳| 山西省| 涡阳县| 上蔡县| 昭通市| 新绛县| 华安县| 烟台市| 喀喇沁旗| 突泉县| 海兴县|