溫馨提示×
您好，登錄后才能下訂單哦！
點擊 登錄注冊 即表示同意《億速云用戶服務條款》
您好，登錄后才能下訂單哦！
這篇文章給大家介紹怎樣解析Hadoop，內容非常詳細，感興趣的小伙伴們可以參考借鑒，希望對大家能有所幫助。
Hadoop簡介
Hadoop是一個分布式系統基礎架構，由Apache基金會開發。用戶可以在不了解分布式底層細節的情況下，開發分布式程序。充分利用集群的威力高速運算和存儲。
簡單地說來，Hadoop是一個可以更容易開發和運行處理大規模數據的軟件平臺。
Hadoop實現了一個分布式文件系統（HadoopDistributedFileSystem），簡稱HDFS。HDFS有著高容錯性（fault-tolerent）的特點，并且設計用來部署在低廉的（low-cost）硬件上。而且它提供高傳輸率（highthroughput）來訪問應用程序的數據，適合那些有著超大數據集（largedataset）的應用程序。HDFS放寬了（relax）POSIX的要求（requirements）這樣可以流的形式訪問（streamingaccess）文件系統中的數據。
Hadoop是一個分布式計算基礎設施，它包含一系列相關的子項目，這些項目都隸屬于Apache軟件基金會（ASF）。ASF為這些開源社區項目提供支持。Hadoop里***的是MapReduce和分布式文件系統（HDFS），其他的子系統提供了一些附加功能，或者在core上增加了一些高級的抽象。下面Hadoop簡介向你介紹一下Hadoop子系統的一些附加功能。
Core
分布式系統和通用IO組件和接口（序列化，Java遠程過程調用等等）。
Avro
支持跨語言過程調用，持久數據存儲的數據序列化系統。
MapReduce
構建在廉價的PC機器上的分布式數據處理模型和運行環境。
HDFS
Hadoop簡介中的HDFS構建在廉價的PC機器上的分布式文件系統。
Pig
處理海量數據集的數據流語言和運行環境。pig運行在HDFS和MapReduce之上。
HBase
分布式，面向列的數據庫。HBase使用HDFS作為底層存儲，同時使用MapReduce支持批處理模式的計算和隨機查詢。
ZooKeeper
提供分布式、高效的協作服務。ZooKeeper提供分布式鎖這樣的原子操作，可以用來構建分布式應用。
Hive
分布式數據倉庫，Hive使用HDFS存儲數據，提供類似SQL的語言（轉換為MapReduce任務）查詢數據。
Chukwa
分布式數據采集和分析系統。使用HDFS存儲數據，使用Mapreduce輸出分析報告。
關于怎樣解析Hadoop就分享到這里了，希望以上內容可以對大家有一定的幫助，可以學到更多知識。如果覺得文章不錯，可以把它分享出去讓更多的人看到。
免責聲明：本站發布的內容（圖片、視頻和文字）以原創、轉載和分享為主，文章觀點不代表本網站立場，如果涉及侵權請聯系站長郵箱：is@yisu.com進行舉報，并提供相關證據，一經查實，將立刻刪除涉嫌侵權內容。
