您好,登錄后才能下訂單哦!
這篇文章主要介紹“Namenode HA 知識點有哪些”,在日常操作中,相信很多人在Namenode HA 知識點有哪些問題上存在疑惑,小編查閱了各式資料,整理出簡單好用的操作方法,希望對大家解答”Namenode HA 知識點有哪些”的疑惑有所幫助!接下來,請跟著小編一起來學習吧!
HA(High Available), 高可用,是保證業務連續性的有效解決方案,一般有兩個或兩個以上的節點,分為 活動節點( Active )及 備用節點( Standby))。用于實現業務的不中斷或短暫中斷 NN 是 HDFS 集群的單點故障點。在 HA 具體實現方法不同情況下,HA 框架的流程是一致的,不一致的就是如何存儲、管理、同步 edits 編輯日志文件。
QJM/Qurom Journal Manager,基本原理就是用 2N+1 臺 JournalNode 存儲EditLog,每次寫數據操作有>=N+1 返回成功時即認為該次寫成功,數據不會丟失了在 HA 模式下,datanode 需要確保同一時間有且只有一個 NN 能命令DN。
FailoverController 主要包括三個組件:
HealthMonitor:監控 NameNode 是否處于 unavailable 或 unhealthy 狀態。當前通過 RPC 調用 NN 相應的方法完成。
ActiveStandbyElector: 監控 NN 在 ZK 中的狀態。
ZKFailoverController: 訂閱 HealthMonitor 和 ActiveStandbyElector 的事件,并管理 NN 的狀態,另外 zkfc 還負責解決 fencing(也就是腦裂問題)。
ZKFailoverController 主要職責:
健康監測:周期性的向它監控的 NN 發送健康探測命令,從而來確定某個NameNode 是否處于健康狀態,如果機器宕機,心跳失敗,那么 zkfc 就會標記它處于一個不健康的狀態
會話管理:如果 NN 是健康的,zkfc 就會在 zookeeper 中保持一個打開的會話,如果 NameNode 同時還是 Active 狀態的,那么 zkfc 還會在Zookeeper 中占有一個類型為短暫類型的 znode,當這個 NN 掛掉時,這個 znode 將會被刪除,然后備用的 NN 將會得到這把鎖,升級為主 NN,同時標記狀態為 Active。
當宕機的 NN 新啟動時,它會再次注冊 zookeper,發現已經有 znode 鎖了,便會自動變為 Standby 狀態,如此往復循環,保證高可靠,需要注意,目前僅僅支持最多配置 2 個 NNmaster 選舉:通過在 zookeeper 中維持一個短暫類型的 znode,來實現搶占式的鎖機制,從而判斷那個NameNode 為 Active 狀態。
到此,關于“Namenode HA 知識點有哪些”的學習就結束了,希望能夠解決大家的疑惑。理論與實踐的搭配能更好的幫助大家學習,快去試試吧!若想繼續學習更多相關知識,請繼續關注億速云網站,小編會繼續努力為大家帶來更多實用的文章!
免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。