中文字幕av专区_日韩电影在线播放_精品国产精品久久一区免费式_av在线免费观看网站

溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務條款》

MySql的Binlog日志工具舉例分析

發布時間:2021-12-04 13:57:32 來源:億速云 閱讀:225 作者:iii 欄目:大數據

這篇文章主要介紹“MySql的Binlog日志工具舉例分析”,在日常操作中,相信很多人在MySql的Binlog日志工具舉例分析問題上存在疑惑,小編查閱了各式資料,整理出簡單好用的操作方法,希望對大家解答”MySql的Binlog日志工具舉例分析”的疑惑有所幫助!接下來,請跟著小編一起來學習吧!

Canal

定位:基于數據庫增量日志解析,提供增量數據訂閱&消費,目前主要支持了mysql。

原理:

  • canal模擬mysql slave的交互協議,偽裝自己為mysql slave,向mysql master發送dump協議

  • mysql master收到dump請求,開始推送binary log給slave(也就是canal)

  • canal解析binary log對象(原始為byte流)

MySql的Binlog日志工具舉例分析

整個parser過程大致可分為幾步:
  •  Connection獲取上一次解析成功的位置(如果第一次啟動,則獲取初始制定的位置或者是當前數據庫的binlog位點)

  • Connection建立連接,發生BINLOG_DUMP命令

  • Mysql開始推送Binary Log

  • 接收到的Binary Log通過Binlog parser進行協議解析,補充一些特定信息

  • 傳遞給EventSink模塊進行數據存儲,是一個阻塞操作,直到存儲成功

  • 存儲成功后,定時記錄Binary Log位置

   MySql的Binlog日志工具舉例分析
  • 數據過濾:支持通配符的過濾模式,表名,字段內容等

  • 數據路由/分發:解決1:n (1個parser對應多個store的模式)

  • 數據歸并:解決n:1 (多個parser對應1個store)

  • 數據加工:在進入store之前進行額外的處理,比如join

Maxwell

MySql的Binlog日志工具舉例分析
canal 由Java開發,分為服務端和客戶端,擁有眾多的衍生應用,性能穩定,功能強大;canal 需要自己編寫客戶端來消費canal解析到的數據。
maxwell相對于canal的優勢是使用簡單,它直接將數據變更輸出為json字符串,不需要再編寫客戶端。

Databus  
Databus是一種低延遲變化捕獲系統,已成為LinkedIn數據處理管道不可或缺的一部分。Databus解決了可靠捕獲,流動和處理主要數據更改的基本要求。Databus提供以下功能:

  • 源與消費者之間的隔離

  • 保證按順序和至少一次交付具有高可用性

  • 從更改流中的任意時間點開始消耗,包括整個數據的完全引導功能。

  • 分區消費

  • 源一致性保存

MySql的Binlog日志工具舉例分析

到此,關于“MySql的Binlog日志工具舉例分析”的學習就結束了,希望能夠解決大家的疑惑。理論與實踐的搭配能更好的幫助大家學習,快去試試吧!若想繼續學習更多相關知識,請繼續關注億速云網站,小編會繼續努力為大家帶來更多實用的文章!

向AI問一下細節

免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。

AI

彩票| 洪湖市| 正定县| 遵义县| 临沧市| 丹凤县| 浏阳市| 苍南县| 固阳县| 两当县| 佛冈县| 宿松县| 贵德县| 德化县| 黑水县| 霍林郭勒市| 闻喜县| 合川市| 明水县| 汉寿县| 四会市| 万盛区| 兴义市| 马山县| 南宁市| 仙桃市| 卢氏县| 巨野县| 诸城市| 绍兴市| 涞源县| 三亚市| 云浮市| 安国市| 宜州市| 于都县| 永昌县| 英德市| 莎车县| 吉安县| 若尔盖县|