中文字幕av专区_日韩电影在线播放_精品国产精品久久一区免费式_av在线免费观看网站

溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務條款》

怎么查看Kafka的Topic消費情況

發布時間:2021-12-08 15:45:10 來源:億速云 閱讀:5407 作者:小新 欄目:大數據

這篇文章主要介紹了怎么查看Kafka的Topic消費情況,具有一定借鑒價值,感興趣的朋友可以參考下,希望大家閱讀完這篇文章之后大有收獲,下面讓小編帶著大家一起了解一下。

1.文檔編寫目的


在我們的應用程序消費Kafka的Topic消息時,我們會關注Topic中消息總量以及消費情況,那接下來Fayson就主要介紹下如何在CDH集群中使用命令行的方式查看Topic的消費情況。

  • 本次Fayson的測試環境為

1.CM和CDH版本為5.15

2.Redhat7.4

3.Kafka 0.10.2+kafka2.2.0

2.命令行查看


在Kafka的腳本里提供了kafka-run-class.sh的腳本,使用該腳本查看Consumer組內消費Topic的Offset情況。

怎么查看Kafka的Topic消費情況

1.在命令行執行如下命令查看指定Topic及ConsumerGroup的消費情況

[root@cdh01 bin]# kafka-run-class kafka.tools.ConsumerOffsetChecker --zookeeper cdh01.fayson.com:2181 --group test --topic kafka_kudu_topic_offset_3

第一次執行查看到kafka_kudu_topic_offset_3的testgroup組各個Partition的Offset消費情況以及每個Partition的總消息量。

怎么查看Kafka的Topic消費情況

2.kafka_kudu_topic_offset_3的Topic發送600條消息,再次執行命令查看消費情況

怎么查看Kafka的Topic消費情況

此時沒有消費的應用運行,可以看到Offset的數據未發生變化,而logSize的數據量有增加,每個partition的數量增加200條,剛好為我發送的消息數量。

3.啟動消費程序消費Topic的消息,再次執行命令查看消費情況

怎么查看Kafka的Topic消費情況

在消費應用運行時,每個Partition的Offset數據發生變化,此時的Offset的數據與logSize的數據一致,在應用日志中也無新的消息接收,說明Topic的消息已被testgroup組消費完。

感謝你能夠認真閱讀完這篇文章,希望小編分享的“怎么查看Kafka的Topic消費情況”這篇文章對大家有幫助,同時也希望大家多多支持億速云,關注億速云行業資訊頻道,更多相關知識等著你來學習!

向AI問一下細節

免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。

AI

资讯| 南宁市| 汉源县| 高淳县| 赤壁市| 安泽县| 卓资县| 财经| 天门市| 漳平市| 神农架林区| 五华县| 定边县| 徐水县| 油尖旺区| 和平县| 西贡区| 兴和县| 榆社县| 密云县| 石家庄市| 宿迁市| 维西| 阿城市| 平湖市| 若尔盖县| 康平县| 德昌县| 香河县| 海林市| 佛学| 彰武县| 阜新| 昌黎县| 澄江县| 伊宁市| 高青县| 木兰县| 朝阳县| 枝江市| 五寨县|