中文字幕av专区_日韩电影在线播放_精品国产精品久久一区免费式_av在线免费观看网站

溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務條款》

web消息隊列有哪些

發布時間:2021-12-27 17:28:35 來源:億速云 閱讀:166 作者:iii 欄目:大數據

本篇內容主要講解“web消息隊列有哪些”,感興趣的朋友不妨來看看。本文介紹的方法操作簡單快捷,實用性強。下面就讓小編來帶大家學習“web消息隊列有哪些”吧!

消息隊列

消息隊列中間件是分布式系統中重要的組件,主要解決應用耦合,異步消息,流量削鋒等問題 實現高性能,高可用,可伸縮和最終一致性架構 使用較多的消息隊列有ActiveMQ,RabbitMQ,ZeroMQ,Kafka,MetaMQ,RocketMQ等。

應用場景

消息隊列在實際應用中常用的使用場景。異步處理,應用解耦,流量削鋒和消息通訊四個場景。

  • 異步處理

場景說明:用戶注冊后,需要發注冊郵件和注冊短信。

傳統的做法有兩種 1.串行的方式;2.并行方式

  1. 串行方式:將注冊信息寫入數據庫成功后,發送注冊郵件,再發送注冊短信。以上三個任務全部完成后,返回給客戶端。

  2. 并行方式:將注冊信息寫入數據庫成功后,發送注冊郵件的同時,發送注冊短信。以上三個任務完成后,返回給客戶端。與串行的差別是,并行的方式可以提高處理的時間。

假設三個業務節點每個使用50毫秒鐘,不考慮網絡等其他開銷,則串行方式的時間是150毫秒,并行的時間可能是100毫秒。

因為CPU在單位時間內處理的請求數是一定的,假設CPU1秒內吞吐量是100次。則串行方式1秒內CPU可處理的請求量是7次(1000/150)。并行方式處理的請求量是10次(1000/100)。

引入消息隊列后,將不是必須的業務邏輯,異步處理。

用戶的響應時間相當于是注冊信息寫入數據庫的時間,也就是50毫秒。注冊郵件,發送短信寫入消息隊列后,直接返回,因此寫入消息隊列的速度很快,基本可以忽略,因此用戶的響應時間可能是50毫秒。因此架構改變后,系統的吞吐量提高到每秒20 QPS。比串行提高了3倍,比并行提高了兩倍。

  • 應用解耦

用戶下單后,訂單系統需要通知庫存系統。傳統的做法是,訂單系統調用庫存系統的接口。

避免接口的方式,加入消息隊列。

訂單系統:用戶下單后,訂單系統完成持久化處理,將消息寫入消息隊列,返回用戶訂單下單成功。

庫存系統:訂閱下單的消息,采用拉/推的方式,獲取下單信息,庫存系統根據下單信息,進行庫存操作。

假如:在下單時庫存系統不能正常使用。也不影響正常下單,因為下單后,訂單系統寫入消息隊列就不再關心其他的后續操作了。實現訂單系統與庫存系統的應用解耦。

  • 流量削鋒

流量削鋒也是消息隊列中的常用場景,一般在秒殺或團搶活動中使用廣泛。

秒殺活動,一般會因為流量過大,導致流量暴增,應用掛掉。為解決這個問題,一般需要在應用前端加入消息隊列。

  1. 可以控制活動的人數

  2. 可以緩解短時間內高流量壓垮應用

用戶的請求,服務器接收后,首先寫入消息隊列。假如消息隊列長度超過最大數量,則直接拋棄用戶請求或跳轉到錯誤頁面。

秒殺業務根據消息隊列中的請求信息,再做后續處理。

  • 消息通訊

日志處理是指將消息隊列用在日志處理中,比如Kafka的應用,解決大量日志傳輸的問題。

  1. 日志采集客戶端,負責日志數據采集,定時寫受寫入Kafka隊列。

  2. Kafka消息隊列,負責日志數據的接收,存儲和轉發。

  3. 日志處理應用:訂閱并消費kafka隊列中的日志數據。

大數據量下隊列對比

有代表性的幾個MQ(rabbitMQ,kafka,ActiveMQ)進行一下簡單的對比。

具體的對比如下:

  • TPS比較:

Kafka最高,RabbitMq 次之, ActiveMq 最差。

  • 吞吐量對比:

kafka具有高的吞吐量,內部采用消息的批量處理,zero-copy機制,數據的存儲和獲取是本地磁盤順序批量操作,具有O(1)的復雜度,消息處理的效率很高。 rabbitMQ在吞吐量方面稍遜于kafka,他們的出發點不一樣,rabbitMQ支持對消息的可靠的傳遞,支持事務,不支持批量的操作;基于存儲的可靠性的要求存儲可以采用內存或者硬盤。

  • 在架構模型方面:

RabbitMQ遵循AMQP協議,RabbitMQ的broker由Exchange,Binding,queue組成,其中exchange和binding組成了消息的路由鍵;客戶端Producer通過連接channel和server進行通信,Consumer從queue獲取消息進行消費(長連接,queue有消息會推送到consumer端,consumer循環從輸入流讀取數據)。rabbitMQ以broker為中心;有消息的確認機制。

kafka遵從一般的MQ結構,producer,broker,consumer,以consumer為中心,消息的消費信息保存的客戶端consumer上,consumer根據消費的點,從broker上批量pull數據;無消息確認機制。

  • 在可用性方面,

rabbitMQ支持miror的queue,主queue失效,miror queue接管。 kafka的broker支持主備模式。

activeMq也支持主備模式。

kafka采用zookeeper對集群中的broker、consumer進行管理,可以注冊topic到zookeeper上;通過zookeeper的協調機制,producer保存對應topic的broker信息,可以隨機或者輪詢發送到broker上;并且producer可以基于語義指定分片,消息發送到broker的某分片上。

rabbitMQ的負載均衡需要單獨的loadbalancer進行支持。

  • 綜合對比

ActiveMQ: 歷史悠久的開源項目,已經在很多產品中得到應用,實現了JMS1.1規范,可以和spring-jms輕松融合,實現了多種協議,不夠輕巧(源代碼比RocketMQ多),支持持久化到數據庫,對隊列數較多的情況支持不好。

RabbitMq: 它比kafka成熟,支持AMQP事務處理,在可靠性上,RabbitMq超過kafka,在性能方面超過ActiveMQ。

Kafka: Kafka設計的初衷就是處理日志的,不支持AMQP事務處理,可以看做是一個日志系統,針對性很強,所以它并沒有具備一個成熟MQ應該具備的特性 Kafka的性能(吞吐量、tps)比RabbitMq要強,如果用來做大數據量的快速處理是比RabbitMq有優勢的。

最后結一張綜合的對比:

web消息隊列有哪些

到此,相信大家對“web消息隊列有哪些”有了更深的了解,不妨來實際操作一番吧!這里是億速云網站,更多相關內容可以進入相關頻道進行查詢,關注我們,繼續學習!

向AI問一下細節

免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。

web
AI

芮城县| 芦溪县| 临沂市| 射阳县| 务川| 金昌市| 清河县| 寿阳县| 资中县| 庆云县| 汤原县| 郴州市| 嘉义县| 平湖市| 大余县| 屏东县| 克什克腾旗| 宁明县| 岳普湖县| 乡宁县| 南部县| 扎囊县| 凭祥市| 徐水县| 曲沃县| 无极县| 讷河市| 霞浦县| 丰镇市| 乌恰县| 开阳县| 潢川县| 孟连| 海口市| 泰安市| 舒兰市| 贡嘎县| 巫山县| 调兵山市| 赤峰市| 察隅县|