確認

来源:https://www.cnblogs.com/cjsblog/archive/2018/01/22/8331653.html
-Advertisement-
Play Games

Consumer Acknowledgements and Publisher Confirms 消費者到RabbitMQ的投遞處理確認在AMQP 0-9-1中被稱之為“acknowledgements”;而RabbitMQ給生產者的確認是協議的擴展,這種協議擴展被叫做“publisher conf ...


Consumer Acknowledgements and Publisher Confirms

消費者到RabbitMQ的投遞處理確認在AMQP 0-9-1中被稱之為“acknowledgements”;而RabbitMQ給生產者的確認是協議的擴展,這種協議擴展被叫做“publisher confirms”。

(Consumer) Delivery Acknowledgements

當RabbitMQ投遞消息給一個消費者的時候,它需要知道這個消息到底投遞成功了沒有。

Delivery Identifiers: Delivery Tags

當一個消費者註冊的時候,消息被RabbitMQ用basic.devliver方法投遞(pushed)。這個方法攜帶一個投遞標簽,這個標簽在一個channel中是一個唯一標示符。投遞標簽的作用域就是每個channel。投遞標簽單調地正向遞增。

Acknowledgement Modes

根據確認模式的不同,RabbitMQ收到消息成功投遞的時機也不一樣,有可能在發送以後就立即收到成功確認了,也有可能客戶端收到以後手動確認。手動確認分為積極的和消極的兩種。

積極的確認只是簡單的讓RabbitMQ記錄一下消息已經被投遞過了。用basic.reject這種消極確認也是這樣的,但是二者的語義不同:積極的確認假設消息已經被成功處理了,而消消極的確認是消息沒有被處理但仍然應該被刪除。

在自動確認模式下,消息被髮送以後就立即確認投遞成功。

Acknowledging Multiple Deliveries at Once

可以批量的手動確認以減少網路開銷。這是通過設置mutiple的值為true來做的。

When Consumers Fail or Lose Connection: Automatic Requeueing

手動確認的時候,那些未被確認的投遞會自動重新入隊。重新排隊發生在投遞的那個channel被關閉的時候,這包括客戶端斷開連接,消費者應用程式處理失敗,channel級別的協議異常等等。註意,有一個周期性是時間檢測客戶端是否不可用。(PS:預設60秒)

由於RabbitMQ的這種行為,消費者必須準備處理重新投遞的消息,並且做好冪等性處理。重新投遞的消息有一個特別是boolean類型的屬性,redeliver,被設為true。第一次投遞的時候這個屬性值是false。註意,一個消費者可以收到之前投遞給另一個消費者的消息。

Client Errors: Double Acking and Unknown Tags

客戶端多次確認一個消息應該使用相同的投遞標簽,否則可能會報錯。

Publisher Confirms

用標準的AMQP 0-9-1只有一種方式可以保證消息不丟失,那就是transaction(事務)—— 使channel開啟事務,發佈消息,提交。在這種情況下,事務是不必要的重量級,而且吞吐量也下降了250倍。為了補救這一點,一種確認機制被引入。這種機制模仿了協議中已經存在的消費者確認機制。

為了能夠確認,客戶端調用confirm.select方法。一旦confirm.select方法被應用在channel上,就表明已經是確認模式了。一個事務channel不能應用確認模式,同樣,一個channel是確認模式,就不能是事務的。

一旦channel開啟確認模式,客戶端和伺服器都會開始對消息進行計數(從1開始)。伺服器通過在相同的channel發送basic.ack來確認它已經處理的消息。devlivery-tag欄位包含確認消息的序列號。

When will messages be confirmed?

對於非路由消息,一旦exchange證實消息不需要路由到任何隊列,則伺服器立即發送確認。如果消息以強制方式發佈,則在basic.ack之前會先發送basic.return。

對於路由消息,當消息被所有的隊列接收以後才會發送確認。對於路由到永久隊列的持久化消息來說,這意味著,持久化到磁碟。對於鏡像隊列而言,這意味著所有的鏡像都接受了這個消息。

Ack Latency for Persistent Messages

對於一個路由到永久隊列的持久化消息而言,在消息被持久化到磁碟以後才會發送basic.ack。RabbitMQ每隔一段時間(或者隊列空閑的時候)就會批量持久化一批消息到磁碟,通常是幾百毫秒,持久化到磁碟是通過調用fsync(2)來實現的。這就意味著,在負載恆定的情況下,basic.ack會持續達到幾百毫秒。為了提高吞吐量,強烈建議應用程式用非同步的方式確認,或者批量的發佈消息然後等待確認。

 

回顧&小結:

1、生產者在發送消息和消費者在接收消息的時候都可以進行確認。

2、生產者的確認叫“Publisher Confirm”,其依靠的是協議擴展;消費者的確認叫“Delivery Acknowledgements”,它是AMQP 0-9-1協議自帶的

接下來就分兩部分了

Delivery Acknowledgements

1、投遞標簽的作用域是channel,它是一個正向遞增的整數,用於在channel範圍內的投遞消息

2、確認模式有兩種:自動和手動。手動確認模式又分積極和消極兩種。

3、可以批量確認

4、自動確認,顧名思義就是,消息發出去,消費者收到了就立即發送確認

5、手動確認的時候,當消費者不可用了或者連接關閉了,這種情況下未被確認的消息會重新進入隊列中

Publisher Confirms

1、用標準的AMQP 0-9-1協議,要想保證消息不丟失必須用事務。然而,事務會降低吞吐量,為了彌補這一點,需要引入一種確認機制。簡單的來講,要想保證消息不丟失,協議之內必須用事務來實現,協議之外可以用一種確認機制來實現。

2、確認的時機

  2.1 對於路由到普通隊列的消息,當所有的隊列都接受了消息,則發送確認

  2.2 對於路由到永久隊列的持久化消息,當消息持久化到磁碟以後,則發送確認

  2.3 對於路由到鏡像隊列的消息,當所有的鏡像都接受了消息,則發送確認

3、伺服器每隔一段時間(PS:大概幾百毫秒)持久化一批消息到磁碟,這就意味著,如果是同步方式確認,那麼basic.ack操作將會持續幾百毫秒(PS:因為需要等消息持久化到磁碟以後才能發確認)。推薦用非同步的方式確認。

 

參考  https://www.rabbitmq.com/confirms.html

 


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 什麼是設計模式?我們為什麼要學習和使用設計模式?設計模式又有哪些?這裡博主根據自己所瞭解的內容做一簡單介紹。 1、什麼是設計模式? 設計模式(Design Pattern)是一套被反覆使用、多數人知曉的、經過分類的代碼設計經驗的總結。 2、我們為什麼要學習和使用設計模式? 設計模式(Design p ...
  • 互聯網移動業務服務端系統架構設計演化------------------------------------------------------------------今天先到這兒,希望對您在系統架構設計與評估,團隊管理, 項目管理, 產品管理,團隊建設 有參考作用 , 您可能感興趣的文章: 國際化... ...
  • 上次談到了Java的基本數據類型,今天接著聊Java的變數、運算符。 一、變數 1、變數的分類 變數分為成員變數、局部變數和常量,其中成員變數又分為實例變數、類變數。 2、變數的定義 語法:變數類型(可以是基本類型,也可以是其他) 變數名 = 變數值 英文;結尾。 2.1 可以單次聲明一個變數,也可 ...
  • 這篇文章我們開始分析LinkedHashMap的源碼,LinkedHashMap繼承了HashMap,也就是說LinkedHashMap是在HashMap的基礎上擴展而來的,因此在看LinkedHashMap源碼之前,讀者有必要先去瞭解HashMap的源碼,可以查看我上一篇文章的介紹《Java集合系 ...
  • Django視圖(一) 一、 概述 作用:視圖接受web請求,並相應請求 本質:視圖是自定義的一個python中的函數 響應內容:正常視圖,重定向視圖,錯誤視圖(404,500,400) 響應過程: 二、 url配置 配置流程 url的反向解析 三、 視圖函數 1、 概述 其本質是一個函數,一般在v ...
  • 本文主要給大家分享了Spring boot 對靜態資源的處理方式,Spring boot 預設可以訪問classpath:/META-INF/resources/,classpath:/resources/,classpath:/static/,classpath:/public/四個目錄下的靜態資... ...
  • std::function Lambda 表達式的本質是一個函數對象。當 Lambda 表達式的捕獲列表為空時,Lambda 表達式還能夠作為一個函數指針進行傳遞,例如: #include using foo = void(int); // 定義函數指針, using 的使用見上一節中的別名語法vo... ...
  • 這個案例幾乎用到了前50篇的所有內容,實現一個簡易的家庭記賬軟體 功能:賬務增刪改查,按條件查詢 需要的jar包: commons-dbcp-1.4.jar commons-pool-1.5.6.jar mysql-connector-java-5.1.37-bin.jar commons-dbut ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...