Celery基本使用

来源:https://www.cnblogs.com/spirit911/archive/2018/08/08/9446485.html
-Advertisement-
Play Games

Celery 什麼是Celery? Celery是一種簡單/高效/靈活的即插即用的分散式任務隊列. Celery應用場景? 需要非同步處理的任務,發郵件/發簡訊/上傳等耗時的操作.最終到達提升用戶體驗的目的. Celery的模式 Celery主要是由Broker(中間人)和Worker(任務處理者)組 ...


Celery

什麼是Celery?

Celery是一種簡單/高效/靈活的即插即用的分散式任務隊列.

Celery應用場景?

需要非同步處理的任務,發郵件/發簡訊/上傳等耗時的操作.最終到達提升用戶體驗的目的.

Celery的模式

Celery主要是由Broker(中間人)和Worker(任務處理者)組成,執行流程為客戶端發起任務--->Bocker接收任務,分配給--->Worker處理任務.

Celery安裝

pip install -U Celery

基本配置:

broker指定消息隊列保存的位置
backend指定執行結果保存的位置

from celery import Celery

# 增加配置,redis為例
# 第一種
app = Celery('demo',
             backend='redis://:127.0.0.1:6379/2',
             broker='redis://:127.0.0.1:6379/1')
# 第二種
app = Celery('demo')
app.conf.update(
    broker_url='redis://:127.0.0.1:6379/1',
    result_backend='redis://:127.0.0.1:6379/2',
)
# 第三種,導入.py模塊,config中指定broker_url/result_backend
app = Celery('demo')
app.config_from_object('config')

基本使用

1.配置,創建應用,如上.

2.將非同步任務加入到bocker中.
使用裝飾器@app.task來將任務加入到bocker中.

@app.task
def demo_task():
    print('demo')
    return '任務結果'

3.開啟worker,處理任務
task為創建應用的.py文件,也就是在app所在模塊的統計目錄下執行
celery -A tasks worker --loglevel=info

4.調用任務

from tasks import demo_task
demo_task.delay() # 如果任務有參數,直接在delay()中傳入

5.保存結果(非必須)

# ret是一個AsyncResult對象,保存有返回值等信息.
ret = demo_task.delay() 
# 返回值
ret.result

其他功能

group: 一組任務並行執行,返回一組返回值,並可以按順序檢索返回值。

chain: 任務一個一個執行,一個執行完將執行return結果傳遞給下一個任務函數.


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 函數 函數在 中稱為方法,在其他語言中可能稱為函數,函數,方法就是定義在類中具有特定功能的程式。函數,在 中可稱為方法。 函數的格式: 關鍵字是用來結束該函數,即方法的,並將後面的具體結果返回給調用者即可,如果函數的返回值為 ,則表示沒有返回值。 如何快速寫你所需要的函數? 明確返回值類型,和參數列 ...
  • 位運算符(二進位位運算) | 運算符 | 運算 | 例子 | | |: :| :| | 3 2 2 =12| | | 右移 | 3 1 = 1 3/2=1 | | | 無符號右移 | 3 1 = 1 3/2=1 | | & | 與運算 | 6 & 3 = 2| | \| | 或運算 | 6 \| 3 ...
  • random模塊用於生成各種隨機數,常用的方法有: random.random():產生0-1之間的隨機小數。 random.randint(a, b):產生a-b之間的隨機數,包含a和b。 random.randrange(a, b):產生a-b之間的隨機數,包含a,不包含b。 random.ch ...
  • 報數序列是指一個整數序列,按照其中的整數的順序進行報數,得到下一個數。其前五項如下: 1. 1 2. 11 3. 21 4. 1211 5. 111221 1 被讀作 "one 1" ("一個一") , 即 11。 11 被讀作 "two 1s" ("兩個一"), 即 21。 21 被讀作 "one ...
  • 續playPoker類 運行截圖 ...
  • 項目:爬取房天下網站全國所有城市的新房和二手房信息 網站url分析 創建項目 sfw_spider.py items.py pipelines.py middleware.py 設置隨機User-Agent settings.py start.py ...
  • JDK9以上或JDK6以下使用mail.jar包不加JAF的activation.jar包會拋出該錯誤!JDK6以上不需要加該jar包; 參考原文 https://stackoverflow.com/questions/8186395/noclassdeffounderror-javax-activ ...
  • [TOC] 時間序列深度學習:seq2seq 模型預測太陽黑子 本文翻譯自《Time Series Deep Learning, Part 2: Predicting Sunspot Frequency With Keras Lstm in R》,略有刪減 "原文鏈接" 深度學習於商業 的用途之一是 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...