主頁 > 後端開發 > Celery入坑記錄

Celery入坑記錄

2023-05-16 18:15:40 後端開發

1. 前言

最近需要用到Celery,初步學習了一下,但是遇到了一些問題,被搞的心力交瘁,,,,在此記錄下,
環境說明:win11 + python3.11 + celery5.2.7 + redis

2. 問題

2.1 學習檔案的選擇

剛開始在Eege直接搜索celery結果排在最前面的是10年前的介紹檔案(挺像官方的)XXX, 還點了進去看了半天,雖然和官方檔案內容很像,但是還是有很多細節不一樣,結果導致了一些問題,下次一定得看清楚日期,版本號這些,

2.2 celery啟動報錯:Fatal Python error: init_import_site: Failed to import the site module,,,,

執行以下命令后報錯: celery -A celery_task worker --loglevel=INFO

錯誤截圖:
1
image
2
image

原因分析: 具體原因可能是python的環境導致的,但學淺不太弄的清楚

解決: 在配置celery引數時引數名稱需要小寫,celery比較新的版本已經更新引數名稱了

點擊查看代碼
from celery import Celery

celery_app = Celery('celery_task', broker='redis://127.0.0.1:6379/1', backend='redis://127.0.0.1:6379/2')

# 舊的配置方式
celery_app.conf.update(
    CELERY_TASK_SERIALIZER='json',
    CELERY_ACCEPT_CONTENT=['json'],
    CELERY_RESULT_SERIALIZER='json',
    CELERY_TIMEZONE='Asia/Shanghai',
    CELERY_ENABLE_UTC=True,
)

# 新的配置方式
celery_app.conf.update(
    task_serializer='json',
    accept_content=['json'],
    result_serializer='json',
    timezone='Asia/Shanghai',
    enable_utc=True ,
)

@celery_app.task
def add(x, y):
    print("開始執行了")
    return x + y

2.3 在windows下正確啟動Celery

啟動方式一(有問題): celery -A celery_task worker --loglevel=INFO

現象: 用上述命令在windows下能正常啟動,但去呼叫任務時(delay)任務不會執行,在配置的后端backend存盤地址中也沒有結果保存,僅在broker的存盤位置中會產生兩個key (unacked, unacked_index),這兩個key應該存盤的未被執行的任務資訊
image

啟動方式二: celery -A celery_task worker --loglevel=INFO -P eventlet -c 3
說明 好像是celery不支持在windows下運行,需要借助eventlet (pip install即可)
現象: 用上述命令在windows下正常啟動后,任務才會被執行,backend中才有結果資訊輸出
image

轉載請註明出處,本文鏈接:https://www.uj5u.com/houduan/552607.html

標籤:Python

上一篇:裝飾器擴展類功能

下一篇:返回列表

標籤雲
其他(159131) Python(38139) JavaScript(25431) Java(18048) C(15227) 區塊鏈(8267) C#(7972) AI(7469) 爪哇(7425) MySQL(7191) html(6777) 基礎類(6313) sql(6102) 熊猫(6058) PHP(5871) 数组(5741) R(5409) Linux(5340) 反应(5209) 腳本語言(PerlPython)(5129) 非技術區(4971) Android(4572) 数据框(4311) css(4259) 节点.js(4032) C語言(3288) json(3245) 列表(3129) 扑(3119) C++語言(3117) 安卓(2998) 打字稿(2995) VBA(2789) Java相關(2746) 疑難問題(2699) 细绳(2522) 單片機工控(2479) iOS(2433) ASP.NET(2403) MongoDB(2323) 麻木的(2285) 正则表达式(2254) 字典(2211) 循环(2198) 迅速(2185) 擅长(2169) 镖(2155) .NET技术(1975) 功能(1967) Web開發(1951) HtmlCss(1937) python-3.x(1918) C++(1917) 弹簧靴(1913) xml(1889) PostgreSQL(1877) .NETCore(1861) 谷歌表格(1846) Unity3D(1843) for循环(1842)

熱門瀏覽
  • 【C++】Microsoft C++、C 和匯編程式檔案

    ......

    uj5u.com 2020-09-10 00:57:23 more
  • 例外宣告

    相比于斷言適用于排除邏輯上不可能存在的狀態,例外通常是用于邏輯上可能發生的錯誤。 例外宣告 Item 1:當函式不可能拋出例外或不能接受拋出例外時,使用noexcept 理由 如果不打算拋出例外的話,程式就會認為無法處理這種錯誤,并且應當盡早終止,如此可以有效地阻止例外的傳播與擴散。 示例 //不可 ......

    uj5u.com 2020-09-10 00:57:27 more
  • Codeforces 1400E Clear the Multiset(貪心 + 分治)

    鏈接:https://codeforces.com/problemset/problem/1400/E 來源:Codeforces 思路:給你一個陣列,現在你可以進行兩種操作,操作1:將一段沒有 0 的區間進行減一的操作,操作2:將 i 位置上的元素歸零。最終問:將這個陣列的全部元素歸零后操作的最少 ......

    uj5u.com 2020-09-10 00:57:30 more
  • UVA11610 【Reverse Prime】

    本人看到此題沒有翻譯,就附帶了一個自己的翻譯版本 思考 這一題,它的第一個要求是找出所有 $7$ 位反向質數及其質因數的個數。 我們應該需要質數篩篩選1~$10^{7}$的所有數,這里就不慢慢介紹了。但是,重讀題,我們突然發現反向質數都是 $7$ 位,而將它反過來后的數字卻是 $6$ 位數,這就說明 ......

    uj5u.com 2020-09-10 00:57:36 more
  • 統計區間素數數量

    1 #pragma GCC optimize(2) 2 #include <bits/stdc++.h> 3 using namespace std; 4 bool isprime[1000000010]; 5 vector<int> prime; 6 inline int getlist(int ......

    uj5u.com 2020-09-10 00:57:47 more
  • C/C++編程筆記:C++中的 const 變數詳解,教你正確認識const用法

    1、C中的const 1、區域const變數存放在堆疊區中,會分配記憶體(也就是說可以通過地址間接修改變數的值)。測驗代碼如下: 運行結果: 2、全域const變數存放在只讀資料段(不能通過地址修改,會發生寫入錯誤), 默認為外部聯編,可以給其他源檔案使用(需要用extern關鍵字修飾) 運行結果: ......

    uj5u.com 2020-09-10 00:58:04 more
  • 【C++犯錯記錄】VS2019 MFC添加資源不懂如何修改資源宏ID

    1. 首先在資源視圖中,添加資源 2. 點擊新添加的資源,復制自動生成的ID 3. 在解決方案資源管理器中找到Resource.h檔案,編輯,使用整個專案搜索和替換的方式快速替換 宏宣告 4. Ctrl+Shift+F 全域搜索,點擊查找全部,然后逐個替換 5. 為什么使用搜索替換而不使用屬性視窗直 ......

    uj5u.com 2020-09-10 00:59:11 more
  • 【C++犯錯記錄】VS2019 MFC不懂的批量添加資源

    1. 打開資源頭檔案Resource.h,在其中預先定義好宏 ID(不清楚其實ID值應該設定多少,可以先新建一個相同的資源項,再在這個資源的ID值的基礎上遞增即可) 2. 在資源視圖中選中專案資源,按F7編輯資源檔案,按 ID 型別 相對路徑的形式添加 資源。(別忘了先把檔案拷貝到專案中的res檔案 ......

    uj5u.com 2020-09-10 01:00:19 more
  • C/C++編程筆記:關于C++的參考型別,專供新手入門使用

    今天要講的是C++中我最喜歡的一個用法——參考,也叫別名。 參考就是給一個變數名取一個變數名,方便我們間接地使用這個變數。我們可以給一個變數創建N個參考,這N + 1個變數共享了同一塊記憶體區域。(參考型別的變數會占用記憶體空間,占用的記憶體空間的大小和指標型別的大小是相同的。雖然參考是一個物件的別名,但 ......

    uj5u.com 2020-09-10 01:00:22 more
  • 【C/C++編程筆記】從頭開始學習C ++:初學者完整指南

    眾所周知,C ++的學習曲線陡峭,但是花時間學習這種語言將為您的職業帶來奇跡,并使您與其他開發人員區分開。您會更輕松地學習新語言,形成真正的解決問題的技能,并在編程的基礎上打下堅實的基礎。 C ++將幫助您養成良好的編程習慣(即清晰一致的編碼風格,在撰寫代碼時注釋代碼,并限制類內部的可見性),并且由 ......

    uj5u.com 2020-09-10 01:00:41 more
最新发布
  • Celery入坑記錄

    1. 前言 最近需要用到Celery,初步學習了一下,但是遇到了一些問題,被搞的心力交瘁。。。,在此記錄下。 環境說明:win11 + python3.11 + celery5.2.7 + redis 2. 問題 2.1 學習檔案的選擇 剛開始在Eege直接搜索celery結果排在最前面的是10年前 ......

    uj5u.com 2023-05-16 18:15:40 more
  • 裝飾器擴展類功能

    對類中屬性訪問,并修改他的行為 可以直接使用類裝飾器 """ 類裝飾器擴展 類功能 """ def log_getattribute(cls): old_getattribute = cls.__getattribute__ def new_getattribute(self, name): pri ......

    uj5u.com 2023-05-16 18:15:27 more
  • java例外處理

    java例外處理 軟體程式在運行程序中,可能出現意外(Exception),運行中不期而至的問題。 檢查性例外:用戶錯誤或問題引起的例外,程式員無法預見的 運行時例外:可能被程式員避免的例外,可以在編譯時被忽略 錯誤:錯誤不是例外,而是脫離程式員控制的問題。錯誤在代碼中通常被忽略。例如堆疊溢位 jav ......

    uj5u.com 2023-05-16 18:13:49 more
  • Spring原始碼:Bean生命周期(五)

    在今天的文章中,我們將深入探討 Bean 的屬性注入和初始化流程,從而使其成為一個真正意義上的 Bean。這個程序包括屬性注入、Aware 介面回呼、BeanPostProcessor 的前置和后置處理等多個步驟,通過本文的學習,讀者將能夠更深入地了解 Spring 框架中 Bean 的屬性注入和初... ......

    uj5u.com 2023-05-16 18:01:37 more
  • lombok.Getter cheated me

    下面這段代碼,IDE里正常顯示。不過,在build時,會報錯。 interface Doable { Integer getCode(); } @lombok.Getter class DerivedClass implements Doable { int code; } 錯誤資訊: Error: ......

    uj5u.com 2023-05-16 17:18:54 more
  • 限速神器RateLimiter原始碼決議

    作者:京東科技 李玉亮 目錄指引 限流場景 軟體系統中一般有兩種場景會用到限流: ?場景一、高并發的用戶端場景。 尤其是C端系統,經常面對海量用戶請求,如不做限流,遇到瞬間高并發的場景,則可能壓垮系統。 ?場景二、內部交易處理場景。 如某類交易任務處理時有速率要求,再如上下游呼叫時下游對上游有速率要 ......

    uj5u.com 2023-05-16 17:16:54 more
  • go多版本管理

    在日常開發作業程序中,很多時候我們都需要在自己的機器上安裝多個go版本,像是go1.16引入的embed,go1.18引入了泛型;又或是自己本地使用的是最新版,但公司的專案中使用的go1.14、go1.13甚至是更早的版本。 那么有沒有既不影響我們自己的本地環境,又能兼顧歷史專案的辦法呢?答案當然是 ......

    uj5u.com 2023-05-16 10:48:27 more
  • 技術宅拯救世界--你好,世界!

    public class Test{ public static void main(String[] args){ System.out.println("Hello,World!"); } } public 包外可呼叫的(此外還有protected、default、private) class ......

    uj5u.com 2023-05-16 10:43:21 more
  • 【C++】初始化串列建構式VS普通建構式

    普通建構式VS初始化串列建構式 初始化串列建構式最優先匹配問題 對于一個類而言,只要其中包含有初始化串列的建構式,編譯器在編譯使用{}語法的構造時會最傾向于呼叫初始化串列建構式,哪怕做型別轉換也在所不惜,哪怕有型別最佳匹配的普通建構式或移動建構式也會被劫持 class Widget { ......

    uj5u.com 2023-05-16 10:43:17 more
  • AccessToken、for_user、get_token

    在Django REST framework的SimpleJWT庫中,AccessToken是一個類,用于表示一個JSON Web Token (JWT)中的訪問令牌部分。訪問令牌是一種常見的身份驗證令牌,通常用于保護API端點。 通過SimpleJWT庫,您可以使用AccessToken類創建、解 ......

    uj5u.com 2023-05-16 10:43:12 more