主頁 > 後端開發 > Celery入坑記錄

Celery入坑記錄

2023-05-16 18:20:27 後端開發

1. 前言

最近需要用到Celery,初步學習了一下,但是遇到了一些問題,被搞的心力交瘁,,,,在此記錄下,
環境說明:win11 + python3.11 + celery5.2.7 + redis

2. 問題

2.1 學習檔案的選擇

剛開始在Eege直接搜索celery結果排在最前面的是10年前的介紹檔案(挺像官方的)XXX, 還點了進去看了半天,雖然和官方檔案內容很像,但是還是有很多細節不一樣,結果導致了一些問題,下次一定得看清楚日期,版本號這些,

2.2 celery啟動報錯:Fatal Python error: init_import_site: Failed to import the site module,,,,

執行以下命令后報錯: celery -A celery_task worker --loglevel=INFO

錯誤截圖:
1
image
2
image

原因分析: 具體原因可能是python的環境導致的,但學淺不太弄的清楚

解決: 在配置celery引數時引數名稱需要小寫,celery比較新的版本已經更新引數名稱了

點擊查看代碼
from celery import Celery

celery_app = Celery('celery_task', broker='redis://127.0.0.1:6379/1', backend='redis://127.0.0.1:6379/2')

# 舊的配置方式
celery_app.conf.update(
    CELERY_TASK_SERIALIZER='json',
    CELERY_ACCEPT_CONTENT=['json'],
    CELERY_RESULT_SERIALIZER='json',
    CELERY_TIMEZONE='Asia/Shanghai',
    CELERY_ENABLE_UTC=True,
)

# 新的配置方式
celery_app.conf.update(
    task_serializer='json',
    accept_content=['json'],
    result_serializer='json',
    timezone='Asia/Shanghai',
    enable_utc=True ,
)

@celery_app.task
def add(x, y):
    print("開始執行了")
    return x + y

2.3 在windows下正確啟動Celery

啟動方式一(有問題): celery -A celery_task worker --loglevel=INFO

現象: 用上述命令在windows下能正常啟動,但去呼叫任務時(delay)任務不會執行,在配置的后端backend存盤地址中也沒有結果保存,僅在broker的存盤位置中會產生兩個key (unacked, unacked_index),這兩個key應該存盤的未被執行的任務資訊
image

啟動方式二: celery -A celery_task worker --loglevel=INFO -P eventlet -c 3
說明 好像是celery不支持在windows下運行,需要借助eventlet (pip install即可)
現象: 用上述命令在windows下正常啟動后,任務才會被執行,backend中才有結果資訊輸出
image

轉載請註明出處,本文鏈接:https://www.uj5u.com/houduan/552612.html

標籤:其他

上一篇:【pandas基礎】--資料修改

下一篇:返回列表

標籤雲
其他(159132) Python(38143) JavaScript(25431) Java(18048) C(15227) 區塊鏈(8267) C#(7972) AI(7469) 爪哇(7425) MySQL(7191) html(6777) 基礎類(6313) sql(6102) 熊猫(6058) PHP(5871) 数组(5741) R(5409) Linux(5340) 反应(5209) 腳本語言(PerlPython)(5129) 非技術區(4971) Android(4572) 数据框(4311) css(4259) 节点.js(4032) C語言(3288) json(3245) 列表(3129) 扑(3119) C++語言(3117) 安卓(2998) 打字稿(2995) VBA(2789) Java相關(2746) 疑難問題(2699) 细绳(2522) 單片機工控(2479) iOS(2433) ASP.NET(2403) MongoDB(2323) 麻木的(2285) 正则表达式(2254) 字典(2211) 循环(2198) 迅速(2185) 擅长(2169) 镖(2155) .NET技术(1975) 功能(1967) Web開發(1951) HtmlCss(1937) python-3.x(1918) C++(1917) 弹簧靴(1913) xml(1889) PostgreSQL(1877) .NETCore(1861) 谷歌表格(1846) Unity3D(1843) for循环(1842)

熱門瀏覽
  • 【C++】Microsoft C++、C 和匯編程式檔案

    ......

    uj5u.com 2020-09-10 00:57:23 more
  • 例外宣告

    相比于斷言適用于排除邏輯上不可能存在的狀態,例外通常是用于邏輯上可能發生的錯誤。 例外宣告 Item 1:當函式不可能拋出例外或不能接受拋出例外時,使用noexcept 理由 如果不打算拋出例外的話,程式就會認為無法處理這種錯誤,并且應當盡早終止,如此可以有效地阻止例外的傳播與擴散。 示例 //不可 ......

    uj5u.com 2020-09-10 00:57:27 more
  • Codeforces 1400E Clear the Multiset(貪心 + 分治)

    鏈接:https://codeforces.com/problemset/problem/1400/E 來源:Codeforces 思路:給你一個陣列,現在你可以進行兩種操作,操作1:將一段沒有 0 的區間進行減一的操作,操作2:將 i 位置上的元素歸零。最終問:將這個陣列的全部元素歸零后操作的最少 ......

    uj5u.com 2020-09-10 00:57:30 more
  • UVA11610 【Reverse Prime】

    本人看到此題沒有翻譯,就附帶了一個自己的翻譯版本 思考 這一題,它的第一個要求是找出所有 $7$ 位反向質數及其質因數的個數。 我們應該需要質數篩篩選1~$10^{7}$的所有數,這里就不慢慢介紹了。但是,重讀題,我們突然發現反向質數都是 $7$ 位,而將它反過來后的數字卻是 $6$ 位數,這就說明 ......

    uj5u.com 2020-09-10 00:57:36 more
  • 統計區間素數數量

    1 #pragma GCC optimize(2) 2 #include <bits/stdc++.h> 3 using namespace std; 4 bool isprime[1000000010]; 5 vector<int> prime; 6 inline int getlist(int ......

    uj5u.com 2020-09-10 00:57:47 more
  • C/C++編程筆記:C++中的 const 變數詳解,教你正確認識const用法

    1、C中的const 1、區域const變數存放在堆疊區中,會分配記憶體(也就是說可以通過地址間接修改變數的值)。測驗代碼如下: 運行結果: 2、全域const變數存放在只讀資料段(不能通過地址修改,會發生寫入錯誤), 默認為外部聯編,可以給其他源檔案使用(需要用extern關鍵字修飾) 運行結果: ......

    uj5u.com 2020-09-10 00:58:04 more
  • 【C++犯錯記錄】VS2019 MFC添加資源不懂如何修改資源宏ID

    1. 首先在資源視圖中,添加資源 2. 點擊新添加的資源,復制自動生成的ID 3. 在解決方案資源管理器中找到Resource.h檔案,編輯,使用整個專案搜索和替換的方式快速替換 宏宣告 4. Ctrl+Shift+F 全域搜索,點擊查找全部,然后逐個替換 5. 為什么使用搜索替換而不使用屬性視窗直 ......

    uj5u.com 2020-09-10 00:59:11 more
  • 【C++犯錯記錄】VS2019 MFC不懂的批量添加資源

    1. 打開資源頭檔案Resource.h,在其中預先定義好宏 ID(不清楚其實ID值應該設定多少,可以先新建一個相同的資源項,再在這個資源的ID值的基礎上遞增即可) 2. 在資源視圖中選中專案資源,按F7編輯資源檔案,按 ID 型別 相對路徑的形式添加 資源。(別忘了先把檔案拷貝到專案中的res檔案 ......

    uj5u.com 2020-09-10 01:00:19 more
  • C/C++編程筆記:關于C++的參考型別,專供新手入門使用

    今天要講的是C++中我最喜歡的一個用法——參考,也叫別名。 參考就是給一個變數名取一個變數名,方便我們間接地使用這個變數。我們可以給一個變數創建N個參考,這N + 1個變數共享了同一塊記憶體區域。(參考型別的變數會占用記憶體空間,占用的記憶體空間的大小和指標型別的大小是相同的。雖然參考是一個物件的別名,但 ......

    uj5u.com 2020-09-10 01:00:22 more
  • 【C/C++編程筆記】從頭開始學習C ++:初學者完整指南

    眾所周知,C ++的學習曲線陡峭,但是花時間學習這種語言將為您的職業帶來奇跡,并使您與其他開發人員區分開。您會更輕松地學習新語言,形成真正的解決問題的技能,并在編程的基礎上打下堅實的基礎。 C ++將幫助您養成良好的編程習慣(即清晰一致的編碼風格,在撰寫代碼時注釋代碼,并限制類內部的可見性),并且由 ......

    uj5u.com 2020-09-10 01:00:41 more
最新发布
  • Celery入坑記錄

    1. 前言 最近需要用到Celery,初步學習了一下,但是遇到了一些問題,被搞的心力交瘁。。。,在此記錄下。 環境說明:win11 + python3.11 + celery5.2.7 + redis 2. 問題 2.1 學習檔案的選擇 剛開始在Eege直接搜索celery結果排在最前面的是10年前 ......

    uj5u.com 2023-05-16 18:20:27 more
  • 【pandas基礎】--資料修改

    pandas 作為一種常用的資料分析工具,提供了廣泛的資料修改方法。 既可以針對行或者列的資料進行修改,也可以對具體單個元素進行修改,還可以基于條件選擇要修改的行或者列的資料。 1. 增加資料 1.1 增加行資料 pandas的DataFrame增加一行或者多行資料之前是使用append方法。 im ......

    uj5u.com 2023-05-16 18:18:54 more
  • Python多執行緒爬取鏈家房源,保存表格,實作資料可視化分析!

    使用Python來爬取二手房源資料,并保存表格,實作資料分析! 軟體環境 Python 3.8 Pycharm 代碼展示 模塊 # 資料請求模塊 --> 第三方模塊, 需要安裝 pip install requests import requests # 決議資料模塊 --> 第三方模塊, 需要安裝 ......

    uj5u.com 2023-05-16 18:18:36 more
  • python 基礎教程:使用jieba庫對文本進行分詞

    一、jieba庫是什么? Python的jieba庫是一個中文分詞工具,它可以將一段中文文本分割成一個一個的詞語,方便后續的自然語言處理任務,如文本分類、情感分析等。jieba庫使用了基于前綴詞典的分詞方法,能夠處理中文的各種復雜情況,如歧義詞、新詞等。它還提供了多種分詞模式,如精確模式、全模式、搜 ......

    uj5u.com 2023-05-16 18:18:18 more
  • Python從零到壹丨詳解影像銳化Roberts、Prewitt算子實作邊緣檢測

    摘要:影像銳化和邊緣提取技術可以消除影像中的噪聲,提取影像資訊中用來表征影像的一些變數,為影像識別提供基礎。本章主要介紹Robert算子、Prewitt算子、Sobel算子、Laplacian算子、Scharr算子等。 本文分享自華為云社區《[Python從零到壹] 五十七.影像增強及運算篇之影像銳 ......

    uj5u.com 2023-05-16 18:17:27 more
  • Celery入坑記錄

    1. 前言 最近需要用到Celery,初步學習了一下,但是遇到了一些問題,被搞的心力交瘁。。。,在此記錄下。 環境說明:win11 + python3.11 + celery5.2.7 + redis 2. 問題 2.1 學習檔案的選擇 剛開始在Eege直接搜索celery結果排在最前面的是10年前 ......

    uj5u.com 2023-05-16 18:15:40 more
  • 裝飾器擴展類功能

    對類中屬性訪問,并修改他的行為 可以直接使用類裝飾器 """ 類裝飾器擴展 類功能 """ def log_getattribute(cls): old_getattribute = cls.__getattribute__ def new_getattribute(self, name): pri ......

    uj5u.com 2023-05-16 18:15:27 more
  • java例外處理

    java例外處理 軟體程式在運行程序中,可能出現意外(Exception),運行中不期而至的問題。 檢查性例外:用戶錯誤或問題引起的例外,程式員無法預見的 運行時例外:可能被程式員避免的例外,可以在編譯時被忽略 錯誤:錯誤不是例外,而是脫離程式員控制的問題。錯誤在代碼中通常被忽略。例如堆疊溢位 jav ......

    uj5u.com 2023-05-16 18:13:49 more
  • Spring原始碼:Bean生命周期(五)

    在今天的文章中,我們將深入探討 Bean 的屬性注入和初始化流程,從而使其成為一個真正意義上的 Bean。這個程序包括屬性注入、Aware 介面回呼、BeanPostProcessor 的前置和后置處理等多個步驟,通過本文的學習,讀者將能夠更深入地了解 Spring 框架中 Bean 的屬性注入和初... ......

    uj5u.com 2023-05-16 18:01:37 more
  • lombok.Getter cheated me

    下面這段代碼,IDE里正常顯示。不過,在build時,會報錯。 interface Doable { Integer getCode(); } @lombok.Getter class DerivedClass implements Doable { int code; } 錯誤資訊: Error: ......

    uj5u.com 2023-05-16 17:18:54 more