Django celery實現(xiàn)異步任務操作,并在后臺運行(守護進程)
沒廢話，直接上代碼。
環(huán)境說明：
python3.6
django2.0.5
我們使用redis的作為celery任務隊列，有一個合成包可以直接安裝兩者一起使用需要的安裝包
直接在終端鍵入
pip install celery-with-redis
就可以安裝需要的依賴包了
構建項目過程略過，直接開始進行celery配置
一、celery配置。
我們的項目名稱為myproject，首先setting配置，添加
# celery settings # celery中間人 redis://redis服務所在的ip地址:端口/數(shù)據庫號 BROKER_URL = 'redis://localhost:6379/3' # celery結果返回，可用于跟蹤結果 CELERY_RESULT_BACKEND = 'redis://localhost:6379/3' # celery內容等消息的格式設置 CELERY_ACCEPT_CONTENT = ['application/json', ] CELERY_TASK_SERIALIZER = 'json' CELERY_RESULT_SERIALIZER = 'json' # celery時區(qū)設置，使用settings中TIME_ZONE同樣的時區(qū) CELERY_TIMEZONE = TIME_ZONE
然后在PATH/myproject/myproject/即setting的同級目錄下創(chuàng)建celery.py，初始化celery。
from __future__ import absolute_import, unicode_literals
from celery import Celery
from django.conf import settings
import os
# 獲取當前文件夾名，即為該Django的項目名
project_name = os.path.split(os.path.abspath('.'))[-1]
project_settings = '%s.settings' % project_name
# 設置環(huán)境變量
os.environ.setdefault('DJANGO_SETTINGS_MODULE', project_settings)
# 實例化Celery
app = Celery(project_name)
# 使用django的settings文件配置celery
app.config_from_object('django.conf:settings')
# Celery加載所有注冊的應用
app.autodiscover_tasks(lambda: settings.INSTALLED_APPS)
這里第一行輸入不能換位置，只能在首行，否則會報錯。
這里的實例化celery的app我們在別處要導入，為了方便導入，我們把它放到__init__.py里，所以在/myproject/myproject/__init__.py我們加入
from __future__ import absolute_import, unicode_literals # 引入celery實例對象 from .celery import app as celery_app
這樣同時也能告知django celery.py文件的存在。
二、用celery裝飾我們的需要進行的異步函數(shù)。
我們在項目根目錄下創(chuàng)建celery_tasks模塊，即在PATH/myproject/下創(chuàng)建該模塊，然后在該模塊下創(chuàng)建tasks.py，把我們的耗時程序寫進去。
from myproject import celery_app
import time
@celery_app.task
def time_consuming_fun():
for i in range(5):
time.sleep(1)
print(i)
return 'ok'
直接用我們的celery_app下的task方法裝飾需要進行異步處理的函數(shù)即可。
三、調用異步函數(shù)。
在view中調用，這里用的是Django的類視圖。
from celery_tasks.tasks import time_consuming_fun
from django.views import View
from django.http import JsonResponse
# Create your views here.
class MyView(View):
def get(self,request):
#異步調用
time_consuming_fun.delay()
#直接調用
#time_consuming_fun()
return JsonResponse({'msg':'ok','code':200})
配置好url即可。
四、啟動celery。
在項目根目錄下，即managy同級文件目錄下，輸入命令：
celery -A myproject worker -l info
此時celery在終端窗口運行，關閉終端celery就會停止。
輸入命令
celery multi start w1 -A myproject -l info --logfile = celerylog.log --pidfile = celerypid.pid
此時celery為守護進程，日志記錄在celerylog.log里。
日志文件可以指定路徑PATH/celerylog.log，此時會在指定路徑下創(chuàng)建日志文件。進程號文件類似。
停止或重啟將開始換為stop或restart即可，所以需記錄w1，即需記錄woker的名稱來方便重啟和停止。
補充：Django項目后臺不掛斷運行
方法一：
1、進入項目目錄下，運行下面程序：
nohup python manage.py runserver 0.0.0.0:5008 &
nohup(no hang up)用途：不掛斷的運行命令
&用途：在后臺運行
nohup /root/start.sh &
在shell中回車后提示：
[~]$ appending output to nohup.out
原程序的的標準輸出被自動改向到當前目錄下的nohup.out文件，起到了log的作用。
注意：在nohup執(zhí)行成功后直接點擊關閉程序按鈕關閉終端，會斷掉該命令對應的session，導致nohup對應的進程被通知一起shutdown。所以在使用nohup命令后臺運行命令之后，需要使用exit正常退出當前賬戶，這樣才能保證命令一直在后臺運行。
方法二：這個比較高級，使用screen
1、安裝screen
yum install -y screen
2、新建一個screen
screen -S xiedi
這樣會新開一個窗口，然后執(zhí)行命令即可
python manage.py runserver 0.0.0.0:9000
3、重開一個窗口，列出所有screen進程，如下
[root@docker ~]# screen -ls
There are screens on:
3029.xiedi (Attached)
4、如果想鏈接上這個會話，執(zhí)行命令即可
screen -r 3029
以上為個人經驗，希望能給大家一個參考，也希望大家多多支持腳本之家。如有錯誤或未考慮完全的地方，望不吝賜教。
相關文章
這篇文章主要為大家詳細介紹了pygame實現(xiàn)五子棋游戲，文中示例代碼介紹的非常詳細，具有一定的參考價值，感興趣的小伙伴們可以參考一下2019-10-10
Python3.9用pip安裝wordcloud庫失敗的解決過程
一般在命令行輸入pip install wordcloud 總會顯示安裝失敗,所以下面這篇文章主要給大家介紹了關于Python3.9用pip安裝wordcloud庫失敗的解決過程,文中通過實例代碼介紹的非常詳細,需要的朋友可以參考下2022-06-06
這篇文章主要介紹了Python下載圖片并保存本地的兩種方式，文中通過示例代碼介紹的非常詳細，對大家的學習或者工作具有一定的參考學習價值，需要的朋友們下面隨著小編來一起學習學習吧2019-05-05
本文主要介紹了一行代碼生成Tableau可視化圖表的方法，文中通過示例代碼介紹的非常詳細，對大家的學習或者工作具有一定的參考學習價值，需要的朋友們下面隨著小編來一起學習學習吧2023-04-04
mvc框架打造筆記之wsgi協(xié)議的優(yōu)缺點以及接口實現(xiàn)
這篇文章主要給大家介紹了關于mvc框架打造筆記之wsgi協(xié)議的優(yōu)缺點以及接口實現(xiàn)的相關資料，文中通過示例代碼介紹的非常詳細，對大家的學習或者工作具有一定的參考學習價值，需要的朋友們下面隨著小編來一起學習學習吧2018-08-08
這篇文章主要介紹了Python編程中對文件和存儲器的讀寫示例,包括使用cPickle儲存器存儲對象的例子,需要的朋友可以參考下2016-01-01
這篇文章主要介紹了python數(shù)據結構輸入輸出及控制和異常,上一章節(jié)中我們介紹了python的基礎數(shù)據類型和集合數(shù)據類型，這章節(jié)給大家介紹一下python的輸入輸出、控制和異常，對數(shù)據類型感興趣的同學可以查看一下文章<BR>2021-12-12
本文主要介紹了Python做屏幕錄制工具的實現(xiàn)示例，文中通過示例代碼介紹的非常詳細，對大家的學習或者工作具有一定的參考學習價值，需要的朋友們下面隨著小編來一起學習學習吧2022-06-06
Python基于SciPy庫實現(xiàn)統(tǒng)計分析與建模
SciPy是一個強大的Python庫，提供了豐富的科學計算和數(shù)據分析工具，本文我們將探討如何使用Python和SciPy庫進行統(tǒng)計分析和建模，感興趣的可以學習一下2023-06-06
詳解python使用canvas實現(xiàn)移動并綁定鍵盤
這篇文章主要為大家介紹了python使用canvas實現(xiàn)移動并綁定鍵盤，具有一定的參考價值，感興趣的小伙伴們可以參考一下，希望能夠給你帶來幫助2021-12-12