前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >Celery定时任务细讲

Celery定时任务细讲

作者头像
小小咸鱼YwY
发布2020-06-19 15:50:16
1.1K0
发布2020-06-19 15:50:16
举报
文章被收录于专栏:python-爬虫

Celery定时任务细讲

一.目录结构

代码语言:javascript
复制
任务所在目录
    ├── celery_task # celery包 如果celery_task只是建了普通文件夹__init__可以没有,如果是包一定要有
    │   ├── __init__.py # 包文件 看情况要不要存在
    │   ├── celery.py   # celery连接和配置相关文件,且名字必须交celery.py,其实也不是必须的不然你指令可能要修改
    │   └── tasks.py    # 所有任务函数

二.配置

celery.py

代码语言:javascript
复制
from celery import Celery


#创建一个Celery对象
broker = 'redis://127.0.0.1:6379/2'  #任务放在用redis://ip:端口/第几个数据库
backend = 'redis://127.0.0.1:6379/3' #任务结果放在
include = ['celery_task.tasks',]    #任务所在目录
app = Celery(broker=broker, backend=backend, include=include)

app.conf.timezone = 'Asia/Shanghai'  #配置时区
app.conf.enable_utc = False      # 是否使用UTC

from datetime import timedelta
from celery.schedules import crontab
app.conf.beat_schedule = {
    #任务名称自定义可随意
    'get_banner-task': { 
        'task': 'celery_task.tasks.get_baidu_info',#任务所在路径且指定哪个任务
        'schedule': crontab(hour=3,minute=0),  #定时任务相关
    },
}

celery.py

代码语言:javascript
复制
from .celery import app
import requests
@app.task  #一定要加装饰器
def get_baidu_info():
    response = requests.get(https://www.baidu.com/')
    return response.text

三.配置参数

配置参数的方式

方式一

app.conf.参数名称=参数值

方法二

代码语言:javascript
复制
app.conf.update(
    参数名称=参数值,
    参数名称=参数值
)

方法三

导入配置文件

代码语言:javascript
复制
app.config_from_object('配置文件路径')

配置文件

代码语言:javascript
复制
参数名称=参数值
参数名称=参数值

一.时区配置

常用中国

代码语言:javascript
复制
app.conf.timezone = 'Asia/Shanghai' 
app.conf.enable_utc = False 
#也可以直接设置
app.conf.timezone = 'Asia/Shanghai' 

国际时间

代码语言:javascript
复制
app.conf.enable_utc = True
app.conf.timezone = 'Europe/London'
#也可以直接设置
app.conf.timezone = 'Europe/London'

二.beat_schedule

  • task: 指定任务的名字
  • schedule : 设定任务的调度方式,可以是一个表示秒的整数,也可以是一个 timedelta 对象,或者是一个 crontab 对象(后面介绍),总之就是设定任务如何重复执行
  • args: 任务的位置参数以列表的形式
  • kwargs:任务的关键字参数,以字典的形式
  • options:所有 apply_async 所支持的参数
timedelta 对象
代码语言:javascript
复制
from datetime import timedelta

 'schedule': timedelta(seconds=3), #每三秒 执行一次 其他想想就知道啦
  #具体有啥参数我也不想列举了你ctrl+左键进入timedelta源码自己看就知道啦
crontab 对象
代码语言:javascript
复制
#schedule配置举例
from celery.schedules import crontab
# 每分钟执行一次
crontab()

# 每天凌晨十二点执行
crontab(minute=0, hour=0)

# 每十五分钟执行一次
crontab(minute='*/15')

# 每周日的每一分钟执行一次
crontab(minute='*',hour='*', day_of_week='sun')

# 每周三,五的三点,七点和二十二点没十分钟执行一次
crontab(minute='*/10',hour='3,17,22', day_of_week='thu,fri')
本文参与 腾讯云自媒体同步曝光计划,分享自作者个人站点/博客。
原始发表:2019-10-13 ,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 作者个人站点/博客 前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • Celery定时任务细讲
    • 一.目录结构
      • 二.配置
        • 三.配置参数
          • 配置参数的方式
          • 一.时区配置
          • 二.beat_schedule
      领券
      问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档