Python-模块和包.深入Celery之任务绑定/记录日志/自动重试

本文介绍Celery中使用装饰器实现的任务重试机制,包括如何利用get_task_logger记录任务状态,通过self.retry进行错误处理及重试设置。示例展示了发送邮件任务遇到网络异常时的重试逻辑。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

异常处理:

1. 当装饰器@app.task添加bind=True时,被修饰的函数第一个参数被作为任务对象,通过self可获取任务的上下文,get_task_logger其实是调用的进线程安全的logging模块,用于终端打印调试.

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

19

20

21

22

23

24

25

26

27

28

#!/usr/bin/env python

# -*- coding: utf-8 -*-

@Date    : 2016-12-24 17:07:50

@Author  : 李满满 (xmdevops@vip.qq.com)

@Link    : http://xmdevops.blog.51cto.com/

# @Version : $Id$

from __future__ import absolute_import

# 说明: 导入公共模块

import socket

from celery.utils.log import get_task_logger

# 说明: 导入其它模块

from ..app import app

logger = get_task_logger(__name__)

@app.task(bind=True)

def send_mail(self, usr, sub, msg):

    logger.info(

        '''

        task_id    : {0.id}

        task_args  : {0.args!r}

        task_kwargs: {0.kwargs!r}

        '''.format(self.request)

    )

    try:

        raise socket.error

    except socket.error, e:

        self.retry(exc=e, countdown=5, max_retries=3)

    finally:

        pass

说明: 错误处理主要是为了重试一些由于网络抖动等原因导致的任务失败,推荐将每个可重试的任务添加一个重试时间和最大重试次数,其实既可以在self.retry中指定,也可在@app.task修饰器中添加.

注意: 运行时可以celery worker -A work.app -l info,然后打开另一个终端尝试from work.notify.email import send_mail;send_mail.delay('usr', 'sub', 'msg')触发任务,观察日志.

 

原文转自: 乐搏学院http://www.learnbo.com/
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值