当前位置: 首页 > news >正文

fastapi celery flower rabbitmq redis 可运行demo

资料

1.FastAPi Celery RabbitMQ 与 Redis 的使用,并使用 Flower 监控 Celery 状态 - 星尘的博客 - 博客园

2.Celery + Flower + FastAPI + RabbitMQ ,Python实现异步消息队列和监控_fastapi rabbitmq-CSDN博客

3.FastAPI如何集成celery实现定时任务和异步任务并且使用docker-compose部署 - JentZhang - 博客园

4.window下celery正常启动后能收到任务但不执行任务的解决办法 - 乔小生1221 - 博客园

5.Celery周期任务正常启动后能收到任务,但不执行任务的解决办法_celery任务不执行-CSDN博客

6.FastAPI项目中用Celery和RabbitMQ处理耗时任务,提升服务器响应速度-原创手记-慕课网

7.开发环境下,如何通过一个命令让 fastapi 和 celery 一起工作-腾讯云开发者社区-腾讯云

8.构建高性能异步任务引擎:FastAPI + Celery + Redis_celery fastapi-CSDN博客

9.【问题记录】获取celery任务状态报错 - AttributeError: ‘DisabledBackend‘ object has no attribute ‘_get_task_meta_for-CSDN博客

10.Celery产生随机队列问题_celery traceback-CSDN博客

过程

        开发环境

        windows, 已经安装好的 rabbitmq

        目录结构

/project_root

├── /app
│   ├── __init__.py
│   ├── main.py
│   ├── tasks.py
│   ├── celery_config.py
│   └── worker.py

├── /logs(非必须)
├── /venv(非必须)
├── requirements.txt(非必须)
└── README.md(非必须)

依赖的三方库

amqp==5.3.1
annotated-types==0.7.0
anyio==4.8.0
billiard==4.2.1
celery==5.4.0
click==8.1.8
click-didyoumean==0.3.1
click-plugins==1.1.1
click-repl==0.3.0
colorama==0.4.6
dnspython==2.7.0
eventlet==0.39.1
fastapi==0.115.11
flower==2.0.1
greenlet==3.1.1
h11==0.14.0
humanize==4.12.1
idna==3.10
kombu==5.4.2
pip==25.0.1
prometheus_client==0.21.1
prompt_toolkit==3.0.50
pydantic==2.10.6
pydantic_core==2.27.2
python-dateutil==2.9.0.post0
pytz==2025.1
six==1.17.0
sniffio==1.3.1
starlette==0.46.1
tornado==6.4.2
typing_extensions==4.12.2
tzdata==2025.1
uvicorn==0.34.0
vine==5.1.0
wcwidth==0.2.13

        文件内容

celery_config.py

from celery import Celery

# 使用RabbitMQ作为消息中间件
celery_app = Celery('tasks', broker="amqp://《username》:《password》@《hostname》:《port》//")

# 配置Celery
celery_app.conf.update(
    imports=["app.tasks"],
    result_backend='rpc://',  # 使用RPC作为结果后端
    task_serializer='json',   # 任务数据使用json格式
)

 main.py

from fastapi import FastAPI
from .tasks import add

app = FastAPI()

@app.get("/")
def read_root():
    return {"message": "Hello World"}

@app.post("/add_task/")
def create_task(a: int, b: int):
    task = add.delay(a, b)  # 调用Celery任务
    return {"task_id": task.id}

 tasks.py

from celery import Celery

# 引入 Celery 配置
from .celery_config import celery_app

# 定义一个简单的任务
@celery_app.task
def add(a, b):
    return a + b

worker.py 

from .celery_config import celery_app

if __name__ == "__main__":
    celery_app.start()

         运行

fastapi

uvicorn main:app --host 0.0.0.0 --port 9000

celery

celery -A app.worker worker -l info  -P solo -c 2

 flower

celery -A app.worker flower

        测试

打开网址

  • http://127.0.0.1:9000/docs fastapi接口文档
  • 你的 rabbitmq 面板
  • http://127.0.01:5555 flower面板

点点就可以了

踩坑

        无法运行 celery 命令

        在写 demo 的 时候  为了便捷运行 , 笔者 将 fastapi,celery,flower 的运行 命令写在了三个 脚本文件里面 celery.cmd , runfastapi.bat , flower.cmd 运行时只有 runfastapi.bat 正确运行,其他两个脚本在控制台 无限重复运行,手动在控制台输入命令即可。【应该是与文件名有关  -_-!】

        运行 celery 后电脑卡顿

        与celery的命令参数有关 添加 -c 2 就好了。

        无法运行 worker.py 

        不能直接运行 worker.py 文件,这个需要配合 celery 来运行滴

        创建了许多 随机队列

        查看这些随机队列,会自动删除,周期是 24h

Features
x-expires:86400000
auto-delete:true

相关文章:

  • 47.HarmonyOS NEXT 登录模块开发教程(二):一键登录页面实现
  • Python Selenium库入门使用,图文详细。附网页爬虫、web自动化操作等实战操作。
  • JavaScript(JS基础)
  • 依托大数据实验室建设,培育创新人才:数据科学与大数据技术专业人才培养实践
  • CUDA编程(4):共享内存:减少全局内存访问、合并全局内存访问
  • DataWhale学习--大语言模型--模型发展历程
  • 个人学习编程(3-12) 刷题
  • C语言中的assert断言,你了解多少呢?
  • 如何在 React 中实现组件懒加载?
  • 带环链表的相关知识点
  • STM32 F407ZGT6开发板
  • Python完全指南:从基础到实践的编程艺术
  • PCL 点云AABB包围盒(二)
  • Shell编程:深入了解 Bash 数组操作
  • 洛谷 P5534 【XR-3】等差数列 python
  • 02_LVGL学习笔记:深理解样式(Style)机制与应用方法
  • 在类似于Manus的项目中,我想使用python控制用户的浏览器,我应该选择selenium呢?还是playwright?
  • 关于pytorch项目的心得
  • 【实战ES】实战 Elasticsearch:快速上手与深度实践-5.4.1实时行为模式检测(Anomaly Detection)
  • 色彩重生:基于 Retinex 理论的 UR2P-Dehaze 去雾增强器解析
  • 习近平同俄罗斯总统普京茶叙
  • 上海交大:关注到对教师邵某的网络举报,已成立专班开展调查
  • 2025上海科技节将于5月17日开幕,拟设6大板块专题活动
  • 习近平抵达莫斯科伏努科沃专机机场发表书面讲话(全文)
  • 用社群活动维系“不开发”古镇的生命力
  • 吴清:巴菲特即将退休,但价值投资、长期投资、理性投资、努力回报投资者等理念不会退休