celery

异步任务神器 Celery 简明笔记

Celery在程序的运行过程中，我们经常会碰到一些耗时耗资源的操作，为了避免它们阻塞主程序的运行，我们经常会采用多线程或异步任务。
funhacks·2020-08-22 10:39

分布式通用爬虫管理平台Crawlab

Crawlab基于Celery的爬虫分布式爬虫管理平台，支持多种编程语言以及多种爬虫框架.Github:github.com/tikazyq/cra…安装#安装后台类库pipinstall-r.
weixin_34037173·2020-08-22 03:54

celery的task支持运行async语法的异步任务

关键就是调用asyncio.run()这个方法importasyncioimporttimeimportaiohttpfromceleryimportCeleryfromcelery.resultimportAsyncResultfromlxmlimportetreeapp
wangjinyu124419·2020-08-22 03:47

Celery任务优先级管理设计

Celery是Python的一个分布式任务队列，中文文档、官方文档在此主要功能这边有三类的任务手动、半自动、自动任务，要求优先级手动>半自动>自动。
BlueBlueSkyZ·2020-08-21 23:11

解决 Ubuntu 18.04 无法关机的问题

我自己的看了下，发现是rabbitmq-serverisrunning…之前我学习了Celery，使用了rabbitmq，这玩艺是生产级别的消息中间人，果然够强悍，竟然关机程序都无法阻止他。解决问题
清如許·2020-08-21 21:28

（10）模板templates（模板继承·html转义·数据static·中间件·分页·celery）

（1）模板继承建立父模板（base.html）并留出空位{%blockmain%}{#留出的空白#}{%endblockmain%}子模版继承父模板并填充空位{%extends'myapp1/base.html'%}{#继承模板#}{%blockmain%}XXXXXXX{%endblockmain%}(2)HTML转义（3）引入数据创建static文件更改settings在html顶端加入{%l
knitzj·2020-08-21 15:08

消息队列（kafka/nsq 等）与任务队列（celery）到底有什么不同

在和同事介绍celery时同事说了一句“这不就是kafka吗？”。那么YTask和nsq，celery和kafka？他们之间到底有什么不同呢？下面我结合自己的理解。简单的分析一下，如有不足请指出。
星丶雲·2020-08-21 15:29

天天生鲜项目经验

一、项目架构前端：用户相关商品相关购物车相关订单相关后台管理后端：用户模块商品模块购物车模块订单模块后台管理模块技术：mysqlsession缓存服务器redis异步任务处理celery分布式文件存储系统
幻化心魔·2020-08-21 15:21

贵人可遇不可求——记第一次事业CP复盘

图片来自网络今天与事业CP-Celery开启第一次线上复盘，她在Coach过程中，一针见血，使得我一度脸红，给到的建议十分中肯，还贴心的布置了作业。
暮城恋雪·2020-08-21 13:30

异步实现 multiprocess|blinker

一、如何异步实现调用功能，并马上返回信息给用户不用等功能执行结束，类似celery功能通过multiprocess启多线程，当父进程退出后，子进程也会终止。
ypgsh·2020-08-21 07:10

Django项目中使用Celery

官方参考文档：https://docs.celeryproject.or...注意：Celery4.0支持Django1.8和更高版本。对于Django1.8之前的版本，请使用Celery3.1。
hukang·2020-08-21 02:32

Celery杂谈

在本篇文章中不会针对celery的某个部分话题进行深入介绍，而是记录一些学习和使用celery的过程中让我困惑的一些问题。
朱伟·2020-08-21 02:36

Celery杂谈

在本篇文章中不会针对celery的某个部分话题进行深入介绍，而是记录一些学习和使用celery的过程中让我困惑的一些问题。
朱伟·2020-08-21 01:55

airflow 分布式部署实战（qbit）

环境与组件Ubuntu18.04MySQL5.7Python3.6.9airflow1.10.10celery4.4.2RabbitMQ3.6.10实战步骤基本步骤安装Python3的pipsudoaptinstallpython3
qbit·2020-08-21 00:18

airflow 分布式部署实战（qbit）

环境与组件Ubuntu18.04MySQL5.7Python3.6.9airflow1.10.10celery4.4.2RabbitMQ3.6.10实战步骤基本步骤安装Python3的pipsudoaptinstallpython3
qbit·2020-08-21 00:18

高性能千万级定时任务管理服务forsun扩展开发之整合celery

forsun是一个高性能高精度定时服务，可以轻松管理千万级定时任务。项目地址：https://github.com/snower/forsunforsun内置支持shell、http、redis、thrift、beanstalk、mysql六种到时触发回调执行器，但是很多时候自己的项目需求千奇百怪，单一的内置执行器并不能很好的在自己的项目中整合，所以forsun也支持通过扩展Extension开发
snower·2020-08-20 23:32

高性能千万级定时任务管理服务forsun扩展开发之整合celery

forsun是一个高性能高精度定时服务，可以轻松管理千万级定时任务。项目地址：https://github.com/snower/forsunforsun内置支持shell、http、redis、thrift、beanstalk、mysql六种到时触发回调执行器，但是很多时候自己的项目需求千奇百怪，单一的内置执行器并不能很好的在自己的项目中整合，所以forsun也支持通过扩展Extension开发
snower·2020-08-20 23:32

基于Celery的分布式爬虫管理平台: Crawlab

Crawlab基于Celery的爬虫分布式爬虫管理平台，支持多种编程语言以及多种爬虫框架。
MarvinZhang·2020-08-20 21:49

基于Celery的分布式爬虫管理平台: Crawlab

Crawlab基于Celery的爬虫分布式爬虫管理平台，支持多种编程语言以及多种爬虫框架。
MarvinZhang·2020-08-20 21:49

分布式任务框架之celery

架构Broker消息代理，作为临时储存任务的中间媒介，为Celery提供了队列服务。生产者将任务发送到Broker，消费者再从Broker获取任务。
Echelon·2020-08-20 21:08

分布式任务框架之celery

架构Broker消息代理，作为临时储存任务的中间媒介，为Celery提供了队列服务。生产者将任务发送到Broker，消费者再从Broker获取任务。
Echelon·2020-08-20 21:07

Celery实际使用与内存泄漏问题（面试）

1.实际使用监控task的执行结果：任务id，结果，traceback，children，任务状态配置backend='redis://127.0.0.1:6379/5'给Celery的app对象，直接在
Alei_杨磊·2020-08-20 21:10

Celery实际使用与内存泄漏问题（面试）

1.实际使用监控task的执行结果：任务id，结果，traceback，children，任务状态配置backend='redis://127.0.0.1:6379/5'给Celery的app对象，直接在
Alei_杨磊·2020-08-20 21:09

Celery用户指南中文翻译-Application

Celery在使用前必须实例化，称为application或app。app是线程安全的，具有不同配置、组件、task的多个Celery应用可以共存于同一个进程空间。
当麻的小红箱·2020-08-20 21:01

Celery用户指南中文翻译-Application

Celery在使用前必须实例化，称为application或app。app是线程安全的，具有不同配置、组件、task的多个Celery应用可以共存于同一个进程空间。
当麻的小红箱·2020-08-20 21:01

celery （flask发送邮件及其配置）

比较简单的celery配置pipinstallcelerypipinstallflask_mail新建celery_taskpython包，名字自定义放在项目根目录-----celery_task|--
needones·2020-08-20 18:52

安装Celery4.2.0 Windows出错问题 python3.7出错问题

python3.7环境下，安装了Celery==4.2.0，在启动celery任务的时候，报错根据Celery官方*GettingStarted»教程，首先创建了一个简单的tasks任务：文件名tasks.py
星丶雲·2020-08-20 17:54

蓝鲸智云统一开发环境搭建指南

腾讯官方的《蓝鲸智云统一开发环境搭建指南》蓝鲸应用统一开发环境指南一：背景蓝鲸应用开发需要依赖django，celery，mysql-client等第三方库，而像celery又依赖其他多个库，新手在搭建本地开发环境时
wuwei_longlong·2020-08-20 13:57

分布式可视化爬虫之-rabbitmq安装

rabbitmq是一个队列，主要是celery用来做中间件的东西。
comboo·2020-08-20 07:07

Celery笔记 -- 使用

1.简单例子#app.pyfromceleryimportCelerycelery=Celery('app',broker='localhost:6379/0',backend='localhost:6379
qianmosolo·2020-08-20 00:58

【Airflow】CeleryExecutor+RabbitMQ+HAProxy做好分布式后，启动调度出现的问题

如题，笔者按照上百篇（有点夸张，50多篇吧）文章，终于在踩过了无数坑后，搭建出了三worker节点的、CeleryExecutor+RabbitMQ+HAProxy的分布式Airflow集群（鬼知道我经历了什么
MaiXiaochai·2020-08-19 18:51

Jumpserver服务搭建与简单使用

Python虚拟环境3.安装jumpserver3.1clonejumpserver项目3.2安装依赖rpm包3.3安装python库依赖3.4安装redis，jumpserver使用redis做cache和celeryb
jccodecode·2020-08-19 10:35

django+celery+ RabbitMQ实现异步任务最完整教程

一，首先安装celerypipinstalldjango-celery二，安装rabbitmqubuntu环境下执行以下sudoapt-getinstallrabbitmq-server添加用户,myuser
Yrish·2020-08-19 03:04

Celery 使用supervisor 配置后台运行

1.安装supervisoraptinstallsupervisor或pip3installsupervisor2.进入/etc/supervisor/conf.d下，新建celery.conf文件，写入如下内容
s_daqing·2020-08-19 03:28

利用Celery实现定时任务

  Celery是一个基于分布式消息传输的异步任务队列，它专注于实时处理，同时也支持任务调度。在之前的文章Python之celery的简介与使用中，笔者简单介绍了celery以及celery的使用。
山阴少年·2020-08-19 02:58

自动化测试--安装工具及环境

安装工具及环境：自动化平台测试开发Appium-Python-Client-0.26.tar.gzautotest.sqlcelery-with-redis-3.0.tar.gzcsdn.apkDjango
yuhaibao324·2020-08-18 23:22

用gin封装machinery对外提供异步任务队列接口

因为业务需要用到异步任务队列，在python里面可以用celery了，在异步任务方面很方便，可是go里面没有celery,找了一圈发现machinery符合预期。官方github。
kinter_root·2020-08-18 23:05

celery的简单使用

CeleryCelery是一个功能完备即插即用的异步任务队列系统。
childhood_1013·2020-08-18 18:42

Python之Celery异步任务队列

Python之Celery异步任务队列一：Celery简介二：celery适用于那些场景三：celery特点四：celery工作原理五：Celery与django结合一：Celery简介Celery官方文档英文版
琴酒网络·2020-08-18 15:48

虚拟机中安装python3，redis，pip，celery

按照网上的提供的各种方式搞了半天也没在linux中安装成python3，后来自己研究了一下，使用一下简洁的方式安装一，安装python3我的虚拟机linux版本是CentOS6.5，要安装的python版本是Python-3.5.0，使用root用户安装。安装前先要安装必要的支持组件：yum-yinstallzlibzlib-develyum-yinstallbzip2bzip2-develyum
垢浪_明珠·2020-08-18 06:25

python celery

Celery-DistributedTaskQueue¶Celeryisasimple,flexible,andreliabledistributedsystemtoprocessvastamountsofmessages
Claroja·2020-08-17 21:20

celery 使用multiprocessing 问题记录

报错：[2013-11-2914:27:48,297:ERROR/MainProcess]Taskapp.add[e5d184c0-471f-4fc4-804c-f760178d4847]raisedexception:AssertionError('daemonicprocessesarenotallowedtohavechildren',)Traceback(mostrecentcalllas
aiyuan4493·2020-08-17 08:33

Celery 提示[ERROR/MainProcess] consumer: Cannot connect to amqp://guest:**@127.0.0.1:5672//: [Errno 61

这个原因是你在celery.py中的设置问题导致的importosfromceleryimportCelery,platformsfrom.settingsimportbaseos.environ.setdefault
枫溪迪·2020-08-16 16:49

celery报连接错误进程守护无法连接Cannot connect to amqp://guest:**@127.0.0.1:5672//: [Errno 111] Connection refuse

174857.htm二、报错信息Cannotconnecttoamqp://guest:**@127.0.0.1:5672//:[Errno111]Connectionrefused有的是执行这行代码时报错celery-Acelery_tasks.mainworker-linfo
ch_improve·2020-08-16 12:24

django.core.exceptions.AppRegistryNotReady: Apps aren't loaded yet

不知怎么的遇到这个问题运行Django的时候在pycharmrunmanage.py然后就行了stackoverflow原文Thankyoudude,errorwasnothingrelatedwithcelery
badi1972·2020-08-16 05:06

django中使用celery 任务AppRegistryNotReady: Apps aren't loaded yet.

在开发的过程中使用celery的时候遇到了下面的报错：Traceback(mostrecentcalllast):File“C:\Python27\lib\site-packages\billiard\
aoerqileng·2020-08-16 05:01

celery:File "/home/parallels/.virtualenvs/Django01/lib/python3.7/site-packages/fdfs_client/utils.py"

File"/home/parallels/.virtualenvs/Django01/lib/python3.7/site-packages/fdfs_client/utils.py"解决方法：进入所有虚拟环境，删除所有fdfs-cilent-py的第三方库，包括在Pycharm中安装的第三方库workon虚拟环境sudopipuninstallfdfs-client-py进入虚拟环境，重新安装#
MakChiKin·2020-08-16 03:06

2020-08-09

安装第三方库（安装第三方包用pip，前提下载aptinstallpython-pip）：xmltodictdwebsocketqrcodeceleryfdfsnginxwhooshjiebahaystackuwsgipillowurlsitsdangerousrequestsmutagenconfigparserpipinstallfdfs_client-py-master.zip
花雨·2020-08-15 11:09

Django + Celery + Flower实现在线监控后台异步耗时操作

这一节，我们来说：如何使用Django+Celery+Flower来实现耗时操作编程异步，并且能够在线实时监控。不吹不黑，这篇文章是全网写的最详细的Ce
皮克啪的铲屎官·2020-08-15 07:45

实现简单分布式爬虫

实验环境Windows10+python3.6+celery+redis3.2+redisDesktopManager实验内容通过celery架构实现分布式的结构，用redis存储celery的broke
近西·2020-08-14 22:26
上一页 13 14 15 16 17 18 19 20 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他