PowerJob分布式任务调度

分布式任务调度平台 → XXL-JOB 实战

开心一刻老师：谁知道鞭炮用英语怎么说？甲：老师！老师！我知道，鞭炮的英文是pilipala。老师：那闪电呢？乙：kuchakucha老师：那舞狮呢？丙：dongdongqiang老师：你们几个先歇会吧！太费嗓子了！老师：下一个，谁知道墨家创始人墨子的英文怎么翻译？丁：blackbaby老师：那老子是不是叫oldbaby？好了最后一题！我们都知道有位大诗人叫陆游，请问他的英文名应该怎么翻译呢？辛：w
青石路·2020-08-04 09:00

分布式任务调度平台 → XXL-JOB 实战

开心一刻老师：谁知道鞭炮用英语怎么说？甲：老师！老师！我知道，鞭炮的英文是pilipala。老师：那闪电呢？乙：kuchakucha老师：那舞狮呢？丙：dongdongqiang老师：你们几个先歇会吧！太费嗓子了！老师：下一个，谁知道墨家创始人墨子的英文怎么翻译？丁：blackbaby老师：那老子是不是叫oldbaby？好了最后一题！我们都知道有位大诗人叫陆游，请问他的英文名应该怎么翻译呢？辛：w
青石路·2020-08-04 09:00

分布式id解决方案

最近在做分布式任务调度系统，遇到分布式id的问题，我们需要一个全局唯一的id，但是服务又部署在多台服务器上面。因为之前没有什么分布式系统的经验，想当然的就是用了全局分布式锁来保证id的唯一性。
疯狂哈丘·2020-08-04 02:29

elastic-job、elastic-job-lite-console 的使用

前言本文主要介绍关于当当开源的分布式任务调度框架elastic-job的使用。环境zookeeperjava8docker我们使用docker运行zookeeper。
ok绷ii·2020-08-01 06:59

APScheduler任务调度利器

Celery：非常强大的分布式任务调度框架RQ：基于Redis的作业队列工具APScheduler：一款强大的任务调度工具RQ参考Celery，据说要比Celery轻量级(Really?)
weixin_34128839·2020-07-31 10:15

python celery(任务调度器)

Celery是Python开发的分布式任务调度模块，今天抽空看了一下，果然接口简单，开发容易，5分钟就写出了一个异步发送邮件的服务。
果汁华·2020-07-31 10:25

【Python】轻量级分布式任务调度系统-RQ

按照功能和使用复杂度来排序的话也是celery>huey>rq.因为rq简单，容易上手，所以自己做的系统也会使用RQ作为分布式任务调度系统。二安装因为RQ依赖于Redis故需要安装版本>=2.6.0
cojm55771·2020-07-30 22:20

分布式任务调度平台 xxl-job

公司用了XXL-JOB，发现用这个公司好多，而且的确特别好用，记录一下。官方操作链接：http://www.xuxueli.com/xxl-job/#/?id=%E3%80%8A%E5%88%86%E5%B8%83%E5%BC%8F%E4%BB%BB%E5%8A%A1%E8%B0%83%E5%BA%A6%E5%B9%B3%E5%8F%B0xxl-job%E3%80%8B公司项目用的spring+s
LYJ_er·2020-07-30 14:37

哇咔咔干货来啦：PowerJob 原理剖析之 Akka Toolkit

本文适合有Java基础知识的人群作者：HelloGitHub-SalieriHelloGitHub推出的《讲解开源项目》系列。Akkaisatoolkitforbuildinghighlyconcurrent,distributed,andresilientmessage-drivenapplicationsforJavaandScala.上面这段文字摘抄自Akka官网（akka.io），翻译成中
削微寒的程序员之路·2020-07-29 08:00

哇咔咔干货来啦：PowerJob 原理剖析之 Akka Toolkit

本文适合有Java基础知识的人群作者：HelloGitHub-SalieriHelloGitHub推出的《讲解开源项目》系列。Akkaisatoolkitforbuildinghighlyconcurrent,distributed,andresilientmessage-drivenapplicationsforJavaandScala.上面这段文字摘抄自Akka官网（akka.io），翻译成中
削微寒·2020-07-29 08:00

PowerJob 技术综述，能领悟多少就看你下多少功夫了～

从本章开始，就正式进入PowerJob框架的技术剖析环节了。作为技术系列文章开篇的第一章，本文会讲述PowerJob整体的架构设计，同时介绍相关的技术，以便于后面的讲解。
削微寒·2020-07-29 04:54

SpringBoot使用Elastic-Job

1.有关Elastic-JobElastic-Job是当当网开源的分布式任务调度解决方案，是业内使用较多的分布式调度解决方案。
weixin_33836874·2020-07-28 18:52

Python 基于Python及zookeeper实现简单分布式任务调度系统设计思路及核心代码实现...

基于Python及zookeeper实现简单分布式任务调度系统设计思路及核心代码实现by:授客QQ：1033553122测试环境功能需求实现思路代码实践(关键技术点实现)代码模块组织结构配置文件解析MyTCPServer.pyMyTCPClient.pyappClient.pyloadAgent.py
weixin_30710457·2020-07-28 16:38

分布式任务调度中间件SchedulerX

7月中上旬，阿里云企业级分布式应用服务EDAS（https://www.aliyun.com/product/edas）低调上线分布式任务调度服务，目前处于免费公测阶段。
天耀_MYC·2020-07-28 12:43

python第二十三次课 2018.05.24

celery简介Celery是一个python开发的异步分布式任务调度模块。Celery本身并不提供消息服务，使用第三方服务，也就是borker来传递任务，一般使用rabbitMQ或者Redis。
qq_38981827·2020-07-28 08:42

分布式任务调度系统设计文档

一、需求设计======1.1需求概述--------**背景：**传统的crontab任务调度存在以下缺点1.机器故障，任务停止调度，设置crontab配置都找不回来（单机故障）2.任务数量多，单机的硬件资源耗尽，需要人工的迁移到其他机器上（扩展性不好）3.需要人工去机器上配置crontab规则，任务执行状态不方便查看（可通过配置中心来批量管理多台机器）以上都是传统的crontab任务调度存在的
codergeek·2020-07-27 23:43

一个好用的springboot starter是如何炼成的？

本文以调度中间件PowerJob为例，介绍为什么要自定义一个starter？starter是做什么用的？如何去定义一个starter？带着这些疑问，会对starter理解的更深刻。
读钓·2020-07-27 00:31

PowerJob 技术综述，能领悟多少就看你下多少功夫了～

从本章开始，就正式进入PowerJob框架的技术剖析环节了。作为技术系列文章开篇的第一章，本文会讲述PowerJob整体的架构设计，同时介绍相关的技术，以便于后面的讲解。
削微寒·2020-07-23 10:00

PowerJob 技术综述，能领悟多少就看你下多少功夫了～

从本章开始，就正式进入PowerJob框架的技术剖析环节了。作为技术系列文章开篇的第一章，本文会讲述PowerJob整体的架构设计，同时介绍相关的技术，以便于后面的讲解。
削微寒的程序员之路·2020-07-23 10:00

xxl-job轻量级分布式调度框架

简介xxl-job是一个分布式任务调度平台，其核心设计目标是开发迅速，学习简单，轻量级，易扩展。特性简单：支持通过web页面对任务进行crud操作，操作简单，上手迅速。
鸡蛋炒瘦肉·2020-07-16 06:05

基于xxl-job的订单、库存同步分布式任务调度框架TPP_ORDER详解

系统设计背景我公司是一个服饰品牌集团，旗下目前拥有的自己的品牌包括（Ochirly、fiveplus、Trediano、CoverGraden），国际合作品牌包括（misssixty、10cc、waxy），并且一直在跟国际品牌合作，负责代理推广中国的业务。以前电商销售占比还不是特别重的时候，公司主要的销售业绩来自于实体店。后来随着技术的持续发展，出现了各种各样的电商平台，比较大的销售渠道主要是（天
不一样的程序员·2020-07-15 10:39

Java 分布式任务调度平台：PowerJob 快速开始+配置详解

项目地址：https://github.com/KFCFans/PowerJobPowerJob的设计目标为企业级的分布式任务调度平台，即成为公司内部的调度中间件。
削微寒的程序员之路·2020-07-15 08:00

Java 分布式任务调度平台：PowerJob 快速开始+配置详解

项目地址：https://github.com/KFCFans/PowerJobPowerJob的设计目标为企业级的分布式任务调度平台，即成为公司内部的调度中间件。
削微寒·2020-07-15 08:00

xxl-job学习过程

xxl-job分布式任务调度平台XXL-JOB官方文档调度中心cronBean和GLUE执行器遇到的问题java.net.BindException:Addressalreadyinuse:bindBean
weixin_41638438·2020-07-15 06:21

分布式任务调度平台XXL-JOB的Oracle版本搭建与学习笔记

XXL-JOB是一个轻量级分布式任务调度平台，其核心设计目标是开发迅速、学习简单、轻量级、易扩展。
码代码的乔木·2020-07-14 17:59

如何选型一个合适的框架-分布式任务调度框架选型

1.背景定时任务是大家再开发中一个不可避免的业务，比如在一些电商系统中可能会定时给用户发送生日券，一些对账系统中可能会定时去对账。大概再很久以前每个服务可能就一台机器，再这台机器上直接搞个Timerschedule基本上就能满足我们的业务需求，但是随着时代的变迁，单台机器已经远远不能满足我们的需要，这个时候我们可能需要10台，20台甚至更多机器来运行我们的业务，接受我们的流量，这就是我们所说的横向
li563868273·2020-07-14 13:16

分布式定时任务组件

基于SpringTask+Zookeeper的分布式任务调度组件，非常小巧，使用简单，只需要引入jar包。不需要单独部署服务端。确保所有任务在集群中不重复，不遗漏的执行。支持动态添加和删除任务。
weixin_34151004·2020-07-13 18:38

python—Celery异步分布式

Celery是一个python开发的异步分布式任务调度模块，是一个消息传输的中间件，可以理解为一个邮箱，每当应用程序调用celery的异步任务时，会向broker传递消息，然后celery的worker
MHyourh·2020-07-13 13:39

分布式任务调度平台 → XXL-JOB 初探

开心一刻旁边的女乘客太吵，我实在忍无可忍，便对她说：“你能不能让我睡会儿？”她挥手就给了我一个耳光：“你个臭流氓！”我顿时就清醒了，理论到：“你让我睡一会怎么了吗”她害羞的低下了头，说道：“人家不是随便的人”我：“我也不是随便的人，下一站我们下车把话说清楚”任务调度相信大家对任务调度都不陌生，说的通熟一点就是定时任务；这个在我们的项目中或多或少都存在，我们可以用JDK自带的（Timer、Sched
青石路·2020-07-13 09:00

shedlock + redis 实现分布式定时任务锁

虽然Quartz可以基于数据库实现作业的高可用，但缺少分布式并行调度的功能TBSchedule：阿里早期开源的分布式任务调度系统。代码略陈旧，使用timer而非线
风行傲天·2020-07-13 04:53

ZooKeeper分布式任务调度中心

一：背景软件系统中，定时任务往往不可或缺，大家可能会采用Springquartz建立定时任务模块。当任务模块进行了分布式部署，通常会出现定时任务重复执行的情况。怎么避免这种情况呢，是否可以构建一个任务注册中心，Quartz负责注册任务，但不具体执行任务内的业务逻辑。任务注册中心解决任务重复注册的问题，同时将任务分配给若干处理器进行具体的业务处理，保证在同一个时间内，一个任务只会被一个处理器进行处理
clmaykr95629·2020-07-13 03:39

分布式任务调度平台XXL-JOB快速搭建教程

1.XXL-JOB简介XXL-JOB是一个分布式任务调度平台，其核心设计目标是开发迅速、学习简单、轻量级、易扩展。现已开放源代码并接入多家公司线上产品线，开箱即用。
James_Shangguan·2020-07-12 21:00

使用LTS帮你解决分布式任务调度问题！

LTS(light-task-scheduler)主要用于解决分布式任务调度问题，支持实时任务，定时任务和Cron任务。
yupi1057·2020-07-12 19:03

新一代分布式任务调度框架：当当elastic-job开源项目的10项特性

作者简介：张亮，当当网架构师、当当技术委员会成员、消息中间件组负责人。对架构设计、分布式、优雅代码等领域兴趣浓厚。目前主导当当应用框架ddframe研发，并负责推广及撰写技术白皮书。一、为什么需要作业（定时任务）？作业即定时任务。一般来说，系统可使用消息传递代替部分使用作业的场景。两者确有相似之处。可互相替换的场景，如队列表。将待处理的数据放入队列表，然后使用频率极短的定时任务拉取队列表的数据并处
weixin_34132768·2020-07-12 09:06

这些优秀的国产分布式任务调度系统，你用过几个？

2019独角兽企业重金招聘Python工程师标准>>>分布式调度在互联网企业中占据着十分重要的作用，尤其是电子商务领域，由于存在数据量大、高并发的特点，对数据处理的要求较高，既要保证高效性，也要保证准确性和安全性，相对比较耗时的业务逻辑往往会从中剥离开来进行异步处理。开源中国任务调度系统/框架类别下有非常多的开源项目，其中不乏出自国内外知名企业的优秀大作。与此同时，还有新的同类项目在不断增加。接下
weixin_34040079·2020-07-12 08:19

关于Mybatis批量插入使用JDBC原生batch批处理以及mybatis的ExecutorType.BATCH的批处理和Mybatis的动态sql语句批处理

天文本到mysql数据库且生成文件,有各种不同的定时任务，有批次消息、发送明细消息等等很多的数据需要转移，也有老系统和新系统数据的转移，mysql使用的分区表；架构使用的ssm，定时任务使用的xxl-job分布式任务调度上面都是废话
fanghuaiming·2020-07-11 19:09

Elastic-job系列（一）-------- 搭建Esjob控制台

网上搜索的有几种分布式任务调度框架，目前准备研究当当的elastic-job。后面准备再看下xxl-job。学习下，然后运用到项目中。
请叫我猿叔叔·2020-07-11 17:24

Elastic-Job启动流程

Elastic-Job是基于quartz的一款分布式任务调度器，利用zookeeper做分布式协调，保存配置信息，分片信息，服务器实例的信息，接下来几篇博客将从源码探究一下Elastic-Job是如何实现的
赵银龙·2020-07-11 12:58

分布式任务调度平台xxl-job初使用

1.因为在服务中写定时任务，当服务发布多份实例时，会多次执行，可能造业务数据混乱，把定时任务执行次数分离出来，由分布式任务调度平台去控制2.本篇将介绍xxl-job官网地址：https://www.xuxueli.com
闪耀的瞬间·2020-07-10 15:30

二、分布式任务调度 —— 阿里调度

1、搭建zookeeper集群。1.1、从http://zookeeper.apache.org/releases.html#download下载最新的稳定版本3.4.61.2、根据说明启动Zookeeper，并测试是否正常启动2、搭建tbschedule控制台2.1、从http://code.taobao.org/svn/tbschedule/trunk下载schedule的所有代码和文档2.2
跑步蜗牛·2020-07-10 13:30

Redis未授权访问

公司业务需要使用celery做分布式任务调度，使用了redis数据库，偶然了解到redis因配置不当造成的未授权访问易被攻击者利用，于是做一下复现。
apossin·2020-07-10 10:37

一、分布式任务调度 —— XXL-JOB

一、简介1.1概述XXL-JOB是一个轻量级分布式任务调度框架，其核心设计目标是开发迅速、学习简单、轻量级、易扩展。现已开放源代码并接入多家公司线上产品线，开箱即用。
跑步蜗牛·2020-07-09 09:25

分布式定时任务-xxljob

怎么保证定时任务不被重复执行分布式定时任务解决方案使用zookeeper实现分布式锁缺点(需要创建临时节点、和事件通知不易于扩展)使用配置文件做一个开关缺点发布后，需要重启数据库唯一约束，缺点效率低使用分布式任务调度平台
xiaobo5264063·2020-07-09 01:50

XXL——JOB的方法：

XXL：XXL概述：Quartz的不足：XXL使用:XXL源码分析：----------------------------------------概述XXL-JOB是一个轻量级分布式任务调度平台，其核心设计目标是开发迅速
thoughtCodes·2020-07-09 01:00

深度解析 | 基于DAG的分布式任务调度平台：Maat

阿里妹导读：搜索中台建设过程中，单个系统不再能满足复杂业务的需求，更多时候需要多个子系统互相协作，异步地按照指定流程完成一项特定的功能。例如一个应用的上线流程依次需要调用配置同步模块、监控模块、资源更新模块、冒烟模块、引擎创建模块，流程的运行中又有分支判断、上下文传递、失败重试等需求。基于这种需求，Maat将各类流程化的任务集中管理，各个任务节点以分布式的方式运行在不同容器内，保证流程高效稳定地运
mlj365·2020-07-08 19:45

zookeeper实现分布式任务调度系统

2019独角兽企业重金招聘Python工程师标准>>>目前项目采用nginx+tomcat来做负载均衡，缺少一个分布式任务调度配置。任务调度在整个系统中是单点故障。
weixin_33937499·2020-07-08 16:49

Easy Task —— 强大而简单的分布式任务调度平台

EasyTask概述github：https://github.com/cehome-com/easy-task简单易用的分布式任务调度平台。
weixin_33826609·2020-07-08 15:45

[转载]Gearman(分布式任务调度框架) 简介

http://www.kuqin.com/system-analysis/20121209/333922.html看到先记下来。回头试验下在@hacker101的围脖上看到了这个框架，看了下官网，觉得很适合爬虫、多进程并行处理等任务。看看官方提供的几个例子：MassPDFquoteemailSynchronousImageResizeShard-Query:aPHPprojectwhichuses
weixin_30918633·2020-07-08 15:53

分布式任务调度系统xxl-job搭建(基于docker)

一、简介XXL-JOB是一个轻量级分布式任务调度平台，其核心设计目标是开发迅速、学习简单、轻量级、易扩展。现已开放源代码并接入多家公司线上产品线，开箱即用。
weixin_30815469·2020-07-08 14:39

基于nginx+xxl-job+springboot高可用分布式任务调度系统

技术、原理讲解：《分布式任务调度平台XXL-JOB--源码解析一:项目介绍》《分布式任务调度平台XXL-JOB--源码解析二:基于docker搭建admin调度中心和executor执行器运行部署环境》
weixin_30691871·2020-07-08 14:40
上一页 11 12 13 14 15 16 17 18 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他