PowerJob分布式任务调度

【开源推荐】值得你拥有的新一代分布式任务调度与计算框架：PowerJob

概述PowerJob是新一代分布式任务调度与计算框架，支持CRON、API、固定频率、固定延迟等调度策略，提供工作流来编排任务解决依赖关系，使用简单，功能强大，文档齐全，开箱即用！
KFCFans·2020-06-23 13:00

XXL-JOB的使用(详细教程)

官方简介：XXL-JOB是一个分布式任务调度平台，其核心设计目标是开发迅速、学习简单、轻量级、易扩展。
fueen·2020-06-23 06:05

XXL-JOB快速入门

https://www.jianshu.com/p/fa7186bea84b概述XXL-JOB是一个轻量级分布式任务调度平台，其核心设计目标是开发迅速、学习简单、轻量级、易扩展。
hello_world!·2020-06-23 04:56

基于spring+quartz的分布式任务调度视频教程

课程简介本课程从最开始的quatz框架讲起，由浅到深，从使用到结构分析，再到源码分析，深入解析quatz、spring+quatz，并且会讲解相关原理，让大家充分的理解这个框架和框架的设计思想。由于互联网的复杂性，为了满足我们特定的需求，需要对spring+quatz进行二次开发，整个二次开发过程都会进行讲解。学完这个课程后，不仅仅可以熟练掌握分布式定时任务，还可以深入理解大型框架的设计思想。Qu
di_pingxian·2020-06-23 04:19

全票通过！易观开源项目DolphinScheduler进入Apache孵化器

美国时间2019年8月29日，易观开源的分布式任务调度引擎DolphinScheduler（原EasyScheduler）正式通过顶级开源组织Apache基金会的投票决议，以全票通过的优秀表现正式成为Apache
CSDN资讯·2020-06-23 01:08

分布式任务调度可选方案

1、除了基于jvm的java之处，新接触一个JVM语言——SCALA，一种同时面向脚本和面向函数的语言，spark大数据框架是基于scala语言。照着网络教程，简单的写了几个例子，感觉object,class与java语境中还是有一定的差异，但与java体系结合的很好，还有groovy语言，都是比较小巧敏捷的语言各类，但未真正实际，今年时间中要简单实际应用一下。2、在搜索APIGATEWAY开源产
anmishi2025·2020-06-22 14:18

分布式任务调度-Elastic-Job

Java定时任务框架对比quartz和Elastic-Job1.quartz：quartz的常见集群方案如下，通过在数据库中配置定时器信息，以数据库悲观锁的方式达到同一个任务始终只有一个节点在运行。优点：保证节点高可用（HA），如果某一个节点挂了，其他节点可以顶上；缺点：同一个任务只能有一个节点运行，其他节点将不执行任务，性能低，资源浪费；当碰到大量短任务时，各个节点频繁的竞争数据库锁，节点越多这
rickiyang·2020-06-22 11:17

探寻繁杂定时任务的解决方案：分布式任务调度系统

导语：本文我们从架构和技术实现上来为大家讲解腾讯云分布式任务调度系统TCT(TencentCloudTask)如何实现任务调度的精准实时、稳定高效，以及任务的切分和编排。
Tencent_MidWare·2020-06-22 06:16

分布式任务调度平台XXL-JOB

*概述*快速上手2.1配置数据库2.2配置调度中心2.3配置执行器2.4调度中心管理*架构图*后续*概述XXL-JOB是一个轻量级分布式任务调度框架，官网说的是1分钟上手，不过内容确实有些多，我在官网的基础上提炼了一下帮助官网实现一分钟上手
Viola_tt·2020-06-22 06:51

分布式任务调度平台之 xxl-job配置部署

目录导航一、xxl-job安装部署二、openapi配置三、BEAN模式开发四、操作指南五、xxl-job实现高可用六、xxl-job高可用测试一、xxl-job安装部署1.数据库创建脚本CREATEdatabaseifNOTEXISTS`xxl_job`defaultcharactersetutf8collateutf8_general_ci;use`xxl_job`;CREATETABLE`x
Mynah886·2020-06-22 02:21

分布式调度、Elastic-Job

付退款礼券同步、⽣成、发放作业物流信息推送、抓取作业、退换货处理作业数据积压监控、⽇志监控、服务可⽤性探测作业定时备份数据⾦融系统每天的定时结算数据归档、清理作业报表、离线数据分析作业分布式调度什么是分布式任务调度
李不烦·2020-06-21 23:45

xxl-job分布式任务调度平台搭建（2.1.2版本）

首先我们需要先下载xxl-job的源码，下载地址:github：https://github.com/xuxueli/xxl-jobgitee：http://gitee.com/xuxueli0323/xxl-job我这里下载使用的是2.1.2版本，下载完成后解压，然后使用IDEA的ImportProject导入到IDE中，使用Maven方式导入即可将如图目录下的sql文件放入mysql中执行，执
霁云HYY·2020-06-21 23:48

《分布式任务调度平台XXL-JOB》

一、简介1.1概述XXL-JOB是一个轻量级分布式任务调度平台，其核心设计目标是开发迅速、学习简单、轻量级、易扩展。现已开放源代码并接入多家公司线上产品线，开箱即用。
Dreamhai·2020-06-21 19:39

分布式任务调度平台XXL-JOB--源码解析四:xxl-job-admin调度中心源码解析之job调度过程,调度策略以及rpc通信

admin调度中心的对于job的调度过程,调度策略以及rpc通信1.1job调度过程RemoteHttpJobBean类实现了QuartzJobBean,当cron时间片到达时,就会触发一次quartz调用,回调executeInternal()方法,而XxlJobTrigger.trigger(jobId)具体实现细节就是进行了一次网络请求.//当cron时间片到时,就会调用RemoteHttp
xiongxianze·2020-06-21 14:26

分布式任务调度平台XXL-JOB--源码解析六:executor执行器源码解析之启动jetty服务接受请求并执行调度

启动jetty服务并执行调度1.1启动一个jettyserver服务首先加载ServerConnector,加载HandlerCollection并设置handlers,其中connector负责接受客户端http请求,而handlers负责处理客户端请求,最后就是调用start()方法启动jetty服务.1.2负责处理admin调度中心请求的JettyServerHandler其实底层就是通过解
xiongxianze·2020-06-21 14:26

分布式任务调度平台XXL-JOB--源码解析三:xxl-job-admin调度中心源码解析之初始化两个Thread工作线程

xxl-job-admin初始化工作1.1启动时,加载applicationcontext-xxl-job-admin.xml,初始化spring容器Spring容器在初始化xxlJobDynamicScheduler时,会调用inti-method指定的init()方法.1.2xxlJobDynamicScheduler类init()分析publicvoidinit()throwsExcepti
xiongxianze·2020-06-21 14:26

分布式任务调度框架XXL-JOB解析（三）任务调度

一、前言前篇我们跟读了代码，了解调度中心和执行器之间的注册心跳是如何实现的，接下来两篇我们来看看这个框架中非常重要的逻辑——任务的调度和分发是如何实现的。二、调度中心初始化在application.properties配置正确的数据库连接信息后，直接启动XxlJobAdminApplication即可。配置类XxlJobAdminConfig，里面维护了一些调度中心端的配置数据。XxlJobSch
江飞杰·2020-06-21 08:22

twisted开发分布式任务调度爬虫

满足需求：爬虫减少重复数据、相似数据。数据检索效率要高具体方案：1:使用向量夹脚余弦来计算文本间的相似度，大于80%可认为数据相似度过高，不采集。2:使用elasticsearch进行数据invertindex。提高查询速度。支持分布式，可拓展。3:使用gearman、或者twisted自己编写任务调度服务器。twisted服务器控制器controler，和爬虫节点crawler_nodecont
yinxingpan·2020-06-21 08:16

最新30套Java项目实战

【系统学习】基于spring+quartz的分布式任务调度及源码解析视频课程|-2
qq_46240952·2020-06-21 06:05

Kubernetes分布式任务调度方案 - Elastic-job-lite

鉴于k8s平台支持自动伸缩（扩容、缩容），原项目进行扩容（多实例）后的定时任务调度会出现多实例重复执行任务的情况，所以需要将定时任务调度切换到分布式方案（支持分片），建议采用Elastic-job-lite框架，结合k8s自动伸缩和Elastic-job-lite-console监控（启动、暂停、终止、手动触发）、修改（分片总数、Cron时间表达式、任务参数、分片参数等）任务配置的功能，可以对分布
罗小爬EX·2020-06-21 03:20

xxl-job任务调度的小小入门总结以及使用（亲测）

二、概述xxl-job是一个轻量级分布式任务调度平台，其核心设计目标是开发迅速、学习简单、轻量级、易扩展。现已开放源代码并接入多家公司线上产品线，开箱即用。
mingxu.chen·2020-06-21 00:06

xxl-job源码解读之任务调度器(核心)

二.原理解读首先我们要带着这几个问题来解读原理：1.分布式任务调度有个很重要的点，就是怎样保证一次任务调度被消费一次，也就是怎样保证幂等性？2.是怎样实现调度的，调度流程是什么样的？
$码出未来·2020-06-20 21:51

【华为云技术分享】云容器引擎 CCE权限管理实践

随着容器化的快速发展，大数据原有的分布式任务调度模式，正在被基于Kubernetes的技术架构所取代。
华为云开发者社区·2020-06-02 22:15

xl-job任务调度中心

xxl-job任务调度中心文档[TOC]0.简介官方文档地址：分布式任务调度平台XXL-JOB  XXL-JOB是一个分布式任务调度平台，其核心设计目标是开发迅速、学习简单、轻量级、易扩展。
寒暄z·2020-05-06 21:21

.NET Core下的开源分布式任务调度系统ScheduleMaster-v2.0低调发布

从1月份首次公开介绍这个项目到现在也快4个月了，期间做了一些修修补补整体没什么大的改动。2.0算是发布之后第一个大的版本更新，带来了许多新功能新特性，也修复了一些已知的bug，在此感谢在博客、Issue和QQ群中提出各种意见的朋友，以及指导过我的前辈大佬们。在我看来，这个项目没有使用任何高深的技术和架构，甚至有些代码写的自己都不满意不敢拿出来给大家观赏，和社区中其他一些开源项目的大佬们比起来自惭形
balahoho·2020-04-26 21:00

分布式任务调度系统 xxl-job

微服务难不难，不难！无非就是一个消费方，一个生产方，一个注册中心，然后就是实现一些微服务，其实微服务的难点在于治理，给你一堆微服务，如何来管理？这就有很多方面了，比如容器化，服务间通信，服务上下线发布。我今天要说的是任务调度，如果我们将全部服务中那些任务都拿出来统一管理，不在服务内使用Scheduled或者Quartz，是不是很爽呢，而且大神们已经帮我们实现了xxl-job，拿来摩擦一下吧。作者原
甲由崽·2020-04-21 10:00

Uncode-Schedule框架源码分析

1.Uncode-Schedule功能概述Uncode-Schedule是基于zookeeper的分布式任务调度组件，非常小巧，使用简单
rabbitGYK·2020-04-11 16:15

使用celery遇到的坑

最近在写一个分布式微博爬虫，主要就是使用celery做的分布式任务调度。celery确实比较好用，但是也遇到一些问题，我遇到的问题主要集中在定时任务和任务路由这两个部分。
resolvewang·2020-04-10 09:45

一文读懂分布式任务调度平台XXL-JOB

本文主要介绍分布式任务调度平台XXL-JOB(v2.1.0版本)，包括功能特性、实现原理、优缺点、同类框架比较等基本介绍项目开发中，常常以下场景需要分布式任务调度：同一服务多个实例的任务存在互斥时，需要统一协调定时任务的执行需要支持高可用
分布式系统架构·2020-03-30 16:15

spring boot整合xxl-job任务调度平台实现分配定时任务集群

进入许雪里官网-点击项目-选择XXL-JOB|分布式任务调度平台，下载该模板二/在idea中导入xxl-job-master项目，找到数据库脚本本导入到本地的数据库中三/更改xxl-job-admin项目的
陈远波·2020-03-29 02:00

Redis Sentinel 主从高可用配置

由于分布式微博爬虫中使用celery作为分布式任务调度工具，使用redis作为celery的broker.由于redis是单机，当redis挂掉之后，整个系统就会挂掉。
resolvewang·2020-03-22 20:49

分布式定时任务调度框架实践

本文首发于vivo互联网技术微信公众号链接：https://mp.weixin.qq.com/s/l4vuYpNRjKxQRkRTDhyg2Q作者：陈王荣分布式任务调度框架几乎是每个大型应用必备的工具，
vivo互联网·2020-03-09 10:17

基于spring+quartz的分布式任务调度

学习地址：http://www.roncoo.com/course/view/e2b459016e2e477dbd5d67c8b23fe86d课程介绍Quartz是OpenSymphony开源组织在Jobscheduling领域又一个开源项目，它可以与J2EE与J2SE应用程序相结合也可以单独使用。Quartz可以用来创建简单或为运行十个，百个，甚至是好几万个Jobs这样复杂的程序。Jobs可以做
小红牛·2020-02-26 11:24

分布式任务调度（TBSchedule分析）

分布式任务调度框架，主要是为了协调多节点处理相同任务的避免数据被重复处理的框架，处理方式主要分为“抢占式”和“协同分配式”，通过集群的节点分担大批量任务的处理，提高批量任务的处理效率。
点融黑帮·2020-02-26 01:28

分布式任务调度

这里使用Spring-Schedule+Redisson实现分布式任务调度，未完待续...RedissonRedisson介绍Redission是基于NIO(Non-BlockingIO)的Netty框架和
帅可儿妞·2020-02-25 07:21

分布式任务调度框架如何选型？

定时任务是大家再开发中一个不可避免的业务，比如在一些电商系统中可能会定时给用户发送生日券，一些对账系统中可能会定时去对账。大概再很久以前每个服务可能就一台机器，再这台机器上直接搞个Timerschedule基本上就能满足我们的业务需求，但是随着时代的变迁，单台机器已经远远不能满足我们的需要，这个时候我们可能需要10台，20台甚至更多机器来运行我们的业务，接受我们的流量，这就是我们所说的横向扩展。但
CQqfjy·2020-02-18 11:00

关于分布式调度任务的几点思考

由于最近在看分布式调度任务平台，节前也有研究过当当的elastic-job，加上刚刚看的肖德时：分布式任务调度平台实践探讨，自己关于分布式调度任务也有一些思考。
GeorgeDon·2020-02-18 06:08

spring+quartz的分布式任务调度视频课程下载及源码解析

spring+quartz的分布式任务调度视频课程下载及源码解析JAVA架构师，微服务，高并发，分布式，集群，高性能，高可用，java8新特性，P2P金融项目，web安全，电商，缓存，性能调优，设计模式
prqtxqutjr·2020-02-13 07:32

分布式任务调度XXL-JOB初体验

简介XXL-JOB是一个轻量级分布式任务调度平台，其核心设计目标是开发迅速、学习简单、轻量级、易扩展。现已开放源代码并接入多家公司线上产品线，开箱即用。官方文档很完善，不多赘述。
gcdd1993·2020-02-10 19:00

分布式任务调度框架ApiBoot Quartz内的两种任务存储方式

点赞再看，养成习惯开源框架ApiBoot源码仓库（您的Star是对我最大的支持）：https://gitee.com/minbox-projects/api-boot前言Quartz是一款比较优秀的分布式任务调度框架
恒宇少年·2020-02-06 00:41

分布式任务调度的解决方案

简介随着系统规模的发展，定时任务数量日益增多，任务也变得越来越复杂，尤其是在分布式环境下，存在多个业务系统，每个业务系统都有定时任务的需求，如果都在自身系统中调度，一方面增加业务系统的复杂度，另一方面也不方便管理，因此需要有一个任务平台对分散的任务进行统一管理调度，基于目前的情况，任务平台需要支持以下几个方面：1、任务统一管理，提供图形化界面对任务进行配置和调度。2、任务并发控制，同一个任务在同一
陈晨辰·2020-01-21 15:00

290家公司都在用的任务调度系统，还在Github上开源了

今天，和大家介绍一个轻量级分布式任务调度平台，开发迅速、学习简单、轻量级、易扩展，290家公司都在用，它就是XXL-JOB，包括比较知名的大众点评，京东，优信二手车，北京尚德，360金融(360)，联想集团
·2020-01-17 00:00

Asp.Net Core下的开源任务调度平台ScheduleMaster—快速上手

概述ScheduleMaster是一个开源的分布式任务调度系统，它基于Asp.NetCore平台构建，支持跨平台多节点部署运行。
balahoho·2020-01-15 17:00

elastic-job console

Elasticjob是当当开源的分布式任务调度框架，基于成熟的Quartz与Zookeeper封装。
阿太哥·2020-01-08 13:05

XXL-JOB快速入门

概述XXL-JOB是一个轻量级分布式任务调度平台，其核心设计目标是开发迅速、学习简单、轻量级、易扩展。现已开放源代码并接入多家公司线上产品线，开箱即用。
多了个锤子·2020-01-08 03:54

分布式任务调度平台XXL-JOB

为获得更好的阅读体验，请访问原文：传送门一、分布式任务调度概述什么是任务调度平台任务调度是指基于给定的时间点，给定的时间间隔又或者给定执行次数自动的执行任务。
我没有三颗心脏·2020-01-07 14:51

深度解析 | 基于DAG的分布式任务调度平台：Maat

背景什么是Maat？Maat是一个基于开源项目Airflow的流程调度系统，它支持用户自定义地组装流程节点，流程可以在用户指定的时间触发（支持crontab格式），或由用户手动触发。Maat的所有节点分布式地运行在Hippo上，由Drogo调度。用户可以创建自己的调度节点和执行节点，达到资源隔离的目的。用户可以通过配置的方式安装自己执行节点的运行环境，也可以配置执行节点的副本数。下图展示了一个任务
阿里云云栖号·2020-01-07 05:29

运小韩: AIOps时代，你准备好了吗？

作者简介运小韩百度高级研发工程师负责百度运维部分布式任务调度系统、智能运维开发框架及可用性相关工作，在分布式系统、AIOps、可用性方向有广泛经验。
AIOPstack·2020-01-05 21:12

分布式任务调度组件 LTS 用户文档

LTS用户文档LTS(light-task-scheduler)主要用于解决分布式任务调度问题，支持实时任务，定时任务和Cron任务。
高广超·2020-01-05 18:16

分布式任务调度平台 XXL-JOB

参考分布式任务调度平台xxl-job源码下载地址https://github.com/xuxueli/xxl-job/releases一、需求背景以往系统中的周期性任务执行，一般有以下几种方式引入quartzorspring-task
进击的阿黑·2020-01-04 16:20
上一页 14 15 16 17 18 19 20 21 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他