大数据平台任务调度

你应该知道的任务调度平台 XXL-JOB

背景日常开发中，我们难免会遇到需要处理一些定时任务，而且这些定时任务还需要灵活的调度，并且在异常的情况下需要做的重试或者报警。这些任务我们希望能灵活配置，并且能及时生效，不需要经常发版本更新代码。所以我们希望能有一个这样的平台，能满足我们的这些需求。感谢开源社区，已经有了很好的解决方案，就是XXL-JOB。本文介绍的版本是基于XXL-JOB的1.9.0版本，新版本调度中心Admin已经切换为Spr
Java极客技术·2024-02-14 19:22

Flink教程

将应用分配给JM1.2任务提交流程image.pngyarn模式image.png1.3任务调度原理image.png1.4并行度与slot一个特定算子
July2333·2024-02-14 15:20

02-flink基本架构

同时在此基础上抽象出不同的应用类型的组件库Runtime核心层主要负责对上层不同接口提供基础服务，也是Flink分布式计算框架的核心实现层，支持分布式Stream的执行、jobGraph到ExecutionGraph的映射转换、任务调度等
蜗牛写java·2024-02-14 13:54

go-zero集成asynq

集成为什么使用asynq的几个原因直接基于redis，一般项目都有redis，而asynq本身就是基于redis所以可以少维护一个中间件支持消息队列、延迟队列、定时任务调度，因为希望项目支持定时任务而asynq
四月__·2024-02-14 09:41

Python 资源大全（七）

目录：用来进行科学计算和数据分析的库进行数据可视化的库计算机视觉库机器学习库MapReduce框架和库使用Python进行函数式编程用来访问第三方API的库用于DevOps的软件和库任务调度库使用外来函数接口的库
忘了呼吸的那只猫·2024-02-14 05:46

从0到1搭建自助分析平台

一、什么是自助分析平台自助分析平台是构建在大数据平台之上的，依托于大数据平台的数据研发能力，通过统一的数据服务，实现对数据查询、分析的统一管理，为企业业务分析提供高效的数据决策支持，同时也避免数据工程师陷入繁杂的提数需求中
数据不吹牛·2024-02-13 20:43

中金易云：为出版社找到下一本《解忧杂货店》

中金易云出版发行大数据平台正是以数字化转型为核心思路，以大数据中台与智能算法为基础的出版业供给侧结构性改革的成果。
猫耳呀·2024-02-13 19:57

Timer类

只有一个线程TimerThread来执行，因此同一时刻只有一个TimerTask在执行；任何一个TimerTask的执行异常都会导致Timer终止所有任务；由于基于绝对时间并且是单线程执行，因此在多个任务调度时
努力学习的安同学·2024-02-13 18:26

MATLAB：差分进化算法（Differential Evolution Algorithm，DE）求解基于移动边缘计算的任务卸载与资源调度（提供MATLAB代码）

任务调度：根据任务的特性和边缘服务器的资源情况，选择合适的边缘服务器来执行任务。数据传
优化算法MATLAB与Python·2024-02-13 12:27

自动化运营运维解决方案XXL-JOB需求分析，案例讲解，调度实现，全套解决方案

1.分布式任务调度-XXL-JOB1.1分布式任务调度在实际的开发中，定时执行某任务是非常常见的需求。
纵然间·2024-02-13 07:32

【FreeRTOS】阻塞机制：任务调度的默契与优雅

前言大家好啊，我是香蕉，今天我们来深度聊聊实时操作系统中的阻塞机制。在实时操作系统（RTOS）的领域中，任务的协同合作和优雅调度是确保系统稳定性和高效性的关键因素之一。FreeRTOS作为一款广泛应用的RTOS，其阻塞机制提供了一种有力的工具，用于实现任务之间的协作与调度。本文将深入探讨FreeRTOS中的阻塞机制，介绍其概念、用法，并通过详细的代码演示来展示任务如何通过阻塞机制实现协同工作。什么
香蕉不会写代码·2024-02-13 07:50

【FreeRTOS】任务优先级与阻塞：构建有序任务执行的支柱

在实时操作系统（RTOS）中，任务的优先级和阻塞是任务调度和协作的关键要素。FreeRTOS作为一款广泛应用的RTOS，其任务调度机制通过优先级和阻塞来保障任务的有序执行。
香蕉不会写代码·2024-02-13 07:20

我的大数据之路 - 基于HANA构建实时方案的历程

离线类业务，时效性大于2小时，则使用大数据平台构建。经过五月、六月两月的努力，离线类的业务已基本完成开发和验证完毕，后面待在生产环境对数完毕后，即可启动切换。
小南家的青蛙·2024-02-13 01:45

Spring Task

SpringFramework提供了一种任务调度的机制，称为SpringTask。SpringTask可以帮助您在应用程序中执行定时任务或者周期性任务。
Persistence is gold·2024-02-12 23:10

RK3588平台开发系列讲解（AI 篇）什么是NPU

在谈这个问题之前，可以先来看看什么是CPU和GPU,CPU就是中央处理器，中央处理器就好像是人类的大脑，主要负责各种逻辑控制和任务调度。所以CPU的计算能力相对来说不是最强的。
内核笔记·2024-02-12 19:35

进程和线程

进程：进程是操作系统进行资源分配的最小单位，指计算机中正在运行的一个程序实例，比如：微信、QQ线程：线程隶属于进程，是操作系统进行任务调度的最小单位。
迷茫的羔羊羊·2024-02-12 11:32

一篇长文帮你彻底搞懂React的调度机制原理

Scheduler作为一个独立的包，可以独自承担起任务调度的职责，你只需要将任务和任务的优先级交给它，它就可以帮你管理任务，安排任务的执行。这就是React和Scheduler配合工作的模式。
·2024-02-12 10:05

freertos 源码分析五 任务调度一

vTaskStartScheduler创建空闲进程，调用适配xPortStartScheduler();voidvTaskStartScheduler(void){xReturn=xTaskCreate(prvIdleTask,configIDLE_TASK_NAME,configMINIMAL_STACK_SIZE,(void*)NULL,portPRIVILEGE_BIT,&xIdleTask
yvee·2024-02-11 23:13

freertos 源码分析六 任务调度二

任务调度由SysTick_Handler和PendSV_Handler两个中断接管系统时钟计数器按给定频率倒计时，至0触发SysTick_Handler中断，此中断函数为宏中对xPortSysTickHandler
yvee·2024-02-11 23:13

聊聊PowerJob的任务调度

序本文主要研究一下PowerJob的任务调度CoreScheduleTaskManagertech/powerjob/server/core/scheduler/CoreScheduleTaskManager.java
·2024-02-11 18:36

quartznet任务调度和消息调度（JAVA与C#版对比）

quartznet任务调度和消息调度1.作用自动执行任务。
管理大亨·2024-02-11 10:24

聊聊PowerJob的任务调度

序本文主要研究一下PowerJob的任务调度CoreScheduleTaskManagertech/powerjob/server/core/scheduler/CoreScheduleTaskManager.java
hello_ejb3·2024-02-11 05:43

面霜最好用的品牌排行榜，口碑最好的面霜品牌

通过大数据平台，我们得到了真正好用的面霜排行榜10强，都是来自群众真实使用以后的评分，效果可是真正的好买面霜上高省，佣金真的高，我们真的省！
高省张导师·2024-02-10 19:21

分布式任务调度框架Elastic-job

简介Elastic-Job是一个分布式调度解决方案，由两个相互独立的子项目Elastic-Job-Lite和Elastic-Job-Cloud组成Elastic-Job-Lite定位为轻量级无中心化解决方案，使用jar包的形式提供分布式任务的协调服务。Elastic-Job-Cloud以私有云平台的方式提供集资源、调度以及分片为一体的全量级解决方案，依赖Mesos和Zookeeper。概述任务的分
Young_5942·2024-02-10 17:13

Quartz官方教程翻译系列-Lesson 2

SNAPSHOT/tutorials/tutorial-lesson-02.html第二课:QuartzAPI,Jobs[任务]和Triggers[触发器]QuartzAPI的关键接口:Scheduler-任务调度的主要
很大气·2024-02-10 06:18

数据中台 pdf_数据中台到底怎么建设，有人把他说清楚了

本人断断续续从事数据仓库约有五六年经验，在移动公司前三年是负责数据仓库项目实施，后四年开发搞大数据平台，见证了从传统数据仓库转型到大数据平台的全历程，见证了大数据平台从0到1的全部过程，包括第一个MPP
weixin_39699121·2024-02-09 18:59

某企业多Scrum团队解决方案题文章

●背景●业务快速发展，开发下一代云原生大数据平台●产研测-多Scrum团队多sprint并行开发●公司需要，建立PMO体系，结合实际建立流程体系●问题描述●关键字：跨团队、多scrum、沟通、大版本、技术能力
叶建波_8de4·2024-02-09 16:57

【嵌入式开发】65

【嵌入式开发】时钟中断的利用方式主要包括以下几个方面：任务调度：在多任务嵌入式系统中，时钟中断常用于任务调度器。
少年郎123456·2024-02-09 11:42

【嵌入式开发】64

任务调度：
少年郎123456·2024-02-09 11:12

slurm安装配置_Slurm任务调度系统部署和测试(源码)（1）

1.概述slurm任务调度系统，主要应用在HPC集群资源管理和任务调度。
多伦多豪·2024-02-09 10:43

Linux知识结构二

vi编辑器使用权限设置使用常用指令grep管道find软硬链接任务调度指令给文件设置主人，组别
周行知·2024-02-09 02:41

@Scheduled，Quartz，XXL-JOB三种定时任务总结

这个注解通常与@EnableScheduling注解一起使用，后者用于启用Spring的任务调度功能。当在一个类的方法上使用@Scheduled注解时，
DecemberZero2·2024-02-09 01:45

Oracle 面试题 | 18.精选Oracle高频面试题

前端面试必备》、《2024面试高频手撕题》蓝桥云课签约作者、上架课程《Vue.js和Egg.js开发企业级健康管理项目》、《带你从入门到实战全面掌握uni-app》文章目录请解释Oracle中的自动化任务调度和作业管理
ai_todo·2024-02-08 19:54

day13优先级队列&哈夫曼树&Trie

FIFO原则，也就是先进先出，优先级队列则是按照优先级高低进行出队，比如将优先级最高的元素作为队头优先出列优先级队列的应用场景举例医院的夜间门诊队列元素是病人优先级是病情的严重情况，挂号时间操作系统的多任务调度队列元素是任务优先级是任务类型接口设计
coder_feng·2024-02-08 18:14

3.4-媒资管理之视频处理+xx-job分布式任务

文章目录媒资管理6视频处理6.1需求6.1.1总体需求6.7.3FFmpeg的基本使用6.7.4视频处理工具类6.2分布式任务处理6.2.1什么是分布式任务调度6.2.2XXL-JOB介绍6.2.3搭建
ANnianStriver·2024-02-08 17:04

FreeRtos任务的挂起和恢复实验示例

首先我们在main函数完成硬件的初始化，其次在硬件初始化完成之后创建任务start_task()然后开启FreeRtos的任务调度(1)、start_task任务，用于创建其他3个任务。
码君·2024-02-08 16:43

利用CMSIS-RTOS实现多任务调度和同步

在嵌入式系统中，多任务调度和同步对于实现复杂的应用程序非常重要。CMSIS-RTOS是一套针对嵌入式系统的操作系统接口规范，它定义了一组API函数，可用于在嵌入式系统上实现任务调度、同步和通信等功能。
嵌入式杂谈·2024-02-08 05:00

嵌入式学习Day15 Linux杂项

一、Linux操作系统的内核1.管理CPU2.管理内存3.管理硬件设备4.管理文件系统5.任务调度二、Shell1.保护Linux内核(用户和Linux内核不直接操作,通过操作Shell,Shell和内核交互
万兜鍪:>·2024-02-08 02:43

【Linux】Linux 中进程控制块 PCB —— task_struct 结构体结构

因此了解task_struct的结构对于我们理解任务调度（在Linux中任务和进程是同一概念
炫酷的伊莉娜·2024-02-07 20:33

大数据用户画像系统架构设计

文章目录一、用户画像数据仓库搭建、数据抽取部分二、大数据平台、用户画像集市分层设计、处理三、离线计算部分四、实时计算部分五、Solr/ES搜索引擎部分六、JavaWeb毫秒级实时用户画像接口服务七、用户画像实时展示异步触发获取
充电了么·2024-02-07 19:37

Kubernetes 生产环境部署微服务 Spring Cloud

创建私有镜像密钥Secret3.微服务配置3.1.注册中心（eureka-server）3.2.网关（msa-gateway）3.3.流量控制（Sentinel）3.4.调用链监控（Zipkin）3.5.分布式任务调度平台
IoTHub - 物联网开源技术社区·2024-02-07 13:01

阿里首次披露自研飞天大数据平台技术架构

9月26日，阿里云飞天大数据平台在云栖大会第二天主论坛上正式对外发布，这也是阿里首次对外披露飞天大数据平台的整体架构。
DP29syM41zyGndVF·2024-02-07 11:13

树莓派定时任务

1.crontab介绍Linuxcrontab是用来定期执行程序的命令，当安装完成操作系统后，默认便会启动此任务调度命令，crond命令每分钟会定期检查是否要执行的工作，如果要执行的工作便会自动执行该工作
maxos·2024-02-07 10:32

dolphinscheduler海豚调度（一）简介&快速体验

1、简介ApacheDolphinScheduler是一个分布式易扩展的可视化DAG工作流任务调度开源系统。适用于企业级场景，提供了一个可视化操作任务、工作流和全生命周期数据处理过程的解决方案。
大数据_苡~·2024-02-07 10:26

【Flink】FlinkSQL实现数据从Kafka到MySQL

简介未来Flink通用化，代码可能就会转换为sql进行执行，大数据开发工程师研发Flink会基于各个公司的大数据平台或者通用的大数据平台，去提交FlinkSQL实现任务，学习Flinksql势在必行。
一杯咖啡半杯糖·2024-02-07 06:39

spark sql上线前的调试工作实现

背景每个公司应该都有大数据的平台的吧，平台的作用就是可以在上面执行各种sparksql以及定时任务，不过一般来说，由于这些sparksql的上线不经过测试，所以可能会影响到生产的数据，这种情况下大数据平台提供一个上线前的调试功能也就非常好了
lixia0417mul2·2024-02-07 05:22

黑马头条 xxl-job

知识库链接：D10xxl-job·语雀参考文章【黑马头条】day20—xxl-job（一）-阿里云开发者社区【黑马头条之xxl-Job分布式任务调度】_分布式调度框架-CSDN博客1.业务逻辑解决的是热点文章定时计算
南城余coding·2024-02-07 02:16

Spark Chapter 8 Spark SQL

【参考以慕课网日志分析为例进入大数据Sparksql】0导读SQL：MySQL，Oracle，DB2，SQLServer在大数据平台上实现大数据计算：Hive/SparkSQL/SparkCore直接使用
深海suke·2024-02-07 01:34

xxl-job 简介

官方文档：https://www.xuxueli.com/xxl-job/今天想要跟大家分享一下对xxl-job的浅显理解，他是一个在分布式环境下，解决多机定时任务如何调度执行的分布式任务调度平台xxl-job
迷失的撒旦·2024-02-06 19:50

任务调度-Oozie的安装

Oozie的安装(0)前提条件:maven3.5.0Mysql5.7.19-0ubuntu0.16.04.1tomcat7.0.79sudoaptinstallmaven(1)编译在本地执行4.3版本才支持jdk1.8在根目录的pom.xml中修改组建的版本./mkdistro.sh-DskipTests//执行编译脚本成功:Ooziedistrocreated,DATE[2017.11.14-0
neo_ng·2024-02-06 15:39
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他