大数据平台任务调度

xxl-Job配置的方法

XXL-JOB是一个轻量级分布式任务调度平台，其核心设计目标是开发迅速、学习简单、轻量级、易扩展。现已开放源代码并接入多家公司线上产品线，开箱即用。
玉带林中挂·2023-07-25 00:14

深入分析 Java、Kotlin、Go 的线程和协程

前言协程是什么协程的好处进程进程是什么进程组成进程特征线程线程是什么线程组成任务调度进程与线程的区别线程的实现模型一对一模型多对一模型多对多模型线程的“并发”协程协程的目的协程的特点协程的原理Java、
被称为L的男人·2023-07-24 23:59

Python 定时任务框架 APScheduler 详解

APScheduler最近想写个任务调度程序，于是研究了下Python中的任务调度工具，比较有名的是：Celery，RQ，APScheduler。
leffss·2023-07-24 23:23

2020.1.7

同时把易客选大数据平台嫁接到实体店，又易客选规则带来的锁客引流威力，配合上社区新零售，
332720127·2023-07-24 22:43

简述Veeam备份原理和组件功能

它负责协调所有的备份、复制和恢复任务，包括任务调度、策略管理和报告。此外，它还存储了所有的配置数据和元数据。
A ?Charis·2023-07-24 21:02

axios

源码阅读https://juejin.im/post/6885471967714115597#heading-15*HTTP拦截器的设计与实现：从任务注册、任务编排和任务调度三个方面来分析Axios拦截器的实现
good__day·2023-07-24 17:10

基于Redis的任务调度设计方案

一个网关服务器就跟快餐店一样，总是希望客人来得快、去得也快，这样在相同时间内才可以服务更多的客人。如果快餐店的服务员在一个顾客点餐、等餐和结账时都全程跟陪的话，那么这个服务员大部分时间都是在空闲的等待。应该有专门的服务员负责点餐，专门的服务员负责送餐，专门的服务员负责结账，这样才能提高效率。同样道理，网关服务器中也需要分工明确。举个例子：假设有一个申请发送重置密码邮件的网关接口，须知道发送一封邮件
breeze2·2023-07-24 17:36

django异步通信框架Celery

同时也支持任务调度。
办法总比困难多多·2023-07-24 13:42

Django高级扩展之celery使用

是一个专注于实时处理的任务队列，同时还支持任务调度。
JSON_L·2023-07-24 12:34

分布式任务调度平台:XXL-JOB

许雪里大佬的杰作:文档地址个人感受：开源、使用简单、开箱即用、大量公司在用源码仓库地址ReleaseDownloadhttps://github.com/xuxueli/xxl-jobDownloadhttp://gitee.com/xuxueli0323/xxl-jobDownload快速入门引入依赖xxl-job-core初始化数据库配置调度器，执行器部署调度器，执行器0、引入依赖xxl-jo
benboerdong·2023-07-24 12:55

信创-大数据平台CPU架构支持

一、CDH和HDP、CDPCDP数据中心类似于CDH和HDP,直接安装在硬件服务器上,目前支持市面上主流的X86服务器,包括国内海光服务器，CDH不支持ARM以上两种大数据平台都仅支持x86架构，早在几年期
四月天03·2023-07-24 07:46

JavaEE进阶知识学习-----定时任务调度Quartz-2-触发器Trigger

认识TriggerQuartz中的触发器是用来告诉调度程序作业什么时候触发，即Trigger对象是用来触发执行Job的。触发器的通用属性JobKey：表示job实例的标识，触发器被触发时，该指定的job实例会执行。StartTime：表示触发器的时间表首次触发的时间，值为util.Date。EndTime：指定触发器的不再被触发的时间，值为util.Date。实例如下HelloScheduler类
Waldeinsamkeit4·2023-07-24 04:07

吉林大学操作系统上机（实验二：处理机调度——实时调度算法EDF和RMS）

动态不等长存储资源分配算法）每做一个实验都不禁感叹奇妙非常，以下仅为学习记录，不足出错欢迎指出实验二处理机调度——实时调度算法EDF和RMS实验目的深入理解处理机调度算法，了解硬实时概念，掌握周期性实时任务调度算法
KQ.·2023-07-23 19:47

Hadoop大数据平台入门——HDFS和MapReduce

随着硬件水平的不断提高，需要处理数据的大小也越来越大。大家都知道，现在大数据有多火爆，都认为21世纪是大数据的世纪。当然我也想打上时代的便车。所以今天来学习一下大数据存储和处理。随着数据的不断变大，数据的处理就出现了瓶颈：存储容量，读写速率，计算效率等等。google不愧是走在世界前列的大公司，为了处理大数据，google提出了大数据技术，MapReduce，BigTable和GFS。这个技术给大
yoku酱·2023-07-23 14:39

双向链表-C语言实现结构体双向链表

文章目录说明实现说明双向链表作为链表数据结构的一种，使用广泛且方便，特别是在操作系统内核的任务调度中。用C语言实现一般的双向链表比较简单。
江安吴彦祖·2023-07-23 11:10

人工智能时代职教教师能力提升的路径

政府及企业要发挥主导作用，建立大数据平台，对教师职业能力进行监测，提供对职业教育教师职业能力评估的数据支撑；组织人工智能专家，对职业
英腾云课堂·2023-07-23 09:12

Spark内存计算

Spark在做数据的批处理计算，计算性能大约是HadoopMapReduce的10~100倍，因为Spark使用比较先进的基于DAG任务调度，可以将一个任务拆分成若干个阶段，然后将这些阶段分批次交给集群计算节点处理
小中.·2023-07-23 04:17

通过mobx-miniprogram-bindings学习：「响应式绑定」与「任务调度」

目录注意事项延迟更新与立刻更新现象通过现象了解原理疑问1:this.a=123做了什么？疑问2:tagret.setData为什么没有立马更新？最终：实际运行的代码是什么样的？如何解决？总结、优化注意事项延迟更新与立刻更新为了提升性能，在store中的字段被更新后，并不会立刻同步更新到this.data上，而是等到下个wx.nextTick调用时才更新。（这样可以显著减少setData的调用次数。
罗坤_23333·2023-07-22 23:43

hadoop 3.1.3单机版安装教程

引言公司有搭建大数据平台，为了让java能访问大数据平台，本人先在测试环境上自行搭建了一个单机版的hadoop，研究java和hbase之间的jdbc连接。
YukunWen·2023-07-22 20:23

Ruoyi框架学习--定时任务

定时任务的场景可以说非常广泛，比如某些视频网站，购买会员后，每天会给会员送成长值，每月会给会员送一些电影券；比如在保证最终一致性的场景中，往往利用定时任务调度进行一些比对工作；比如一些定时需要生成的报表
迷人的小松子·2023-07-22 16:06

quartz做定时任务调度时重复执行多次的原因及解决方法

1.注意并发加锁@DisallowConcurrentExecution2.注意配置加锁在配置文件加上org.quartz.jobStore.acquireTriggersWithinLock=true3.任务执行时间太短，比如是空任务，只需要1-2毫秒即执行完成，这种情况下，存在重复调度的情况，尤其是有部分刚过计划执行时间的任务。此时如果任务执行时间太短，可以在定时任务中，适当增加延迟等待，确保
程序猿（攻城狮）·2023-07-22 16:05

TipDM数据挖掘建模平台产品功能特点

TipDM数据挖掘建模平台是可视化、一站式、高性能的数据挖掘与人工智能建模服务平台，致力于为使用者打通从数据接入、数据预处理、模型开发训练、模型评估比较、模型应用部署到模型任务调度的全链路。
泰迪智能科技·2023-07-22 13:50

celery task php,celery worker错误”Received unregistered task of type ‘tasks.add’”解决

在Python开发的分布式任务调度模块celery的worker出现”Receivedunregisteredtaskoftype‘tasks.add’”错误，下面是本人的解决方法。
胡思乱想的狸花猫·2023-07-22 10:22

大数据之就业岗位

数据部门的组织架构运维组1.负责分析大数据平台各个组件运行状态，负责大数据平台运行故障的分析，定位和解决，并根据业务场景进行定制优化2.负责业务集群日常问题的解答、汇总整理、跟踪解决等；3.参与大数据集群自动化运维工具的设计与实施
（YSY_YSY）·2023-07-22 06:20

字节跳动云原生大数据平台运维管理实践

云原生大数据是大数据平台新一代架构和运行形态。
字节跳动云原生计算·2023-07-22 04:11

腾讯数据中台项目集管理实战分享︱腾讯高级项目经理张嵎桐

腾讯PCG大数据平台部高级项目经理张嵎桐先生受邀为由PMO评论主办的2023第十二届中国PMO大会演讲嘉宾，演讲议题：腾讯数据中台项目集管理实战分享。大会将于8月12-13日在北京举办，敬请关注！
中国pmo大会·2023-07-21 23:44

python+schedule定时器执行任务

目录制定任务定时器通过装饰器方法执行任务标签任务运行到某一时间停止运行所有任务schedule是一个三方的轻量级定时任务调度库，可完成每分钟，每小时，每天，周几等特定日期的定时任务。
觅远·2023-07-21 20:17

搭建本地YUM源服务

2、一个集群中，只需要一个节点部署yum源服务，其他节点作为客户端，使用该服务即可；3、此文分为两部分，先是搭建yum源服务（一台节点执行），然后配置yum服务（其他节点执行）4、安装HDP大数据平台，
玄慈·2023-07-21 14:38

移动通信网络规划：面、线、点覆盖规划

1、城区城区的5G覆盖规划主要考虑以下三个方面：①综合大数据平台分析、测试、投诉数据等，精准覆盖补点，进一步加强市区、县城的深度覆盖，对高价
知识世界·2023-07-21 09:46

Pyspider基本介绍

(调度器)、Fetcher(抓取器)、Processer(处理器)三个部分,整个爬取过程受到Monitor(监控器)的监控,抓取的结果被ResultWorker(结果处理器)处理Scheduler发起任务调度
破壳的小企鹅·2023-07-21 08:30

.Net Core使用Coravel实现任务调度

Coravel是一个专为.NETCore设计的.NETStandard库，除了任务调度，还提供了像队列、缓存、邮件等其它高级功能。特点就是对开发者十分友好，接入十分简单、优雅、流畅，接近于零配置。
执着的涛·2023-07-20 20:47

【多线程】（四）定时器及其模拟实现

定时器通常用于需要定期执行某些操作的场景，例如定时任务调度、定时数据备份、定时数据同步等。它可以帮助开发人员实现按照预定时间执行任务的逻
李 ~·2023-07-20 17:26

java中的任务调度之Timer定时器（案例和源码分析）

定时器相信大家都不陌生，平时使用定时器就像使用闹钟一样，我们可以在固定的时间做某件事，也可以在固定的时间段重复做某件事，今天就来分析一下java中自带的定时任务器Timer。一、Timer基本使用在Java中为我们提供了Timer来实现定时任务，当然现在还有很多定时任务框架，比如说Spring、QuartZ、LinuxCron等等，而且性能也更加优越。但是我们想要深入的学习就必须先从最简单的开始。
愚公要移山·2023-07-20 13:14

2.Hadoop 生态圈及核心组件简介

随着处理任务不同，各种组件相继出现，丰富Hadoop生态圈，目前生态圈结构大致如图所示：根据服务对象和层次分为：数据来源层、数据传输层、数据存储层、资源管理层、数据计算层、任务调度层、业务模型层。
墨家先生·2023-07-20 11:33

【征服大象】Hadoop YARN学习笔记

1.关于HadoopYARN1.1HadoopYARN基本情况HadoopYARN是一个分布式的资源管理和任务调度的框架，其架构如下图所示（图片来源：ApacheHadoop3.3.1–HDFSArchitecture
85后_老井·2023-07-20 01:30

XXL-JOB（分布式任务调度平台）的使用(详细教程)

官方简介：XXL-JOB是一个分布式任务调度平台，其核心设计目标是开发迅速、学习简单、轻量级、易扩展。
我高考零分!·2023-07-20 00:58

Hadoop基本信息

框架内容狭义解释核心组件HDFS分布式文件系统-解决海量数据存储MAPREDUCE分布式运算编程框架-解决海量数据计算YARN作业调度和集群资源管理的框架-解决资源任务调度广义解释Hadoop的生态圈HUE
枫叶梨花·2023-07-19 18:29

linux相关面试问题

目前常见的大数据平台都是基于Linux系统的，比如Hadoo
婷子1921·2023-07-19 17:17

面试题总结1-JVM+数据库

1、进程、线程、协程进程：进程是程序的一次执行过程，是系统资源分配和独立运行的最小单位；线程：线程是进程的一个执行单元，是任务调度和系统执行的最小单位，受内核调度，是同步机制；协程：协程是一种用户态的轻量级线程
stars 星辰·2023-07-19 13:23

如何通过smardaten无代码开发平台快速搭建数据中台？

三、数据中台搭建工具四、如何用无代码快速搭建数据中台1、多源数据接入2、数据流（数据集成）3、数据资产管理4、数据访问管理5、数据交换平台6、数据共享平台7、共享任务调度五、数据可视化分析1、数据分析2
哪 吒·2023-07-19 12:42

黑马头条 分布式任务调度 定时计算热点文章、xxl-job、kafkaStream

xxl-Job分布式任务调度1今日内容1.1需求分析目前实现的思路：从数据库直接按照发布时间倒序查询问题1：如何访问量较大，直接查询数据库，压力较大问题2：新发布的文章会展示在前面，并不是热点文章1.2
软工菜鸡·2023-07-19 12:31

Linux 定时任务

定时任务crond任务调度系统在某个时间执行特定的命令或程序(servicecrondstart/restart)crontab-e编辑crontab定时任务-l查询crontab任务-r删除当前用户所有的
WihauShe·2023-07-19 11:37

Java微服务分布式调度Elastic-job环境搭建及配置

目录什么是任务调度为什么需要分布式调度Elastic-Job环境搭建更改Zookeeper配置SpringBoot集成ElasticJob什么是任务调度任务调度是为了自动完成特定任务，在约定的特定时刻去执行人物的过程为什么需要分布式调度
·2023-07-19 09:48

分布式异步任务框架之Celery定义、异步任务框架特点、架构、使用场景、安装配置、基本使用、多任务结构使用、延时任务、定时任务及django中使用celery

方式二9、定时任务10、django中使用celery()1、定义python中的一个分布式异步任务框架Celery是一个简单、灵活且可靠的,处理大量消息的分布式系统专注于实时处理的异步任务队列同时也支持任务调度
一切随心走_水瓶·2023-07-19 07:41

Celery 图解

原理Celery是基于Python开发的已给分布式任务队列框架，支持使用任务队列的方式在分布机器/进程/线程任务调度。
大东子来搬砖·2023-07-19 07:41

SpringBoot - 集成Quartz框架之常用配置

Quartz是一款Java编写的开源任务调度框架，同时它也是Spring默认的任务调度框架。
prince05·2023-07-19 05:21

Quartz 实现分布式任务调度

2019独角兽企业重金招聘Python工程师标准>>>情景在开发的时候可能需要用到任务调度，通常我们使用quartz，单独部署一个实例来进行任务调度，然后就会存在单点的风险，quartz帮我们实现了多台实例时候的高可用
weixin_33919941·2023-07-19 05:51

使用Quartz实现分布式集群任务调度

1.Quartz简单使用定时任务需求可以使用以下技术:(定时器)quartz:可以使用集群,使用不方便spring-task:不能使用集群,使用方便,一个注解完事xxl-job定时任务,中国人写的elastic-job开源的,功能多Quartz是Jobscheduling（作业调度）领域的一个开源项目，Quartz既可以单独使用也可以跟spring框架整合使用，在实际开发中一般会使用后者。使用Qu
小象子·2023-07-19 05:51

Quartz任务调度（详细）

文章目录一、Quartz概念1.基本介绍2.Quartz运行环境3.Quartz核心概念4.Quartz的体系结构二、Quart的使用1、引入Quartz的jar包2、入门案例3、Job和JobDetail详解4、JobExecutionContext5、JobDataMap介绍（1）使用Map获取（2）使用Setter方法获取6、有状态的Job和无状态的Job（@PersistJobDataAf
心在忍耐·2023-07-19 05:18

2022-04-13 分布式任务调度Quartz

这就GG了,因此分布式任务调度的需求应运而生=====Quartz;解决的问题:1任务不重复跑如上的问题2任务不漏跑
寂寞旅行·2023-07-19 05:18
上一页 36 37 38 39 40 41 42 43 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他