调度系统

Apache Airflow调度中心发布任务步骤

airflow调度系统和业务系统解耦。业务单独编写流程，支持任务热加载。airflow支持cronta
全脂主妇·2023-11-13 23:05

浅谈Airflow调度系统

一、调度系统1.1为什么需要调度系统？
雷禄辉·2023-11-13 23:35

linux远程windows执行cmd,Linux服务器远程连接window服务器并执行cmd命令

前段时间，要给一个分布式调度系统写一个运维脚本，这个分布式调度系统部分子系统部署在window服务器上，这个时候就要想办法用Linux远程来连接window服务器，并执行cmd命令。
张迦弈·2023-11-12 08:17

快速搭建开源分布式任务调度系统DolphinScheduler并远程访问

使用Docker部署开源分布式任务调度系统DolphinScheduler文章目录使用Docker部署开源分布式任务调度系统DolphinScheduler前言1.安装部署DolphinScheduler1.1
FGGIT·2023-11-10 06:41

如何做好分布式任务调度——Scheduler 的一些探索

我们常常需要一些任务调度系统帮助我们解决问题。随着微服务化架构的逐步演进，单体架构逐渐演变为分布式、微服务架构。在此的背景下，很多原先的单点式任务调度平台已经不能满足业务系统的需求。
奋斗喝咖啡·2023-11-09 18:33

使用Docker部署开源分布式任务调度系统DolphinScheduler

博客主页：小羊失眠啦.系列专栏：《C语言》《数据结构》《Linux》《Cpolar》❤️感谢大家点赞收藏⭐评论✍️使用Docker部署开源分布式任务调度系统DolphinScheduler文章目录使用Docker
小羊失眠啦.·2023-11-09 15:28

AR可视化远程协助，医护诊疗，对讲指挥调度系统方案

5G时代，利用智能手机、执法记录仪、PDA终端、智能AR眼镜等智能终端结合单兵App软件实现集群对讲广播、人员定位、视频图传、监控摄像头调阅、视频会议等功能的智能化综合指挥调度平台，将每一部手机都变成对讲机，让每一部终端设备都成为一个移动的摄像头和单兵终端，适用于，远程巡检，医护诊疗，对讲协助，各种指挥调度类应用场合。功能需求：技术架构：界面效果：演示支持：https://w.ovmeet.com
fangji999·2023-11-09 09:34

记一次 .NET 某工厂无人车调度系统 线程爆高分析

一：背景1.讲故事前些天有位朋友找到我，说他程序中的线程数爆高，让我帮忙看下怎么回事，这种线程数爆高的情况找问题相对比较容易，就让朋友丢一个dump给我，看看便知。二：为什么会爆高1.查看托管线程别人说的话不一定是真，得自己拿数据出来说话，可以用!t命令观察一下便知。0:000>!tThreadCount:4683UnstartedThread:0BackgroundThread:4663Pend
一线码农·2023-11-08 14:44

欢迎了解融合通信应急调度系统解决方案

融合通信应急调度解决方案新一代IP调度系统以标准的SIP协议为核心，结合先进的呼叫控制、音视频处理等技术，提供强大的调度、广播、对讲、视频、报警、预案等功能模块，适用于应急|指挥|调度|广播|对讲|求助场景系统概述融合通信
融合通信服务商·2023-11-08 14:23

数据中台之调度系统技术选型和调研

目录前言主流大数据调度工具对比ApacheDolphinScheduler简介ApacheDolphinScheduler研发背景ApacheDolphinScheduler特性
数据与后端架构提升之路·2023-11-08 12:58

为什么选择Apache Airflow作为调度系统的7大理由

这篇文章主要想阐述使用ApacheAirflow作为调度系统的好处，尽可能客观的基于数据来说明情况，避免自夸自擂。
屋顶看飞机·2023-11-08 06:03

美团集群调度系统的云原生实践

本文介绍了美团在如何解决大规模集群管理的难题、设计优秀且合理的集群调度系统方面的实践，阐述了美团在落地以Kubernetes为代表的云原生技术时，比较关心的问题、挑战以及对应的推进策略。
zhisheng_blog·2023-11-08 02:41

基于 golang 从零到一实现时间轮算法 (三)

分布式版实现本章我们讨论一下，如何基于redis实现分布式版本的时间轮，以贴合实际生产环境对分布式定时任务调度系统的诉求.redis版时间轮的实现思路是使用redis
Lzjusc2017·2023-11-07 14:20

开启 GODEBUG 更直观地理解 Go 程序的调度过程

得益于Go语言优秀的运行时调度系统，即使开发人员没有多线程编程经验，也能很容易地开发并发程序。调度系统，其中最核心的就是GMP的设计，欲深入理解Go语言设计的读者都应该看过这些知识。
kevin_tech·2023-11-07 04:43

GPU Management Platform

GPU-XXX-ProjectforCryptography这个项目的背景是这样，写一个小小的GPU计算调度系统，它要求管理和调度机房里的N台GPU计算服务器，以实现大规模的并行计算处理。
haoranstone·2023-11-06 17:26

内存管理设计精要

持久存储的磁盘在今天已经不是稀缺的资源了，但是CPU和内存仍然是相对比较昂贵的资源，作者在调度系统设计精要中曾经介绍操作系统和编程语言对CPU资源的调度策略和原理，本文将会介绍计算机中常见的另一个稀缺资源
十年编程老舅·2023-11-06 16:42

如何将 XxlJob 集成达梦数据库

本篇博客将教你如何解决XxlJob与达梦数据库之间的SQL兼容性问题，以便你的任务调度系统能够在这个数据库中正常运行。
不掉头发的阿水·2023-11-05 14:37

国产操作系统介绍

在“计算机为人服务”的哲学指导下，djyos首次提出事件调度系统，符合人类思维过程，易学易用。djyos有易学易用的集成开发环境DIDE，极
测试专家·2023-11-05 13:29

Spark Core解析 2：Scheduler 调度体系

SparkCore解析2：Scheduler调度体系Overview调度系统，是贯穿整个Spark应用的主心骨，从调度系统开始入手了解SparkCore，比较容易理清头绪。
Liam666·2023-11-05 03:37

黑马程序员-----银行调度系统

模拟实现银行业务调度系统逻辑，具体需求如下：Ø银行内有6个业务窗口，1-4号窗口为普通窗口，5号窗口为快速窗口，6号窗口为VIP窗口。
大白菜枯萎了·2023-11-04 00:17

java 分布式作业调度_Spring整合Quartz分布式调度的示例代码

前言为了保证应用的高可用和高并发性，一般都会部署多个节点；对于定时任务，如果每个节点都执行自己的定时任务，一方面耗费了系统资源，另一方面有些任务多次执行，可能引发应用逻辑问题，所以需要一个分布式的调度系统
周周复年年·2023-11-03 23:38

系统性能测试方案

系统性能测试方案1引言1.1编写目的编写本方案的目的是用于指导水情监测及防洪调度系统的性能测试,主要从测试环境、测试工具、测试策略、测试具体执行方法、任务与进度表等事先计划和设计。
进击的雷神·2023-11-03 07:52

监控视频接入网关配置示例

在融合通信的场景中，经常会碰到将已有监控系统接入指挥调度系统的要求，今天通过一款RTSP->SIP监控视频接入网关为例，说明配置方法。
PTTLINK·2023-11-02 10:04

大数据调度平台分类大对比(Oozie/Azkaban/AirFlow/XXL-Job/DolphinScheduler)

大数据调度系统，是整个离线批处理任务和准实时计算计算任务的驱动器。这里我把几个常见的调度系统做了一下分类总结，结合目前阿里云上的MaxCompute中的调度系统，做个对比。
王知无(import_bigdata)·2023-11-01 07:34

flume使用HDFS Sink将数据导入到Hive中

整体流程：avroSource获取数据，然后通过SPILLABLEMEMORYchannel，再然后使用hdfssink将数据落地到hdfs中，最后通过调度系统执行脚本导入到hive中。
码道功成·2023-10-31 22:16

奇富科技引领大数据调度革命：高效、稳定、实时诊断

DolphinScheduler组织的分享活动上，奇富科技的数据平台专家刘坤元应邀为国内外技术工作者献上一场题为《ApacheDolphinScheduler在奇富科技的优化实践》的精彩分享，为大数据任务调度系统的未来探索出一条新的道路
CSDN云计算·2023-10-30 21:09

Android平台GB28181记录仪如何对接应急指挥调度系统？

技术方案将Android平台的GB28181客户端记录仪与应急指挥调度系统对接，可以实现实时视频监控和数据传输，以协助应急指挥中心对工地的监控和调度。
音视频牛哥·2023-10-30 13:26

数据人员常用名词解析：指标、标签、度量、口径、数据标准、血缘等

调度系统中的任务，经过调度系统、手动触发运行后，会生成一个实例。实例中会有
GOD_WAR·2023-10-29 04:19

python apscheduler_APScheduler - Advanced Python Scheduler

内置三种调度调度系统：Cron风格间隔性执行仅在某个时间执行一次作业存储的backends支持：MemorySQLAlchemy(anyRDBMSsupportedbySQLAlchemyworks)MongoDBR
weixin_39757739·2023-10-28 08:54

日均 6000+ 实例，TB 级数据流量，Apache DolphinScheduler 如何做联通医疗大数据平台的“顶梁柱”？...

在调度系统选型初期，我们团队技术栈以JVM语言为主，由于Airflow的结构体
DolphinScheduler社区·2023-10-28 07:18

从 Airflow 到 Apache DolphinScheduler，有赞大数据开发平台的调度系统演进

点击上方蓝字关注我们作者|宋哲琦✎编者按在不久前的ApacheDolphinSchedulerMeetup2021上，有赞大数据开发平台负责人宋哲琦带来了平台调度系统从Airflow迁移到ApacheDolphinScheduler
DolphinScheduler社区·2023-10-28 07:47

数据平台调度升级改造 | 从Azkaban 平滑过度到Apache DolphinScheduler 的操作实践

Fordeal的数据平台调度系统之前是基于Azkaban进行二次开发的，但是在用户层面、技术层面都存在一些痛点问题难以被解决。
DolphinScheduler社区·2023-10-28 07:47

突破单点瓶颈、挑战海量离线任务，Apache Dolphinscheduler在生鲜电商领域的落地实践

随着大数据的进一步发展，不管是离线任务量还是实时任务量都变得越来越多，对调度系统的要求也越来越高，不仅要求系统
DolphinScheduler社区·2023-10-28 07:47

大数据调度最佳实践 | 从Airflow迁移到Apache DolphinScheduler

迁移背景有部分用户原来是使用Airflow作为调度系统的，但是由于Airflow只能通过代码来定义工作流，并且没有对资源、项目的粒度划分，导致在部分需要较强权限控制的场景下不能很好的贴合客户需求，所以部分用户需要将调度系统从
DolphinScheduler社区·2023-10-28 07:45

腾讯会议大规模任务调度系统架构设计

疫情期间，很多企业受到了较大冲击，正常的复工生产无法进行。腾讯会议作为一款非常便捷的远程协作工具，成为了国内众多企业日常会议沟通交流的主要平台，这款产品从2019年12月26号正式推出，如何在这么短的时间内有效支撑起国内数以亿计用户的访问量呢？如何保障系统的稳定运行？下面为大家介绍，腾讯会议8天时间内完成100万核资源扩容背后的技术。一、两个典型案例首先介绍腾讯会议大规模扩容，下图所示为腾讯会议的
某科学的南条·2023-10-28 02:55

RFID课程设计-图书管理系统用户端设计

RFID课程设计-图书管理系统用户端设计课程设计题目课程设计任务内容题目设计基本原理NFC开发概述标签调度系统如何将NFC标签映射到MIME类型和URI如何将NFC标签分发到应用在Android清单中请求
interval_package·2023-10-27 12:55

华为OD机考算法题：流水线

题目部分题目流水线难度易题目说明一个工厂有m条流水线，来并行完成n个独立的作业，该工厂设置了一个调度系统，在安排作业时，总是优先执行处理时间最短的作业。
御剑乐逍遥·2023-10-27 09:14

azkaban学习部署

第1节概述1.1工作流调度系统一个完整的数据分析系统通常都是由大量任务单元组成:●shel脚本程序●java程序●mapreduce程序●hive脚本等各任务单单之间存在时间先后及前后依赖关系为了很好地组织起这样的复杂执行计划
只想挣钱，5毛以上活动莫叫我·2023-10-26 19:17

更快，更稳，更智能，科聪穿梭车（RGV）快速构建方案！

穿梭车（RGV）是一种智能机器人，可以编程实现取货、运送、放置等任务，并可与上位机、调度系统或WMS系统进行通讯，结合RFID、条码等识别技术，实现自动化识别、存取等功能。
探讨探讨AGV·2023-10-26 16:45

我在叽里呱啦折腾 DolphinScheduler 的日子

前言“工欲善其事，必先利其器”在2019年进行数仓建设时，选择一款易用、方便、高效的调度系统被摆在非常突出的位置，感谢前同事马振洋同学和杨孟霏同学的付出，最终有缘选择了DolphinScheduler的前身
DolphinScheduler社区·2023-10-25 19:23

融合通信系统在大型运动会中的应用

随着经济社会的发展，大型体育运动会的规模不断扩大，融合通信设备及指挥调度系统的应用逐渐成为不可或缺的一部分。
PTTLINK·2023-10-24 20:02

python通过FTP和SFTP并行下载远程主机文件

先说一下程序背景：最近项目上需要做业务切换，以前的自动调度系统不能再继续提供服务了，计划通过Python写一个远程下载程序，再通过crontab起定时任务来取代之前的调度系统。
弓长二止弋·2023-10-24 16:57

20210526 SDH

生产调度系统调度电话，远动自动化，继电保护，调度数据网，安全自动装置，负荷控制，集控监控，故障录波智能营销系
EdwardMaxx·2023-10-24 12:06

一文搞懂XXL-JOB任务调度平台

问题三：调度逻辑和QuartzJobBean耦合在同一个项目中，这将导致一个问题，在调度任务数量逐渐增多，同时调度任务逻辑逐渐加重的情况加，此时调度系统的性能将大大受限于业务；问题四：quartz底层以
兢兢业业的子牙·2023-10-24 01:44

智慧水务调度系统-数智赋能，科技治水

平台概述智慧水务调度系统平台是以物联感知技术、大数据、智能控制、云计算、人工智能、数字孪生、AI算法、虚拟现实技术为核心，以监测仪表、通讯网络、数据库系统、数据中台、模型软件、前台展示、智慧运维等产品体系为支撑
唐山柳林·2023-10-23 14:49

智慧水务调度系统-智慧水务大数据可视化管理系统

平台概述智慧水务调度系统平台（智慧水务大数据可视化管理系统平台）是以物联感知技术、大数据、智能控制、云计算、人工智能、数字孪生、AI算法、虚拟现实技术为核心，以监测仪表、通讯网络、数据库系统、数据中台、
唐山柳林·2023-10-23 14:18

农村供水调度系统在河北某地的建设案例

项目背景农村饮水安全事关广大农村居民的切身利益，是脱贫攻坚、乡村振兴的基础条件。该县为加快推进农村人饮安全运行管理工作，建立健全运管服务体系，改善当前农村人饮安全运营现状，积极实施城乡供水一体化工程，进一步提高农村供水保障水平。该县饮用水主要来源于南水北调的长江水，通过加压泵站输送至集中供水水厂，水厂经过处理达标后，由管网输送到各个村。长期以来该县供水管理与调度，仅仅依靠传统单一的人工经验操作，作
唐山柳林·2023-10-23 14:17

美团外卖骑手背后的AI技术

而实际配送过程是由配送员（骑手）最终完成的，因此，想要真正提升配送效率，不但要在智能调度系统（订单指派、路径规划、ETA）上下功夫，还要不断提升配送员的“附加”能力，让他们越送越“熟”，越送越“顺”，越送越
liuhuiteng·2023-10-21 18:40

分布式任务调度系统xxl-job版本升级经验分享

一、xxl-job简介XXL-JOB是一个分布式任务调度平台，其核心设计目标是开发迅速、学习简单、轻量级、易扩展。现已开放源代码并()接入多家公司线上产品线，开箱即用。具体文档资料参考官方文档。二、背景笔者之前使用的是v2.0.2版本，因需要权限管理等功能，决定将版本升级到v2.1.2。该版本自研调度组件，移除quartz依赖，且将DB脚本默认编码改为utf8mb4等，是一次非常大的版本更新。三、
十年磨一行·2023-10-20 19:09

azkaban_note

一azkaban的简介1.1调度系统背景1.一个完整的大数据分析系统通常都是由大量任务单元组成：shell脚本程序，mapreduce程序、hive脚本、spark程序等。
xiaoxiao______·2023-10-20 09:19
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他