调度Airflow

玩转至轻云大数据平台-docker部署篇

快速实现大数据离线ETL、Spark计算、实时计算、可视化调度、自定义接口、数据大屏以及自定义表单等多种功能，为企业提供高效便捷的大数据解决方案。至轻云有什么特点呢？又能怎么玩呢？
fanciNate454·2025-01-21 16:34

K8S中Pod控制器之CronJob(CJ)控制器

以下是CronJob的一些关键特点：周期性调度：CronJob允许您定义一个基于时间的调度，类似于Linux的cron工具，来周期性地执行任务。
元气满满的热码式·2025-01-21 10:09

stop调度类

2.4.1stop2.4.1.1stop简介众所周知，Linux内核包含五个调度类。它们分别是stop,deadline,RT,CFS和Idle。每次调度，其调度的顺序按照排序先后进行。
liqb365·2025-01-21 10:08

Flink Standalone 方案中解决挂机问题

Standalone中可以配置HighAvailability（HA）部署和配置首先了解Flink实际运行时包括两类进程：JobManager（又称为JobMaster）：协调Task的分布式执行，包括调度
星尘幻宇科技·2025-01-21 09:59

大数据学习(37)- Flink运行时架构

哲学语录:承认自己的无知，乃是开启智慧的大门如果觉得博主的文章还不错的话，请点赞+收藏⭐️+留言支持一下博主哦1）作业管理器（JobManager）JobManager是一个Flink集群中任务管理和调度的核心
viperrrrrrr·2025-01-21 09:57

批量作业调度、数据挖掘，这几款应该是今年 “最值得推荐” 的ETL工具了

工具传送门：Taskctl商业付费版(付费)TaskctlWeb商业免费版（永久免费）Kettle（开源免费）Datastage(付费)ETL是数据仓库中的非常重要的一环，是承前启后的必要的一步。ETL负责将分布的、异构数据源中的数据如关系数据、平面数据文件等抽取到临时中间层后进行清洗、转换、集成，最后加载到数据仓库或数据集市中，成为联机分析处理、数据挖掘的基础。下面给大家介绍一下什么是ETL以及
加菲盐008·2025-01-21 06:32

ETL作业调度工具TASKCTL的两个重大突破

同时，我也希望通过此次分享，带来一些抛砖引玉的效果，希望业界更多同仁，就批量调度技术更多的问题，敢于突破，使整个批量调度技术变得更完善、更易用。第一部分：两大问题的再分析在传统理念下，流
加菲盐008·2025-01-21 06:32

【开源免费】kettle作业调度—自动化运维—数据挖掘—informatica-批量作业工具taskctl

关注公众号"taskctl"，关键字回复"领取"即可获权产品简介taskctl是一款由成都塔斯克信息技术公司历经10年研发的etl作业集群调度工具，该产品概念新颖，体系完整、功能全面、使用简单、操作流畅
加菲盐008·2025-01-21 06:31

DolphinScheduler × Jiron：打造高效智能的数据调度新生态

github.com/642933588/jiron-cloudhttps://gitee.com/642933588/jiron-cloudDolphinScheduler×Jiron：打造高效智能的数据调度新生态
jiron开源·2025-01-21 06:26

hadoop常用命令

Yarn查看提交到资源调度器的任务（任何用yarn资源的都可以看，比如spark、tez、mapreduce）看正在运行的yarn任务yarnapplication-list杀死对应的yarn任务yarnapplication-kill
我要用代码向我喜欢的女孩表白·2025-01-21 05:54

Spring Task定时任务的基础使用

SpringTask的使用就分为3步骤：1.在pom.xml中导入对应的依赖2.自定义定时任务累3.在启动类中添加对应的注解学习之前我们先学习一下cron表达式：在我们使用调度任务技术的时候，特别是调度框架
Bailey395·2025-01-21 05:20

小明，谈谈你对Vue nextTick的理解

微任务调度：Vue首先尝试使用Promise.resolve
·2025-01-20 22:43

云原生主键模型：高效、弹性，省钱又省心

本文将详细探讨其优势，并对比云原生与本地磁盘持久化索引在大批量导入、小批实时导入以及弹性调度等场景中的表现。尤其在弹性调度场景中，云原生架构使延迟性能提升至本地磁盘的10倍。
·2025-01-20 22:42

AscendC从入门到精通系列（一）初步感知AscendC

基于AscendC编写的算子程序，通过编译器编译和运行时调度，运行在昇腾AI处理器上。使用AscendC，开发者可以基于昇腾AI硬件，高效的实现自定义的创新算法。
·2025-01-20 17:20

linux 进程状态显示dl,Linux系统中的实时调度器DL调度器的原理是什么？详细概述...

一、概述实时系统是这样的一种计算系统：当事件发生后，它必须在确定的时间范围内做出响应。在实时系统中，产生正确的结果不仅依赖于系统正确的逻辑动作，而且依赖于逻辑动作的时序。换句话说，当系统收到某个请求，会做出相应的动作以响应该请求，想要保证正确地响应该请求，一方面逻辑结果要正确，更重要的是需要在最后期限(deadline)内作出响应。如果系统未能在最后期限内进行响应，那么该系统就会产生错误或者缺陷。
筱潄艾尼·2025-01-20 06:31

两万字探讨时间轮算法

延时任务的常见场景包括：任务调度：某些任务需要按照预定时间执行，比如每天的定时数据备份。超时控制：网络连接的超时检测、数据库锁的释放延迟等。缓存管理：缓存数据的过期清理策略。
Damon_0411·2025-01-20 04:51

doris 安装部署

FE：存储和维护集群的元数据，负责接收和解析用户的查询请求，规划查询计化，调度查询结果，FE主要分为三个角色：Leader、Follower、ObserverLeader和Follower主要是用来实现
猫猫姐·2025-01-19 18:13

Python自动化办公

该框架将结合多种工具和技术，涵盖从数据处理到任务调度、自动化邮件发送、网页抓取等常见办公自动化任务。
测试开发漫漫成长路·2025-01-19 16:17

【2024年华为OD机试】 (B卷,100分)- 流水线（Java & JS & Python&C/C++）

一、问题描述题目描述一个工厂有m条流水线，来并行完成n个独立的作业，该工厂设置了一个调度系统，在安排作业时，总是优先执行处理时间最短的作业。
妄北y·2025-01-19 05:44

Yarn工作机制？思维导图 代码示例（java 架构)

YARN工作机制YARN（YetAnotherResourceNegotiator）是Hadoop生态系统中的资源管理和调度框架，它负责管理集群中的所有资源，并为应用程序提供调度服务。
用心去追梦·2025-01-19 02:17

K8s组件全解析，你需要知道的一切秘密

K8s组件全解析，你需要知道的一切秘密K8s架构概览APIServer：K8s的门面担当控制平面组件详解etcd：高可用的数据存储基石工作负载管理与调度策略网络模型与服务发现机制存储编排与持久化解决方案日志监控与故障排查工具链
master_chenchengg·2025-01-18 22:42

2021 寄网 数据库 西电 大题 软工

大题1：给了一个类似书上employee,works,company的关系模式，写关系代数和sql语句大题2：给了事务的执行，求串行执行有几种方式，串行执行后XY的结果；新的调度是否是可串行化？
_ZCWzy·2025-01-18 22:40

时间轮算法及简易实现

1.基本概念时间轮（TimeWheel）是一种高效的定时任务调度算法，用于管理和调度大量的定时任务。
·2025-01-18 22:44

C语言——多线程基础（pthread）

等待线程结束2.1使用pthread_join()等待线程结束2.1使用pthread_join()得到线程函数的返回值1.线程的定义以及线程的创建1.1线程和进程的概念线程：进程中的一个实体，是CPU调度和分派的基本单位
m0_74823264·2025-01-18 14:30

keepalived 、HAProxy

KeepAlived高可用集群配置高可用的web集群监控本机80端口，实现主备切换实现原理实施配置高可用、负载均衡的web集群配置高可用、负载均衡HAProxy配置haproxy负载均衡调度器比较LVS
www.农民工·2025-01-18 10:53

[Linux性能调优] 磁盘I/O队列调度策略

傻瓜化说明简单地说，对于磁盘I/O，Linux提供了cfq,deadline和noop三种调度策略cfq:这个名字是CompleteFairnessQueueing的缩写，它是一个复杂的调度策略，按进程创建多个队列
Linux小凯·2025-01-18 04:09

Spark任务提交流程

当包含在applicationmaster中的spark-driver启动后，会与资源调度平台交互获取其他执行器资源，并通过反向注册通知对应的node节点启动执行容器。
尘世壹俗人·2025-01-18 01:21

DDOS高防

全球DDoS防护根据攻击来源就近调度阿里云全球DDoS防护节点利用Anycast和GSLB技术，调度阿里云分布全球的DDoS防护节点，在发起攻击源头进行过滤，将防护能力最大化。
darkvm充充·2025-01-17 23:58

聚焦实践，面向前端 | 12月7日华为云首届开源开发者论坛火热报名中~

大会以“开放创新，释放云上生产力”为主题，融合AI、Serverless、前端、时序数据库、边缘计算、批量调度等多个维度，协助生态合作伙伴、企业、个人和高校开发者通过开源力量打造多场景多领域，提升技术活力及产业生产力
·2025-01-17 19:03

采用海豚调度器+Doris开发数仓保姆级教程（满满是踩坑干货细节，持续更新）

目录一、采用海豚调度器+Doris开发平替CDHHdfs+Yarn+Hive+Oozie的理由。
大模型大数据攻城狮·2025-01-17 19:56

基于 SSH 的任务调度系统

文末附有完整项目代码在当今科技飞速发展的时代，任务调度系统的重要性日益凸显。本文将详细介绍一个基于SSH（Spring+Struts2+Hibernate）的任务调度系统的设计与实现。
众拾达人·2025-01-17 19:55

MySQL Event Scheduler 详解

官网文档：MySQL::MySQL8.4ReferenceManual::27.4.1EventSchedulerOverview一引入MySQL的EventScheduler（事件调度器）功能首次在MySQL5.1
petunsecn·2025-01-17 19:24

应届生Java面试50题线程篇（含解析）

答：线程是操作系统能够进行运算调度的最小单位，是程序执行流的最小单元。在Java中，可以通过实现Runnable接口或继承Thread类来创建线程。创建线程的方式有哪些?各自的优缺点是什么？
「已注销」·2025-01-17 18:17

Hackbench 使用介绍

Hackbench使用介绍hackbench介绍hackbench应用1.hackbench参数2.hackbench代码下载3.代码编译4.样例参考文档hackbench介绍Hackbench是内核调度程序的基准测试和压力测试
法号：行颠·2025-01-17 17:42

【测试工具】Android耗电测试工具PowerTutor的使用

2)屏幕亮度3)cpu频率4)others：GPS、NFC、重力、振动、扬声器、摄像头、闪光灯、内存调度频度二，耗电测试——powerTutor简介：PowerTutor是由美国密歇根大学
叶阿猪·2025-01-17 14:39

华为OD机试 - 任务总执行时长 - 枚举（Python/JS/C/C++ 2024 E卷 200分）

一、题目描述任务调排服务负责对任务进行组合调度。参与编
哪 吒·2025-01-17 11:16

华为OD机试 - 工单调度策略 - 并查集（Python/JS/C/C++ 2024 E卷 200分）

华为OD机试2024E卷题库疯狂收录中，刷题点这里专栏导读本专栏收录于《华为OD机试真题（Python/JS/C/C++）》。刷的越多，抽中的概率越大，私信哪吒，备注华为OD，加入华为OD刷题交流群，每一题都有详细的答题思路、详细的代码注释、3个测试用例、为什么这道题采用XX算法、XX算法的适用场景，发现新题目，随时更新，全天CSDN在线答疑。一、题目描述当小区通信设备上报警时，系统会自动生成待处
哪 吒·2025-01-17 11:15

华为OD机试真题 - 机场航班调度程序（Python/JS/C/C++ 2024 D卷 100分）

华为OD机试2024E卷题库疯狂收录中，刷题点这里专栏导读本专栏收录于《华为OD机试真题（Python/JS/C/C++）》。刷的越多，抽中的概率越大，私信哪吒，备注华为OD，加入华为OD刷题交流群，每一题都有详细的答题思路、详细的代码注释、3个测试用例、为什么这道题采用XX算法、XX算法的适用场景，发现新题目，随时更新，全天CSDN在线答疑。一、题目描述XX市机场停放了多架飞机，每架飞机都有自己
哪 吒·2025-01-17 10:39

水库水雨情监测系统：实时自动化预警

水库水雨情监测系统凭借其自动化预警与精准调度功能，宛如一位尽职的守护者，时刻紧盯水情雨情变化，为水库安全运行及周边区域防洪减灾提供坚实保障，下面为您简单介绍水雨情系统的构成及功能。
DX_水位流量监测·2025-01-17 10:33

消息中间件的基础概念入门

目录一、什么是消息中间件1.1、简介1.2、消息中间件的主要作用解耦合异步通信负载均衡可靠性与持久性消息路由与调度削峰事务支持监控与审计跨平台和跨语言支持二、常用消息中间件对比2.1、RabbitMQ2.1.1
全镇人的希望·2025-01-17 05:28

Airflow：深入理解Airflow Sensor

ApacheAirflowSensors是实现特定感知的任务，它可以持续监控外部条件或事件，并阻止下游任务的执行，直到满足指定的条件。
梦想画家·2025-01-17 01:20

STM32 RTC 功能详解与代码示例

这对于需要时间戳、定时任务、日历功能以及其他需要精确时间信息的应用程序来说是必不可少的，例如数据记录系统、定时控制、事件调度等。
对error说不·2025-01-17 01:16

大数据新视界 --大数据大厂之 Volcano：大数据计算任务调度的新突破

亲爱的朋友们，热烈欢迎你们来到青云交的博客！能与你们在此邂逅，我满心欢喜，深感无比荣幸。在这个瞬息万变的时代，我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客，正是这样一个温暖美好的所在。在这里，你们不仅能够收获既富有趣味又极为实用的内容知识，还可以毫无拘束地畅所欲言，尽情分享自己独特的见解。我真诚地期待着你们的到来，愿我们能在这片小小的天地里共同成长，共同进步。本博客的精华专栏：大数
青云交·2025-01-17 01:13

题解：AI处理器组合

题解思路为了根据亲和性调度原则选择合适的处理器组合，需按照以下步骤进行：1.链路划分将可用的处理器编号array分为两个独立的链路：链路1：编号0-3链路2：编号4-7这样可以确保不同链路的处理器之间不会混合选择
·2025-01-17 00:11

XXL-JOB v2.5.0 | 分布式任务调度平台

ReleaseNotes1、【优化】框架基础守护线程异常处理逻辑优化，避免极端情况下因Error导致调度终止问题；2、【优化】底层通讯超时时间支持自定义，默认3秒，缓解网络抖动导致任务通讯超时问题；可参考
·2025-01-17 00:40

部署 及 使用 etl crontab 和 etl engine

如何部署及使用etl_crontab和etl_engine**内容详细，适合新人上手1、前置条件获取到以下文件列表code.bin(授权文件，必须)code.key(授权文件，必须)conf.cron(调度配置文件
·2025-01-16 23:56

公交智能调度系统的功能主要有哪些

一、实时监控公交智能调度系统通过安装在公交车上的GPS设备，实时获取车辆的位置、速度、行驶方向等信息。系统将这些数据与公交线路、乘客需求等信息进行比对，以判断车辆是否按照预定路线行驶。
yu_zheng5163·2025-01-16 21:15

Docker Swarm、Kubernetes 和 LVS 的功能对比

以下是它们的功能对比：1.DockerSwarm功能定位:DockerSwarm是Docker官方提供的容器编排工具，用于管理多个Docker容器的部署、扩展和调度。
田猿笔记·2025-01-16 21:41

题解：任务总执行时长

题解题目描述任务编排服务需要对两种不同执行时长的任务进行调度。在每次编排中，任务有两种类型：第1种任务执行时长为taskA。第2种任务执行时长为taskB。
·2025-01-16 17:51

centos7系统自动同步北京时间教程

CentOS7系统自动同步北京时间设置指南在服务器管理中，时间同步是确保系统日志、任务调度和安全性的重要环节。
·2025-01-16 16:26
上一页 2 3 4 5 6 7 8 9 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他