调度系统

分布式任务调度系统-定时任务的解决方案

导语：在前面我们讲过了阿里云分布式任务调度平台，今天我们从架构和技术实现上来为大家讲解腾讯云分布式任务调度系统TCT(TencentCloudTask)如何实现任务调度的精准实时、稳定高效，以及任务的切分和编排
天秤座的架构师·2022-08-29 07:54

企业级容器调度系统解决方案，引入 CPU 精细编排、资源预留与全新的重调度框架

简介：经过社区多位成员的贡献，Koordinator0.6版本正式发布。相较于上一个版本0.5，新版本进一步完善了CPU精细化编排能力，更好的兼容原生用法；支持了资源预留的能力（Reservation），补齐了调度原子语意缺失；发布了全新的重调度框架，支持用户灵活的扩展自定义插件。这些特性源自于阿里巴巴内部的生产实践，并结合上游社区规划思考，为用户带来标准、强大、灵活的调度解决方案。作者：李涛、曾
·2022-08-26 18:21

基于gis三维可视化技术的智慧城市建设

在平安城市规划建设中，应急指挥与智能监控系统根据选用监控设备在二维在线地图上显示信息的方法，可以保持集视频监控系统、GIS、GPS定位、周边预防(如采电子脉冲、振动光缆电缆等)、目标识别、智能视频、视频语音通讯、指挥调度系统等多种技术为一体的大中型综合性智能安防服务平台
ztmap2020·2022-08-24 09:00

Azkaban安装及配置

目录一：Azkaban概论1.1为什么需要工作流调度系统1.2常见工作流调度系统1.3Azkaban与Oozie对比二：Azkaban入门2.1集群模式安装2.1.1上传tar包2.1.2配置MySQL2.1.3
JiaXingNashishua·2022-08-13 18:09

提升资源利用率与保障服务质量，鱼与熊掌不可兼得？

美团Hulk调度系统团队在集群服务质量与资源利用率运营的长期落地实践中，基于业务实际场景，自主设计研发了集群负载自动调控系统（LAR）以及配套的运营体系，在提升集群整体资源利用率的同时保障了业务服务质量
美团技术团队·2022-08-12 19:27

提升资源利用率与保障服务质量，鱼与熊掌如何兼得？

美团Hulk调度系统团队在集群服务质量与资源利用率运营的长期落地实践中，基于业务实际场景，自主设计研发了集群负载自动调控系统（LAR）以及配套的运营体系，在提升集群整体资源利用率的同时保障了业务服务质量
·2022-08-12 17:26

【中央任务调度系统—通信开发】

中央任务调度系统—通信开发一、方案设计目标二、技术指标三、主要研究内容四、技术创新点五、研究展望一、方案设计目标学习socket通信、掌握C++编程、熟悉ROS通信机制，完成中央任务调度系统与ROS系统之间数据的交互
2345VOR·2022-08-11 13:00

秒懂边缘云 | CDN基础入门：CDN解析配置

解析基本原理前言上个章节中我们学习了如何根据业务情况添加CDN域名并配置源站，但在添加完成后，域名尚未真正接入CDN服务，我们需要将域名解析到特定的CNAME记录上才能使得终端用户请求时，用户的DNS解析域名时能通过CDN智能调度系统访问到自身周边的
·2022-08-05 14:36

数据系统架构-8.任务调度系统

任务调度系统序在有了各种数据统计任务之后，就产生了任务调度需求，我们需要把任务管理起来统一调度，保证任务之间上下游的依赖关系，监控任务运行状态，异常情况下及时告警，尽可能自动化处理异常，调度系统高可用，
·2022-07-29 11:45

数据系统架构-8.任务调度系统

任务调度系统序在有了各种数据统计任务之后，就产生了任务调度需求，我们需要把任务管理起来统一调度，保证任务之间上下游的依赖关系，监控任务运行状态，异常情况下及时告警，尽可能自动化处理异常，调度系统高可用，
·2022-07-29 11:44

看 Serverless Task 如何解决任务调度&可观测性中的问题

一个完善的调度系统往往需要平衡不同
阿里云技术·2022-07-29 10:06

最小堆提升每次排序的效率

之前写过一个分布是任务调度系统，每次执行完任务都要对任务进行排序，使用最小堆确实优化了效率及cpu项目中需要使用一个简单的定时任务调度的框架，最初直接从GitHub上搜了一个star比较多的，就是https
·2022-07-28 12:12

详解异步任务 | 看 Serverless Task 如何解决任务调度&可观测性中的问题

一个完善的调度系统往往需要平衡不同
·2022-07-26 20:39

当我们在聊「开源大数据调度系统Taier」的数据开发功能时，到底在讨论什么？

原文链接：当我们在聊「开源大数据调度系统Taier」的数据开发功能时，到底在讨论什么？
·2022-07-21 16:13

Spark总结（SparkCore,SparkSQL,SparkStreaming）

hadoop是一个分布式计算开源框架，包含分布式文件系统HDFS、MapReduce分布式计算的软件架构和Yarn资源管理调度系统。
ambitfly·2022-07-16 15:58

深度揭秘阿里云函数计算异步任务能力

一个完善的调度系统往往需要平
·2022-07-12 21:24

开源大数据调度系统Taier技术公开课——Taier数据开发介绍

一键直达直播间一、直播介绍之前的内容，我们为大家分享了Taier入门及控制台，以及Taier的Web前端架构介绍，本期我们为大家分享Taier数据开发介绍。本次直播我们将从Taier的数据开发功能介绍，到任务运行、功能可扩展点以及未来将发布的taier1.2为大家进行详细讲解，通过本次分享，希望大家能对Taier有更进一步的了解。二、直播主题Taier数据开发介绍三、直播时间时间：2022年7月1
·2022-07-11 19:32

乐外卖物流配送调度系统设计

摘要随着互联网时代的发展，以及人们对生活品质的追求，订外卖已经成为了一种普遍的消费行为，外卖因其快捷便利性广受青睐，也因配送不及时，不准确倍受指摘。为了改善当前外卖配送过程中存在的配送速度不能保证，物流成本高，订单信息反馈不及时，配送调度方案不科学等问题，本次研究致力于对外卖物流配送系统进行设计。发展一套以蚁群系统为依据，重新规划配送，以作配送路径上的规划，为了解决当今外卖配送系统中存在的一系列问
jonathan_zhang2007·2022-07-10 07:28

kubernetes集群之调度系统

kubernetes集群之调度系统一、kube-scheduler介绍1.kube-scheduler简介2.k8s的调度系统作用3.kubernetes组件示意图4.schedule调度器工作示意图二
江湖有缘·2022-07-05 07:14

任务调度：时间轮算法经典案例解析及应用实现

是任务调度系统中最重要的命题，当然在业务系统中一个完善的任务调度系统是很复杂的，需要具备能调度、可视化管理、
阿里巴巴淘系技术团队官网博客·2022-07-03 17:27

日均 6000+ 实例，TB 级数据流量，Apache DolphinScheduler 如何做联通医疗大数据平台的“顶梁柱”？

在调度系统选型初期，我们团队技术栈以JVM语言为主，由于Airflow的结构体系无法进行充分
·2022-06-30 16:05

送外卖也要“黑科技”？阿里移动感知技术应用揭秘

简介：送餐路上外卖骑手们所处的位置不仅牵动着大家的心，在本地生活的场景下，也是订单配送和调度系统的重要一环。其中骑手是否已到店取餐看似简单却难以准确观测。
·2022-06-27 17:10

基于温湿度雨量水质监测的 智能水利视频监测调度系统

基于温湿度雨量水质监测智能的水利视频监测调度系统一系统应用本系统主要用于监视河流湖泊水利运行情况。
i数采物联-上海/河南·2022-06-25 07:39

基于开源大数据调度系统Taier的Web前端架构选型及技术实践

原文链接：基于开源大数据调度系统Taier的Web前端架构选型及技术实践课件获取：关注公众号“数栈研习社”，后台私信“Taier”获得直播课件视频回放：点击这里Taier开源项目地址：github丨gitee
·2022-06-20 18:30

数据平台调度升级改造 | 从Azkaban 平滑过度到 Apache DolphinScheduler 的操作实践

Fordeal的数据平台调度系统之前是基于Azkaban进行二次开发的，但是在用户层面、技术层面都存在一些痛点问题难以被解决。
·2022-06-20 12:18

.NET Core 分布式任务调度ScheduleMaster详解

APIServer对接流程2.创建程序集任务3.创建HTTP任务4.创建延时任务4.框架简单分析1.全局设计2.Master和Work分析1.什么是ScheduleMasterScheduleMaster是分布式任务调度系统
·2022-05-31 12:51

分布式任务调度ScheduleMaster

1.什么是ScheduleMasterScheduleMaster是分布式任务调度系统。
有梦想的鱼i·2022-05-28 21:00

基于云服务MRS构建DolphinScheduler2调度系统的案例详解

目录为什么写这篇文章？环境准备安装MRS客户端安装MySQL服务1.创建ECS用户2.解压安装包3.配置文件初始化4.启动数据库5.登陆，修改密码，预置dolphinscheduler的用户安装dolphinscheduler服务1.建立本机id免密2.修改配置参数3.将mysql驱动包放入lib下4.创建元数据库数据表5.服务安装、启停6.登录系统提交MRS任务1.登录进入dolphinsche
·2022-05-28 17:52

基于云服务MRS构建DolphinScheduler2调度系统

本文分享自华为云社区《基于云服务MRS构建DolphinScheduler2调度系统》，作者：啊喔YeYe。为什么写这篇文章？
华为云开发者社区·2022-05-28 11:00

面向大数据处理应用的广域存算协同调度系统

摘要：以我国研发的高性能计算虚拟数据空间系统为基础，针对大数据处理应用如何统筹利用广域存储和计算资源的问题，设计并实现了一套面向大数据处理应用的广域存算协同调度系统。
罗伯特之技术屋·2022-05-27 07:57

深入理解 goroutine 底层原理与 GMP 调度模型

进程线程协程调度系统调度系统调度用户调度栈拥有独立栈拥有独立栈拥有独
zone7_·2022-05-26 14:30

数仓血缘关系数据的存储与读写

为方便数据治理、元数据管理及数据质量监控，将调度系统生成的数仓血缘保存起来。而本文由来自NebulaGraph社区的用户shixingr带来他的实践分享。
NebulaGraph·2022-05-26 11:00

玩转集群配置中心，一文带你了解 Taier 控制台

基础教程（二）：Taier1.1新功能详解&控制台介绍_哔哩哔哩_bilibili开源项目交流群：30537511（钉钉）开源项目地址：GitHub-DTStack/Taier:大数据平台-分布式任务调度系统上期
·2022-05-24 11:39

求解热电联产经济调度问题的改进遗传与粒子群算法

在热电联产经济调度系统中﹐需在满足电力和热力需求及运行约束的
电力系统与算法之美·2022-05-10 00:03

倒计时0日！Apache DolphineScheduler4月 Meetup 大佬手把手教你大数据开发，离线调度

ApacheDolphinScheduler作为新一代的大数据任务调度系统，致力于让调度变得更加容易。身
·2022-04-30 10:52

九大新功能、全新 UI 解锁调度系统新能力

2022年4月22日，ApacheDolphinScheduler正式宣布3.0.0alpha版本发布！此次版本升级迎来了自发版以来的最大变化，众多全新功能和特性为用户带来新的体验和价值。3.0.0-alpha的关键字，总结起来是“更快、更现代化、更强、更易维护”。更快、更现代化：重构了UI界面，新UI不仅用户响应速度提高数十倍，开发者构建速度也提高数百倍，且页面布局、图标样式都更加现代化；更强：
·2022-04-25 15:52

深入浅出聊Taier—大数据分布式可视化DAG任务调度系统

导读：上周，袋鼠云数栈全新技术开源规划——DTMO（DTstackMeetupOnline）的第一场直播圆满完成。袋鼠云数栈大数据开发专家、Taier项目主导人偷天为大家带来了《Taier入门介绍》的分享，我们将直播精华部分做了整理，带大家再次回顾内容，加深技术细节的了解。你能看到▫Taier发展历程▫Taier架构设计和功能详解▫Taier具体应用和未来规划点击链接，查看直播视频回放https:
·2022-04-20 14:23

深入浅出聊Taier—大数据分布式可视化DAG任务调度系统

导读：上周，袋鼠云数栈全新技术开源规划——DTMO（DTstackMeetupOnline）的第一场直播圆满完成。袋鼠云数栈大数据开发专家、Taier项目主导人偷天为大家带来了《Taier入门介绍》的分享，我们将直播精华部分做了整理，带大家再次回顾内容，加深技术细节的了解。你能看到�
数栈DTinsight·2022-04-20 13:00

技术抉择：阿里云13年后重构全部核心调度系统

简介：在阿里云十三年的发展历史上，重新设计调度系统算得上是一个重要的技术抉择。在阿里云十三年的发展历史上，重新设计调度系统算得上是一个重要的技术抉择。云计算是一个庞大的技术工程。
·2022-04-20 11:39

java开源调度如何给xxljob加k8s执行器

XXL-JOB-ADMIN模块新增执行器2、引入K8S-CLIENT-JAVA，使用SERVICEACCOUNT机制与K8S交互3、编写代理执行器调度代码结语前言xxljob是采用java开发的开源的任务调度系统
·2022-04-15 14:29

TASKCTL项目工程与作业类型定义

应用工程：应用工程简称工程，从业务系统角度去划分调度系统。每个应用工程管理所属的流程、定时器、变量等调度元信息。还可分配平台节点权限用于限定平台网络架构的系统范围。
·2022-04-11 11:58

极速开发扩充 Apache DolphinScheduler Task 类型 | 实用教程

背景简介目前在大数据生态中，调度系统是不可或缺的一个重要组件。ApacheDolphinScheduler作为一个顶级的Apache项目，其稳定性和易用性也可以说是名列前茅的。
·2022-03-30 16:27

【干货-K8S系列】Kubernetes调度核心解密:从Google Borg说起

容器调度系统负责选择在最合适的主机上启动容器，并且将它们关联起来。它必须能够自动的处理容器故障并且能够在更多的主机上自动启动更多的容器来应对更多的应用访问。
weixin_33775582·2022-03-25 09:33

Hdfs学习（一）

核心组件：HDFS（分布式文件系统）YARN（运算资源调度系统）MAPREDUCE（分布式运算编程框架）1.2特点1）优势高容错性：HDFS多副本分布式存储，当一个副本丢失了，能够自动恢复，所以HDFS
·2022-03-24 14:03

Java之路--Javase篇 银行系统模拟

（黑马程序员）银行调度系统设计需求：模拟现实银行业务调度系统逻辑：1．银行内有个业务窗口，1-4为普通窗口，5号为快速窗口，6号为VIP窗口，2．有三种对应需求的客户：VIP，普通，快速（交水电话费）；
weixin_34104341·2022-03-23 08:48

Hadoop简介和体系架构

1Hadoop由来2．1．2Hadoop发展历程2．1．3Hadoop生态系统2．2Hadoop的体系架构2．2．1分布式文件系统HDFS2．2．2分布式计算框架MapReduce2．2．3分布式资源调度系统
G不来也不去·2022-03-18 07:46

杭州思科对 Apache DolphinScheduler Alert 模块的改造

PROFILE李庆旺杭州思科大数据工程师，主要负责Spark、调度系统等大数据方向开发。我们在使用原有的调度平台处理大数据任务时，在操作上多有不便。比如一个对数据进行处理聚合分析的任务，首先由
·2022-03-16 20:35

分析xxljob登入功能集成OIDC的统一认证

目录前言XXL-JOB自身认证功能分析OIDC的认证流程XXL-JOB集成OIDC后的认证流程XXL-JOB登录模块重新设计编码环节前言xxl-job是一款java开发的、开源的分布式任务调度系统，自带了登录认证功能
·2022-03-05 13:01

我在美团的八年

点击上方蓝色字体，选择“设为星标”回复”面试“获取更多惊喜来源丨美团工云鹏昨天我刷到美团员工云鹏一篇技术好文，作者云鹏2014年加入美团，先后参与了美团酒店供应链体系、分布式调度系统的建设。
王知无(import_bigdata)·2022-03-05 10:53

我在美团这八年！！

前几天，偶然刷到了一篇美团技术团队的文章，作者云鹏2014年加入美团，先后参与了美团酒店供应链体系、分布式调度系统的建设。从一枚职场小白逐步成长为一名技术Leader。
菜鸟学Python·2022-03-05 10:19
上一页 7 8 9 10 11 12 13 14 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他