SCHEDULER

【kubernetes】部署controller-manager与kube-scheduler

前言：二进制部署kubernetes集群在企业应用中扮演着非常重要的角色。无论是集群升级，还是证书设置有效期都非常方便，也是从事云原生相关工作从入门到精通不得不迈过的坎。通过本系列文章，你将从虚拟机准备开始，到使用二进制方式从零到一搭建起安全稳定的高可用kubernetes集群，对各个组件的部署过程有一个清晰的认识。我将展现完整的集群搭建过程，重点部分将进行说明。并提供一站式、完整的资源文件包。希
傻啦猫@_@·2023-06-21 08:39

二进制搭建 Kubernetes v1.20

k8s集群master01：192.168.179.25kube-apiserverkube-controller-managerkube-scheduleretcdk8s集群master02：192.168.179.26k8s
R1chArd_TvT·2023-06-21 08:05

云原生之深入解析如何使用Prometheus扩展Kubernetes调度器

一、kubernetes调度配置①SchedulerConfigurationkube-scheduler提供了配置文件的资源，作为给kube-scheduler的配置文件，启动时通过--config=
╰つ栺尖篴夢ゞ·2023-06-21 03:38

Rust裸指针的安全性实例

///@brief初始化cfs调度器pubunsafefnsched_cfs_init(){ifCFS_SCHEDULER_PTR.is_null(){CFS_SCHEDULER_PTR=Box::leak
GP-Bullet·2023-06-20 22:30

Capacity Scheduler

来自所有节点NodeManagers的资源的集合作为容量调度器可用的所有资源的作为‘root’提供CapacityScheduler的基本基础是如何布局队列和如何为它们分配资源。
专职掏大粪·2023-06-20 15:04

[Arxiv 2023] SpecInfer:Accelerating LLM Serving with Speculative Inference + Token Tree Verification

ContentsIntroductionMethodSpeculativeInferenceCollectiveBoost-TuningLearning-basedSpeculativeSchedulerTokenTreeVerifierTreeAttentionVerificationOptimizationsEvaluationReferencesIntroductionLLMs
连理o·2023-06-20 09:43

K8s核心原理（三） Scheduler

转：https://www.huweihuang.com/kubernetes-notes/principle/kubernetes-core-principle-scheduler.html1.Scheduler
沉沦2014·2023-06-20 06:27

【Android】使用 `reactor.core.scheduler.Schedulers` 提供的线程池让开发者更加灵活地执行任务

在Android开发中，使用reactor.core.scheduler.Schedulers提供的线程池可以让开发者更加灵活地执行任务，并且可以根据具体情况选择最合适的线程。
全面解读·2023-06-20 04:31

Spark-核心常见面试题集锦(RDD、shuffle类型、数据倾斜优化、小文件问题、性能调优、streaming流程、checkpoint机制)

1Spark的任务执行流程第一种standalone模式整体：driver中有sparkcontext，RDDDAG和DAGScheduler和taskscheduler，master是资源管理，worker
:Concerto·2023-06-19 14:48

国内首届DataOps+MLOps meetup回顾

来自第四范式OpenMLDB及ApacheDophinScheduler开源项目核心成员共同带来了一场精彩的技术视听盛宴。回顾视频及地址见文章末尾链接。
·2023-06-19 12:49

DolphinScheduler任务调度工具

任务调度：系统为了自动完成特定任务，在约定的特定时刻去执行任务的过程分布式调度：分布性：每个部分可以独立部署，服务之间通过网络通信伸缩性：每个部分可以集群部署，动态伸缩扩容高可用jdk也提供了相关的任务调度功能，如Timer，ScheduledExecutor。介绍：分布式、易扩展的工作流调度平台环境准备安装：mysql（5.7+）jdk（1.8+）zookeeperhadoop：需要资源上传功能
牛牛的Java学习之旅·2023-06-19 09:32

Scrapy入门

Scrapy架构图(绿线是数据流向)ScrapyEngine(引擎):负责Spider、ItemPipeline、Downloader、Scheduler中间的通讯，信号、数据传递等。
Taoqi思·2023-06-19 07:18

k8s master组件无法重启

1.案例k8s的master组件出错，删掉pod重新拉起也无法正常启动kubectlgetpod-nkube-system可以看到controller和scheduler组件都显示异常kubectldescribepodkube-apiserver-k8s-master03
Apex Predator·2023-06-19 00:08

linux计划任务管理

crond进程每分钟会处理一次计划任务,计划任务主要是做一些周期性的任务目前最主要的用途是定时备份数据Scheduleone-timetaskswithat.一次性调度执行atSchedulerecurringjobswithcron
aleihello·2023-06-18 14:28

Spark任务执行流程

并向资源管理器申请运行Executor资源管理器分配资源，然后资源管理器启动ExecutorExecutor发送心跳至资源管理器Executor向Driver注册自己SparkContext构建DAG有向无环图DAGScheduler
小刘新鲜事儿·2023-06-18 11:03

使用springboot整合quartz实现定时任务

一、在pom.xml中添加Quartz和SpringBootStarter的依赖org.quartz-schedulerquartz2.3.2org.springframework.bootspring-boot-starter-quartz
晓风残月淡·2023-06-18 09:01

K8S之 metrics-server 组件(十八）

metrics-server也只是显示数据，并不提供数据存储服务，主要关注的是资源度量API的实现，比如CPU、文件描述符、内存、请求延时等指标，metric-server收集数据给k8s集群内使用，如kubectl,hpa,scheduler
管理大亨·2023-06-18 02:14

k8s 集群部署尝试

部署简单方便且高效二进制源码包的部署方式使用二进制源码包的方式部署会比较麻烦，大概分为如下几步：获取源码包部署在master节点和worker节点上启动相应节点的关键服务master节点上api-server，分布式存储例如etcd，scheduler
阿兵云原生·2023-06-18 01:28

6.compute部署nova服务

例如创建一个虚拟机，nova-api接收到客户端请求后，经过nova-scheduler调度器调度，再将请求通过rpc机制发送给某
赵唯一·2023-06-17 21:46

Spark学习笔记（一）：Spark 基本原理

WorkerNode1.1.3、Executor1.1.4、Application1.1.5、Driver1.1.6、Executor2、Spark运行基本流程2.1、RDD2.2、DAG2.3、DAGScheduler2.4
leo825...·2023-06-17 17:36

k8s 集群部署尝试

部署简单方便且高效二进制源码包的部署方式使用二进制源码包的方式部署会比较麻烦，大概分为如下几步：获取源码包部署在master节点和worker节点上启动相应节点的关键服务master节点上api-server，分布式存储例如etcd，scheduler
·2023-06-17 13:37

9.hooks源码(想知道Function Component是怎样保存状态的嘛)

react源码解析(大厂高薪必备)9.hooks源码(想知道FunctionComponent是怎样保存状态的嘛)视频课程&调试demos视频课程的目的是为了快速掌握react源码运行的过程和react中的scheduler
全栈潇晨·2023-06-17 07:44

torch.optim.lr_scheduler.OneCycleLR用法

环境:pytorch1.7代码：importcv2importtorch.nnasnnimporttorchfromtorchvision.modelsimportAlexNetimportmatplotlib.pyplotasplt#定义2分类网络steps=[]lrs=[]model=AlexNet(num_classes=2)lr=0.1optimizer=torch.optim.SGD(m
dxz_tust·2023-06-17 06:46

torch.optim.lr_scheduler.MultiStepLR()用法研究 台阶/阶梯学习率

torch.optim.lr_scheduler.MultiStepLR(optimizer,milestones,gamma=0.1,last_epoch=-1,verbose=False)我自已用代码研究了一遍
chensi000000·2023-06-17 06:16

torch.optim.lr_scheduler.OneCycleLR 学习与理解

一、功能和参数1.1、通过图像直观地理解OneCycleLR的过程：补充：生成该图像的代码：来自：torch.optim.lr_scheduler.OneCycleLR用法_dxz_tust的博客-CSDN
chensi000000·2023-06-17 06:15

spark高频面试题

SparkContext启动构建DAGScheduler（把DAGT图分解成stage)和TaskScheduler(提交和监控Task)两个调度模块SparkContext向资源管理器注册并向资源管理器申请运行
李大寶·2023-06-16 22:43

Committer 迎新！这次是来自阿里云的同学

截至今天，ApacheDolphinScheduler项目在GitHub上的Star数已突破10.6K，贡献者人数也突破了470人。社区的不断壮大，离不开每位Contributor的支持。
DolphinScheduler社区·2023-06-16 22:34

Committer 迎新！这次是来自阿里云的同学

截至今天，ApacheDolphinScheduler项目在GitHub上的Star数已突破10.6K，贡献者人数也突破了470人。社区的不断壮大，离不开每位Contributor的支持。
·2023-06-16 18:35

Pytorch模型保存与加载模型继续训练

1.网络模型定义与模型参数保存定义网络模型与基本参数，以及模型训练和模型保存使用torch.save()方法保存模型在save_dict={}中可以保存epoch,model,optimizer,scheduler
ToLiveXX·2023-06-16 16:29

二进制安装Kubernetes(K8s)集群(基于containerd)---从零安装教程（带证书）

官方网站：https://kubernetes.io/zh-cn/docs/home主机名IP系统版本安装服务master0110.10.10.21rhel7.5nginx、etcd、api-server、scheduler
Wielun·2023-06-16 16:56

jenkins发布Kubernetes(K8s)集群(基于containerd)

Kubernetes(K8s)集群(基于containerd)—从零安装教程（带证书）主机名IP系统版本安装服务master0110.10.10.21rhel7.5nginx、etcd、api-server、scheduler
Wielun·2023-06-16 16:25

Kubernetes Pod定向调度(NodeSelector)

KubernetesMaster上的Scheduler服务（kube-scheduler进程）负责实现Pod的调度，整个调度过程通过一系列复杂的算法，最终为每个Pod都计算出一个最佳的目标节点，这一过程自动完成的
蓝颜～岁月·2023-06-16 14:58

Kubernetes----Pod定向调度

【原文链接】一、Pod调度简介1.1调度简介在默认情况下，一个Pod在哪个Node节点上运行，是由scheduler组件采用相应的算法计算出来的，这个过程是不受人工控制的，但是在实际使用中，这并不满足要求
redrose2100·2023-06-16 14:28

【kubernetes详解07】-Pod详解之调度

亲和性）3、PodAntiAffinity（Pod反亲和性）四、污点和容忍1、污点（Taints）2、容忍（Toleration）一、Pod调度介绍在默认情况下，一个Pod在哪个Node节点上运行，是由Scheduler
桂安俊@kylinOS·2023-06-16 14:25

Kubernetes--NodeSelector定向调度

一、NodeSelector定向调度KubernetesMaster上的Scheduler服务(kube-scheduler进程)负责实现Pod调度，整个调度过程通过执行一系列的复杂算法，最终为每个Pod
GaoChuang_·2023-06-16 14:23

分布式任务调度系列 - PowerJob

一、简介1、介绍PowerJob（原OhMyScheduler）是全新一代分布式任务调度与计算框架，其主要功能特性如下：使用简单：提供前端Web界面，允许开发者可视化地完成调度任务的管理（增、删、改、查
代码的知行者·2023-06-16 13:02

Cocos Creator中定时任务的实现

由于其应用场景非常多，因此，CocosCreator中为我们提供了方便的计时器，这个计时器源自于Cocos2d-x中的cc.Scheduler，它保留在了CocosCreator中并适配了基于组
游戏开发大表哥·2023-06-16 13:56

Committer 迎新！这次是来自阿里云的同学

截至今天，ApacheDolphinScheduler项目在GitHub上的Star数已突破10.6K，贡献者人数也突破了470人。社区的不断壮大，离不开每位Contributor的支持。
DolphinScheduler社区·2023-06-16 12:43

Spring Boot （十一）： Spring Boot 定时任务

1.添加依赖在pom.xml文件中只需引入spring-boot-starter的依赖即可：代码清单：spring-boot-scheduler/pom.xmlorg.springframework.bootspring-boot-starterorg.springframework.bo
·2023-06-16 10:22

k8s基本架构

master节点包含的组件有：api-server、controller-manager、scheduler、etcd。
zhanghe_zht·2023-06-16 03:31

How to create a SQL Agent Job for MySQL

HowtocreateaSQLAgentJobforMySQLforschedulingtheDatabaseTaskUsingEventSchedulerToenableordisabletheexecutionofscheduledevents
·2023-06-15 22:26

vue3源码】六、scheduler

vue3源码】六、schedulerscheduler即调度器是vue3中比较重要的一个概念。
·2023-06-15 16:36

Android Jetpack架构组件(七)之WorkManager

概述1.1WorkManager简介在Android应用开发中，或多或少的会有后台任务的需求，根据需求场景的不同，Android为后台任务提供了多种不同的解决方案，如Service、Loader、JobScheduler
·2023-06-15 16:31

从0-1一起学习live555设计思想之一 基础运行环境 + 任务调度

系列文章目录文章目录系列文章目录前言一、基础组件总览二、UsageEnvironment三、BasicUsageEnvironment0四、BasicUsageEnvironment五、TaskScheduler
c+猿辅导·2023-06-15 09:08

pytorch CosineAnnealingLR和CosineAnnealingWarmRestarts

CosineAnnealingLR公式：n_min，n_max是最小和最大学习率T_cur是从上次重启后的epoch计数（到达最低点后即重启）T_max是经过多少个epochs重启pytorch函数：torch.optim.lr_scheduler.CosineAnnealingLR
lizi0403·2023-06-15 04:48

Django - 页面静态化和crontab定时任务（二）

可以减少服务器压力我们可以使用Django的模板渲染功能完成页面渲染注意：下面用到的django-crontab是基于Linux系统的crontab，所以Windows系统下是无法运行的，若有需要，可以考虑APScheduler
天下·第二·2023-06-14 21:15

Scrapy_redis分布式和爬虫的部署

安装首先使用：pip3installscrapy-redis安装Scrapy_redisScrapy_redis提供了四个模块：Scheduler（调度器）DuplicationFilter（requst
爱你如·2023-06-14 14:29

dolphinscheduler使用impala shell执行sql

目录一、背景二、方法1.impalashell-f文件名2.impalashell-q'sql'一、背景因为dolphinscheduler工具sql组件不支持impala数据源，只能折衷方法通过shell
chimchim66·2023-06-14 13:43

@SchedulerLock详解

SpringBoot之数据库锁-@SchedulerLock分布式锁SchedulerLock确保计划的任务最多同时执行一次。
ヾ凉秋·2023-06-14 11:17

Spark数据倾斜解决方案四：Mapper端Join

Spark是RDD的链式操作，DAGScheduler根据RDD的不同类型的依赖关系划分成不同的Stage，所谓不同
SunnyRivers·2023-06-14 09:19
上一页 30 31 32 33 34 35 36 37 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他