资源调度

（三）k8s实战-资源调度

一、Label和Selector1、标签（Label）有两种设置方式：配置文件、kubectl命令1）配置文件在各类资源的metadata.labels中进行配置2）kubectl1）临时创建labelkubectllabelpoapp=hello2）修改已经存在的标签kubectllabelpoapp=hello2--overwrite3）查看label#selector按照label单值查找节
青衫落拓客·2023-08-24 07:34

腾讯大佬三年大制作，大数据Hadoop和Spark的大集合

本书围绕Hadoop和Spark这两个主流技术进行讲解，主要内容包括Hadoop环境配置、分布式文件系统HDFS、分布式计算框架MapReduce、资源调度框架YARN与Hadoop新特性、大数据数据仓库
金光闪闪耶·2023-08-23 15:47

大数据 Haddoop（二） 架构与原理

其核心：HDFSYarnMapReduceYarn是资源调度框架。能够细粒度的管理和调度任务，此外，还能支持其他计算框架，比如：spark等。
傅二毛·2023-08-22 17:45

Hadoop分布式计算与资源调度：打开专业江湖的魔幻之门

分布式计算1.2分布式（数据）计算模式1.3小结二MapReduce概述2.1分布式计算框架-MapReduce2.2MapReduce执行原理2.3小结三YARN概述3.1YARN&MapReduce3.2资源调度
缘友一世·2023-08-22 07:45

IoT物联网场景智慧工地业务你了解哪些子系统？

智慧工地整合了多领域的技术，涵盖了安全监控、设备管理、工程进度、资源调度、环境保护、能源管理等各个方面。通过实时监测和数据分析，智慧工地能够精准地预测问题、
AIoT科技物语·2023-08-21 06:26

K8S 入门

在Docker技术的基础上，为容器化的应用提供部署运行、资源调度、服务发现和动态伸缩等功能，提高了大规模容器集群管理的便捷性。基本术语pod：
索伦x·2023-08-20 13:12

【Java面试题】多进程及多线程的区别？

线程与进程的区别如下:进程是资源分配的最小单位，线程是资源调度的最小单位。线程是在进程下运行的。一个进程可以包含多个线程。进程有自己的独立地址空间，每启动一个进程，系统就会为它分配地址空间。
困困猿~·2023-08-20 00:05

iOS runloop与多线程

runloop实际上是计算机内部进行的资源调度操作。iOS中的runloop就是循环来处理程序运行过程中出现的各种事件（比如说触摸事件、UI刷新事件、定时器事
Hason·2023-08-19 18:09

【无标题】

是用来计算的计算就需要资源所以,谁提供资源,就叫什么模式LOCAL:本机的Spark(JVM)Standalonde:()集群Spark(JVM),国内不常用,因为出现晚YARN:Spark使用HADOOP的YARN资源调度
叫我莫言鸭·2023-08-19 05:11

每日一思（关于营销）

就像一场战争，既需要整体的战略规划、资源调度，也需要一个个具体的士兵去完成每一项具体的任务。
伽思珂·2023-08-18 10:43

隐语1.0正式发布｜MVP部署体验包、资源调度框架Kuscia全新亮相！

2023年7月７日，在世界人工智能大会组委会办公室指导下，隐语开源社区携手蚂蚁集团和机器之心共同主办的数据要素与隐私计算论坛在上海世博会议中心举行。论坛上，蚂蚁集团隐私计算部总经理、隐语社区负责人王磊发布了隐语1.0版本，并对隐语1.0版本框架拓展与升级进行了整体介绍。隐语1.0版本不仅进一步扩大了开源范围，还对整体架构进行了调优拓展，核心内容涉及产品层、资源层、互联互通等板块，总体效果涵盖性能优
·2023-08-17 17:51

Linux系统K8S集群架构及常用操作命令之K8S集群部署教程

Linux系统K8S集群架构及常用操作命令之K8S集群部署教程简介：Kubernetes是一个开源的容器集群管理系统，Kubernetes提供了资源调度、部署管理、服务发现、扩容缩容、监控，维护等一整套功能
完颜振江·2023-08-17 14:18

hadoop(11)--Yarn资源调度源码浅析（有干货，检验是否做过Hadoop优化，以及是否看过源码）

大家好，说到做到，昨天分享了Yarn的资源调度的流程，我也画了一个图来说明，今天分享一下Yarn资源调度的源码分析MR程序什么时候提价给集群呢？也就是什么时候提交给Yarn，让Yarn来调度呢？
ROCK_杰哥·2023-08-16 04:06

字节跳动高工面试：java发送邮件验证码

在Docker技术的基础上，为容器化的应用提供部署运行、资源调度、服务发现和动态伸缩等一系列完整功能，提高了大规模容器集群管理的便捷性。而且它也是一个完备的分布式系统支撑平台，具有完备
程序猿元元·2023-08-15 01:26

01-Spark环境部署

Spark与Hadoop1.0版本有点类似，Spark本身自带了完整的资源调度管理服务（但这不是
书香恋仁心·2023-08-14 05:06

资源调度框架YARN

1.YARN产生背景Hadoop1.x时：MapReduce1.x存在问题：单点故障&节点压力大不易扩展&不能支持除了MR以外的任务MapReduce：Master/Slave架构，一个JobTracker带多个TaskTracker。JobTracker：负责资源管理和作业调度。整个集群中只有一个JobTracker，如果出现故障，整个集群就会崩溃。TaskTracker：定期向JT汇报本节点的
何以畅闲情·2023-08-13 21:34

Python编程之进程总结

进程是线程的集合，每个进程至少有一个主线程，进程是在系统中起资源调度的作用，进程分配资源和管理数据，程序的执行都是有线程执行的。进程和线程的执行差不多，也是由时间片根据并发机制执行的。
He·2023-08-12 21:57

史上最全！大数据开源框架技术扫盲

监控管理（CM、Hue、Ambari、Dr.Elephant、Ganglia、Zabbix、Eagle）文件系统（HDFS、GPFS、Ceph、GlusterFS、Swift、BeeGFS、Alluxio）资源调度
hanxiaolaa·2023-08-12 16:22

Hadoop知识点总结

1.什么是Hadoop大数据处理的分布式系统2.Hadoop****生态圈三大核心：HDFS集群：分布式文件存储系统YARN集群：运算资源调度MapReduce分布式计算模型3.讲一下MapReduceMapReduce
longLiveData·2023-08-12 10:40

蚂蚁集团联合Forrester发布服务网格白皮书 定义企业上云新路径

值得关注的是，随着基础设施的复杂度越来越高，也为整个基础设施的统一资源调度带来了极大挑战。在越来越复杂的异构基础设施上，存量应用和增量应用应该如何上云？
支付宝技术团队·2023-08-11 05:55

等待复工让人焦虑的真正原因是：自我价值感缺失

这次新冠病毒肺炎疫情带给我们的考验，不仅仅是医护人员的专业技能过不过硬、物资储备是否充足、资源调度是否迅速......它给我们的考验还包括：疫情后遗症的处置能力。
霖小姐慢半拍·2023-08-11 03:12

JUC并发编程之同步器(Semaphore、CountDownLatch、CyclicBarrier、Exchanger、CompletableFuture)附带相关面试题

目录1.Semaphore（资源调度）2.CountDownLatch(子线程优先)3.CyclicBarrier（栅栏）4.Exchanger（公共交换区）5.CompletableFuture（异步编程
Alphamilk·2023-08-11 01:17

hadoop之Yarn

资源调度器：（面试重点）主要有三种：FIFO，capacitySchedulerFairSchedulerFIFO（先进先出调度器）：按照到达的时间排序，先到先服务，单个队列CapacityScheduler
USTC_IT·2023-08-08 15:58

Yarn是个什么玩意

Yarn是一个资源调度平台，负责为运算程序提供服务器运算资源，相当于一个分布式的操作系统平台，而mapreduce等运算程序则相当于运行于操作系统之上的应用程序。
乌拉乌拉儿·2023-08-06 22:04

kubernetes组件

Scheduler：负责集群资源调度，按照预定的调度策略将Pod调度到相应的node节点上。Con
365a3735241a·2023-08-06 03:32

KubeSphere 3.4.0 发布：支持 K8s v1.26

让我们先简单回顾下之前三个大版本的主要变化：KubeSphere3.1.0新增了“边缘计算”、“计量计费”等功能，将Kubernetes从云端扩展至边缘；KubeSphere3.2.0新增了对“GPU资源调度管理
KubeSphere 云原生·2023-08-05 05:43

Kubernetes（K8s）介绍

它构建在Docker技术之上，为容器化的应用提供资源调度、部署运行、服务发现、扩容缩容等一整套功能。Kubernetes的发展历史为：2014年6月：谷歌宣布Kubernetes开源。
zhaimj29·2023-08-05 00:54

云计算——常见集群策略

座右铭：低头赶路，敬事如仪个人主页：网络豆的主页目录前言一.什么是集群二.集群策略1.虚拟机HA实现虚拟机高可用性通常涉及以下关键组件和技术：2.动态资源调度（DRS）DRS的主要功能包括：3.分布式电源管理编辑
网络豆·2023-08-04 20:11

四、Yarn

刚开始MapReduce框架是包含MapReduce和资源调度的，也就是说MapReduce与资源调度耦合在一起。
阿文灬·2023-08-04 19:21

字节青训营第二课之工程实践的笔记和总结

go可以充分发挥多核优势，高效运行，介绍原理之前，先介绍几个概念：并发：单CPU同时间段切换交错执行多任务并发：多CPU同时刻都运行任务进程：资源管理的最小单位，进程虚拟地址空间分成用户和内核空间线程：资源调度最小单位
廖镛霖·2023-08-04 14:09

多雷达探测论文阅读笔记：雷达学报 2023, 多雷达协同探测技术研究进展：认知跟踪与资源调度算法

多雷达协同探测技术原始笔记链接：https://mp.weixin.qq.com/s?__biz=Mzg4MjgxMjgyMg==&mid=2247486627&idx=1&sn=f32c31bfea98b85f2105254a4e64d210&chksm=cf51be5af826374c706f3c9dcd5392e0ed2a5fb31ab20924b7dd38e1b1ae32abe9a48af
R.X. NLOS·2023-08-04 12:51

VPS可视化排程是什么，是如何帮助工厂提升效率的？

APS可视化排程主要包括生产计划制定、生产资源调度、生产进度跟踪、生产效率分析等方面。2.VP
飞讯软件·2023-08-04 07:47

Kubernetes 介绍

Kubernetes提供了一组丰富的功能和工具，用于管理容器化应用程序的整个生命周期，包括：资源调度：Kubernetes可以智能地调度和分配容器应用程序的资源，确保它们在集群中得到高效和合理的利用。
xiedy001·2023-08-03 03:30

大数据部分总结

HadoopHADOOP是apache旗下的一套开源软件平台提供的功能：利用服务器集群，根据用户的自定义业务逻辑，对海量数据进行分布式处理HADOOP的核心组件有HDFS（分布式文件系统）ARN（运算资源调度系统
DHRJFH·2023-07-31 09:14

大数据课程D7——hadoop的YARN

文章作者邮箱：[email protected]地址：广东惠州▲本章节目的⚪了解YARN的概念和结构；⚪掌握YARN的资源调度流程；⚪了解Hadoop支持的资源调度器：FIFO、Capacity、Fair
伟雄·2023-07-31 07:09

Hadoop调度器

Hadoop2.X默认的资源调度器是容量调度器。
scott_alpha·2023-07-30 05:43

Java虚拟机——线程与协程

1Java与线程目前线程是Java里面进行处理器资源调度的最基本单位。如果日后Loom项目能够为Java引入纤程(Fiber)的话，可能会改变这一点。
肇秋贰拾捌·2023-07-28 03:50

实训笔记7.26

1.1Hadoop的安装部署1.2Hadoop的分布式文件存储系统HDFS1.2.1HDFS的组成1.2.2HDFS的操作方式1.2.3HDFS的流程原理1.2.4HDFS核心概念1.3Hadoop的分布式资源调度系统
cai-4·2023-07-27 23:11

线程的创建以及Thread与Runnable的关系（个人理解）

，在windows中进程只是作为线程的容器首先一个线程作为进程的子集，一个进程可以分为一个或者多个线程，而线程本身是指令流，将指令交给cpu去执行，对于Java来讲，线程是最小的调度单位，进程是最小的资源调度单位
cc斌斌·2023-07-26 13:41

Linux进程管理命令

进程进程由程序产生，是程序的可执行实例，资源调度的最小单位。
大白曰梦想家·2023-07-25 13:42

Hadoop笔记

Hadoop概念Hadoop是一个软件，这个软件包含三个模块HDFS:Hadoop分布式文件系统MapReduce:分布式计算系统Yarn:分布式资源调度系统资源网址apache的资源包下载https:
NQ31·2023-07-24 12:54

【面试题】什么是持久层？你使用过的持久层的框架有哪些？

资源管理和调度的分离，在数据访问层实现统一的资源调度（如缓存机制）。数据抽象，提供更面向对象
章鱼小哥946·2023-07-24 04:48

Android 进程相关——学习笔记

2：多进程还可以避免OOM的问题，由于内存调用是针对进程单位的，进程是系统资源调度的基本单位，所以采用多进程可以实现不同模块的不同资源分配，并且能合理地运用内存，在不需要的时候杀掉进程，在需要的时候再开启
无问o·2023-07-23 10:44

07-尚硅谷大数据技术之Spark源码

但是你也要记住，Spark主要是计算框架，而不是资源调度框架，所以本身提供的资源调度并不是它的强项，所以还是和其他专业的资源调度框架集成会更靠谱一些。所以接下来我们来学习在强大的
Wzideng·2023-07-20 15:17

【八股文系列】Java并发

【线程和进程】进程是对运行时程序的封装，是系统进行资源调度和分配的的基本单位，实现了操作系统的并发；线程是进程的子任务，是CPU调度和分派的基本单位，用于保证程序的实时性，实现进程内部的并发；线程是操作系统可识别的最小执行和调度单位
锦还之路·2023-07-18 20:01

Java之多线程

什么是线程：线程是cpu资源调度的最小单位。一个进程最少有一个线程，通常在一个进程中可以包含若干个线程，它们可以利用进程所拥有的资源。
今天你学习了ma·2023-07-17 09:41

大数据复习笔记之hadoop浅析（二）

Hadoop的组成Hadoop的核心组件p21核心组件分析：Hadoop的核心组件分为：HDFS（分布式文件系统）、MapRuduce（分布式运算编程框架）、YARN（运算资源调度系统）Hadoop业务的整体开发流程
席八·2023-07-17 06:17

2021-7-22-Kubernetes基础知识

在Docker技术的基础上，为容器化的应用提供部署运行、资源调度、服务发现和动态伸缩等一系列完整功能，提高了大规模容器集群管理的便捷性。
龙山修行·2023-07-16 12:35

Spark架构体系

StandAlone模式是spark自带的集群运行模式，不依赖其他的资源调度框架，部署起来简单。
子非我104·2023-07-16 11:12

hadoop 知识点回顾

secondarynamenode辅助元数据服务器jobtracker任务调度员，管理层程序，管理集群资源并对任务进行资源调度，监控任务执行，负责用户提交的作
weivi001·2023-07-15 16:17
上一页 4 5 6 7 8 9 10 11 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他