集群调度系统第18页

openEuler-22.03-LTS-SP3 Kubernets集群部署实战

一、环境介绍1、Windows11专业版，VMwareWorkstation17，XShell、XFtp、openEuler-22.03-LTS-SP32、Kubernets集群节点规划节点名称节点IP

wanchengpeng·2024-02-12 06:02

org.apache.hadoop.fs.ChecksumException: Checksum error: file:/root/test.txt at 0

上传文件到集群遇到以下异常：org.apache.hadoop.fs.ChecksumException:Checksumerror:file:/root/test.txtat0[root@master

橙汁啤酒厂·2024-02-12 05:24

HBase集群部署

橙汁啤酒厂·2024-02-12 05:23

Spark 作业执行

Spark基本组件，Master和Worker，负责运行Client和Driver作业执行框架每个SparkApplication由主控节点Master、集群资源管理节点ClusterManager、执行任务节点

Alex90·2024-02-12 05:04

普通程序员看k8s的账户管理

一、知识准备●账户管理分为：userAccount与serviceAccount●userAccount：通常是给人设计使用的，并且userAccount不在k8s集群内管理●serviceAccount

wilsonchai·2024-02-12 05:29

Spark 共享变量

通常，当传递给Spark操作(如map或reduce)的函数在远程集群节点上执行时，在函数中使用的所有外部变量都是单独拷贝的变量副本。

stone_zhu·2024-02-12 03:02

为什么武警/特警/电网等MESH专网应用客户都选择了smarteye平台？

目前国内外越来越多的专网应急指挥调度系统使用MESH自组网专网环境的客户都选择了smarteye平台做应急指挥调度平台使用，这其中的原因不外乎如下几点。

5Gcamera·2024-02-12 02:00

并行计算工具 MPI 简单教程

UsingMPIwithC并行程序使用户能够充分利用超级计算集群的多节点结构。消息传递接口(MPI)是一种标准，用于允许集群上的多个不同处理器相互通信。

疯狂的泰码君·2024-02-12 02:54

Java：K8S难点，大厂面试必问，三分钟吃透

当我们尝试去理解Kubernetes集群工作原理的时候，控制器肯定是一个难点。这是因为控制器有很多，具体实现大相径庭；且控制器的实现用到了一些较为晦涩的机制，不易理解。

Java罗·2024-02-12 01:47

haproxy配置代理tomcat和nginx_一文聊透负载均衡神器 LVS、Nginx、HAProxy的工作原理...

这是Bella酱的第78期分享当前大多数的互联网系统都使用了服务器集群技术，集群是将相同服务部署在多台服务器上构成一个集群整体对外提供服务，这些集群可以是Web应用服务器集群，也可以是数据库服务器集群，

weixin_39951929·2024-02-12 01:07

mysql数据库的pxc工具_CentOS7 下 MySQL 数据库 PXC 集群部署操作指导

背景最近在进行MySQL的PXC集群搭建使用和研究前期已完成了一篇记录文章：【CentOS7下MySQL之PXC集群部署【Docker+多机多节点】】但是，毕竟不是所有人都熟悉docker而作为开发人员

郑默默·2024-02-12 00:25

架构演变及分布式解决方案

架构单体架构所有的功能都集中在一个项目中，并部署在同一台服务器，往往一个功能的阻塞会导致整个应用的阻塞，最终导致整个服务器不可用，随着业务模块的不断拓展，代码的可读性、维护性越来越差，测试成本也越来越高单体架构下的集群部署

大能嘚吧嘚·2024-02-11 22:39

gerrit调优——超级干货

一、确定配置大小根据gerrit使用的服务器集群的硬件配置来确定大小二、调整gerrit.configreceive.timeout处理传入更改和更新refs和Gerrit更改的超时。

KEY丶·2024-02-11 21:50

孩子，把你的手给我

这是我在大市集群的第4次语音分享。

心若向阳333·2024-02-11 21:44

使用kubeadm快速启用一个集群

使用kubeadm快速启用一个集群CentOS配置YUM源cat/etc/yum.repos.d/kubernetes.repo[kubernetes]name=kubernetesbaseurl=https

小陈运维·2024-02-11 20:50

通过hub.docker加git获取kubernetes镜像

使用工具kubeadm安装kubernetes集群是需要的镜像默认放在google容器仓库中，国内不便直接下载，这里记录通过hub.docker加git获取kubernetes镜像：1.登陆注册dockerID

奚落大神·2024-02-11 20:23

外部服务发现之 ingress

介绍其实就是从kuberenets集群外部访问集群的一个入口，将外部的请求转发到集群内不同的Service上，其实就相当于nginx、haproxy等负载均衡代理服务器，有的同学可能觉得我们直接使用nginx

liu__chao·2024-02-11 20:21

Redis之旅--Redis集群(十二)

一、RedisSentinel简介 Sentinel(哨兵)进程是用于监控redis集群中Master主服务器工作的状态，在Master主服务器发生故障的时候，可以实现Master和Slave服务器的切换

无剑_君·2024-02-11 20:23

ClickHouse集群搭建及ODBC配置

以下是搭建ClickHouse集群及配置ODBC的步骤。首先是ClickHouse集群的搭建。假设你有三台服务器，IP分别为192.168.1.1，192.168.1.2，192.168.1.3。

·2024-02-11 18:02

记一次 Redis 数据库迁移

业务背景最近因业务需要将集群中的Redisdb8迁移到另一个库中。不需要把全部的Redis都迁移过去，只需要迁移db8到新服务器的db15。大概情况是这样，如图：当然也探索了一些

·2024-02-11 18:53

Flomesh Ingress 使用实践（一）基础功能

Ingress是对集群中服务的外部访问进行管理的API对象，典型的访问方式是HTTP。提供负载均衡、SSL终结和基于名称的虚拟托管。

·2024-02-11 17:23

服务架构发展历程

（高并发问题）解决方案：集群（集群方案解决）会出现的如下问题：高并发、高可用、高性能提高系统的并发能力：集群操作：集群：同一个业务，部署在多个服务器上特点：项目采用集群（

坎坷终究平坦·2024-02-11 17:13

【博云2023】乘龙一跃腾云海，侧目抬手摘星河

我们的信心来自于努力耕耘终有收获博云为客户打造了可支撑万亿信托管理规模的云原生技术中台，支撑起客户的整个IT研发、运维系统；博云云管理平台产品支撑的单用户IT集群达到数千台服务器、上万台虚拟机，稳定保障着客户的业务系统运营

博云技术社区·2024-02-11 17:39

龙叔学ES：Elasticsearch XPACK安全认证

龙叔运维·2024-02-11 16:17

Hbase - 迁移数据[导出,导入]

有没有这样一样情况，把一个集群中的某个表导到另一个群集中，或者hbase的表结构发生了更改，但是数据还要，比如预分区没做，导致某台RegionServer很吃紧，Hbase的导出导出都可以很快的完成这些操作

kikiki2·2024-02-11 14:23

半监督语义分割论文学习记录

一致性训练的有效性在很大程度上取决于数据分布的行为，即集群假设，其中类必须由低密度区域分隔。在语义分割中，在输入中，我们没有观察到低密度区域

西瓜真的很皮啊·2024-02-11 14:19

LSF 主机状态 unreach 分析

在LSF集群运行过程中，有主机状态变为unreach。熟悉LSF的朋友都知道主机状态为unreach表示主机上的SBD服务中断服务了，但其它服务LIM和RES还在正常运行。

boshushuoshuo·2024-02-11 13:51

Elasticearch和Kafka概念对比

1、概念对比kafka集群包含多个broker，每个broker都是一个kafka实例。每个服务器会有多个broker，我们暂且认为每个服务器包含一个broker。

Yisnow.·2024-02-11 12:37

Kafka 概念，安装，常用命令（一）

Kafka有点像消息系统，允许发布和订阅消息流，但是它和传统的消息系统有很大的差异，首先，Kafka是个现代分布式系统，以集群的方式运行，可以自由伸缩。

响彻天堂丶·2024-02-11 12:06

minio server pool 的特点小结

minioserverpool是目前minio官方推荐的集群扩容方案，使用上简单，算是做到了真的集群扩容能力，操作简单，维护成本并不是很大。

网络飞鸥·2024-02-11 11:47

k8s 集群搭建 1.18.0

1.初始准备确保集群间机器互相ping通关闭selinux：sed-i's/enforcing/disabled/'/etc/selinux/configsetenforce0关闭swap：swapoff-a

dyyy_li·2024-02-11 11:04

k8s安装与使用入门

1.内容编排与kubernetes介绍支持集群环境内容编排的工具kubernetes简称k8s.k8s是谷歌官方提供的，底层基于docker，与docker-swarm是竞争关系。

奔跑的杂粮煎饼·2024-02-11 10:59

校招失败，在小公司熬了2年后我终于进了阿里，定级P6（Java岗）

image一面（远程视频面）自我介绍项目介绍Redis介绍了解redis源码吗了解redis集群吗Hashmap的原理hashmap容量为什么是2

我要熬夜写代码·2024-02-11 09:17

Nacos实战应用安装功能应用集群

Nacos实战应用Nacos实战应用1Nacos安装1.1Nacos概要1.2Nacos安装1.2.1Nacos安装1.2.1.1NacosDerby安装1.2.1.2NacosMySQL版安装1.2.1.3Docker安装Nacos2Nacos功能应用2.1Nacos服务注册与发现2.2负载均衡2.3配置中心2.3.1配置管理2.3.2多环境切换2.3.3多/共享配置2.3.4配置刷新2.3.4

Ybb_studyRecord·2024-02-11 08:44

ZeroMQ:01---消息队列ZeroMQ简介

其提供了各种传输工具，如进程内、进程间、TCP和组播中进行原子消息传送的套接字你可以使用各种模式实现N对N的套接字连接，这些模式包括：扇出、发布-订阅、任务分配、请求-应答ZeroMQ的速度足够快，因此可充当集群产品的结构

芒种、·2024-02-11 07:11

03 - Flink客户端源码CliFrontend

介绍通过"bin/flinkrun"提交jar包到Flink集群，在"bin/flink"脚本中实际是调用org.apache.flink.client.cli.CliFrontend#main触发真正的执行

敲代码的卡普罗尼·2024-02-11 07:26

RabbitMQ学习笔记

RabbitMQ笔记主流MQ简单了解衡量标准服务性能数据存储集群架构ActiveMQ适用于中小型企业，但在高并发情况下效率较低，不适用与并发Kafka高吞吐、速度快，但不支持事务，不能保证消息的可靠性一般用于日志传输

努力变优秀的Z·2024-02-11 06:05

RabbitMQ

七丰富的API，多种集群构建模式使得他称为业界老牌消息中间件，在中小型企业广泛应用！

~Maple~·2024-02-11 06:05

如何构建一个 NodeJS 影院微服务并使用 Docker 部署

在这个系列中，将构建一个NodeJS微服务，并使用DockerSwarm集群进行部署。

程序员辰风·2024-02-11 06:56

159基于matlab的基于密度的噪声应用空间聚类(DBSCAN)算法对点进行聚类

基于matlab的基于密度的噪声应用空间聚类(DBSCAN)算法对点进行聚类，聚类结果效果好，DBSCAN不要求我们指定集群的数量，避免了异常值，并且在任意形状和大小的集群中工作得非常好。

顶呱呱程序·2024-02-11 06:22

国外现代并行计算课程CMU-15-418/15-618: Parallel Computer Architecture and Programming

wwxy261·2024-02-11 05:03

RocketMQ使用

reliableasynchronous)单向发送(one-waytransmission)生产顺序消息分布式事务消息延时发送消息批量发送使用log发送消息消费消费方式pull消费push消费消费类型广播消费（BROADCASTING）集群消费

Chocolyte·2024-02-11 04:13

k8s集群多节点部署

Kubernetes集群节点介绍一个Kubernetes集群由多个工作节点(workernode)和一个或多个集群控制节点(Master)以及一个集群状态存储系(etcd)组成Master系统组件Master

wsj5552135·2024-02-11 03:22

MFS 分布式存储

分布式存储MooseFS是一个具备冗余容错功能的分布式网络文件系统，它将数据分别存放在多个物理服务器或单独磁盘或分区上，确保一份数据有多个副本，然而对于访问MFS的客户端或者用户来说，整个分布式文件系统集群看起来就像一个资源一样

中门对狙·2024-02-11 01:30

MapReduce的uber运行模式

背景在有些情况下，运行于Hadoop集群上的一些mapreduce作业本身的数据量并不是很大，如果此时的任务分片很多，那么为每个map任务或者reduce任务频繁创建Container，势必会增加Hadoop

盗梦者_56f2·2024-02-11 01:42

十七、Dubbo框架源码分析：集群容错策略

一、有哪些集群容错策略：（调用失败了怎么办）1）failovercluster模式（读，幂等性的服务接口）失败自动切换，自动重试其他机器，默认就是这个，常见于读操作2）failfastcluster模式一次调用失败就立即失败

还算年轻·2024-02-11 01:00

使用docker搭建spark(2.3.1)集群

使用Docker快速搭建Spark集群。

zealscott·2024-02-11 01:12

【独家OD2023C卷真题】20天拿下华为OD笔试【模拟】2023C-API 集群负载统计【欧弟算法】全网注释最详细分类最全的华为OD真题题解

****输入****输出****说明**解题思路代码PythonJavaC++时空复杂度华为OD算法/大厂面试高频题算法练习冲刺训练题目描述与示例题目描述某个产品的RESTfulAPI集合部署在服务器集群的多个节点上

闭着眼睛学算法·2024-02-10 23:45

ubuntu 22.04部署quincy版ceph

ceph集群安装配置有多种方式，下方cephadm方式是借助容器部署。cephadm从ceph的octopus版本开始支持。安装需要主机配置安装了容器和python3。

嗨安HiAn·2024-02-10 22:26

JAVA 秒杀系统总结

项目要点另一种角度分析：高性能：静态资源，CDN一致性：分布式锁，减库存的几种方式高可用：集群，哨兵，流量控制，消息队列1、库存扣除未加任务处理的下单请求，极有可能在高并发环境下造成超卖。

肥牛火锅·2024-02-10 22:26

推荐频道

集群调度系统