Kubernets集群第26页

绝对完美解决hdfs datanode数据和磁盘数据分布不均调整（hdfs balancer ）——经验总结

Hadoop集群Datanode数据倾斜，个别节点hdfs空间使用率达到95%以上，于是新增加了三个Datenode节点，由于任务还在跑，数据在不断增加中，这几个节点现有的200GB空间估计最多能撑20

ZhaoYingChao88·2024-02-05 16:05

提升CKA考试胜算：一文带你全面了解RBAC权限控制！

didiplus·2024-02-05 16:14

揭秘高效运维：如何用kubectl top命令实时监控K8s资源使用情况？

kubectltop是一个用于查看Kubernetes集群中资源使用情况的命令。它可以显示节点或Pod的CPU、内存和存储的使用情况。该命令要求正确配置MetricsServer并在服务器上工作。

didiplus·2024-02-05 16:14

Kubernetes Operator

文章目录一、概述二、基础1.Redis集群1.1.文档1.2.安装1.3.删除集群1.4.测试1.5.扩缩容2.RabbitMQ集群2.1.文档2.2.安装Kubernetes#Kuberneteshttps

IoTHub - 物联网开源技术社区·2024-02-05 15:21

PG 异常状态- active+undersized+degraded

自己搭的3个OSD节点的集群的健康状态经常处在”WARN”状态，replicas设置为3，OSD节点数量大于3，存放的data数量也不多，ceph-s不是期待的healthok，而是active+undersized

Joncc·2024-02-05 15:03

论文阅读-CARD：一种针对复制元数据服务器集群的拥塞感知请求调度方案

论文名称：CARD:ACongestion-AwareRequestDispatchingSchemeforReplicatedMetadataServerCluster摘要复制元数据服务器集群（RMSC

向来痴_·2024-02-05 14:54

为什么ECS更适合深度学习，而轻量型不适合，而且他们说ECS适合集群部署，轻量型为什么就不适合

计算能力和资源配置：深度学习任务通常需要大量的计算资源和内存，以处理复杂的模型和大规模的数据集。ECS服务器提供了更丰富的实例规格和可选的计算性能，可以满足深度学习任务的高要求。而轻量型云服务器通常具有较低的计算能力和资源配置，不太适合处理大规模的深度学习任务。高性能网络和存储：深度学习任务通常需要高带宽和低延迟的网络传输，以便在分布式训练或数据处理过程中进行高效的通信。ECS服务器提供了高性能的

Fairy要carry·2024-02-05 14:23

k8s -ingress

概念Ingress公开了从集群外部到集群内服务的HTTP和HTTPS路由，ingress能代理集群为内部的网络，将集群外部的HTTP/HTTPS网络请求转发至不同的service，其本质就是创建一个NodePort

学的好秃的早·2024-02-05 14:52

K8S-Service

服务类型：可通过sepc.type属性设置服务类型ClusterIP通过集群的内部IP暴露服务，选择该值时服务只能够在集群内部访问。这也是你没有为服务显式指定type时使用的默认值。

学的好秃的早·2024-02-05 14:21

《向量数据库指南》——Milvus Cloud集群」生产环境永远推荐使用集群模式

LCHub低代码社区·2024-02-05 14:13

《向量数据库指南》——Milvus Cloud「日志」问题定位的指南针

“2.X集群的日志在哪里导啊”“现在没有对MilvusCloud进行任何读写操作，但是日志还是不断增加，这正常吗？”“请教下k8s部署的MilvusCloud日志如果持久化，只能使用共享存储吗？

LCHub低代码社区·2024-02-05 14:10

go-redis hash slot 之旅

搭建redis集群创建一个网桥dockernetworkcreate-dbridge--subnet=192.168.148.0/24--gateway=192.168.148.1-oparent=eno1redis-net

spcof·2024-02-05 14:00

flink写入es的参数解析

ElasticsearchSink内部使用BulkProcessor一次将一批动作(ActionRequest)发送到ES集群。在发送批量动作前，BulkProcessor先缓存，再刷新。

大大大大肉包·2024-02-05 13:54

Nacos配置管理（手把手教你搭建Nacos集群）

Nacos配置管理统一配置管理以上把某些配置放到了nacos中，那微服务应该如何从nacos中获取配置呢？去哪读取？–bootstrap.yml读取谁？-读nacos地址注意：与nacos地址和nacos配置文件有关的内容均放在bootstrap.yml中操作如下1.在服务（这里选userservice）的pom文件中引入Nacos的配置管理客户端依赖：com.alibaba.cloudsprin

程序员老周666·2024-02-05 13:21

虚拟机中配置centos静态IP地址

平时测试的时候，不管是使用Redis的的集群服务还是使用mysql的主从服务，还是连接centos，都会出现ip地址不断地变化的情况，导致需要重新配置，非常的不方便。

雾林小妖·2024-02-05 13:10

6.Linux虚拟机下的Hadoop集群搭建之完全分布式配置

linux-x64本案例软件包：链接：https://pan.baidu.com/s/1ighxbTNAWqobGpsX0qkD8w提取码：lkjh（若链接失效在下面评论，我会及时更新）一、配置Hadoop集群主节点

学习BigData·2024-02-05 13:01

Hadoop一键启动脚本编写

一、问题描述针对Hadoop集群使用start-dfs.shstart-yarn.sh进程无法全部启动，但是使用单独启动命令可以启动的问题进行解决。

学习BigData·2024-02-05 13:01

4.Linux虚拟机下的Hadoop集群搭建之Xshell及Xftp的使用和SSH服务配置

学习BigData·2024-02-05 13:31

深入探索Elasticsearch数据写入黑箱

Elasticsearch数据写入涉及多个步骤过程，以此来确保数据能够高效、安全地存储在集群中。本文将带你探索Elasticsearch对数据的操作流程。

超越不平凡·2024-02-05 12:58

Elasticsearch（二）

在一个集群中，可以定义任意多的索引。能搜索的数据必须索引，这样的好处是可以提高查询速度，比如：新华字典

蒋一清·2024-02-05 11:16

[Hadoop]万字长文Hadoop相关优化和问题排查总结

心跳并发配置开启回收站配置datanode的优化hdfs调优hadoop的优化YARN的优化HDFS调优的基本原则HDFS调优的常用参数排查哪个任务的cpu占用高hdfs查询慢的原因怎样判断是否是数据倾斜集群重启任务自动重启

王一1995·2024-02-05 10:55

Docker 第十二章： Docker 三剑客之 Swarm （节点管理命令）

Swarm是Docker集群管理工具，允许用户轻松部署和管理容器化的应用程序。通过节点管理和命令，用户可以配置Swarm集群，包括添加、删除和更新节点，以及执行其他与Swarm相关的操作。

半部论语·2024-02-05 10:23

Hadoop3.x单机安装教程

以最小化的成本学习和测试Hadoop；搭建基于Hadoop的上层应用，比如单机Spark环境需要先拥有单机的Hadoop；如果需要搭建分布式集群环境的Hadoop环境，请参考另外一篇：Hadoop3.x

文景大大·2024-02-05 10:06

【Redis】理论基础 - 分区策略

通过分区，我们可以将数据分散存储在多个Redis实例中，充分利用集群的计算和存储资源。本篇博客将介绍Redis的分区策略以及如何水平扩展Redis。

好久不见的流星·2024-02-05 10:20

微服务入门篇：Nacos注册中心（Nacos安装，快速入门，多级存储，负载均衡，环境隔离，配置管理，热更新，集群搭建，nginx反向代理）

目录1.Nacos安装1.官网下载2.解压到本地3.启动nacos2.Nacos快速入门1.在父工程中导入nacos依赖2.给子项目添加客户端依赖3.修改对应服务的配置文件4.启动服务，查看nacos发现情况3.Nacos服务多级存储模型4.NacosRule负载均衡5.服务实例的权重设置6.环境隔离（namespace）7.Nacos和Eureka的对比1.临时实例和非临时实例2.Nacos与e

JungleiRim·2024-02-05 10:39

CDH添加新节点小记

最近集群有个节点挂掉了，在修复以后，重新作为新节点加入到集群中。

sx_1706·2024-02-05 09:59

在 CDH 中调优 Apache Hive on Spark

本主题假设您的集群由ClouderaManager管理，并且您使用YARN作为Spark集群管理器。以下部分中描述的

海阔天空&沫语·2024-02-05 09:27

CDH6.3.2 多 Spark 版本共存

opt/cloudera/parcels/CDH/libcd/opt/cloudera/parcels/CDH/libmvspark-3.3.1-bin-3.0.0-cdh6.3.2/spark3将CDH集群的

大数据AI·2024-02-05 09:56

第二讲《k8s资源介绍：Namespace与Pod 》

一、namespace介绍1.概念在Kubernetes中，命名空间（Namespace）提供一种机制，将同一集群中的资源划分为相互隔离的组。

风向决定发型丶·2024-02-05 09:48

（译）Kubernetes 如何控制你的集群

原文地址：https://hackernoon.com/level-triggering-and-reconciliation-in-kubernetes-1f17fe30333dkubernetes是到目前为止最流行的容器编排系统，它的成功主要源自于它的稳定性。所有的软件都会有bug，但在容器编排领域，kubernetes比它的其他竞争者更可靠。kubernetes不管怎么样，最终都会达到并且一

bebc·2024-02-05 09:47

k8s笔记4--k8s基础概念

k8s基础概念1k8s概述2功能特性3核心组件4资源对象4.1pod概述4.2deployment概述4.3service4.4Ingress介绍5说明1k8s概述Kubernetes是谷歌开源的容器集群管理系统

昕光xg·2024-02-05 09:17

k8s分享下-service 网络卷

因为直接通过pod的IP+port获取服务存在如下两个问题：1）调用地址不稳定，pod可能出现故障，那么新的pod产生的IP和port都会发生变化2）集群(多pod实例)场景无法自动实现负载均衡service

深山猿·2024-02-05 09:45

【Kafka面试】Kafka的高可用机制有了解吗？

一、集群模式Kafka集群由多个broker组成，每个broker就是Kafka实例。假如某个broker宕机，在集群中其他的broker依然可以对外提供服务，这个就是集群能够保证高可用性。

TAIKEMAN·2024-02-05 09:44

kafka副本高可用机制

Kafka的每个topic都可以分为多个Partition，并且多个partition会均匀分布在集群的各个节点下。

catch that elf·2024-02-05 09:44

kafka高可用(集群)

实时上rabbitmq并不分布式消息队列，他就是传统的消息对了，只不过提供了一些集群，HA的机制而已，因为

GoslingWu·2024-02-05 09:13

消息队列三｜Kafka 如何做到高可用？

并且通过多副本机制实现故障的自动转移，在kafka集群中某个broker节点失效的情况下仍然能保持服务可

不落叶的榕树·2024-02-05 09:11

kafka高可用集群搭建

kafka高可用集群搭建说明这篇博文主要是为了后面的elk做准备，我们这里搭建一个kafka集群，使用2个节点，还是前面的节点。主要是为了后面做数据缓冲。

憧憬blog·2024-02-05 09:40

Kafka基于Zookeeper搭建高可用集群实战

八五年的湘哥·2024-02-05 09:39

kafka 高可用副本配置指南

目录以实际情况为准可以进入kafka/bin里面，有kafka一般操作脚本kafka连接的zookeeper的地址在kafka/config/server.properties里面，执行脚本需要zk地址查询kafka集群有多少

黑虎堂堂主·2024-02-05 09:38

Docker搭建redis主从集群

一、介绍这篇文章主要介绍如何使用Docker在本机搭建一个带有主从复制功能的Redis环境，内容包括涉及的目录结构、docker-compose.yml的编写，以及结果的验证。二、目录结构介绍主要目录结构如下：image.png2.1配置redis节点信息redis-master.confbind127.0.0.1#启用保护模式#即在没有使用bind指令绑定具体地址时#或在没有设定密码时#Redi

_二师兄_·2024-02-05 09:05

Docker 搭建mysql 集群（二）

PXC方案很明显PXC方案在任何一个节点写入的数据都会同步到其他节点，数据双向同步的（在任何节点上都可以同时读写）创建MySQLPXC集群1安装PXC镜像dockerpullpercona/percona-xtradb-cluster

管理大亨·2024-02-05 09:36

docker搭建mysql集群

要求：一台装有centos7.6以上的服务器，docker安装完毕该方法是基于dockers搭建的mysql的主从集群，一主一从拉取mysql的镜像dockerpullmysql:8.0.25启动容器，

贪吃的程序猫·2024-02-05 09:32

docker搭建Mysql集群准备（一）

docker搭建Mysql集群准备Linux基本知识：修改机器IP，变成静态IPvim/etc/sysconfig/network-scripts/ifcfg-ens33文件TYPE=EthernetPROXY_METHOD

管理大亨·2024-02-05 09:01

【高速组网】ROCE和IB组网

在GPU集群,特别是在AI大规模场景下,对网络有大带宽和低延迟的需求,一般常用的以太网络无法满足,为了实现高速且可靠的数据传输,往往会采用IB或者ROCE组网架构来满足需求.ROCE和IB组网都可以在高性能计算和数据中心的应用中提供高带宽

沐风—云端行者·2024-02-05 08:15

Centos7安装原生Nginx并配置反向代理

一、背景当我的应用程序需要集群化部署之时，必然需要一个反向代理，当然Nginx的大名，这里不做更多的介绍了，这里介绍一下Nginx常用的四大阵营1Ngnix原生版本nginxnews2NginxPlus

风萧萧兮s·2024-02-05 08:07

nginix+openresty+redis+tomcat实现多级缓存

首先win中的nginx配置文件upstreamnginx-cluster{#nginx业务集群,redis集群,Tomcat集群;server192.168.216.169:8081;}server{

李武忠小迷哥·2024-02-05 08:35

k8s-深入理解Service(为Pod提供负载均衡和发现)

的定义和创建Pod与Service的关系Service的定义和创建三、Service使用NodePort对外暴露应用四种类型，常用的三种：指定Service的NodePort端口在实际生产中，k8s的集群不会直接暴露在公网中

milo.qu·2024-02-05 08:52

Docker&k8s集群安装

1创建三台虚拟机使用VMware创建三台虚拟机，分别是k8s-master01、k8s-node01、k8s-node02。使用下面命令下载ifconfig工具。yuminstallnet-tools输入ifconfig命令查看ip地址并记录。使用下面命令改hostname的值：(改为k8s-master01)另外两台改为相应的名字。hostnamectlset-hostnamek8s-maste

no-muggle·2024-02-05 08:34

2.0 Hadoop 运行环境

由于Hadoop是为集群设计的软件，所以我们在学习它的使用时难免会遇到在多台计算机上配置Hadoop的情况，这对于学习者来说会制造诸多障碍，主要有两个：昂贵的计算机集群。

二当家的素材网·2024-02-05 07:01

(十四)ATP应用测试平台——使用docker-compose一键式安装ATP应用测试平台的依赖服务

不过由于依赖的增多，项目的服务也随之多了起来，例如为了测试mysql的主从集群读写分离，需要安装mysql的主从服务器，为了测试redis的哨兵模式及分布式锁机制，需要安装一套redis集群，为了测试消息中间键

厉害哥哥吖·2024-02-05 07:06

推荐频道

Kubernets集群