kubernetes集群编排

同城双活和两地三中心架构设计

同城两个机房各承担一部分流量，一般入口流量完全随机，内部RPC调用尽量通过就近路由闭环在同机房，相当于两个机房镜像部署了两个独立集群，数据仍然是单点写到主机房数据库，然后实时同步到另外一个机房。

架构未来·2025-01-20 19:16

kafka 学习笔记3-传统部署Kraft模式集群——筑梦之路

部署kafka集群规划一般模式下，元数据在zookeeper中，运行时动态选举controller，由controller进行Kafka集群管理。

筑梦之路·2025-01-20 19:10

共筑BMC技术生态，OurBMC受邀参加第二届融通生态大会

12月11-12日，第二届国家新一代自主安全计算系统产业集群融通生态大会（以下简称“融通生态大会”）在长沙成功召开。

·2025-01-20 17:19

VictoriaMetrics 中文教程（10）集群版简介

VictoriaMetrics中文教程系列文章：VictoriaMetrics中文教程（01）简介VictoriaMetrics中文教程（02）安装VictoriaMetrics中文教程（03）如何配置Prometheus使其把数据远程写入VictoriaMetricsVictoriaMetrics中文教程（04）对接Grafana同时介绍vmuiVictoriaMetrics中文教程（05）对接

·2025-01-20 17:17

云原生周刊：K8s 生产环境架构设计及成本分析

·2025-01-20 17:45

Anthropic运维工程师的IT基础设施总结清单（上）

Karpenter开源地址：https://github.com/kubernetes-sigs/karpenter本文由Anthropic工程师JackLindamood撰写，分享了他之前在一家初创公司中负责

CloudPilotAI·2025-01-20 16:12

【Elasticsearch集群】轻松部署 Elasticsearch：8.0 集群

概要一文教你轻松掌握Elasticsearch：8.0+集群部署，JDK17+环境准备准备3台centos服务器:192.168.0.10、192.168.0.11、192.168.0.121、更新系统

库洛王子·2025-01-20 12:59

npm install CERT_HAS_EXPIRED解决方法

针对如远程桌面无法复制粘贴、Kubernetes报错、自启动报错、各类软件安装报错、内存占用问题、网络连接问题等提供了详细的问题描述与有效

奔跑吧邓邓子·2025-01-20 10:40

Elasticsearch 中的节点（比如共 20 个），其中的10 个选了一个 master，另外 10 个选了另一个 master，怎么办？思维导图代码示例（java 架构)

在Elasticsearch中，如果出现集群分裂（Split-brain）的情况，即一部分节点选举了一个Master节点，而另一部分节点选举了另一个Master节点，这会导致数据不一致和集群不可用。

用心去追梦·2025-01-20 09:27

Fluss安装体验

https://mirrors.aliyun.com/apache/zookeeper/zookeeper-3.8.4/apache-zookeeper-3.8.4-bin.tar.gz1.1.1zk集群规划

WYRM_GOLD·2025-01-20 05:27

Sealos 将计算节点加入 kubeadm 安装的 Kubernetes 集群

引言Kubernetes是云原生应用的核心平台，而kubeadm是官方推荐的Kubernetes集群部署工具。然而，随着集群规模的扩大，手动管理节点变得越来越复杂。

ivwdcwso·2025-01-20 02:22

K8S中Pod控制器之Horizontal Pod Autoscaler(HPA)控制器

HorizontalPodAutoscaler(HPA)控制器HorizontalPodAutoscaler（HPA）是Kubernetes中用于自动根据当前的负载情况，自动调整Pod数量的一种控制器。

元气满满的热码式·2025-01-20 02:46

正式开源，Doris Operator 支持高效 Kubernetes 容器化部署方案

Kubernetes提供的编排和管理功能，能完成大规模容器部署，但Kubernetes自身的复杂性也导致众多企业面临部署复杂、运维困难、使用难度高等挑战。

SelectDB技术团队·2025-01-20 01:13

【软考速通笔记】系统架构设计师⑬——云原生架构设计理论与实践

服务化架构模式3.2Mesh化架构模式3.3Serverless模式3.4存储计算分离模式3.5分布式事务模式3.6可观测模式3.7事件驱动架构3.8反云原生模式四、云原生技术4.1容器技术4.2容器编排技术

小康师兄·2025-01-19 23:26

通俗易懂 serverless 架构、微服务架构和云原生架构，并简单代码

文章目录1serverless架构、微服务架构和云原生架构区别1.Serverless架构示例：AWSLambda+APIGateway2.微服务架构示例：Flask微服务3.云原生架构示例：Docker和Kubernetes2Kubernetes

Ai君臣·2025-01-19 22:17

Spark Livy 指南及livy部署访问实践

ApacheSpark是一个比较流行的大数据框架、广泛运用于数据处理、数据分析、机器学习中，它提供了两种方式进行数据处理，一是交互式处理：比如用户使用spark-shell，编写交互式代码编译成spark作业提交到集群上去执行

house.zhang·2025-01-19 22:40

大数据学习（四）：Livy的安装配置及pyspark的会话执行

一个基于Spark的开源REST服务，它能够通过REST的方式将代码片段或是序列化的二进制代码提交到Spark集群中去执行。

猪笨是念来过倒·2025-01-19 21:08

Scaleph：基于Kubernetes的开放式数据平台

Scaleph：基于Kubernetes的开放式数据平台scalephOpendataplatformbasedonFlinkandKubernetes,supportsweb-uiclick-and-dropdataintegrationwithSeaTunnelbackendedbyFlinkengine

尤淞渊·2025-01-19 19:19

【赵渝强老师】PostgreSQL的数据库

PostgreSQL的逻辑存储结构主要是指数据库中的各种数据库对象，包括：数据库集群、数据库、表、索引、视图等等。

·2025-01-19 19:56

【赵渝强老师】PostgreSQL的数据库集群

PostgreSQL的逻辑存储结构主要是指数据库中的各种数据库对象，包括：数据库集群、数据库、表、索引、视图等等。

·2025-01-19 19:25

Apache Doris安装部署

目录Doris简介Doris安装包下载JDK安装Doris安装单机部署安装部署规划创建用户解压安装包配置FE配置BE启动FE和BE连接Doris集群添加BE节点修改root和admin用户的密码创建数据库和数据表停止

ErbaoLiu·2025-01-19 19:47

【赵渝强老师】Kubernetes中Pod的探针

在K8s集群中，当Pod处于运行状态时，kubelet通过使用探针（Probe）对容器的健康状态执行检查和诊断。Kubernetes支持的三种类型的探针。

·2025-01-19 18:48

doris 安装部署

FE：存储和维护集群的元数据，负责接收和解析用户的查询请求，规划查询计化，调度查询结果，FE主要分为三个角色：Leader、Follower、ObserverLeader和Follower主要是用来实现

猫猫姐·2025-01-19 18:13

如何搭建K8S集群

目录一、环境规划二、环境准备2.1搭建流程概述：2.2安装环境准备2.2.1升级系统内核2.2.2设置主机名和hosts本地解析2.2.3关闭防火墙和SELinux2.2.4时间同步2.2.5关闭swap分区2.2.6将桥接的IPv4流量传递到iptables链2.2.7开启ipvs2.2.8重启机器2.3容器化环境和组件安装2.3.1Docker安装2.3.2设置Docker镜像加速器：2.3.

江湖风云令·2025-01-19 18:09

【赵渝强老师】PostgreSQL的物理存储结构

PostgreSQL在执行initdb的数据库集群初始化时会指定一个目录。该目录通过环境变量$PGDATA来表示。当数据库集群初始化完成后，会在这个目录生成相关的子目录以及一些文件。

·2025-01-19 15:11

python 清空表格_python 清空表数据库表

《Greenplum5.0最佳实践》迁移数据使用Gptransfer使用Gptransfer命令迁移一个Greenplum数据库集群中的数据到另一台集群(metradata,data)gptransfer

weixin_39989190·2025-01-19 13:57

构建高效GPU算力平台：挑战、策略与未来展望

当前挑战算力分配与资源优化在多用户共享GPU集群的环境下，合理分配计算资源并确保每个任务能够高效运行是一项挑战。这不仅涉及到硬件资

Mr' 郑·2025-01-19 11:43

Shardingsphere-Proxy 5.5.0数据迁移

Shardingsphere-Proxy5.5.0数据迁移Shardingsphere系列目录：背景配置集群部署搭建Zookeeper修改shardingsphere-proxy配置重启shardingsphere-proxy

她又在丛中笑·2025-01-19 10:35

hive小文件合并机制_hive小文件的问题弊端以及合并

中每个文件的元数据信息，包括位置大小分块信息等，都保存在NN内存中，在小文件数较多的情况下，会造成占用大量内存空间，导致NN性能下降；2、在读取小文件多的目录时，MR会产生更多map数，造成GC频繁，浪费集群资源

做生活的创作者·2025-01-19 08:49

【MongoDB 分片集群架构详解】

MongoDB分片集群架构详解MongoDB分片集群架构详解1.分片简介1.1为什么要使用分片1.2垂直扩容（ScaleUp）VS水平扩容（ScaleOut）2.分片集群架构2.1核心概念2.1.1数据分片

从你全世界路过·2025-01-19 08:48

Zookeeper 数据迁移实战：基础环境搭建与高效迁移方案全览

文章目录一、Zookeeper数据迁移简介二、迁移zookeeper数据基础环境三、利用快照迁移zookeeper数据1、Node1最新的zk快照文件和日志文件2、将被迁移方node2的zookeeper的集群全部

磐基Stack专业服务团队·2025-01-19 08:43

Nacos深度剖析：配置及高可用方案全攻略

全局参数1.2Naming模块参数1.3Config模块参数1.4CMDB模块参数第2章NacosClient配置参数2.1通用参数2.2Naming客户端2.3Config客户端第3章Nacos单机与集群

磐基Stack专业服务团队·2025-01-19 08:43

Mysql----高可用集群

减轻单台服务器的访问压力同时实现数据的备份缺点：读写分离服务器主数据库从数据库都存在单点故障问题分库分表解决是的大量并发存储数据的存储压力问题和存储空间问题缺点：分片存储服务器有单点故障问题没有数据备份的功能(mysql高可用集群

晗光HG·2025-01-19 04:07

Mysql数据库高可用群集

1.1Master11.2Master22.再做主主2.1Master12.2Master23.安装Keepalived3.1Master1配置文件3.2Master2配置文件4.编写Mysql_check.sh服务检测脚本四、测试集群是否搭建成功五

一坨小橙子ovo·2025-01-19 03:51

Yarn工作机制？思维导图代码示例（java 架构)

YARN工作机制YARN（YetAnotherResourceNegotiator）是Hadoop生态系统中的资源管理和调度框架，它负责管理集群中的所有资源，并为应用程序提供调度服务。

用心去追梦·2025-01-19 02:17

k8s mysql数据目录挂载_【kubernetes】k8s数据卷,pod挂载本地路径

环境：Linux服务器配置挂载目录思路：在部署pod的节点(宿主机)配置同样的挂载路径到一个固定的服务器(目标服务器)，这样不管pod在哪里跑，文件的保存路径都是不变的1.安装sshfsyuminstall-ysshfs2.添加ssh认证把节点的ssh公钥拷贝到目标服务器的~/.ssh/authorizedkeys中3.挂载目录在节点服务器执行：sshfsUSER@目标服务器IP:/path/to

九罭之魚·2025-01-19 02:14

单体式架构，集群，分布式架构有什么区别

编译和启动的速度会变慢2.代码冲突3.单个数据库存储能力有限4.很难在进行扩展虽然有缺点，但是他肯定还是有自己的优点的优点1.开发测试简单部署方便2.扩容简单，给应用加机器就可以由于单体架构的缺点，逐渐出现了集群集群集群就是当单体架构

highfish920·2025-01-18 23:52

K8s组件全解析，你需要知道的一切秘密

K8s组件全解析，你需要知道的一切秘密K8s架构概览APIServer：K8s的门面担当控制平面组件详解etcd：高可用的数据存储基石工作负载管理与调度策略网络模型与服务发现机制存储编排与持久化解决方案日志监控与故障排查工具链

master_chenchengg·2025-01-18 22:42

单体架构、集群架构和分布式架构概述

单体架构、集群架构和分布式架构概述在现代系统架构和开发过程中，单体架构、集群架构和分布式架构是三个常见且关键的概念。本文将详细介绍这些技术的相关概念，并探讨它们之间的联系与区别。

JoyousHorse·2025-01-18 21:01

kafka+connector集群迁移

示例环境ip部署信息备注192.168.181.121zookeeper、kafka、connecter待迁移集群节点1192.168.181.14zookeeper、kafka、connecter待迁移集群节点

mark.meng·2025-01-18 20:47

keepalived+haproxy实现高可用集群

实验环境172.16.32.21172.16.32.22Vip:172.16.32.301.部署httpd测试服务yuminstallhttpdecho"172.16.32.22">>/var/www/html/id.htmlsystemctlstarthttpdcurl172.16.32.22/id.html172.16.32.222.部署haproxy实现负载均衡yuminstallhapro

mark.meng·2025-01-18 20:17

Nginx 集群测试

在Nginx集群的部署和维护过程中，为了确保系统的高可用性、性能和扩展性，必须进行全面的测试。

小馋喵知识杂货铺·2025-01-18 18:02

集群间hive数仓迁移

方式一：(此方法需要建库建表)第一步：建库建表在原集群hive上查看迁移表的建表语句及所在库，然后在新集群hive上建库建表；showcreatetabletb_name;createdatabasedb_name

one code·2025-01-18 17:15

mac系统docker安装k8s

吕海洋·2025-01-18 13:47

【大数据学习 | kafka】kafka的组件架构

broker:每个kafka的机器节点都会运行一个进程，这个进程叫做broker，负责管理自身的topic和partition，以及数据的存储和处理，因为kafka是集群形式的，所以一个集群中会存在多个

Vez'nan的幸福生活·2025-01-18 10:30

docker 与K8s的恩怨情仇

Docker和Kubernetes（通常简称为K8s）是容器化和容器编排领域的两大重要工具，它们在技术生态中扮演着不同的角色，并且有着密切的关系。

慧香一格·2025-01-18 10:00

keepalived 、HAProxy

KeepAlived高可用集群配置高可用的web集群监控本机80端口，实现主备切换实现原理实施配置高可用、负载均衡的web集群配置高可用、负载均衡HAProxy配置haproxy负载均衡调度器比较LVS

www.农民工·2025-01-18 10:53

Kubernetes Service负载均衡机制

当一个Service对象在Kubernetes集群中被定义出来时，集群内的客户端应用就可以通过服务IP访问到具体的Pod容器提供的服务了。

蓝颜～岁月·2025-01-18 09:52

Haproxy 负载均衡集群

|br0router192.168.29.128vip:192.168.29.128192.168.29.128/32修改内核参数servicehttpdstart测试：找宿主机http://192.168.29.128找同学去访问:确保它的电脑没有192.168.29.0/24网络却把把网关指向宿主机10网段的IP再去访问http://192.168.29.128三、部署memcached把机器

weixin_34348805·2025-01-18 09:22

K8S集群常用命令

1，查看podkubectlgetpods-A查看所有的podkubectlgetpods这个只查看namespace为default下的pod，也就是只查看默认命名空间下的podkubectlgetpod-A-owide查看所有的pod，并且放出的信息更全（包含了pod的ip）2，查看pod的具体信息kubectldescribepodmy-pod-nmy-namespace查看命名空间my-n

年薪丰厚·2025-01-18 09:19

推荐频道