集群之路第19页

一、Kubernetes架构及核心组件

一、基本架构Kubernetes集群可以被看作是一个工厂，而各个组件则是这个工厂里的不同部门：KubernetesAPI服务器：就像是这个工厂的总经理，负责接收所有的请求并将它们分配给相应的部门进行处理

Cyan_Jiang·2025-02-04 16:24

Openstack云平台脚本部署之Galera高可用集群配置（二）

MariaDBGalera配置五、参考文档六、系列文章一、概述社区文档中，Openstack的高可用架构采用“Pacemkaer+Haproxy+Galera”的架构，数据库服务的高可用采用Galera同步复制的多主数据库集群

梅馨嫣栀·2025-02-04 14:10

galera集群

一、环境准备1、各主机配置静态域名解析：cat/etc/hosts127.0.0.1localhostlocalhost.localdomainlocalhost4localhost4.localdomain4::1localhostlocalhost.localdomainlocalhost6localhost6.localdomain6192.168.210.131node1node1.tes

weixin_30271335·2025-02-04 14:39

MySQL Galera集群

一、工作原理概念Galera是一个MySQL(也支持MariaDB，Percona)的同步多主集群软件。原理当客户端读写数据时，可连接任一MySQL实例。对于读操作，从每个节点读取到的数据都是相同的。

爱喝旺仔的昊昊·2025-02-04 14:08

在K8S中，有哪几种控制器类型？

在Kubernetes中，控制器（Controller）是用来确保实际集群状态与所需状态保持一致的关键组件。

Dusk_橙子·2025-02-04 14:38

Galera Cluster ：一种新型的高一致性MySql集群框架

GaleraCluster即为安装了Galera的Mariadb集群（本文只介绍MariadbGarela集群）。其本身具有multi-master特性，支持多点写入。

hlday6·2025-02-04 13:37

k8s二进制集群之负载均衡器高可用部署

Haproxy和Keepalived安装Haproxy配置文件准备Keepalived配置及健康检查启动Haproxy&Keepalived服务继续上一篇文章《K8S集群架构及主机准备》，下面介绍负载均衡器搭建过程

smart_ljh·2025-02-04 13:30

k8s二进制集群之ETCD集群部署

下载etcd安装包创建etcd配置文件准备证书文件和etcd存储目录ETCD证书文件安装（分别对应指定节点）创建证书服务的配置文件启动etcd集群验证etcd集群状态继续上一篇文章《k8s二进制集群之ETCD

smart_ljh·2025-02-04 12:54

【分布式】服务端高并发分布式结构演进

文章目录1.单机架构1.1单机架构的优缺点1.2单机架构的典型应用场景2.应用与数据分离架构2.1应用与数据分离架构的优缺点2.2应用与数据分离架构的典型应用场景3.应用服务集群架构3.1应用服务集群架构的优缺点

阿猿收手吧！·2025-02-04 10:36

使用 Grafana 和 Prometheus展现消息队列性能

JMX提取Kafka数据，本篇文章将通过JDBC存储Kafka性能数据存储于数据库，并通过Grafana和Prometheus进行展示，实现开发中常用的可视化监控1.环境准备Kafka：运行中的Kafka集群

优人ovo·2025-02-04 07:16

Ubuntu下Hadoop的安装与使用

//为hadoop设置密码sudoadduserhadoopsudo//为hadoop用户增加管理员权限2、更新apt并安装vimsudoapt-getupdate3、安装SSH、配置SSH无密码登陆集群

ly201552y·2025-02-04 07:44

Spark3.1.2单机安装部署

spark3.1.2单机安装部署概述Spark是一个性能优异的集群计算框架，广泛应用于大数据领域。

花菜回锅肉·2025-02-04 07:43

coredns 实践

coredns简介CoreDNS是用来做集群内部域名解析。

叱咤少帅（少帅）·2025-02-04 06:03

IM 即时通讯系统-47-beardlessCat IM 使用netty开发分布式Im，提供分布netty集群解决方案

IM开源系列IM即时通讯系统-41-开源野火IM专注于即时通讯实时音视频技术，提供优质可控的IM+RTC能力IM即时通讯系统-42-基于netty实现的IM服务端,提供客户端jar包,可集成自己的登录系统IM即时通讯系统-43-简单的仿QQ聊天安卓APPIM即时通讯系统-44-仿QQ即时通讯系统服务端IM即时通讯系统-45-merua0oo0IM分布式聊天系统IM即时通讯系统-46-OpenIM提

老马啸西风·2025-02-04 06:01

Flink Standalone集群模式安装部署全攻略

FlinkStandalone集群模式安装部署全攻略一、引言Flink作为一款强大的分布式流处理和批处理框架，在大数据领域有着广泛的应用。

自节码·2025-02-04 04:17

Caused by: java.io.NotSerializableException: org.apache.parquet.schema.MessageType

目前没解决，本地代码可以运行，打包集群运行也没问题，可能是zeppelin哪里的依赖包冲突。

黄瓜炖啤酒鸭·2025-02-04 04:17

【Flink】集群环境下的搭建（Standalone 模式）

前言Flink是目前开源社区中唯一一套集高吞吐、低延迟、高性能三者于一身的分布式流式数据处理框架，支持多种安装部署模式。主要包括以下几种‌1‌.Standalone模式‌：这是独立运行的模式，不依赖任何外部的资源管理平台，只需要运行所有Flink组件服务。这种模式适合开发和测试环境‌。2‌.YARN模式‌：在这种模式下，Flink应用提交给YARN的ResourceManager，Resource

つ情绪·2025-02-04 03:46

Flink cdc3

flink环境准备FlinkStandalone集群，下载最新版本Flink1.18.0，解压后得到flink-1.18.0目录。并且设置FLINK_HOME为flink-1.18.0所在目录。

2401_84167086·2025-02-04 03:46

Elasticsearch集群架构：构建高效、可扩展的搜索平台

本文将深入探讨Elasticsearch集群的架构设计，帮助您更好地理解和构建高效、可扩展的搜索解决方案。一、Elasticsearch简介Ela

detayun·2025-02-04 03:11

java开发工程师面试问题，java面试题大汇总小山博客

只有全面的复习，才能让我们更好的充实自己，武装自己，为自己的面试之路不再坎坷！今天

A程序员导师·2025-02-04 01:24

流媒体娱乐服务平台在AWS上使用Presto作为大数据的交互式查询引擎的具体流程和代码

实施过程：Presto集群部署：在AWSEMR上部署了Presto集群，该集群与HiveMetastore和AmazonS3集成

weixin_30777913·2025-02-04 00:23

Socket.IO负载均衡

个人博客地址：Socket.IO负载均衡|一张假钞的真实世界架构Nginx配置为了负载均衡时连接保证始终连到一个节点上，使用Nginx的ip_hash实现sessionsticky，让客户端始终连接到集群内一台节点上

一张假钞·2025-02-04 00:22

动手学PyTorch建模与应用：从深度学习到大模型

在人工智能时代，机器学习技术日新月异，深度学习是机器学习领域中一个全新的研究方向和应用热点，它是机器学习的一种，也是实现人工智能的必由之路。

王国平·2025-02-04 00:51

Python结合pyhdfs模块操作HDFS分布式文件系统

1：安装由于我的是windows环境（linux其实也一样），只要有pip或者setup_install安装起来都是很方便的pipinstallhdfs2：Client——创建集群连接fromhdfsimport

唐僧不爱八戒·2025-02-04 00:50

Spark基本概念

Spark核心组件Driver将用户程序转化为作业（job）在Executor之间调度任务(task)跟踪Executor的执行情况通过UI展示查询运行情况ExecutorSparkExecutor是集群中工作节点

javafanwk·2025-02-04 00:18

[创业之路-272]：不同规模的赚钱，需要的杠杆不同

小规模赚钱个人投资与创业：在小规模赚钱活动中，如个人创业或小型投资，杠杆可能主要体现在个人信用贷款、亲友借款或众筹等方式上。这些杠杆通常规模较小，但能够帮助初创者或投资者快速启动项目或抓住市场机会。时间与精力：对于很多小规模创业者来说，他们可能更多地依赖自己的时间和精力作为杠杆，通过加班加点、身兼多职等方式来扩大业务规模或提高收入。中等规模赚钱银行贷款与风险投资：随着业务规模的扩大，中等规模的企业

文火冰糖的硅基工坊·2025-02-04 00:17

Spark 基本概念

ClusterModeOverview-Spark3.3.0DocumentationApplication：指的是用户编写的Spark应用程序/代码,一个完整的main方法程序，包含了Driver功能代码和分布在集群中多个节点上运行的

Buutoorr·2025-02-04 00:17

Doris中架构和mysql语法的差异

FE（Frontend）：存储、维护集群元数据；负责接收、解析查询请求，规划查询计划，调度查询执行，返回查询结果。

苦苦挣扎的小码农·2025-02-03 23:13

AI浪潮下程序员的职业转型与技术进阶之路

一、引言1.1研究背景与意义在科技飞速发展的当今时代，人工智能（AI）无疑是最为耀眼的技术领域之一。从早期简单的专家系统到如今复杂的深度学习模型，AI技术经历了从理论探索到广泛应用的巨大跨越，正以前所未有的速度改变着我们的生活和工作方式。近年来，AI技术取得了一系列突破性进展。以GPT系列为代表的大型语言模型，展现出强大的自然语言处理能力，能够实现文本生成、对话交互、代码编写等多种任务。根据《20

nbsaas-boot·2025-02-03 23:40

面试常考题目——状态码总结

这是个面试和考研的算法练习我们一起加油上岸之路总述=====================================================================1开头这一类型的状态码

字节全栈_BjO·2025-02-03 21:54

Kubernetes 配置Pod使用代理上网

配置KubernetesPod使用代理上网在企业网络环境中进行Kubernetes集群的管理时，经常会遇到需要配置Pods通过HTTP代理服务器访问Internet的情况。

·2025-02-03 20:39

使用Jenkins和单个模板部署多个Kubernetes组件

前言在持续集成和部署中，我们通常需要部署多个实例或组件到Kubernetes集群中。通过Jenkins的管道脚本，我们可以自动化这个过程。

·2025-02-03 20:38

公司的k8s集群架构

应用部署模式的演进虚拟化模式容器化模式相比虚拟机和容器容器更加轻量级，启动更快（秒级）容器可移植性更好2.管理大量的容器带来了新的挑战容器编排调度引擎——k8s的好处简化应用部署提高硬件资源利用率健康检查和自修复自动扩容缩容服务发现和负载均衡二、k8s的集群架构主节点

Dragon-wei·2025-02-03 17:50

ExternalName Service 针对的是k8s集群外部有api服务的场景？

是的，**ExternalNameService正是专门用于将Kubernetes集群内部的应用请求代理到外部服务（如API、数据库等）的场景**。

A ?Charis·2025-02-03 17:19

k8s网络架构图_kubernetes搭建高可用集群架构图

MasterNode：主控节点，对集群进行调度管理。由APIServer、Sched

沈千越·2025-02-03 17:49

ETCD集群证书生成

安装cfssl工具配置CA证书请求文件创建CA证书创建CA证书策略配置etcd证书请求文件生成etcd证书继续上一篇文章《负载均衡器高可用部署》下面介绍一下etcd证书生成配置。其中涉及到的ip地址和证书基本信息请替换成你自己的信息。安装cfssl工具下载cfssl安装包https://github.com/cloudflare/cfssl/releases/download/v1.6.4/cfs

smart_ljh·2025-02-03 17:48

k8s集群部署：环境准备

1.设置主机名为每个节点设置主机别名，以便于集群中的角色识别：#设置主节点的主机名为kmastersudohostnamectlset-hostnamekmaster--static#设置工作节点1的主机名为

亦诗亦诗·2025-02-03 17:18

Linux网络知识详解以及demo（Centos6、7）——OSI、TCP、UDP、IP、子网掩码/划分、网关、路由、广播、虚拟网络、网卡、交换机、DNS、ARP

ip地址：网络通讯标识信息子网掩码：在局域网中可以有多少个主机网关：从一个局域网到另一个局域网的必经之路网络号：主机位全为0广播地址：主机位全为1子网掩码：网络位全为1，主机位全为0虚拟软件网络配置仅主机模式宿主机可以访问外网

Pert-·2025-02-03 15:06

从零开始：eBay账号设置与管理的详细教程

本文将为你提供从零开始注册、设置到管理eBay账号的全面指南，让你更轻松地踏上跨境电商之路。一、开启eBay之旅：注册账号1.选择你的起点首先，访问eBay官方网站，选择适合你业务的站点。

跨境卫士小星·2025-02-03 15:00

关于将HashMap替换原有Map的key保持value不变报错java.util.ConcurrentModificationException的处理方案

前言由于苦逼的在公司支持上线，在等待es集群分片完成过程，实在闲的无聊，将之前本地Notion记得一些笔记扔上来一些打发下时间吧(￣.￣)需求有个类似下面的数据为Map>>，其中key为资源id，value

梦岚如雪·2025-02-03 11:56

Kubernetes主要网络概念汇总（Summary of Main Networking Concepts in Kubernetes）

这种设计大大简化了网络层次，使得在集群内部各组件之间的连接更加自然。

Linux运维老纪·2025-02-03 09:48

K8S集群的高可用性（HA）架构如何设计

Kubernetes(K8S)高可用性（HighAvailability,HA）集群架构设计的目标是确保集群在发生组件或节点故障时，仍能提供持续的服务。

IT-民工21110·2025-02-03 09:17

Kafka ACL（访问控制列表）介绍

KafkaACL的基本概念1.1KafkaACL的目标1.2KafkaACL的组成部分2.Kafka支持的资源类型2.1Topic（主题）2.2ConsumerGroup（消费者组）2.3Cluster（集群

王多鱼的梦想～·2025-02-03 08:37

ElasticSearch集群搭建步骤

安装Elasticsearch导入ElasticsearchGPG密钥从RPM存储库安装三、设置基本安全性生成证书使用TLS加密节点间通信四、为Elasticsearch加密HTTP客户端通信五、配置集群编辑

Asui2233·2025-02-03 08:35

CentOS7部署ceph

CEPH简介不管你是想为云平台提供Ceph对象存储和/或Ceph块设备，还是想部署一个Ceph文件系统或者把Ceph作为他用，所有Ceph存储集群的部署都始于部署一个个Ceph节点、网络和Ceph存储集群

假面生·2025-02-03 04:07

Centos 7下 ceph的安装

文章目录ceph安装环境准备工作1、安装ceph-deploy2、配置时间同步3、配置节点间ssh无密码登录4、防火墙配置5、安装包管理器部署ceph集群1、创建ceph操作目录（node-1）2、创建集群

村口树下·2025-02-03 04:06

【TiDB系列文章】PD（Placement Driver）

PD概述PD是TiDB分布式数据库中的元信息管理组件，负责存储集群的元信息和调度数据。它相当于分布式数据库的“大脑”，负责整个集群的数据分布和负载均衡。

学弟Craze·2025-02-03 03:27

Kafka 单机和集群环境部署教程

目录一、Kafka单机环境部署1.环境准备2.安装Java3.安装ZooKeeper3.1下载并解压ZooKeeper3.2配置ZooKeeper3.3启动ZooKeeper3.4验证ZooKeeper是否正常运行4.安装Kafka4.1下载并解压Kafka4.2配置Kafka4.3创建日志目录4.4启动KafkaBroker4.5验证Kafka是否正常运行5.Kafka单机部署的注意事项二、Ka

闲人编程·2025-02-03 03:54

docker-compose部署MongoDB&MySQL&RabbitMQ集群

在三个节点：172.29.154.8、172.29.154.9、172.29.154.10部署MongoDB1主2从副本集、RabbitMQ主-主、MySQL主-从复制。这些节点是在同一个内网环境下的，节点间互通，各节点部署的服务器关系如下表，其中，MySQL的主节点是172.29.154.9，与其他的服务反过来了，目的是减轻单节点的压力。本文采用docker-compose同时启动多台服务，如果

靖子甘·2025-02-02 23:24

Mysql的“三高”集群架构

今天老顾来讲讲Mysql的三高集群架构，所谓三高，就是**“高可用”、“高负载”、“高性能”的架构**方案。

2401_87252417·2025-02-02 19:59

推荐频道

集群之路