集群分布式技术第33页

【万字长文】带你搞懂Kafka中的所有知识点

目录概述主题和分区日志消息压缩日志分段条件日志清理多副本写入流程生产者必要参数配置消息的发送流程元数据更新重要的生产者参数消费者消费者组分区分配策略协调器重平衡触发方式流程如何避免rebalance位移提交消费者offset的存储broker集群控制器事务消息保障传输幂等性事务概述

1_5_2_·2024-02-01 09:46

【万字长文】带你搞懂Redis中的所有知识点

列表）hash（字典）set（集合）zset（有序集合）持久化RDB（RedisDataBase）AOF（AppendOnlyFile）过期策略设置过期时间3种过期策略内存淘汰策略8种淘汰策略置换策略集群主从模式哨兵模式全量复制增量复制

1_5_2_·2024-02-01 09:16

【实战】使用Helm在K8S集群安装MySQL主从

主2从1.添加bitnami的仓库2.查询MySQL资源3.拉取MySQLchart到本地4.对chart本地values-test.yaml修改5.对本地templates模板修改6.安装MySQL集群

小沈同学呀·2024-02-01 09:04

k8s 1.29 一键安装脚本, 丝滑致极

博客原文文章目录集群配置配置清单集群规划集群网络规划环境初始化主机配置安装脚本需要魔法的脚本不需要魔法的脚本配置自动补全加入其余节点验证集群高可用版本:高可用k8s1.29一键安装脚本集群配置配置清单OS

M·K·T·2024-02-01 09:02

Kubernetes 基础详解

大家好，我是升仔Kubernetes概述Kubernetes起源于Google，它的核心理念是帮助你在集群中自动部署、扩展和运行应用程序容器。

升仔聊编程·2024-02-01 09:01

k8s集群下mysql容器更换pvc存储迁移数据，报错InnoDB: Your database may be corrupt

一、背景：在业务生产环境维护过程中会出现k8s集群下mysql容器需要更换pvc存储的场景，更换pvc存储就必须得做数据迁移，不然会出现业务数据丢失的情况。

jiang0615csdn·2024-02-01 09:30

查看 ES 集群默认配置参数

GET_cluster/settings?include_defaults&flat_settings

zhimin_·2024-02-01 09:29

Etcd教程 — 第四章 Etcd集群安全配置

Etcd教程—第四章Etcd集群安全配置前言1TLS与SSL2下载安装2.1选择cfssl版本2.2下载cfssl2.3赋予执行权限2.4查看安装结果3TLS加密实践3.1介绍3.2配置CA并创建TLS

西木Qi·2024-02-01 08:49

etcd自动化安装配置教程

文章目录前言一、简介1.简介2.特点3.端口介绍二、etcd安装教程（单机版）1.复制脚本2.增加执行权限3.执行脚本4.查看启动状态5.卸载etcd三、etcd安装教程（集群版）1.复制脚本2.增加执行权限

BigDataMagician·2024-02-01 08:47

kerberos 安装

rpm安装包链接:https://pan.baidu.com/s/1RmVxvPT8e6fimEcGKCR_2Q&shfl=sharepset密码:innn1、安装kerberos把rpm软件包先拷到集群的所有节点上所有节点

yagch·2024-02-01 08:30

k8s集群监控指标及告警阀值大全【超级详细,全是干货，直接粘贴复制】

目录kube-apiservercorednsetcdkube-controller-managerkubeletkube-schedulerkube-state-metricsnodedeploymentingress-nginxpodkube-apiservergroups:-name:kube-apiserver.rulerules:-alert:K8SAPIAerverDownexpr:u

Cloud孙文波·2024-02-01 08:13

ingress-nginx 部署使用及原理简介

举个例子，现在集群有api、文件存储、前端3个service，可以通过一个ingress对象来实现图中的请求转发。ingress规则是很灵活的，可

Cloud孙文波·2024-02-01 08:13

solr mysql原理_solr replication原理探究

对面访问压力比较大的情况，一般的应对方法就是【集群】+【负载均衡】。Solr提供了两种解决方案来对应访问压力。其一是Replication，其一是SolrCloud。

王正威·2024-02-01 08:31

免费小程序商城搭建之b2b2c o2o 多商家入驻商城直播带货商城电子商务b2b2c o2o 多商家入驻商城直播带货商城电子商务

SpringBoot、Mybatis、Redis3.前端框架VUE、Uniapp、Bootstrap/H5/CSS3、IOS、Android、小程序4.核心思想分布式、微服务、云架构、模块化、原子化、持续集成、集群部署

2301_77700816·2024-02-01 07:26

Spring Boot 日志平台 ELK + Filebeat 入门

友情提示：对于本文来说，即使胖友未阅读过《SpringBoot日志集成Logging入门》文章，也毫无影响，不要慌~不过正如我们在文末所说，在生产环境下，我们会集群部署我们的应用。

weixin_42073629·2024-02-01 07:53

【Oracle 集群】RAC知识图文详细教程(三)--RAC工作原理和相关组件

大叶梧桐·2024-02-01 07:13

Redis保证数据不丢失的手段

Redis保证数据不丢失的主要手段有两个：持久化集群运行我们分别来看它们两的具体实现细节。

&北笙&·2024-02-01 07:13

redis源码之：redis-cli 集群命令

在集群命令执行前，需要先按上一章节的方式redis源码之：clion搭建cluster环境，启动四个新的redis节点，但不要执行clustercreate命令，保持四个节点独立。

Eshin_Ye·2024-02-01 07:10

访问ftp服务器文件夹,访问ftp服务器文件夹

访问ftp服务器文件夹内容精选换一换AutoK8SforKunpeng是专门为鲲鹏服务器开发的自动化集群部署的工具，可以支持离线集群部署，支持Windows和Linux多平台运行。

thecakr·2024-02-01 07:10

业务，应用，集群，主机通俗理解

在刚开始接触运维的时候，总是会碰到许多术语，比如今天要介绍的业务，应用，集群，主机。首先我们来看看百度百科上是怎么解释的。

腾阳·2024-02-01 06:20

芋道源码的周八（2018.02.11）

《MySQL数据库的“十宗罪”（附10大经典错误案例）》《springboot去除autoconfig的两个方法》《Tomcat学习四步走：内核、集群、参数及性能（有彩蛋）》《从Elasticsearch

芋道源码·2024-02-01 06:48

zookeeper集群群起脚本

前提条件：每个节点的zookeeper配置文件都写好在datadir目录下有myid文件最好是已经配置好ssh免密登录。然后就可以启动了，如果我们机器很多的话，不可能一台一台的启动。所以要写个脚本，我的主机名是有规律的hadoop101;hadoop102;hadoop103所以创建脚本的过程如下：到/usr/local/bin目录下touch一个文件，这里我叫zkstartUtil.sh，注意要

小北觅·2024-02-01 05:01

缓存的概念

浏览器缓存过期机制最后修改时间Etag标记过期时间expires混合使用和缓存刷新缓存刷新cookie和session四、CDN缓存什么是CDN用户请求CDN流程利用302实现转发请求重定向至最优服务器集群

Dream visit·2024-02-01 05:33

Redis 数据类型及应用场景

Redis在数据缓存中用的非常多，使用的过程中有单机/集群模式，也有不同的数据类型的选择，如何选择最佳的数据类型？下面我们一起分析下常用的数据类型使用场景。

老鼠AI大米_Java全栈·2024-02-01 04:08

docker安装portainer管理容器

portainerPortainer是Docker的图形化管理工具，提供状态显示面板、应用模板快速部署、容器镜像网络数据卷的基本操作（包括上传下载镜像，创建容器等操作）、事件日志显示、容器控制台操作、Swarm集群和服务等集中管理和操作

王树羽·2024-02-01 04:40

达梦 hibernate连接主备集群

达梦hibernate连接主备集群在达梦数据库中使用Hibernate进行连接到主从（或者称为主备）集群的操作可以通过配置文件来完成。

百代繁华一朝都-绮罗生·2024-02-01 04:51

详解SpringCloud微服务技术栈：深入ElasticSearch（4）——ES集群

）——数据同步（酒店管理项目）订阅专栏：微服务技术全家桶希望文章对你们有所帮助ElasticSearch本身就是分布式的，在这里将要讨论如何用3个docker容器来模拟实现ElasticSearch的集群搭建

布布要成为最负责的男人·2024-02-01 03:42

Amazon EMR HBase 超大表迁移、备份、还原、同步演练手册：全量快照 + 实时同步不停机迁移方案...

本文将讨论并演示：将一个50TBHBase单表不停机迁移数据到一个HBaseonS3集群上。

亚马逊云开发者·2024-02-01 02:01

谷粒商城【成神路】-【2】——alibaba组件

目录1.注册中心nacos2.feign的加入2.nacos作为配置中心3.网关搭建1.注册中心nacos1.启动nacos小张这里启动的是三台nacos作为集群~192.168.20.129:8848

会敲代码的小张·2024-02-01 02:55

一文轻松掌握web3.0知识图谱

与之前的Web1.0和Web2.0相比，Web3.0强调去中心化、用户隐私、加密和分布式技术。一、区块链技术区块链是Web3.0的核心技术之一。

web搅拌机·2024-02-01 02:10

Redis 主从复制

复制功能是高可用Redis的基础，哨兵和集群都是在复制的基础上构建的。配置主从结构参与复制的Redis实例划分为主节点（master）和从节点（slave）。

ikun66666·2024-02-01 02:09

Redis抓取数据到Logstash再推到Elasticsearch集群

一、安装Logstash前面安装过Logstash了，不做解释直接跳过参考：上一篇文章二、配置Logstash在logstash目录下，编辑我们之前的配置文件logstash.confvimlogstash.confinput、output字面意思，从redis去拿取数据，输出到Elasticsearchdata_type：数据类型为listkey：key叫redis_demodb：15数据库ho

勤奋的树懒·2024-02-01 02:36

k8s学习-数据管理

（1）学习Volume，以及Kubernetes如何通过Volume为集群中的容器提供存储；（2）实践几种常用的Volume类型

ByteX·2024-02-01 01:47

Docker容器引擎（6）

consul的模式：二.consul部署consul服务器：查看版本：设置代理，在后台启动consul服务端：进行后台启动：查看集群信息：访问页面：registrator服务器：测试服务发现功能是否正常

伍dLu·2024-02-01 01:08

Docker——consul

目录一、服务注册与发现二、consul概述1、定义2、特性三、部署consul实验准备1、安装Consul2.查看集群信息3.通过httpdapi获取集群信息四、安装registratorregistrator

五条悟的小迷妹·2024-02-01 00:09

Docker consul的容器服务更新与发现

目录1.什么是服务注册与发现2.什么是consul3.consul的模式4.consul提供的一些关键特性5.consul部署建立Consul服务查看集群信息通过httpapi获取集群信息6.registrator

Ybaocheng·2024-02-01 00:08

postgresql 基本操作和主从复制集群

psql基本操作登录psql-Upostgres-W1、列举数据库：\l2、选择数据库：\c数据库名3、查看该某个库中的所有表：\dt4、切换数据库：\cinterface5、查看某个库中的某个表结构：\d表名6、查看某个库中某个表的记录：select*fromappslimit1;7、显示字符集：\encoding8、退出psgl：\q9、创建大写字母的对象：把含有大写字母的对象名称用双引号包裹

shark_西瓜甜·2024-02-01 00:22

CDH5部署三部曲之二：部署和设置

blog_demos内容：所有原创文章分类汇总及配套源码，涉及Java、Docker、Kubernetes、DevOPS等；本篇概览本文是《CDH5部署三部曲》的第二篇，上一篇《CDH5部署三部曲之一：准备工作》将集群所有机器做了必要的设置

程序员欣宸·2024-01-31 23:19

Filebeat日志采集到Elasticsearch集群

一、安装Filebeat注意：所有版本需要一直，我这里Elasticsearch是7.10.1，包括后期的Logstash那些都需要版本一致。我在/data下新建了一个filebeat目录下载并解压filebeatcurl-L-Ohttps://artifacts.elastic.co/downloads/beats/filebeat/filebeat-7.10.1-linux-x86_64.ta

勤奋的树懒·2024-01-31 21:48

kubernetes集群环境搭建（kubeadm-v1.20.6)

1.kubernetes高可用集群环境搭建（kubeadm-v1.20.6）1.1前置知识点目前生产部署Kubernetes集群主要有两种方式：kubeadmKubeadm是一个K8s部署工具，提供kubeadminit

weixin_44834469·2024-01-31 20:14

使用HAProxy和Heartbeat进行负载平衡的高可用MySQL集群

您好，在本文中，我想分享一些从两个主MySQL节点构建高可用MySQL数据库集群的经验，具有基于HAProxy和Heartbeat的负载平衡和故障转移功能。

开心人开发世界·2024-01-31 20:59

Redis 异构集群数据迁移

场景：自建Redis集群线上的数据和服务迁移到腾讯云Redis因为云redis不是单独的机器，没有入口把数据直接拷贝到云Redis里，因此利用唯品会开源的redis数据迁移工具Redis-Migrate-Tool

superxcp·2024-01-31 19:46

Zookeeper的核心组件与架构

它提供了一种可靠的、高性能的协调服务，用于解决分布式系统中的一些常见问题，如集群管理、配置管理、负载均衡、分布式锁等。Zookeeper的核心组件和架构是构建分布式应用程序的关键基础设施之一。

OpenChat·2024-01-31 18:40

使用elasticsearch集群进行监控数据存储和查询实施

背景介绍：改造前1.网关异步向mq发报文数据；2.monitor-proxy监听mq获取报文数据，解析后入库(db2，报文数据包含xml请求报文和一些概要信息)；生产上部署15个监控代理实例，交易量7000w每天；数据库主备，磁盘容量10T左右；问题：1.交易量大的情况下，导致很多批量插入等待，数据库服务器资源紧张；2.交易量会越来越大，数据库存储容量扩展困难；3.数据量大，监控管理查询很慢（10

ktime·2024-01-31 18:15

HDFS HA 之 HA 原理

1ZKFC解析HA(HighAvailability)是HDFS支持的一个重要特性，可以有效解决ActiveNamenode遇到故障时，将可用的Standby节点变成新的Active状态的问题，使集群能够正常工作

Studying！！！·2024-01-31 18:54

HDFS HA 之 Quorum Journal Manager

在这种架构体系下，Namenode以单点的形式运行，一旦系统集群出现故障，可用性是致命的，目前基本不使用了。1.2QJM在HAUsingQJM方案中，涉及的核心部分包括：ActiveNamenod

Studying！！！·2024-01-31 18:24

什么是集群&集群的分类

概念集群（Cluster）计算机集群简称集群，是一种计算机系统，它通过一组松散集成的计算机软件(和/或)硬件连接起来高度紧密地协作完成计算工作。在某种意义上，他们可以被看作是一台计算机。

别掉头发啦·2024-01-31 16:19

基于阿里云Terway网络的Kubernetes集群实践

背景:众所周知的是在构建一个Kubernetes集群时，容器网络通常会使用一个独立的私有子网来构建Kubernetes集群内部的pod网络和service网络，但在实际的业务场景中，没有企业会在一段时间内将内部全部的服务都迁移到

BGBiao·2024-01-31 16:16

JAVA电商平台免费搭建 B2B2C商城系统多用户商城系统直播带货新零售商城 o2o商城电子商务拼团商城分销商城