集群环境第3页

ZooKeeper+Kafka+ELK+Filebeat集群搭建实现大批量日志收集和展示

文章目录一、集群环境准备二、搭建ZooKeeper集群和配置三、搭建Kafka集群对接zk四、搭建ES集群和配置五、部署Logstash消费Kafka数据写入至ES六、部署Filebeat收集日志七、安装

小蔡技术栈·2024-01-04 11:09

CoreOS实践指南（八）：Unit文件详解

>>>在系列前面的内容里，我们已经介绍了使用Unit文件配置Systemd管理的系统服务的方式，以及CoreOS的Fleet工具继承并扩展了这种文件格式，使得它更加适用于集群环境的服务配置。

weixin_34129145·2024-01-04 08:39

GBASE南大通用数据库-GBase8a虚拟集群镜像技术

随着云计算和大数据技术的发展，虚拟集群环境下的数据同步和备份问题日益凸显。如何在保证数据一致性的同时，实现高效、可靠的数据管理？今天，我们为大家介绍一款强大且实用的技术——GBase8a虚拟集群镜像。

GBASE数据库·2024-01-04 02:23

VirtualBox6.0 搭建Ubuntu18.04集群环境

1、安装VirtualBoxhttps://www.virtualbox.org/下载最新版6.0image.png安装启动。image.png2、下载Ubuntu18.04镜像应为计划搭建hadoop集群，所以用server版本。https://www.ubuntu.com/download/serverimage.png3、安装Ubuntuimage.pngimage.pngimage.png

大道至简非简·2024-01-04 00:54

防火墙未开端口导致zookeeper集群异常，kafka起不来

问题描述：主机信息：IPhostname10.0.0.10host1010.0.0.12host1210.0.0.13host13在这三台主机上部署一套zookeeper&kafka集群环境的时候，zk

SRE成长记·2024-01-03 21:22

面试又被问到一致性 Hash 算法？这样回答秒杀面试官！

访问压力不大的时候，通常一台Redis就能搞定，为了高可用，弄个主从也就足够了；当数据量变大，并发量也增加的时候，把全部的缓存数据放在一台机器上就有些吃力了，毕竟一台机器的资源是有限的，通常我们会搭建集群环境

会点代码的大叔·2024-01-02 20:34

docker学习(十三)docker config 的使用

目录前言一、dockerconfig命令二、dockerconfig使用前言在集群环境中配置文件的分发，可以通过将配置文件放入镜像中、设置环境变量、挂载volume、挂载目录的方式，当然也可以通过dockerconfig

_lrs·2024-01-01 22:41

k8s集群环境配置-VMware16pro安装集群（三）

1.首先下载MobaXterm这个软件。MobaXterm又名MobaXVT，是一款增强型终端、X服务器和Unix命令集(GNU/Cygwin)工具箱。MobaXterm可以开启多个终端视窗，以最新的X服务器为基础的X.Org，可以轻松地来试用Unix/Linux上的GNUUnix命令。这样一来，我们可以不用安装虚拟机来试用虚拟环境，然后只要通过MobaXterm就可以使用大多数的linux命令。

漫长的白日梦技术大佬·2024-01-01 06:39

zookeeper 集群搭建

1.依赖该教程依赖已经准备好的linux环境，请先查看：LINUX集群环境准备2.下载和解压点击下载tar-zxvfapache-zookeeper-3.8.0-bin.tar.gz-C/opt/modulecd

被遗忘的优雅·2023-12-31 08:54

搭建flink集群 —— 筑梦之路

Flink能在所有常见集群环境中运行，并能以内存速度和任意规模进行计算。Flink并没有依靠自身实现所有分布式系统需要解决的问题，而是在已有集群基础设施和服务之上专注于它的核心功能。

筑梦之路·2023-12-30 09:04

ZooKeeper集群脑裂问题处理，值得收藏！

脑裂通常会出现在集群环境中，比如Elasticsearch、ZooKeeper集群，而这些集群环境有一个统一的特点，就是它们有一个大脑，比如Elasticsearch集群中有Master节点，ZooKeeper

程序员白楠楠·2023-12-30 08:32

Kubeadmin实现k8s集群：

Kubeadmin来快速搭建一个k8s集群：二进制搭建适合大集群，50台以上的主机，但是kubeadm更适合中小企业的业务集群环境：Master：20.0.0.712核4G或者4核8GdockerkubeletkubectlflannelNode1

wutong0708·2023-12-29 06:15

OpenEular23.09（欧拉）操作系统为企业搭建独立的K8S集群环境，详细流程+截图

1.环境；win10，vmware16pro，openeular23.09集群模式：一主二从主机硬件配置主机名IP角色CPU内存硬盘k8s-master01192.168.91.100master4C4G40Gk8s-worker02192.168.91.101worker(node)4C4G40Gk8s-worker03192.168.91.102worker(node)4C4G40G2.ope

至尊宝♬·2023-12-29 01:15

『高级篇』docker之DockerSwarm调整微服务及服务配置（29）

原文链接地址：『高级篇』docker之DockerSwarm调整微服务及服务配置（29）上次已经搭建好了swarm的集群环境，server01，server02，server03三台虚拟机，每一台的manager

IT人故事会·2023-12-27 21:09

Redis分布式锁

单机环境下，我们常用synchronized或者Lock锁解决多线程并发访问产生的数据安全问题，但是如果是在集群环境，本地锁就会失效。为解决分布式场景下的并发问题，就需要用到分布式锁。

夜猫吃夜宵·2023-12-26 22:11

国产全链路监控工具Skywalking

首先是安装ES的集群环境，这里可以参照我之前的文章Es集群安装填坑记然后是

伦文聚·2023-12-26 16:01

[kubernetes]控制平面ETCD

什么是ETCDCoreOS基于Raft开发的分布式key-value存储，可用于服务发现、共享配置以及一致性保障（如数据库选主、分布式锁等）etcd像是专门为集群环境的服务发现和注册而设计，它提供了数据

一条闲鱼_mytube·2023-12-25 20:07

docker-compose搭建kafka单机集群环境

1.配置网络(复用已有网络)1.1创建docker虚拟网络#创建一个名为clickhouse的桥接(bridge)虚拟网络，网关172.26.0.1，网段为172.25.0.0dockernetworkcreate-dbridge--subnet=172.26.0.0/16--gateway=172.26.0.1clickhouse2.启停命令在docker-compose.yml路径下:构建开启

销毁first·2023-12-24 12:05

hadoop大数据学习笔记

一、Hadoop的作用本质来说hadoop的作用是在多计算机集群环境中营造一个统一而稳定的存储和计算环境，并能为其他分布式应用服务提供平台支持。

驰宇爱吃鱼·2023-12-24 08:53

搭建 ElasticSearch 集群环境

安装基础环境我们用虚拟机创建出3台机器，修改主机名为s1，s2和s3#打开如下文件vim/etc/sysconfig/network#重启机器reboot查看centos版本为7.9[root@s1~]#cat/etc/centos-releaseCentOSLinuxrelease7.9.2009(AltArch)下载相关命令yum-yinstallvim*yum-yinstallnet-too

Java识堂·2023-12-22 12:51

云原生系列1-Docker

1、虚拟机集群环境准备VirtualBox类似vmware的虚拟化软件，去官网https://www.virtualbox.org/下载最新版本免费的，VirtualBox中鼠标右ctrl加home跳出鼠标到

mpp__mvp·2023-12-22 07:45

镜像打包解压

使用场景在多集群环境下某一台机器的dockerbuild命令出现卡顿时，可以在其他机器上执行构建镜像命令后指定dockersave将镜像打包，然后复制文件到无法dockerbuild的机器上解压dockerload

快，把我桶也提着·2023-12-21 20:24

linux重新启动集群out,ZooKeeper集群搭建中Connection refused而导致的启动失败

1.前言每一次搭建集群环境都像一次战斗，作战中任何一个细节的出错都会导致严重的后果，所以搭建中所需要做的配置如系统配置、网络配置(防火墙记得关)、用户权限、文件权限还有配置文件等等内容，都必须非常仔细，

纳仁菜菜·2023-12-21 15:57

Zookeeper集群与kafka集群部署搭建

集群部署搭建Zookeeper概述Zookeeper定义Zookeeper工作机制Zookeeper特点Zookeeper数据结构Zookeeper应用场景Zookeeper选举机制部署Zookeeper集群环境配置搭建

搬着砖，敲着代码·2023-12-21 14:14

Docker+PXC+Haproxy搭建高可用MySQL集群

搭建本次搭建集群环境以5节点MySQL为例1、安装pxc镜像拉取pxc镜像dockerpullpercona/percona-xtradb-cluster镜像名称太长，修改一下：dockertagpercona

softshow1026·2023-12-21 14:16

Hadoop 集群环境搭建

目录第一部分：系统安装...31：图形化安装...32：选择中文...33：安装选项...34：软件选项...45：安装位置...46：网络配置...67：开始安装...78：创建用户...79：重启系统...710：登录测试...8第二部分：初始化设置...91：SSH远程登录...92：yum源更新...93：安装vim和wget.114：增加test用户权限...125：修改主机/tec/h

惊鸿若梦一书生·2023-12-21 08:17

Centos 7 搭建Docker环境

Centos7搭建Docker环境Docker简介产生背景开发和运维之间因为环境不同而导致的矛盾集群环境下每台机器部署相同的应用DevOps（DevelopmentandOperations）简介Docker

Somnus_小凯·2023-12-21 04:08

掌握实时数据流：使用Apache Flink消费Kafka数据

Flink设计旨在所有常见的集群环境中运行，以任意规模和内存级速度执行计算。----ApacheFlink官方文档流

昊昊该干饭了·2023-12-20 08:14

Spring Boot 2.x基础教程：使用Elastic Job实现定时任务

当在集群环境下的时候，如果任务的执行或操作依赖一些共享资源的话，就会存在竞争关系。如果不引入分布式锁等机制来做调度的话，就可能出现预料之外的执行结果。

程序猿DD·2023-12-20 05:47

ORA-01157、ORA-01110之集群环境建立asm数据文件错误到本地处理

文章目录前言一、背景环境介绍二、确认CDB信息以及本地数据文件位置1.CDB是否开启归档确定本地文件系统位置三、rman恢复数据文件确认数据文件FILE编号rmancopydatafilepdb下将数据文件offlineswitchdatafile&recoverdatafilepdb下将数据文件online删除本地文件四、结果确认附：其他处理方法-删库总结前言遇到好几次这样的问题，应用对Orac

DBA狗剩儿·2023-12-19 13:36

吊炸天的 Docker 图形化工具 Portainer，必须推荐给你

简介Portainer是一款轻量级的应用，它提供了图形化界面，用于方便地管理Docker环境，包括单机环境和集群环境。

开源前哨·2023-12-17 18:38

Centos环境安装MySQL5.7版本密码设置遇到的一些问题

前几天购买了一台阿里云服务器，安装了Centos，准备搭建MyCat的集群环境，然而在重设密码的时候遇到了一些问题，在此分享一下。

骨灰扬诺夫·2023-12-17 14:46

微服务实战系列之ZooKeeper（中）

揭秘ZooKeeperQ：集群一致性协同是如何进行的我们讲到分布式，一般是在集群环境下实现的。以ZooKeeper为例，它是如何保障集群环境下的成功运转呢？

ZHOU西口·2023-12-17 09:58

redis雪崩、穿透、击穿

redis集群环境时，我们可以把热点key分布到不同的分支节点上不设置缓存失效时间设置定时任务，定时刷缓存穿透：redis和数据库都没有这个数据，形成缓存穿透，通常是恶意访问对边缘数据的合法性进行校验，

衍余未了·2023-12-17 07:46

Docker入门

例如，在开发阶段，代码是运行在程序员的本地环境或测试环境中的;而在生产环境中，代码则被切换到集群环境或云平台上了。2.代码的依赖发生了变

伽洢·2023-12-17 05:28

如何通俗易懂的理解Redis分布式锁

那么如果在分布式的集群环境中，如何保证不同结点的线程同步执行呢？对于分布式场景，我们可以尝试用分布式锁。二、分布式锁的实现

张万森的救赎·2023-12-17 03:47

hadoop学习大纲

Hadoop集群环境搭建Hadoop集群环境搭建HDFS图说HDFS基本原理hadoop的shell命令操作javaapi操作HDFSHDFS之namenode管理元数据机制MapReduce初识MapReduceintelij

piziyang12138·2023-12-17 00:12

zookeeper伪分布式集群环境搭建

伪分布式集群就是在一台机器部署多个zk应用，部署之前服务器需要有jdk环境java-version可以显示相关java信息才可以进行zookeeper搭建，本文是基于macOs搭建，原文地址下载下载之后解压tar–zxvfzookeeper-3.4.6.tar.gz文件夹重命名mvzookeeper-3.4.6zookeeper配置step1进入zk中的conf目录下输入cpzoo-sample.

ajajaj·2023-12-16 00:19

Spark 随机森林算法原理、源码分析及案例实战

与其它大数据处理工具的活跃程度比较回页首环境要求操作系统：Linux，本文采用的Ubuntu10.04，大家可以根据自己的喜好使用自己擅长的Linux发行版Java与Scala版本：Scala2.10.4，Java1.7Spark集群环境

黑谷子·2023-12-15 19:51

K8s 入门指南（一）：单节点集群环境搭建

前言官方文档：Kubernetes文档|Kubernetes系统配置CentOS7.9（2核2G）本文为k8s入门指南专栏，将会使用kubeadm搭建单节点k8s集群，详细讲解环境搭建部署的细节，专栏后面章节会以实战代码介绍相关概念，带您快速入门k8s搭建方式k8s集群搭建有三种方式，目前主流的搭建k8s集群的方式有kubeadm、minikube，二进制包kubeadm是一个工具，用于快速搭建k

ReturnTmp·2023-12-15 17:48

RabbitMQ搭建集群环境、配置镜像集群、负载均衡

RabbitMQ集群搭建Linux安装RabbitMQ下载安装基本操作命令开启管理界面及配置RabbitMQ集群搭建确定rabbitmq安装目录启动第一个节点启动第二个节点停止命令创建集群查看集群集群管理RabbitMQ镜像集群配置启用HA策略创建一个镜像队列测试镜像队列负载均衡-HAProxy安装HAProxy配置haproxy启动HAProxy服务查看HAProxy监控Java代码连接MQ集群

CodeDevMaster·2023-12-15 02:30

部署Kubernetes（k8s）集群，可视化部署kuboard

centos7k8s-node1192.168.231.135工作节点2核4G,centos7k8s-node2192.168.231.136工作节点2核4G,centos7主节点CPU核数必须是≥2核且内存要求必须≥2G，否则k8s无法启动1.集群环境部署

.Sea of flowers·2023-12-14 20:06

Kubeadm 部署集群

目录1.1获取镜像1.2安装docker[集群]1.3阿里仓库下载[集群]1.4集群部署[集群]1.5集群环境配置[集群]1.6关闭系统Swap[集群]1.7安装Kubeadm包[集群]1.8配置启动kubelet

宇博士·2023-12-14 20:59

Windows环境搭建Redis主从哨兵模式

Windows搭建Redis集群——主从加哨兵模式文章目录Windows搭建Redis集群——主从加哨兵模式1.简介2.Redis主从和哨兵的简介3.集群环境搭建4.启动测试5.制造异常情况，验证哨兵是否起到作用

@Meto·2023-12-14 13:16

【K8S 系列】k8s 核心概念

无依赖关系，可以高效实现扩容、迁移缺点：不能存储数据，需要额外的数据服务支撑1.2.有状态（依赖本地服务器环境，需要数据迁移）代表服务：MySQL、Redis优点：可以独立存储数据，实现数据管理缺点：集群环境下需要实现主从

一只CV程序猿·2023-12-14 12:59

配置集群免密登录

文章目录前言配置集群免密登录1.设置主机名与IP地址的映射关系2.生成SSH密钥对3.将公钥复制到集群节点4.测试免密登录5.配置节点之间互相免密登录总结前言本文介绍了如何配置集群之间免密登录，以便在搭建集群环境时方便地进行节点之间的通信

大数据魔法师·2023-12-06 20:21

Mysql分布式集群部署---MySQL集群Cluster将数据分成多个片段，每个片段存储在不同的服务器上

1.1目的部署MysqlCluster集群环境1.2MySQL集群Cluster原理1数据分片MySQL集群Cluster将数据分成多个片段，每个片段存储在不同的服务器上。

qq_14910065·2023-12-06 09:41

微服务--一篇入门kubernets

Kubernetes1.Kubernetes介绍1.1应用部署方式演变1.2kubernetes简介1.3kubernetes组件1.4kubernetes概念2.kubernetes集群环境搭建2.1

爪蛙毁一生·2023-12-05 10:18

大数据--Flink--流处理(一)

Flink设计为在所有常见的集群环境中运行，以内存速度和任何规模执行计算。

bzxb1188·2023-12-05 05:48

二、使用Kubeadm搭建kubernetes集群环境

目前，生产环境部署k8s集群主要有两种方式：kubeadmKubeadm是一个K8s部署工具，提供kubeadminit和kubeadmjoin，用于快速部署Kubernetes集群。Kubeadm降低部署门槛，但屏蔽了部署细节。二进制包从github下载发行版的二进制包，手动部署每个组件，组成Kubernetes集群。手动部署起来比较麻烦。但是可以根据自己的需求自定义环境。1、环境准备节点IP地

jan29·2023-12-04 21:57

推荐频道

集群环境