集群调度系统第27页

kafka高可用集群搭建

kafka高可用集群搭建说明这篇博文主要是为了后面的elk做准备，我们这里搭建一个kafka集群，使用2个节点，还是前面的节点。主要是为了后面做数据缓冲。

憧憬blog·2024-02-05 09:40

Kafka基于Zookeeper搭建高可用集群实战

八五年的湘哥·2024-02-05 09:39

kafka 高可用副本配置指南

目录以实际情况为准可以进入kafka/bin里面，有kafka一般操作脚本kafka连接的zookeeper的地址在kafka/config/server.properties里面，执行脚本需要zk地址查询kafka集群有多少

黑虎堂堂主·2024-02-05 09:38

Docker搭建redis主从集群

一、介绍这篇文章主要介绍如何使用Docker在本机搭建一个带有主从复制功能的Redis环境，内容包括涉及的目录结构、docker-compose.yml的编写，以及结果的验证。二、目录结构介绍主要目录结构如下：image.png2.1配置redis节点信息redis-master.confbind127.0.0.1#启用保护模式#即在没有使用bind指令绑定具体地址时#或在没有设定密码时#Redi

_二师兄_·2024-02-05 09:05

Docker 搭建mysql 集群（二）

PXC方案很明显PXC方案在任何一个节点写入的数据都会同步到其他节点，数据双向同步的（在任何节点上都可以同时读写）创建MySQLPXC集群1安装PXC镜像dockerpullpercona/percona-xtradb-cluster

管理大亨·2024-02-05 09:36

docker搭建mysql集群

要求：一台装有centos7.6以上的服务器，docker安装完毕该方法是基于dockers搭建的mysql的主从集群，一主一从拉取mysql的镜像dockerpullmysql:8.0.25启动容器，

贪吃的程序猫·2024-02-05 09:32

docker搭建Mysql集群准备（一）

docker搭建Mysql集群准备Linux基本知识：修改机器IP，变成静态IPvim/etc/sysconfig/network-scripts/ifcfg-ens33文件TYPE=EthernetPROXY_METHOD

管理大亨·2024-02-05 09:01

【高速组网】ROCE和IB组网

在GPU集群,特别是在AI大规模场景下,对网络有大带宽和低延迟的需求,一般常用的以太网络无法满足,为了实现高速且可靠的数据传输,往往会采用IB或者ROCE组网架构来满足需求.ROCE和IB组网都可以在高性能计算和数据中心的应用中提供高带宽

沐风—云端行者·2024-02-05 08:15

Centos7安装原生Nginx并配置反向代理

一、背景当我的应用程序需要集群化部署之时，必然需要一个反向代理，当然Nginx的大名，这里不做更多的介绍了，这里介绍一下Nginx常用的四大阵营1Ngnix原生版本nginxnews2NginxPlus

风萧萧兮s·2024-02-05 08:07

nginix+openresty+redis+tomcat实现多级缓存

首先win中的nginx配置文件upstreamnginx-cluster{#nginx业务集群,redis集群,Tomcat集群;server192.168.216.169:8081;}server{

李武忠小迷哥·2024-02-05 08:35

k8s-深入理解Service(为Pod提供负载均衡和发现)

的定义和创建Pod与Service的关系Service的定义和创建三、Service使用NodePort对外暴露应用四种类型，常用的三种：指定Service的NodePort端口在实际生产中，k8s的集群不会直接暴露在公网中

milo.qu·2024-02-05 08:52

Docker&k8s集群安装

1创建三台虚拟机使用VMware创建三台虚拟机，分别是k8s-master01、k8s-node01、k8s-node02。使用下面命令下载ifconfig工具。yuminstallnet-tools输入ifconfig命令查看ip地址并记录。使用下面命令改hostname的值：(改为k8s-master01)另外两台改为相应的名字。hostnamectlset-hostnamek8s-maste

no-muggle·2024-02-05 08:34

2.0 Hadoop 运行环境

由于Hadoop是为集群设计的软件，所以我们在学习它的使用时难免会遇到在多台计算机上配置Hadoop的情况，这对于学习者来说会制造诸多障碍，主要有两个：昂贵的计算机集群。

二当家的素材网·2024-02-05 07:01

(十四)ATP应用测试平台——使用docker-compose一键式安装ATP应用测试平台的依赖服务

不过由于依赖的增多，项目的服务也随之多了起来，例如为了测试mysql的主从集群读写分离，需要安装mysql的主从服务器，为了测试redis的哨兵模式及分布式锁机制，需要安装一套redis集群，为了测试消息中间键

厉害哥哥吖·2024-02-05 07:06

1.0 Hadoop 教程

Hadoop为庞大的计算机集群提供可靠的、可伸缩的应用层计算和存储支持，它允许使用简单的编程模型跨计算机群集分布式处理大型数据集，并且支持在单台计算机到几千台计算机之间进行扩展。

二当家的素材网·2024-02-05 06:38

3.0 Hadoop 概念

Hadoop整体设计Hadoop框架是用于计算机集群大数据处理的框架，所以它必须是一个可以部署在多台计算机上的软件。部署了Hadoop软件的主机之间通过套接字(网络)进行通讯。

二当家的素材网·2024-02-05 06:38

Innodb_rows_inserted 陡增

通过监控发现，在一个MySQL集群(版本5.7)中，Innodb_rows_inserted指标飙升，而且是只在MySQL从库(slave或secondary)上这个指标异常，主库（master或primary

翔云123456·2024-02-05 06:03

2021年度总结

另一个是，新服务继续灰度，替代旧服务，覆盖所有线上集群。在起初推进的时候，比较顺利。等功能上线一段时间之后，还是发现了问题，在特殊场景下，会触发。一

翔云123456·2024-02-05 06:32

17、ELK

17、ELKhelm安装elkfk（kafka集群外可访问）ES/Kibanavalues-prod.yamlvalues-prod.yaml~/kibana/kibana-Ingress.yml~/kafka-yml

Linux云计算+运维开发·2024-02-05 06:29

SpringCloud 微服务 RuoYi-Cloud 部署文档（DevOps版）（2023-10-18） argo-rollouts + istio（金丝雀发布）（渐进式交付）

SpringCloud微服务RuoYi-Cloud部署文档（DevOps版）（2023-10-18）argo-rollouts+istio（金丝雀发布）（渐进式交付）基础集群组件0、k8s集群（k8s-

Linux云计算+运维开发·2024-02-05 06:58

0、k8s集群（k8s-1.29.1）

0、k8s集群（k8s-1.29.1）WeChat：Linux-LAMP（进qun）containerd-1.6.27+k8s-1.29.1（最新）（kubeadm方式）（containerd容器运行时版

Linux云计算+运维开发·2024-02-05 06:58

mysql集群主从复制1主多从 (一)

文章目录一、说明二、主从复制1.1、拉取mysql镜像1.2、参数说明1.3、修改配置文件(my.cnf)1.1.1、基本配置-编码1.1.2、添加主从复制部分配置1.1.3、重启2个mysql1.4、开启远程访问，在navicat连接1.1.1、开启远程访问1.1.2、连接navicat1.5、为master授权用户来他的同步数据1.6、配置slaver同步master1.7、主从同步配置完成三

suqinyi·2024-02-05 06:56

MySQL：MySQL的集群——主从复制的原理和配置

前言在实际生产环境中，如果对mysql数据库的读和写都在一台数据库服务器中操作，无论是在安全性、高可用性，还是高并发等各个方面都是不能满足实际需求的，一般要通过主从复制的方式来同步数据，再通过读写分离来提升数据库的并发负载能力。1、数据备份-热备份&容灾&高可用2、读写分离，支持更大的并发文章目录前言原理介绍问题配置常见错误原理介绍主从复制的流程：两个日志（binlog二进制日志&relaylog

_索伦·2024-02-05 06:25

如何升级linux内核

当我们搭建k8s集群时，出现k8s工作节点发生失联的状况，导致部分服务无法使用。出现这种问题很有可能就是因为kubernetes1.16与CentOS的内核3.10不兼容导致。

TheChainsmoker·2024-02-05 06:24

MySQL第九讲 MySQL集群主从搭建指定数据库同步数据

1、全库同步与部分同步之前提到，我们目前配置的主从同步是针对全库配置的，而实际环境中，一般并不需要针对全库做备份，而只需要对一些特别重要的库或者表来进行同步。那如何针对库和表做同步配置呢？首先在Master端：在my.cnf中，可以通过以下这些属性指定需要针对哪些库或者哪些表记录binlog#需要同步的二进制数据库名binlog-do-db=testdemo#只保留7天的二进制日志，以防磁盘被日志

程序员路同学·2024-02-05 06:53

MySQL集群 1主1从主从复制（原理及配置命令）

今天分享一期MySQL集群方案：主从集群也是最常用的一种CSDN成就一亿技术人！

神秘泣男子·2024-02-05 06:51

Flink实时流计算入门系列——广播变量使用

总是被项目经理问：为什么你的Flink代码占用我这么多的集群资源啊？

晨冉1688·2024-02-05 06:19

ORACLE RAC节点关机之后，service没有漂移到备用的节点

环境说明：oracle11gr2，rhellinux状况描述：使用crs_statstopcrs停掉集群组件时，运行在当前节点上的service没有漂移到备用节点上,导致数据库无法访问。

xiongshuiling·2024-02-05 06:11

elasticsearch设置密码认证

说明：1）安全要求开启密码认证访问2）es集群和单点设置密码认证有区别3）es重新设置elastic密码有两种方法4）请注意es版本以及操作步骤【elasticsearch单点设置密码认证】第一、单点es

枫叶20214·2024-02-05 06:00

Nacos 集群

Nacos集群搭建1.集群结构图官方给出的Nacos集群图：其中包含3个nacos节点，然后一个负载均衡器代理3个Nacos。这里负载均衡器可以使用nginx。

漠丶小翁·2024-02-05 04:12

在docker下搭建MySQL MHA集群

环境Docker+Cnetos7+Mysql8.0用Docker拉取centos镜像并创建容器dockersearchcentosdockerpulldocker.io/centosdockerrun-idt--namecentos-v/home/dk/tmp:/mnt--privileged=truedocker.io/centos=============此处-v是挂载一个临时目录,方便宿主机

三十岁老大爷·2024-02-05 04:53

Mysql之浅析AUTO_INCREMENT

AUTO_INCREMENT用于为表中的列设置一个自增序列，在非集群模式下，用它来为主键列自动生成值是一件很方便的事。

穹柏·2024-02-05 04:46

全局唯一ID优缺点总结

❤️文章目录全局唯一ID（分布式ID）1、UUID2、数据库自增ID3、数据库集群模式ID4、Redis自增ID5、雪花算法（SnowFlake）全局唯一ID（分布式ID）1、

欧克小奥·2024-02-05 02:40

Karpenter 实战指南

介绍Karpenter是一个用于Kubernetes集群的弹性伸缩工具，能够自动调整节点数量，适用于多种场景。本指南将详细介绍如何在实际应用中安装、配置和使用Karpenter，并探讨一些最佳实践。

ivwdcwso·2024-02-05 01:26

【读红宝书（一）】背景知识

HDFS集群（目前大多数企业已经投资并希望找到对他们有用的东西）的合理使用是作为已摄取的数据文件队列。随着时间的推移，企业将找出哪些值得花精力清理。因此，数

三半俊秀·2024-02-04 23:41

Zookeeper相关面试准备问题

Zookeeper特点集群中只要有半数以上节点存活，Zookeeper集群就能正常提供服务。所以这就是选举机制的奇数原则

大数据左右手·2024-02-04 22:52

达梦数据库常用sql查询

提前预知以下sql查询皆为dm8版本一、常用的数据库信息sql查询1、数据库相关信息a、查询实例SELECT'实例名称'数据库选项,INSTANCE_NAME数据库集群相关参数值FROMv$instanceunionallSELECT

沃金z·2024-02-04 22:20

Flink1.18.0集成Yarn-session模式部署

上次部署了Hadoop集群Hadoop3.3.6（HDFS、YARN、MapReduce）完全分布式集群安装搭建这次集成下flinkYARN上部署的过程是：客户端把Flink应用提交给Yarn的ResourceManager

china-zhz·2024-02-04 21:34

Hadoop3.3.6（HDFS、YARN、MapReduce）完全分布式集群安装搭建

、下载软件三、基础设施1、安装必要插件2、设置IP及主机名3、时间同步4、jdk安装5、ssh免密登录四、Hadoop部署1、目录及环境变量准备2、安装3、修改配置文件4、分发文件5、启动hadoop集群

china-zhz·2024-02-04 21:33

IDC和云计算是一样的吗?

它是用来存放服务器的地方，也就是实体服务器的集群。它为ICP、企业、媒体和各类网站提供大规模、高质量、安全可靠的专业化服务器托管、空间租用、网络批发带宽以及ASP、EC等业务。

牛二狗·2024-02-04 21:50

hive小文件合并问题

将运算好的数据写回hdfs（比如insertinto语句），有时候会产生大量的小文件，如果不采用CombineHiveInputFormat就对这些小文件进行操作的话会产生大量的maptask，耗费大量集群资源

DuLaGong·2024-02-04 20:16

Docker进阶篇-轻量级可视化工具Portainer

一、简介Portainer是一款轻量级的应用，它提供了图形化界面，用于方便地管理Docker环境，包括单机环境和集群环境。Portainer分为开源社区版（CE版）和商用版（BE版/EE版）。

陪我养猪吧·2024-02-04 20:57

k8s存储之PV、PVC

在k8s集群中，资源存储会散落到各个工作节点上，这样对用资源调用很不方便，那么k8s是如何实现存储资源共享的呢，本文浅尝辄止的探讨一下，k8s是通过pv、pvc实现的。

fengchengwu2012·2024-02-04 20:24

Docker进阶篇-compose容器编排

一、描述Docker-Compose是Docker官方的开源项目，负责实现对Docker容器集群的快速编排。

陪我养猪吧·2024-02-04 20:23

26.云原生ArgoCD高级之ApplicationSet

云原生专栏大纲文章目录ApplicationSet介绍ApplicationSet特性ApplicationSet安装ApplicationSet工作原理ApplicationSet生成器列表类型生成器集群生成器基础使用方法

野心与梦·2024-02-04 20:42

Hadoop集群搭建

搭建Hadoop集群涉及多个步骤，包括准备硬件环境、安装和配置Hadoop以及验证集群的安装。

终将老去的穷苦程序员·2024-02-04 19:53

终于理清楚了，k8s服务流转

、LoadBalancer、Headless(None)必须了解↓↓↓↓↓↓1.ClusterIP是什么配置服务的会话亲和性服务发现2.就绪探针(readinessProbe)3.headless连接集群外部服务的方式

记忆机器·2024-02-04 19:59

45.使用Sentry授权—Kudu

45.1演示环境CDH5.11.2和CDH5.13两个集群运行正常两个集群Kudu已经安装，且已集成Impala，操作正常两个集群都已启用Sentry并且配置正确CDH5.11.2和CDH5.13集群用

大勇任卷舒·2024-02-04 18:30

nfs服务部署搭建

NFS主要功能是通过局域网络让不同的主机系统之间可以共享文件或目录NFS系统和Windows网络共享、网络驱动器类似,只不过windows用于局域网,NF用于企业集群架构中,如果是大型网站,

Red丶哞·2024-02-04 18:08

云原生工具集 · 彩色输出kubectl内容

背景kubectl命令是k8s的CLI工具，如果你是维护K8s集群的管理员或者是开发可在Kubernetes上运行的应用程序的开发人员，那几乎每天都会使用kubectl，但是尽管kubectl已经很好，

云原生生态圈·2024-02-04 18:57

推荐频道

集群调度系统