E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
高可用;集群;RHCS
Nacos配置管理(手把手教你搭建Nacos
集群
)
Nacos配置管理统一配置管理以上把某些配置放到了nacos中,那微服务应该如何从nacos中获取配置呢?去哪读取?–bootstrap.yml读取谁?-读nacos地址注意:与nacos地址和nacos配置文件有关的内容均放在bootstrap.yml中操作如下1.在服务(这里选userservice)的pom文件中引入Nacos的配置管理客户端依赖:com.alibaba.cloudsprin
程序员老周666
·
2024-02-05 13:21
微服务
云原生
服务发现
java
spring
cloud
后端
spring
虚拟机中配置centos静态IP地址
平时测试的时候,不管是使用Redis的的
集群
服务还是使用mysql的主从服务,还是连接centos,都会出现ip地址不断地变化的情况,导致需要重新配置,非常的不方便。
雾林小妖
·
2024-02-05 13:10
Linux
配置静态IP
虚拟机配置静态IP
centos配置静态IP
6.Linux虚拟机下的Hadoop
集群
搭建之完全分布式配置
linux-x64本案例软件包:链接:https://pan.baidu.com/s/1ighxbTNAWqobGpsX0qkD8w提取码:lkjh(若链接失效在下面评论,我会及时更新)一、配置Hadoop
集群
主节点
学习BigData
·
2024-02-05 13:01
关于Hadoop的学习笔记
hadoop
分布式
linux
Hadoop一键启动脚本编写
一、问题描述针对Hadoop
集群
使用start-dfs.shstart-yarn.sh进程无法全部启动,但是使用单独启动命令可以启动的问题进行解决。
学习BigData
·
2024-02-05 13:01
关于Hadoop的学习笔记
linux
hadoop
4.Linux虚拟机下的Hadoop
集群
搭建之Xshell及Xftp的使用和SSH服务配置
Hadoop及相关组件搭建指导WeChat:h19396218469本案例软件包:链接:https://pan.baidu.com/s/1ighxbTNAWqobGpsX0qkD8w提取码:lkjh(若链接失效在下面评论,我会及时更新)一、Xshell和Xftp的使用在这里我们首先要了解两个软件,一个是Xshell另一个是Xftp。1.Xshell是一个强大的安全终端模拟软件,它支持SSH1,SS
学习BigData
·
2024-02-05 13:31
关于Hadoop的学习笔记
linux
hadoop
ssh
深入探索Elasticsearch数据写入黑箱
Elasticsearch数据写入涉及多个步骤过程,以此来确保数据能够高效、安全地存储在
集群
中。本文将带你探索Elasticsearch对数据的操作流程。
超越不平凡
·
2024-02-05 12:58
elasticsearch
大数据
搜索引擎
es数据操作
ES
高可用
架构涉及常用功能整理
ES
高可用
架构涉及常用功能整理1.es的
高可用
系统架构和相关组件2.es的核心参数2.1常规配置2.2特殊优化配置2.2.1数据分片按ip打散2.2.2数据分片机架感知2.2.3强制要求数据分片机架感知
李姓门徒
·
2024-02-05 11:18
Es
大数据
中间件
elasticsearch
架构
大数据
Elasticsearch(二)
在一个
集群
中,可以定义任意多的索引。能搜索的数据必须索引,这样的好处是可以提高查询速度,比如:新华字典
蒋一清
·
2024-02-05 11:16
搜索引擎
elasticsearch
搜索引擎
java
后端
[Hadoop]万字长文Hadoop相关优化和问题排查总结
心跳并发配置开启回收站配置datanode的优化hdfs调优hadoop的优化YARN的优化HDFS调优的基本原则HDFS调优的常用参数排查哪个任务的cpu占用高hdfs查询慢的原因怎样判断是否是数据倾斜
集群
重启任务自动重启
王一1995
·
2024-02-05 10:55
hadoop
jvm
java
Docker 第十二章 : Docker 三剑客之 Swarm (节点管理命令)
Swarm是Docker
集群
管理工具,允许用户轻松部署和管理容器化的应用程序。通过节点管理和命令,用户可以配置Swarm
集群
,包括添加、删除和更新节点,以及执行其他与Swarm相关的操作。
半部论语
·
2024-02-05 10:23
DevOps云原生实践
docker
容器
运维
云原生
Hadoop3.x单机安装教程
以最小化的成本学习和测试Hadoop;搭建基于Hadoop的上层应用,比如单机Spark环境需要先拥有单机的Hadoop;如果需要搭建分布式
集群
环境的Hadoop环境,请参考另外一篇:Hadoop3.x
文景大大
·
2024-02-05 10:06
【Redis】理论基础 - 主从复制
主从复制基础概念1)什么是主从复制2)主从节点的角色2.配置主从复制1)主节点配置2)从节点配置3.启动主从复制4.检查主从关系5.主从复制的管理1)断线重连2)复制偏移量结语Redis的复制机制是保障数据
高可用
性和冗余的关键组成部分
好久不见的流星
·
2024-02-05 10:20
Reids
redis
数据库
缓存
【Redis】理论基础 - 分区策略
通过分区,我们可以将数据分散存储在多个Redis实例中,充分利用
集群
的计算和存储资源。本篇博客将介绍Redis的分区策略以及如何水平扩展Redis。
好久不见的流星
·
2024-02-05 10:20
Reids
redis
数据库
缓存
微服务入门篇:Nacos注册中心(Nacos安装,快速入门,多级存储,负载均衡,环境隔离,配置管理,热更新,
集群
搭建,nginx反向代理)
目录1.Nacos安装1.官网下载2.解压到本地3.启动nacos2.Nacos快速入门1.在父工程中导入nacos依赖2.给子项目添加客户端依赖3.修改对应服务的配置文件4.启动服务,查看nacos发现情况3.Nacos服务多级存储模型4.NacosRule负载均衡5.服务实例的权重设置6.环境隔离(namespace)7.Nacos和Eureka的对比1.临时实例和非临时实例2.Nacos与e
JungleiRim
·
2024-02-05 10:39
微服务学习
微服务
负载均衡
架构
架构篇33:传统的可扩展架构模式-分层架构和SOA
文章目录分层架构SOA小结相比于高性能、
高可用
架构模式在最近几十年的迅猛发展来说,可扩展架构模式的发展可以说是步履蹒跚,最近几年火热的微服务模式算是可扩展模式发展历史中为数不多的亮点,但这也导致了现在谈可扩展的时候必谈微服务
星猿杂谈
·
2024-02-05 10:32
软件架构
架构
云数据库RDS云监控
云数据库RDS是一种在线关系型数据库服务,它具备的特点包括:安全可靠:提供了容灾、备份、恢复等
高可用
性功能,确保数据的安全与可靠。
编织幻境的妖
·
2024-02-05 09:08
数据库
Flink生产环境常见问题及解决方法
故障转移和
高可用
性Flink提供了故障转移和
高可用
性机制,但在配置和使用时可能会遇到问题。如果任务无法从故障节点恢复或无法正确进行故障转移。
咕噜签名分发
·
2024-02-05 09:34
flink
大数据
CDH添加新节点小记
最近
集群
有个节点挂掉了,在修复以后,重新作为新节点加入到
集群
中。
sx_1706
·
2024-02-05 09:59
大数据
大数据
在 CDH 中调优 Apache Hive on Spark
本主题假设您的
集群
由ClouderaManager管理,并且您使用YARN作为Spark
集群
管理器。以下部分中描述的
海阔天空&沫语
·
2024-02-05 09:27
大数据/架构
hive
hadoop
spark
CDH6.3.2 多 Spark 版本共存
opt/cloudera/parcels/CDH/libcd/opt/cloudera/parcels/CDH/libmvspark-3.3.1-bin-3.0.0-cdh6.3.2/spark3将CDH
集群
的
大数据AI
·
2024-02-05 09:56
大数据从入门到精通
spark
cdh
第二讲《k8s资源介绍:Namespace与Pod 》
一、namespace介绍1.概念在Kubernetes中,命名空间(Namespace)提供一种机制,将同一
集群
中的资源划分为相互隔离的组。
风向决定发型丶
·
2024-02-05 09:48
k8s专题分享
kubernetes
docker
容器
(译)Kubernetes 如何控制你的
集群
原文地址:https://hackernoon.com/level-triggering-and-reconciliation-in-kubernetes-1f17fe30333dkubernetes是到目前为止最流行的容器编排系统,它的成功主要源自于它的稳定性。所有的软件都会有bug,但在容器编排领域,kubernetes比它的其他竞争者更可靠。kubernetes不管怎么样,最终都会达到并且一
bebc
·
2024-02-05 09:47
k8s
docker
kubernetes
云原生
容器
k8s笔记4--k8s基础概念
k8s基础概念1k8s概述2功能特性3核心组件4资源对象4.1pod概述4.2deployment概述4.3service4.4Ingress介绍5说明1k8s概述Kubernetes是谷歌开源的容器
集群
管理系统
昕光xg
·
2024-02-05 09:17
K8S
&
Docker
kubernetes
k8s核心组件
k8s资源对象
k8s
微服务
k8s分享下-service 网络 卷
因为直接通过pod的IP+port获取服务存在如下两个问题:1)调用地址不稳定,pod可能出现故障,那么新的pod产生的IP和port都会发生变化2)
集群
(多pod实例)场景无法自动实现负载均衡service
深山猿
·
2024-02-05 09:45
k8s
网络
kubernetes
docker
【Kafka面试】Kafka的
高可用
机制有了解吗?
一、
集群
模式Kafka
集群
由多个broker组成,每个broker就是Kafka实例。假如某个broker宕机,在
集群
中其他的broker依然可以对外提供服务,这个就是
集群
能够保证
高可用
性。
TAIKEMAN
·
2024-02-05 09:44
Kafka
kafka
kafka副本
高可用
机制
Kafka的每个topic都可以分为多个Partition,并且多个partition会均匀分布在
集群
的各个节点下。
catch that elf
·
2024-02-05 09:44
kafka
kafka副本机制
kafka
kafka副本
数据同步
kafka
高可用
(
集群
)
kafka的分布式和
高可用
kafka的一个基本架构:多个broker组成,一个broker是一个节点;你创建一个topic,这个topic可以划分成多个partition,每个parttition可以存在于不同的
GoslingWu
·
2024-02-05 09:13
队列
分布式
kafka
zookeeper
rabbitmq
消息队列三|Kafka 如何做到
高可用
?
我们在之前的文章中,聊到了redis的
高可用
机制。本篇文章中我们聊聊Kafka如何做到
高可用
副本?说到Kafka的
高可用
保障,自然都会想到副本。什么是副本呢?
不落叶的榕树
·
2024-02-05 09:11
消息队列
java
消息队列
高并发
Kafka
高可用
性原理
一、Kafka副本基本概念Kafka通过多副本机制实现故障自动转移,Kafka副本一些基本概念:副本是针对分区而言的,即副本是分区的副本一个分区有一个leader副本,多个follower副本,只有leader副本对外提供服务,follower副本只负责数据同步分区所有副本统称AR,ISR指与leader副本保持同步状态的副本集合LEO标识每个分区最后一条消息的下一个位置,ISR中最小的LEO为H
wanger61
·
2024-02-05 09:11
Kafka
kafka
java
分布式
kafka
高可用
集群
搭建
kafka
高可用
集群
搭建说明这篇博文主要是为了后面的elk做准备,我们这里搭建一个kafka
集群
,使用2个节点,还是前面的节点。主要是为了后面做数据缓冲。
憧憬blog
·
2024-02-05 09:40
分布式
kafka
java
zookeeper
linux
Kafka基于Zookeeper搭建
高可用
集群
实战
目录1、前言1.1
高可用
的由来1.2相关术语2、架构图3、发送消息流程4、部署kafka&zookeeper
集群
4.1准备工作4.2启动zookeeper
集群
4.3启动kafka
集群
4.4测试5、kafka
八五年的湘哥
·
2024-02-05 09:39
#
Kafka
zookeeper
分布式
kafka
java
Kafka
高可用
一.安装kafkakafka官网:http://kafka.apache.org/1.Docker安装zookeeperKafka对于zookeeper是强依赖,保存kafka相关的节点数据,所以安装Kafka之前必须先安装zookeeper下载镜像:dockerpullzookeeper:3.4.14创建容器dockerrun-itd--namezookeeper-p2181:2181zooke
愛沢かりん
·
2024-02-05 09:08
spring
分布式
Kafka
高可用
原理
因为一次Kafka宕机,我明白了Kafka
高可用
原理!转载一篇kafka
高可用
原理文章。
dmlcq
·
2024-02-05 09:08
大数据
kafka
Kafka原理解析(二):
高可用
、高性能机制
目录1、
高可用
机制1.2、
高可用
保障机制1.2.1、消息备份机制1.2.2、ISR1.2.2.1、分区Leader副本的选举1.2.3、消息应答确认机制1.2.4、LEO和HW1.3、故障恢复机制1.3.1
爱看雲的雲
·
2024-02-05 09:38
中间件
kafka
kafka
高可用
副本配置指南
kafka
高可用
副本配置指南前言因测试环境kafka故障致内部业务异常故写一份配置指南操作以下配置及操作kafka目录以实际情况为准可以进入kafka/bin里面,有kafka一般操作脚本kafka连接的
黑虎堂堂主
·
2024-02-05 09:38
花非花
java
kafka
Kafka的
高可用
机制
ApacheKafka是一个分布式流处理平台,它通过复制数据和分布式系统的一系列特性来提供
高可用
性。以下是Kafka
高可用
性机制的关键方面,以及它们是如何在源码中实现的。
辞暮尔尔-烟火年年
·
2024-02-05 09:37
微服务
消息中间件
kafka
分布式
Docker搭建redis主从
集群
一、介绍这篇文章主要介绍如何使用Docker在本机搭建一个带有主从复制功能的Redis环境,内容包括涉及的目录结构、docker-compose.yml的编写,以及结果的验证。二、目录结构介绍主要目录结构如下:image.png2.1配置redis节点信息redis-master.confbind127.0.0.1#启用保护模式#即在没有使用bind指令绑定具体地址时#或在没有设定密码时#Redi
_二师兄_
·
2024-02-05 09:05
Docker 搭建mysql
集群
(二)
PXC方案很明显PXC方案在任何一个节点写入的数据都会同步到其他节点,数据双向同步的(在任何节点上都可以同时读写)创建MySQLPXC
集群
1安装PXC镜像dockerpullpercona/percona-xtradb-cluster
管理大亨
·
2024-02-05 09:36
docker
mysql
容器
docker搭建mysql
集群
要求:一台装有centos7.6以上的服务器,docker安装完毕该方法是基于dockers搭建的mysql的主从
集群
,一主一从拉取mysql的镜像dockerpullmysql:8.0.25启动容器,
贪吃的程序猫
·
2024-02-05 09:32
docker
mysql
docker搭建Mysql
集群
准备(一)
docker搭建Mysql
集群
准备Linux基本知识:修改机器IP,变成静态IPvim/etc/sysconfig/network-scripts/ifcfg-ens33文件TYPE=EthernetPROXY_METHOD
管理大亨
·
2024-02-05 09:01
eureka
云原生
【高速组网】ROCE和IB组网
在GPU
集群
,特别是在AI大规模场景下,对网络有大带宽和低延迟的需求,一般常用的以太网络无法满足,为了实现高速且可靠的数据传输,往往会采用IB或者ROCE组网架构来满足需求.ROCE和IB组网都可以在高性能计算和数据中心的应用中提供高带宽
沐风—云端行者
·
2024-02-05 08:15
云计算架构
云计算
信息与通信
83.如何设计
高可用
系统
文章目录一、简介二、导致系统不可用的常见原因三、
高可用
系统设计基本原则四、容错性设计五、弹性伸缩六、可观测七、安全防护设计八、自动化一、简介什么是
高可用
高可用
是指系统在面对各种故障和异常情况时,仍能够提供稳定
百里守约学编程
·
2024-02-05 08:42
go
golang
后端
85.如何设计高并发系统(缓存、限流、熔断、降级)
高并发应对策略四:缓存1、浏览器缓存2、客户端缓存3、CDN缓存4、反向代理缓存5、本地缓存6、分布式缓存7、缓存问题8、缓存一致性9、其他五、限流六、降级七、小结一:简介软件系统有三个追求:高性能、高并发、
高可用
百里守约学编程
·
2024-02-05 08:40
go
缓存
并发
Centos7安装原生Nginx并配置反向代理
一、背景当我的应用程序需要
集群
化部署之时,必然需要一个反向代理,当然Nginx的大名,这里不做更多的介绍了,这里介绍一下Nginx常用的四大阵营1Ngnix原生版本nginxnews2NginxPlus
风萧萧兮s
·
2024-02-05 08:07
Nginx
nginx
运维
nginix+openresty+redis+tomcat实现多级缓存
首先win中的nginx配置文件upstreamnginx-cluster{#nginx业务
集群
,redis
集群
,Tomcat
集群
;server192.168.216.169:8081;}server{
李武忠小迷哥
·
2024-02-05 08:35
redis
nginx
缓存
k8s-深入理解Service(为Pod提供负载均衡和发现)
的定义和创建Pod与Service的关系Service的定义和创建三、Service使用NodePort对外暴露应用四种类型,常用的三种:指定Service的NodePort端口在实际生产中,k8s的
集群
不会直接暴露在公网中
milo.qu
·
2024-02-05 08:52
k8s
kubernetes
容器
云原生
Docker&k8s
集群
安装
1创建三台虚拟机使用VMware创建三台虚拟机,分别是k8s-master01、k8s-node01、k8s-node02。使用下面命令下载ifconfig工具。yuminstallnet-tools输入ifconfig命令查看ip地址并记录。使用下面命令改hostname的值:(改为k8s-master01)另外两台改为相应的名字。hostnamectlset-hostnamek8s-maste
no-muggle
·
2024-02-05 08:34
docker
云计算
2.0 Hadoop 运行环境
由于Hadoop是为
集群
设计的软件,所以我们在学习它的使用时难免会遇到在多台计算机上配置Hadoop的情况,这对于学习者来说会制造诸多障碍,主要有两个:昂贵的计算机
集群
。
二当家的素材网
·
2024-02-05 07:01
Hadoop
教程
hadoop
大数据
分布式
(十四)ATP应用测试平台——使用docker-compose一键式安装ATP应用测试平台的依赖服务
不过由于依赖的增多,项目的服务也随之多了起来,例如为了测试mysql的主从
集群
读写分离,需要安装mysql的主从服务器,为了测试redis的哨兵模式及分布式锁机制,需要安装一套redis
集群
,为了测试消息中间键
厉害哥哥吖
·
2024-02-05 07:06
#
docker
JAVA
ATP应用测试平台
java
docker
容器
1.0 Hadoop 教程
Hadoop为庞大的计算机
集群
提供可靠的、可伸缩的应用层计算和存储支持,它允许使用简单的编程模型跨计算机群集分布式处理大型数据集,并且支持在单台计算机到几千台计算机之间进行扩展。
二当家的素材网
·
2024-02-05 06:38
Hadoop
教程
hadoop
大数据
分布式
上一页
27
28
29
30
31
32
33
34
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他