E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Cassandra集群
使用Spring Boot集成中间件:Kafka的高级使用案例讲解
1.准备工作在开始之前,我们需要确保已经完成以下准备工作:安装并启动Kafka
集群
创建Kafka主题(Topic)用于消息的发布与订阅
KingDol_MIni
·
2024-01-15 06:33
springboot
前后端技术
java
spring
boot
后端
Kafka
KAFKAkafka
集群
brokerkafka
集群
运行后,每台服务器上的kafka称为一个broker节点处理消费者和生成者的请求生产者需要保存数据到kafka,就需要请求broker消费者需要从kafka
中长跑路上crush
·
2024-01-15 06:02
Spark阶段
kafka
分布式
Mac M1 Parallels CentOS7.9 Rancher + K8S + Gitlab + Jenkins +Harbor CICD
k8s+rancher高可用部署:https://blog.csdn.net/qq_41594280/article/details/135312148rancher10.211.55.200管理K8S
集群
只年
·
2024-01-15 06:54
macos
rancher
kubernetes
【数据库
集群
】之一主一从
目录一、mysql
集群
概念二、mysql
集群
环境配置实验1、全新的服务器安装全新的数据库(可以在vm中克隆比较快,克隆的服务器要没有安装好数据库,实验环境:mysql80)2、配置域名解析3、一主一从服务器的配置
对熬夜say no
·
2024-01-15 06:20
数据库
k8s实战从入门到上天系列第一篇:K8s微服务实战内容开篇介绍
第一章:开源ruoyi微服务简介基本使用第二章:k8s基本知识回顾、k3s
集群
搭建和基本使用第三章:微服务镜像构建第四章:中间件镜像构建第五章:微服务前后端部署第六章:基于SLB以及Trasfik访问第七章
岁岁种桃花儿
·
2024-01-15 05:32
#
docker和k8s
kubernetes
微服务
容器
docker
初始化K8S
集群
文章目录使用介绍环境介绍一、刚开始搭建k8s
集群
时重新初始化(node节点还未添加)二、K8S搭建完毕后重新初始化使用介绍当刚开始搭建k8s
集群
报错(端口/数据已经生成)或k8s
集群
正在使用时遇到了不可修复的问题需要初始化
集群
时可以使用
折言阿
·
2024-01-15 04:10
k8s
kubernetes
docker
容器
k8s
集群
reset恢复重置
一、概述因k8s
集群
故障,无法恢复,所以进行重置k8s
集群
。
菜鸟小窝
·
2024-01-15 04:10
k8s
kubernetes
集群重置
kubeadm
reset
K8S
集群
重新初始化--详细过程
K8S
集群
重新初始化0、当前环境1、master节点1.1、在master节点执行下面reset命令:1.2、手动清除配置信息,这一步很关键:1.3、重新引导
集群
1.4、创建配置目录,并复制权限配置文件到用户目录下
hhzz
·
2024-01-15 04:09
容器技术
Docker+K8S
kubernetes
容器
云原生
请注意,你的 Pulsar
集群
可能有删除数据的风险
在上一篇Pulsar3.0新功能介绍中提到,在升级到3.0的过程中碰到一个致命的问题,就是升级之后topic被删除了。正好最近社区也补充了相关细节,本次也接着这个机会再次复盘一下,毕竟这是一个非常致命的Bug。现象先来回顾下当时的情况:升级当晚没有出现啥问题,各个流量指标、生产者、消费者数量都是在正常范围内波动。事后才知道,因为只是删除了很少一部分的topic,所以从监控中反应不出来。早上上班后陆
crossoverJie
·
2024-01-15 04:34
Zookeeper
集群
+ Kafka
集群
Zookeeper概述//Zookeeper定义Zookeeper是一个开源的分布式的,为分布式框架提供协调服务的Apache项目。//Zookeeper工作机制Zookeeper从设计模式角度来理解:是一个基于观察者模式设计的分布式服务管理框架,它负责存储和管理大家都关心的数据,然后接受观察者的注册,一旦这些数据的状态发生变化,Zookeeper就将负责通知已经在Zookeeper上注册的那些观
陆墨宁
·
2024-01-15 03:43
云计算课程学习
zookeeper
kafka
分布式
弹性分布式数据集(RDD)
概要为了能解决在大规模的
集群
中以一种容错的方式进行内存计算这个问题,我们提出了RDDs的概念.当前的很多框架对迭代式算法场景与交互性数据挖掘场景的处理性能非常差,这个是RDDs的提出的动机.如果能将数据保存在内存中
盗梦者_56f2
·
2024-01-15 03:14
P-1第1章 课程介绍与前置项目回顾
内容1-1课程导学--------二期课程主线:Tomcat
集群
、Nginx负载均衡、Redis分布式一期的项目架构如下:(单服务架构)二期会演进为Tomcat架构:然而往往想当然的以为是这样:(如下图错误示例
牧然御风者
·
2024-01-15 03:36
Kubernetes中的Pod
容器编排容器编排(ContainerOrchestration)是指在计算机
集群
上管理和自动化容器化应用程序的部署、操作和扩展的过程。
AnyaPapa
·
2024-01-15 01:11
kubernetes
容器
云原生
Spring Cloud(Greenwich版)-03-编写高可用Eureka Server(
集群
)
编写高可用EurekaServer(
集群
)前言上一章SpringCloud(Greenwich版)-02-服务注册与服务发现-Eureka入门,我们实现了将User和Goods微服务都注册到了Eureka
IT实战联盟Lin
·
2024-01-15 01:21
linux—多服务免密登录
文档结构概念简介配置操作概念简介配置操作场景:在部署gp
集群
时,希望master节点可以使用gpadmin用户可以实现免密登录slave1和slave2节点;step_1:IP映射xx.xx.xx.101server-slave1xx.xx.xx
蓝魔Y
·
2024-01-15 01:16
操作系统
Linux
linux
免密登录
ceph
集群
扩容
1.确定要扩容的节点2.
集群
创建前检查检查IP,且ping一下
集群
中的其他节点clusternetworkIP,看是否能ping通pingmon修改主机的/etc/hosts文件,并添加所有节点信息检查防火墙是否关闭
大 大金
·
2024-01-15 01:44
ceph
服务器
HADOOP大数据之HDFS管理与运维
一、HDFS数据迁移解决方案HDFS分布式拷贝工具DistCp数据迁移使用场景:冷热
集群
数据同步、分类存储
集群
数据整体搬迁数据的准实时同步数据迁移要素考量带宽性能是否支持增量同步4、数据迁移的同步性image.pngDistCp
奋斗的韭菜汪
·
2024-01-15 01:33
Kubernetes(二) - 使用Rancher部署K8S
集群
(搭建Rancher)
众所周知Kubernetres虽然很好但是安装部署很复杂,Rancher功能很强大,我们这里仅仅使用Rancher来搭建管理Kubernetes
集群
Kubernetes官方文档:https://kubernetes.io
文振熙
·
2024-01-15 00:41
【大数据进阶第三阶段之Hue学习笔记】Hue简介和架构介绍
通过使用Hue我们可以在浏览器端的Web控制台上与Hadoop
集群
进行交互来分析处理数据,例如操作HDFS上的数据、运行MapReduceJob、执行Hive的SQL语句
Allen_lixl
·
2024-01-15 00:56
大数据
Hue
大数据
学习
笔记
hadoop
hue
分布式链路追踪专栏,分布式链路追踪:Skywalking
集群
管理设计
SkyWalking是一个开源APM系统,包括针对CloudNative体系结构中的分布式系统的监视,跟踪,诊断功能。核心功能如下:服务、服务实例、端点指标分析;根本原因分析,在运行时分析代码;服务拓扑图分析;服务,服务实例和端点依赖性分析;检测到慢速服务和端点;性能优化;分布式跟踪和上下文传播;数据库访问指标。检测慢速数据库访问语句(包括SQL语句);报警。SkyWalking目前是Apache
架构随笔录
·
2024-01-14 23:26
分布式链路追踪
分布式
skywalking
spring
cloud
alibaba
微服务
架构
云原生
java
Hadoop之mapreduce参数大全-6
节点标签是在Hadoop
集群
中为节点分配的用户定义的标签,可用于将Map任务限制在特定类型的节点上运行。在HadoopMapReduce配置文件中,可以通过以下方式设置mapreduce.map
OnePandas
·
2024-01-14 22:07
Hadoop
hadoop
mapreduce
minikube搭建k8s
集群
体验
一、安装
集群
本文演示如何在windows下安装和使用minikube,需要做的工作如下:提前安装好DockerEngine;从minikube官网下载Windows的安装包进行安装;执行minikube
文景大大
·
2024-01-14 21:46
K8S--service
一、简介Service是将
集群
中的一个或一组Pod应用程序公开为网络服务的方法。
husterlichf
·
2024-01-14 20:34
#
kubernetes
kubernetes
容器
云原生
K8S---kubectl replace
kubectlgetXXxx-oyaml>object.yaml,再在该object.yaml基础上进行修改,最后执行kubectlapply-fobject.yaml,因为在执行此命令的时候会校验文件中的某些值与当前
集群
中的对象的某些值是否是相等的
husterlichf
·
2024-01-14 20:32
#
kubernetes
kubernetes
容器
云原生
kubectl
replace
分布式
集群
架构场景化解决方案
分布式和
集群
分布式和
集群
是不一样的,分布式一定是
集群
,
集群
不一定是分布式分布式:把一个系统拆分为多个子系统,每个子系统负责各自的那部分功能,独立部署,各司其职
集群
:多个实例共同工作,最简单/最常见的
集群
是把一个应用复制多份部署一致性的
Joeyzz7000
·
2024-01-14 20:11
ELK日志分析系统之(Filebeat 收集Nginx日志并写入 Kafka 缓存发送至Elasticsearch)
场景:与redis作为缓存服务器相比,虽然利用redis可以实现elasticsearch缓存功能,减轻elasticsearch的压力,但不支持的redis
集群
,存在单点问题,故利用kafka代替redis
zhl52306
·
2024-01-14 19:56
elasticsearch
kafka
缓存
elk
linux
Linux --绘制地图投影出现报错:无法成功下载地图背景数据
Linux--绘制地图投影出现报错:无法成功下载地图背景数据主要原因是由于使用学院
集群
,该
集群
无法连接外网,在使用cartopy绘制地图投影时,导致无法成功加载地图背景数据解决方法也很简单,自己手动下载所需要的地形数据然后放到
简朴-ocean
·
2024-01-14 17:51
WRF模式学习
如何解决系列
python
绘图
linux
运维
服务器
使用
集群
提交作业步骤
首先,先在terminal中创建脚本vijob.slurmvi命令:打开文件文本内容为:#!/bin/bash#sbatch-jtest#作业名为test,可以自定义#sbatch-w,--nodelist=#提交到节点1跑代码#sbatch-otest.out#屏幕上的输出文件重定向到test.out#sbatch-ntasks-per-node=4#单节点启动的进程数为1#sbatch--cp
摩卡摩卡~
·
2024-01-14 16:32
科研
linux
把k8s容器里的文件复制到本地
您可以使用以下命令列出
集群
中的Pod:kubectlgetpods找到包含要复制内容的适当Pod,记下Pod名称和容器名称。2.复制容器内容:通过Pod和容器名称,可以使用`kubectlcp`命
ken_coding
·
2024-01-14 16:25
k8s
kubernetes
容器
六、K8S-DaemonSet(DS)
DaemonSet:简称DS,守护进程控制器DS的主要作用,是在kubernetes
集群
里,运行一个daemonpod。
繁华依在
·
2024-01-14 16:13
k8s
kubernetes
容器
云原生
五、K8S-StatefulSet(STS有状态服务)
RC、Deployment、DaemonSet都是面向无状态的服务,它们所管理的Pod的IP、名字,启停顺序等都是随机的,而StatefulSet是管理所有有状态的服务,比如MySQL、MongoDB
集群
等
繁华依在
·
2024-01-14 16:43
k8s
kubernetes
容器
云原生
Jedis路由key的算法剥离
在Redis
集群
中,会有很多个分片,如果此时利用Jedis来操作此Redis
集群
,那么他会把数据路由到不到的分片上。而且如果动态的往
集群
中增加分片,也不会影响Jedis的功能。究竟是怎么做到的呢?
java高并发
·
2024-01-14 14:01
Hadoop HDFS
集群
和 Yarn
集群
的架构
前言:Hadoop是一个用Java编写的Apache开源框架,允许使用简单的编程模型跨计算机
集群
分布式处理大型数据集。
听风细雨66
·
2024-01-14 14:15
hadoop
hdfs
架构
yarn
Hadoop命令
进程命令对hadoop
集群
的操作start-dfs.shstop-dfs.sh打开和关闭dfsstart-yarn.shstop-yarn.sh打开和关闭yarnhadoop单进程操作旧版本命令hadoop-daemon.shstart
CJ21
·
2024-01-14 14:25
Debezium发布历史65
原文地址:https://debezium.io/blog/2019/07/15/streaming-
cassandra
-at-wepay-part-2/欢迎关注留言,我是收集整理小能手,工具翻译,仅供参考
大大蚊子
·
2024-01-14 13:47
FlinkCDC
debezium
CDC
数据库
运维
大数据
Debezium发布历史64
原文地址:https://debezium.io/blog/2019/07/12/streaming-
cassandra
-at-wepay-part-1/欢迎关注留言,我是收集整理小能手,工具翻译,仅供参考
大大蚊子
·
2024-01-14 13:46
CDC
debezium
FlinkCDC
运维
数据库
大数据
线上问题整理
JVM案例案例一:服务器内存不足,影响Java应用问题:收到报警,某Java应用
集群
中一台服务器可用内存不足,超过报警阈值。
程序猿进阶
·
2024-01-14 13:44
网站架构
&
性能调优
java
后端
面试
性能优化
系统架构
职场和发展
jvm
【环境搭建】RocketMQ
集群
搭建
前置条件及效果图条件:两台服务器,个人是两台腾讯云服务器(其中嫖的朋友一个);版本:rocketmq-version:4.4.0rocketmq-console(mq控制台)Java:1.8maven:3.6.3
集群
模式选择
xbhog
·
2024-01-14 13:10
环境搭建
java-rocketmq
rocketmq
java
【elastic search】详解elastic search
集群
目录1.与
集群
有关的一些概念2.
集群
搭建3.
集群
搭建4.kibana链接
集群
5.选举流程6.请求流程7.master的作用1.与
集群
有关的一些概念数据分片:数据分片(shard),单台服务器的存储容量是有限的
_BugMan
·
2024-01-14 13:24
elastic
search
java
elasticsearch
[GN] 微服务开发框架 --- Docker的应用 (24.1.9)
Dockerfile自定义镜像镜像结构使用Dockerfile构建Java项目基于Ubuntu构建Java项目基于java8构建Java项目Docker-Compose初识DockerCompose部署微服务
集群
总结前言提示
GGood_Name
·
2024-01-14 12:51
微服务
docker
架构
多无人机
集群
智能flocking
matlab2020可运行GitHub-pareshbhambhani/MultiAgent-Flocking-framework:ThisispartofthecurrentresearchIamworkingon.
aspiretop
·
2024-01-14 10:50
多无人机集群编队
无人机集群
Nacos和Eureka比较、统一配置管理、Nacos热更新、多环境配置共享、Nacos
集群
搭建步骤
提示:文章写完后,目录可以自动生成,如何生成可参考右边的帮助文档文章目录前言一、Nacos和eureka的对比二、统一配置管理二、Nacos热更新方式一方式二三、多环境配置共享四、Nacos
集群
搭建步骤
༶626
·
2024-01-14 09:51
eureka
java
云原生
error: KeeperErrorCode = NoNode for /hbase/master
错误2:搭建完
集群
之后,在hbaseshell中查看表,出现error:KeeperErrorCode=NoNodefor/hbase/master1.查看日志,是因为zookeeper启动后又自动关闭了
Miss_Bueno
·
2024-01-14 09:36
Hadoop
Hbase
Zookeeper
大数据
使用 spark-submit 部署应用、自定义分区器、checkpoint、共享变量
spark-submit部署应用附加的参数:spark-env.sh具体的属性配置信息配置资源分配参数调优案例分析自定义分区器检查点checkpointSpark共享变量spark-submit部署应用不论使用的是哪一种
集群
管理器
Geek白先生
·
2024-01-14 09:31
Spark
spark-submit
spark-submit 与 spark-shell 介绍
这个脚本负责设置spark使用的classpath和依赖,支持不同类型的
集群
管理器和发布模式。2、运行方式.
火成哥哥
·
2024-01-14 09:59
spark
hadoop
spark
java
大数据
linux
K8S 日志方案
一、统一日志管理的整体方案通过应用和系统日志可以了解Kubernetes
集群
内所发生的事情,对于调试问题和监视
集群
活动来说日志非常有用。对于大部分的应用来说,都会具有某种日志机制。
孤雅738
·
2024-01-14 09:58
kubernetes
容器
云原生
ELK
Spark -- 累加器和广播变量
:分布式只写数据集广播变量:分布式只读数据集一.累加器累加器用来对信息进行聚合,通常在向Spark传递函数时,比如使用map()函数或者用filter()传条件时,可以使用驱动器程序中定义的变量,但是
集群
中运行的每个任务都会得
Keep hunger
·
2024-01-14 09:58
Spark
spark
【个人记录】Ceph删除OSD
目标在ceph
集群
中踢出osd1操作下线OSD1cephosdout1移除
集群
cephosdcrushremoveosd.1删除节点数据cephauthdelosd.1cephosdrm1查看是否生效cephosdtree
三千院喵
·
2024-01-14 08:30
ceph
Redis Cluster
1、概念介绍官方网站:https://redis.io/topics/cluster-tutorial尽管可以使用哨兵主从
集群
实现可用性保证,但是这种实现方式每个节点的数据都是全量复制,数据存放量存在着局限性
HuaLuLemon
·
2024-01-14 08:29
Redis
redis
数据库
缓存
记redis5.x在windows上搭建
集群
(六主六从)
6383127.0.0.1:63841、安装redis,文章太多不多BB2、复制六份redis文件夹出来改名3、修改每一份的配置文件redis.windows.conf修改为以下格式:#运行端口port6379#启用
集群
小费的部落
·
2024-01-14 08:57
redis
数据库
缓存
上一页
61
62
63
64
65
66
67
68
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他