E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
不重启kafka集群
几种mq实现延迟队列的方式
文章目录rocketmq:延时消息rabbitmq:死信队列
kafka
方案:多级分区举例优点rocketmq:延时消息rabbitmq:死信队列消息设定一段时间未消费就进入死信队列,然后消费者监听死信交换机
大牛写代码
·
2024-01-15 08:17
kafka
kafka
大数据
大疆无人机空三建模干货分享(大疆智图
集群
建模超详细教程)
Part01大疆无人机空三建模干货分享(大疆智图
集群
建模超详细教程)大疆智图
集群
简介大疆在今年5月推出的智图3.0.0及以上版本中加入了
集群
功能,有
集群
版许可的用户可以使用此功能。
DK业
·
2024-01-15 07:31
无人机
【MySQL】mysql
集群
文章目录一、mysql日志错误日志查询日志二进制日志慢查询日志redolog和undolog二、mysql
集群
主从复制原理介绍配置命令读写分离原理介绍配置命令三、mysql分库分表垂直拆分水平拆分一、mysql
星河万里᭄ꦿ࿐
·
2024-01-15 07:30
MySQL
mysql
数据库
运维
数据库负载均衡部署(使用ipvadm ,docker)
文章目录…要在Docker中使用IPVS配置MariaDB数据库的高可用
集群
,并设置VIP地址为192.168.201.4,密码全部设为123456你可以按照以下步骤进行操作:第一步创建一个docker
saddhu.
·
2024-01-15 07:04
数据库
负载均衡
docker
Kubernetes学习笔记
文章目录1.Kubernetes介绍1.1应用部署方式演变1.2kubernetes简介1.3kubernetes组件1.4kubernetes概念2.kubernetes
集群
环境搭建2.1前置知识点
集群
类型安装方式
saddhu.
·
2024-01-15 07:03
k8s
笔记
本地k8s
集群
搭建保姆级教程(4)-安装k8s
集群
Dashboard
安装k8s
集群
管理UI1Dashboard安装1.1参考文档Dashboard是基于网页的Kubernetes用户界面。
幸福指北
·
2024-01-15 07:57
Devops
Linux/Unix
kubernetes
docker
linux
云原生
devops
redis7部署
集群
前言:redis部署
集群
常见的一般有三种模式:主从模式,Sentinel(哨兵模式),RedisCluster(高可用Cluster
集群
),根据不同的需求可自定义选择部署方式。
给朕把屎铲了
·
2024-01-15 06:51
redis
redis
集群
Redis的主从配置,哨兵模式,
集群
模式
目录什么是主从复制?主从复制的作用?主从复制的流程?搭建Redis的主从复制安装Redis环境准备修改内核参数安装Redis定义systemd服务管理脚本修改Redis配置文件(Master节点操作)192.168.17.25修改Redis配置文件(Slave节点操作)192.168.17.30192.168.17.26验证主从效果在Master节点上看日志在Master节点上验证从节点Redis
思华年^O^
·
2024-01-15 06:44
redis
数据库
缓存
【Redis
集群
】docker实现3主3从扩缩容架构配置案例
一,
集群
规划及准备工作架构实现:Redis3主3从二,搭建命令第一步,创建6台服务:dockerrun-d--nameredis-node-1--nethost--privileged=true-v/data
一直奔跑在路上
·
2024-01-15 06:38
redis
docker
架构
2024--Django平台开发-Redis
集群
(十一)
搭建
集群
用的是虚拟机的多台centos服务器,你在跟着学习的时候,一定要全部都是虚拟机,或者全部都是云服务,不能混用。而且,尽量保证多台服务器的配置是一致的。软件的版本也要一致。
一夜白头催人泪
·
2024-01-15 06:06
python开发
django
redis
python
sparkStreaming 连接
kafka
的方式
sparkStreaming消费kafak有两种方式1:receiver方式2:direct方式receiver方式:1:sparkStreaming将
kafka
之中的数据读取到spark内存之中,然后对
流砂月歌
·
2024-01-15 06:59
Kafka
消费全流程
Kafka
消费全流程1.
Kafka
一条消息发送和消费的流程图(非
集群
)2.三种发送方式准备工作创建maven工程,引入依赖org.apache.
kafka
kafka
-clients3.3.1消费者/**
llp1110
·
2024-01-15 06:04
Kafka
kafka
linq
分布式
使用Spring Boot集成中间件:
Kafka
的高级使用案例讲解
使用SpringBoot集成中间件:
Kafka
的具体使用案例讲解导言在实际应用中,
Kafka
作为一种强大的分布式消息系统,广泛应用于实时数据处理和消息传递。
KingDol_MIni
·
2024-01-15 06:33
springboot
前后端技术
java
spring
boot
后端
Kafka
的核心原理
目录Tpoic的分区和副本机制分区副本消息存储机制和查询机制消息存储机制log文件和index文件的解析index文件内容基本结构查询机制
Kafka
中生产者数据分发策略随机分发策略指定分区策略Hash取模策略自定义分区策略轮询分发策略和粘性分发策略
Sisi525693
·
2024-01-15 06:32
kafka
分布式
Kafka
KAFKA
kafka
集群
broker
kafka
集群
运行后,每台服务器上的
kafka
称为一个broker节点处理消费者和生成者的请求生产者需要保存数据到
kafka
,就需要请求broker消费者需要从
kafka
中长跑路上crush
·
2024-01-15 06:02
Spark阶段
kafka
分布式
Kafka
、ActiveMQ、RabbitMQ、RocketMQ 有什么优缺点?
特性ActiveMQRabbitMQRocketMQ
Kafka
开发语言javaerlangjavascala单机吞吐量万级,比RocketMQ、
Kafka
低一个数量级同ActiveMQ10万级,支撑高吞吐
.L.JIN.Jie
·
2024-01-15 06:02
消息队列
kafka
activemq
rabbitmq
Mac M1 Parallels CentOS7.9 Rancher + K8S + Gitlab + Jenkins +Harbor CICD
k8s+rancher高可用部署:https://blog.csdn.net/qq_41594280/article/details/135312148rancher10.211.55.200管理K8S
集群
只年
·
2024-01-15 06:54
macos
rancher
kubernetes
【数据库
集群
】之一主一从
目录一、mysql
集群
概念二、mysql
集群
环境配置实验1、全新的服务器安装全新的数据库(可以在vm中克隆比较快,克隆的服务器要没有安装好数据库,实验环境:mysql80)2、配置域名解析3、一主一从服务器的配置
对熬夜say no
·
2024-01-15 06:20
数据库
k8s实战从入门到上天系列第一篇:K8s微服务实战内容开篇介绍
第一章:开源ruoyi微服务简介基本使用第二章:k8s基本知识回顾、k3s
集群
搭建和基本使用第三章:微服务镜像构建第四章:中间件镜像构建第五章:微服务前后端部署第六章:基于SLB以及Trasfik访问第七章
岁岁种桃花儿
·
2024-01-15 05:32
#
docker和k8s
kubernetes
微服务
容器
docker
初始化K8S
集群
文章目录使用介绍环境介绍一、刚开始搭建k8s
集群
时重新初始化(node节点还未添加)二、K8S搭建完毕后重新初始化使用介绍当刚开始搭建k8s
集群
报错(端口/数据已经生成)或k8s
集群
正在使用时遇到了不可修复的问题需要初始化
集群
时可以使用
折言阿
·
2024-01-15 04:10
k8s
kubernetes
docker
容器
k8s
集群
reset恢复重置
一、概述因k8s
集群
故障,无法恢复,所以进行重置k8s
集群
。
菜鸟小窝
·
2024-01-15 04:10
k8s
kubernetes
集群重置
kubeadm
reset
K8S
集群
重新初始化--详细过程
K8S
集群
重新初始化0、当前环境1、master节点1.1、在master节点执行下面reset命令:1.2、手动清除配置信息,这一步很关键:1.3、重新引导
集群
1.4、创建配置目录,并复制权限配置文件到用户目录下
hhzz
·
2024-01-15 04:09
容器技术
Docker+K8S
kubernetes
容器
云原生
请注意,你的 Pulsar
集群
可能有删除数据的风险
在上一篇Pulsar3.0新功能介绍中提到,在升级到3.0的过程中碰到一个致命的问题,就是升级之后topic被删除了。正好最近社区也补充了相关细节,本次也接着这个机会再次复盘一下,毕竟这是一个非常致命的Bug。现象先来回顾下当时的情况:升级当晚没有出现啥问题,各个流量指标、生产者、消费者数量都是在正常范围内波动。事后才知道,因为只是删除了很少一部分的topic,所以从监控中反应不出来。早上上班后陆
crossoverJie
·
2024-01-15 04:34
Zookeeper
集群
+
Kafka
集群
Zookeeper概述//Zookeeper定义Zookeeper是一个开源的分布式的,为分布式框架提供协调服务的Apache项目。//Zookeeper工作机制Zookeeper从设计模式角度来理解:是一个基于观察者模式设计的分布式服务管理框架,它负责存储和管理大家都关心的数据,然后接受观察者的注册,一旦这些数据的状态发生变化,Zookeeper就将负责通知已经在Zookeeper上注册的那些观
陆墨宁
·
2024-01-15 03:43
云计算课程学习
zookeeper
kafka
分布式
kafka
常用命令
1,启动zookeeper服务:zookeeper-server-start.sh-daemonzoo.cfg2,启动
kafka
服务:
kafka
-server-start.sh-daemonserver.properties3
scottzcw
·
2024-01-15 03:55
弹性分布式数据集(RDD)
概要为了能解决在大规模的
集群
中以一种容错的方式进行内存计算这个问题,我们提出了RDDs的概念.当前的很多框架对迭代式算法场景与交互性数据挖掘场景的处理性能非常差,这个是RDDs的提出的动机.如果能将数据保存在内存中
盗梦者_56f2
·
2024-01-15 03:14
P-1第1章 课程介绍与前置项目回顾
内容1-1课程导学--------二期课程主线:Tomcat
集群
、Nginx负载均衡、Redis分布式一期的项目架构如下:(单服务架构)二期会演进为Tomcat架构:然而往往想当然的以为是这样:(如下图错误示例
牧然御风者
·
2024-01-15 03:36
Kubernetes中的Pod
容器编排容器编排(ContainerOrchestration)是指在计算机
集群
上管理和自动化容器化应用程序的部署、操作和扩展的过程。
AnyaPapa
·
2024-01-15 01:11
kubernetes
容器
云原生
【中间件】消息中间件之
Kafka
一、概念介绍Apache
Kafka
是一个分布式流处理平台,用于构建实时数据管道和流应用。它可以处理网站、应用或其他来源产生的大量数据流,并能实时地将这些数据流传输到另一个系统或应用中进行处理。
孤之鹜
·
2024-01-15 01:06
中间件
中间件
kafka
分布式
linq
消息中间件
Spring Cloud(Greenwich版)-03-编写高可用Eureka Server(
集群
)
编写高可用EurekaServer(
集群
)前言上一章SpringCloud(Greenwich版)-02-服务注册与服务发现-Eureka入门,我们实现了将User和Goods微服务都注册到了Eureka
IT实战联盟Lin
·
2024-01-15 01:21
linux—多服务免密登录
文档结构概念简介配置操作概念简介配置操作场景:在部署gp
集群
时,希望master节点可以使用gpadmin用户可以实现免密登录slave1和slave2节点;step_1:IP映射xx.xx.xx.101server-slave1xx.xx.xx
蓝魔Y
·
2024-01-15 01:16
操作系统
Linux
linux
免密登录
ceph
集群
扩容
1.确定要扩容的节点2.
集群
创建前检查检查IP,且ping一下
集群
中的其他节点clusternetworkIP,看是否能ping通pingmon修改主机的/etc/hosts文件,并添加所有节点信息检查防火墙是否关闭
大 大金
·
2024-01-15 01:44
ceph
服务器
HADOOP大数据之HDFS管理与运维
一、HDFS数据迁移解决方案HDFS分布式拷贝工具DistCp数据迁移使用场景:冷热
集群
数据同步、分类存储
集群
数据整体搬迁数据的准实时同步数据迁移要素考量带宽性能是否支持增量同步4、数据迁移的同步性image.pngDistCp
奋斗的韭菜汪
·
2024-01-15 01:33
Kubernetes(二) - 使用Rancher部署K8S
集群
(搭建Rancher)
众所周知Kubernetres虽然很好但是安装部署很复杂,Rancher功能很强大,我们这里仅仅使用Rancher来搭建管理Kubernetes
集群
Kubernetes官方文档:https://kubernetes.io
文振熙
·
2024-01-15 00:41
【大数据进阶第三阶段之Hue学习笔记】Hue简介和架构介绍
通过使用Hue我们可以在浏览器端的Web控制台上与Hadoop
集群
进行交互来分析处理数据,例如操作HDFS上的数据、运行MapReduceJob、执行Hive的SQL语句
Allen_lixl
·
2024-01-15 00:56
大数据
Hue
大数据
学习
笔记
hadoop
hue
分布式链路追踪专栏,分布式链路追踪:Skywalking
集群
管理设计
SkyWalking是一个开源APM系统,包括针对CloudNative体系结构中的分布式系统的监视,跟踪,诊断功能。核心功能如下:服务、服务实例、端点指标分析;根本原因分析,在运行时分析代码;服务拓扑图分析;服务,服务实例和端点依赖性分析;检测到慢速服务和端点;性能优化;分布式跟踪和上下文传播;数据库访问指标。检测慢速数据库访问语句(包括SQL语句);报警。SkyWalking目前是Apache
架构随笔录
·
2024-01-14 23:26
分布式链路追踪
分布式
skywalking
spring
cloud
alibaba
微服务
架构
云原生
java
分布式引擎Elasticsearch本地部署并结合内网穿透远程访问
推荐:kwan的首页,持续学习,不断总结,共同进步,活到老学到老导航檀越剑指大厂系列:全面总结java核心技术点,如集合,jvm,并发编程redis,
kafka
,Spring,微服务,Netty等常用开发工具系列
檀越剑指大厂
·
2024-01-14 22:37
s20
cpolar
分布式
elasticsearch
大数据
Hadoop之mapreduce参数大全-6
节点标签是在Hadoop
集群
中为节点分配的用户定义的标签,可用于将Map任务限制在特定类型的节点上运行。在HadoopMapReduce配置文件中,可以通过以下方式设置mapreduce.map
OnePandas
·
2024-01-14 22:07
Hadoop
hadoop
mapreduce
性能测试分析案例-使用动态追踪定位性能瓶颈
使用动态追踪,可以在不修改代码、
不重启
服务的情况下,动态了解应用程序或者内核的行为,排查线上问题、特别是不容易重现的问题。
bala5569
·
2024-01-14 21:32
性能测试
性能测试小白
服务器
性能优化
minikube搭建k8s
集群
体验
一、安装
集群
本文演示如何在windows下安装和使用minikube,需要做的工作如下:提前安装好DockerEngine;从minikube官网下载Windows的安装包进行安装;执行minikube
文景大大
·
2024-01-14 21:46
K8S--service
一、简介Service是将
集群
中的一个或一组Pod应用程序公开为网络服务的方法。
husterlichf
·
2024-01-14 20:34
#
kubernetes
kubernetes
容器
云原生
K8S---kubectl replace
kubectlgetXXxx-oyaml>object.yaml,再在该object.yaml基础上进行修改,最后执行kubectlapply-fobject.yaml,因为在执行此命令的时候会校验文件中的某些值与当前
集群
中的对象的某些值是否是相等的
husterlichf
·
2024-01-14 20:32
#
kubernetes
kubernetes
容器
云原生
kubectl
replace
分布式
集群
架构场景化解决方案
分布式和
集群
分布式和
集群
是不一样的,分布式一定是
集群
,
集群
不一定是分布式分布式:把一个系统拆分为多个子系统,每个子系统负责各自的那部分功能,独立部署,各司其职
集群
:多个实例共同工作,最简单/最常见的
集群
是把一个应用复制多份部署一致性的
Joeyzz7000
·
2024-01-14 20:11
ELK日志分析系统之(Filebeat 收集Nginx日志并写入
Kafka
缓存发送至Elasticsearch)
场景:与redis作为缓存服务器相比,虽然利用redis可以实现elasticsearch缓存功能,减轻elasticsearch的压力,但不支持的redis
集群
,存在单点问题,故利用
kafka
代替redis
zhl52306
·
2024-01-14 19:56
elasticsearch
kafka
缓存
elk
linux
ELK——ELK+filebeat+
kafka
部署——(2)部署nginx+filebeat
部署nginx+filebeat我们在虚拟机上部署nginx服务器,然后安装filebeat,使用filebeat收集nginx日志文件,把收集到的日志发送给logstash,让logstash过滤日志,把过滤完的日志保存到elasticsearch,然后通过kibana展示出来。安装nginx安装nginx安装nginx依赖包:[root@filebeat01~]#yuminstall-ygcc
未来的运维大牛
·
2024-01-14 19:21
nginx
elk
kafka
为什么快
消息发送1、批量发送:
Kafka
通过将多个消息打包成一个批次,减少了网络传输和磁盘写入的次数,从而提高了消息的吞吐量和传输效率。
小甄笔记
·
2024-01-14 18:46
kafka
kafka
分布式
Linux --绘制地图投影出现报错:无法成功下载地图背景数据
Linux--绘制地图投影出现报错:无法成功下载地图背景数据主要原因是由于使用学院
集群
,该
集群
无法连接外网,在使用cartopy绘制地图投影时,导致无法成功加载地图背景数据解决方法也很简单,自己手动下载所需要的地形数据然后放到
简朴-ocean
·
2024-01-14 17:51
WRF模式学习
如何解决系列
python
绘图
linux
运维
服务器
docker-compose部署
kafka
、SASL模式(密码校验模式)
一.基础
kafka
部署zookeeper,
kafka
,
kafka
-uidocker-compose.yml注意点:192.168.1.20是宿主机的ipversion:"3"services:zookeeper
xixiyuguang
·
2024-01-14 16:02
docker
kafka
容器
使用
集群
提交作业步骤
首先,先在terminal中创建脚本vijob.slurmvi命令:打开文件文本内容为:#!/bin/bash#sbatch-jtest#作业名为test,可以自定义#sbatch-w,--nodelist=#提交到节点1跑代码#sbatch-otest.out#屏幕上的输出文件重定向到test.out#sbatch-ntasks-per-node=4#单节点启动的进程数为1#sbatch--cp
摩卡摩卡~
·
2024-01-14 16:32
科研
linux
把k8s容器里的文件复制到本地
您可以使用以下命令列出
集群
中的Pod:kubectlgetpods找到包含要复制内容的适当Pod,记下Pod名称和容器名称。2.复制容器内容:通过Pod和容器名称,可以使用`kubectlcp`命
ken_coding
·
2024-01-14 16:25
k8s
kubernetes
容器
上一页
79
80
81
82
83
84
85
86
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他