E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
高可用(集群)
MYSQL双主双从,使用Keepalived双机热备+LVS
高可用
群集
MYSQL双主双从,使用Keepalived双机热备+LVS
高可用
群集文档只记录Keepalived+LVS+mysql主从,不包含检验,如需检验,请自行添加web服务器一、IP规划服务器IP备注master1192.168.100.131master2
幽月静语
·
2024-09-07 13:21
乱七八糟
mysql
kubernetes
集群
下部署kafka+zookeeper单机部署方案
背景:注:在kubernetes
集群
上部署单机版的zookeeper+kafka服务,是采用了kubernetes中的deploment组件+service组件+pvc存储组件1、部署zookeeper
jiang0615csdn
·
2024-09-07 12:17
消息队列服务
kubernetes
kafka
zookeeper
linux搭建ceph
集群
linux三节点搭建ceph
集群
主机IP主机名称172.26.50.75node1172.26.50.112node2172.26.50.228node3ceph-mon,ceph-mgr,ceph-mds
浓黑的daidai
·
2024-09-07 11:05
linux
ceph
服务器
部署EFK
1.安装JDK,配置JAVA环境2.安装配置Tomcat3.Tomcat配置说明4.启动Tomcat5.优化Tomcat启动速度四、配置Elasticsearch环境五、安装elasticsearch
集群
m0_59430185
·
2024-09-07 10:35
EFK
EFK
探索Java中的分布式消息队列与事件总线:架构、实现与最佳实践
引言在现代分布式系统中,消息队列和事件总线已经成为实现松耦合、高扩展性和
高可用
性架构的关键组件。无论是微服务架构、事件驱动架构,还是实时数据处理,消息队列和事件总线都扮演着至关重要的角色。
๑҉ 晴天
·
2024-09-07 08:14
分布式
java
分布式
架构
大数据系列 | Kafka架构分析及应用
大数据系列|Kafka架构分析及应用1.消息系统介绍2.Kafka原理分析3.Kafka架构分析4.Kafka的安装与配置4.1.Zookeeper
集群
安装配置4.2.安装Kafka
集群
4.3.配置kafka
降世神童
·
2024-09-07 07:42
大数据技术专栏
大数据
kafka
架构
Python处理大数据,如何提高处理速度
一、利用大数据分析工具Dask:https://dask.org/Dask简介:Dask支持Pandas的DataFrame和NumpyArray的数据结构,并且既可在本地计算机上运行,也可以扩展到在
集群
上运行
RS&
·
2024-09-07 07:08
#
python
python
大数据
pandas
k8s|组件基本概念
kubernetes是一个可移植的,可扩展的开源平台,是Google开源的容器
集群
管理系统(谷歌内部:Borg),用于管理容器化的工作负载和服务,可促进声明式配置和自动化。
yygr
·
2024-09-07 05:55
容器化
kubernetes
docker
容器
3. ceph-mimic版本部署
环境规划2、系统基础环境准备2.1关闭防火墙、SELinux2.2确保所有主机时间同步2.3所有主机ssh免密2.4添加所有主机解析3、配置ceph软件仓库4、安装ceph-deploy工具5、ceph
集群
初始化
Martin_wjc
·
2024-09-07 03:11
7
存储
ceph
chrome
前端
mysql连接oceanbase数据库
集群
+租户
useUnicode=true&characterEncoding=UTF-8&serverTimezone=UTC//其他参数根据需求设置username:[用户名]@[租户名]#[
集群
名]password
AE_
·
2024-09-07 02:36
数据库
mysql
oceanbase
为什么需要分布式数据库
令人“头都大了”的分库分表中间件10多年前阿里因此原因不得不把淘宝后台系统从OracleRAC切换到数百个MySQL
集群
构成的分库分表
集群
,不过那时的淘宝仅仅使用一个分库分表中间件,名为tddl(又名:
KunlunBase 昆仑数据库
·
2024-09-06 21:08
KunlunBase
postgresql
数据库
mysql
分布式存储
数据库开发
Redis&MQ
优点:异步、解耦、削峰缺点:系统可用性降低、系统复杂性提高、数据一致性问题引入MQ后,MQ宕机导致业务系统受影响,必须保证MQ的
高可用
引入MQ后,需要保证消息不丢失,保证不重复消费、消费的幂等性、顺序消费
`Oracle`
·
2024-09-06 20:35
MQ
redis
rabbitmq
kafka
如何搭建一个渲染农场
在影视特效、动画制作、建筑设计等领域,渲染农场作为高性能计算
集群
的应用,扮演着至关重要的角色。它通过将大量的渲染任务分配到多个计算节点上并行处理,极大地提升了渲染效率,缩短了项目周期。
炫云云渲染
·
2024-09-06 20:01
渲染农场
渲染解决方案
在Conda环境中高效使用Kubernetes:跨平台容器化实践指南
本文将探讨如何在Conda环境中使用Kubernetes,包括设置Conda环境、容器化应用程序以及在Kubernetes
集群
中部署和管理这些应用程序。
liuxin33445566
·
2024-09-06 20:59
conda
redis cluster
文章目录节点CLUSTERMEET命令的实现槽指派传播节点的槽指派信息复制与故障转移故障检测故障转移选举新的主节点节点一个Redis
集群
通常由多个节点(node)组成,在刚开始的时候,每个节点都是相互独立的
黑夜无路人
·
2024-09-06 20:27
redis
redis
数据库
缓存
Kubectl:Kubernetes 的强大命令行工具
它就像是一位全能的指挥官,让用户能够与Kubernetes
集群
进行高效而直接的交互。无论是管理容器化应用的部署、监控资源的使用情况,还是处理故障排查等任务,kubectl都发挥着不可或缺的作用。
编程点滴
·
2024-09-06 19:55
云原生
kubernetes
容器
云原生
第04课:基于 Redis 的分布式缓存实现及加固策略
本文将从Redis-Cluster搭建切入,详解
集群
的创建原理和加固策略。之后,分析
集群
所存在的几种可靠性问题并给出解决方案,最后,介绍一个
集群
运维软件的实现方案。
Jin_Kwok
·
2024-09-06 18:13
分布式中间件实践之路
架构
分布式
中间件
027、架构_资源_GTM
系统级GTM:默认的GTM,当创建分片
集群
时,如果不创建实例级GTM,则会用系统级GTM本章节主要介绍GTM
集群
的新增、删除、配置、绑定等管理操作。
数哥
·
2024-09-06 18:41
GoldenDB
goldendb
PolarDB for PostgreSQL 内核解读:HTAP架构介绍
存储计算分离的架构基础上我们研发了基于共享存储的MPP架构步具备了HTAP的能力,对一套TP的数据支持两套执行引擎:单机执行引擎用于处理高并发的OLTPMPP跨机分布式执行引擎用于复杂的OLAP查询,发挥
集群
多个
阿里云技术
·
2024-09-06 16:28
架构
postgresql
系统架构
81.MySQL-PXC
高可用
集群
[OK]当前
集群
只有一个节点。my
戒掉贪嗔痴(薛双奇)
·
2024-09-06 15:58
数据库运维-MySQL
mysql
数据库
LVS基本介绍
使用LVS可以达到的技术目标是:通过LVS达到的负载均衡技术和Linux操作系统实现一个高性能
高可用
的Linux服务器群集,它具有良好的可
weixin_34144450
·
2024-09-06 15:57
前端
操作系统
ldap
ViewUI
mysql8.0使用PXC实现
高可用
MySQL8.0使用PXC实现
高可用
1.概述官方文档:PerconaXtradbCluster8.0DocumentationPXC(PerconaXtraDBCluster)是一个开源的
高可用
性、高性能的
帽子运维笔记
·
2024-09-06 15:24
数据库
运维
mysql
数据库
k8s安装test
k8s
集群
部署准备工作三台centos7虚拟机(内存每个节点4G)[root@master~]#cat/etc/redhat-releaseCentOSLinuxrelease7.9.2009(Core
qBeautifulBoy
·
2024-09-06 15:23
kubernetes
容器
云原生
Kafka 如何保证数据不丢失?不重复
1.
高可用
型配置:acks=all,retries>0retry.backoff.ms=100(毫秒)(并根据实际情况设置retry可能恢复的间隔时间)优点:这样保证了producer端每发送一条消息都要成功
优秀后端工程师
·
2024-09-06 15:23
Java程序员
kafka
linq
分布式
Mysql-PXC
高可用
Docker部署
mysqlha部署方案PXC环境#127.16网段作为测试网络dockernetworkcreate--subnet=172.16.0.0/16--driverbridgehfnet网段应用宿主映射说明172.19.129.98宿主host172.16.10.1:3306mysql3316172.16.10.2:3306mysql3326172.16.10.3:3306mysql3336172.1
haifengat
·
2024-09-06 15:22
docker
大数据
mysql
负载均衡
docker
MySQL
高可用
--PXC
1.PXC(PerconaXtradbCluster)Percona:基于MySQL数据库已二次开发的数据库产品xtradb:存储引擎Cluster:
集群
1.1概念:PXC是属于一套比较完美的MySQL
行走的猫儿
·
2024-09-06 15:52
MySQL
Spark一些个人总结
一、Spark是什么Spark是一个用来实现快速,通用的
集群
易逑实战数据
·
2024-09-06 09:39
大数据
spark
big
data
scala
Kafka-设计原理
ControllerLeader-PartitionRebalance消息发布机制HW与LEO日志分段ControllerKafka核心总控制器Controller:在Kafka
集群
中会有一个或者多个broker
姜希成
·
2024-09-06 07:59
Kafka
kafka
芯擎SEC1000支持摄像头和屏幕的数量根据分辨率和帧率详细计算
1.CPU
集群
4×Cortex-A76和4×Cortex-A55:Cor
空间机器人
·
2024-09-06 06:53
自动驾驶
k8s pod container内存指标说明
一、问题描述我司平台研发的devops平台底层采用k8s实现,k8s自带cadvisor进行
集群
指标收集,根据官网,我们选用了container_memory_working_set_bytes(容器的工作集使用量
yifeiliu338
·
2024-09-06 04:43
k8s
kubernetes
容器
云原生
Java 7.4 - 分布式锁
分布式锁基本要求:1、互斥2、
高可用
:锁服务时
高可用
的,即使获取锁的客户端出错,锁也一定会被释放,不影响其他线程对资源的访问。
没有韭菜的饺子
·
2024-09-06 04:39
八股文
java
分布式
开发语言
Java实战:分布式ID生成方案
在分布式系统的设计与开发过程中,如何生成全局唯一、有序且
高可用
的ID是一个绕不开的核心问题。尤其是在电商、社交网络、金融交易等领域,ID不仅是业务数据的重要标识,还可能直接影响系统的稳定性和扩展性。
拥抱AI
·
2024-09-06 04:39
java
分布式
开发语言
python分布式
集群
ray_GitHub - Leesire-Python/jd_spider: 两只蠢萌京东的分布式爬虫.
实现scrapy-redis对进行url的去重以及调度,利用redis的高效和易于扩展能够轻松实现高效率下载:当redis存储或者访问速度遇到瓶颈时,可以通过增大redis
集群
数和爬虫
集群
数量改善版本支持现在支持
weixin_39781930
·
2024-09-06 00:17
python分布式集群ray
云计算之云数据库
云数据库:架构在云端数据库
集群
上,通过云服务的方式让关系型数据库的可靠性更高,免去繁琐的维护工作,节约硬件成本,其具备以下特点:云数据库特点:1:管理方便:可以自动备份、弹性扩展。
weixin_34320724
·
2024-09-06 00:17
数据库
字节跳动10万节点HDFS
集群
多机房架构演进之路(1)
如何高效运维如此超大规模的
集群
要回答这些问题需要HDFS从多个方向迭代优化,例如DanceNN的上线、运维平台的建设等,本文不会介绍字节跳动HDFS所有的演进方案,而是聚焦在HDFS多机房架构的演进策略上
2401_84122782
·
2024-09-05 21:23
程序员
hdfs
架构
hadoop
GBase 8c 分布式核心技术—CDC数据同步
作为一款分布式数据库,GBase8c可轻松实现例如两地三中心架构的
集群
异地灾备。GBase8c异地灾备
集群
间的不同节点采用各自对应的
高可用
部署方式,两地间采用同步或者异步复制的备份方式。
manhuai2022
·
2024-09-05 19:11
GBase
8c
数据库
服务器
java
TiDB备份与恢复简介
本文档介绍如何对Kubernetes上的TiDB
集群
进行数据备份和数据恢复。备份与恢复中所使用的工具有Dumpling、TiDBLightning和BR。
每天读点书学堂
·
2024-09-05 18:31
大数据
数据库架构
数据库
数据库开发
运维
腾讯,干掉 Redis 项目,正式开源、太牛逼啦
集群
架构Tendis使用去中心化
集群
架构,每个数据节点都拥有全部的路由信息,用户可以访问集
六月·飞雪
·
2024-09-05 17:53
架构
redis
开源
数据库
腾讯云数据库(Redis)监控最佳指南
简介云数据库Redis(TencentDBforRedis)是由腾讯云提供的兼容Redis协议的缓存数据库,具备
高可用
、高可靠、高弹性等特征。
Tencent_Monitor
·
2024-09-05 16:21
前端
数据库
javascript
K8s介绍及离线安装
Kubernetes是Google开源的容器
集群
管理系统,使用Golang开发,其提供应用部署、维护、扩展机制等功能,利用Kubernetes能方便地管理跨机器运行容器化的应用,其主要功能如下:使用Docker
wang5798
·
2024-09-05 16:51
kubernetes
docker
1+X云计算运维与开发(中级)实战案例——Kafka
集群
部署
前言Kafka是一种开源的流处理平台和消息系统,被设计用于构建实时数据管道和流式应用程序,可以处理大规模的实时数据流,并提供高吞吐量、持久性存储和分布式处理能力。在实时数据处理、日志聚合、指标监控、事件驱动架构等场景下,Kafka有着广泛的应用。它的高性能、可扩展性以及丰富的功能使其成为了大数据领域中的重要工具之一。Kafka中发布订阅的对象是topic。用户可以为每类数据创建一个topic,把向
kuuuugua
·
2024-09-05 15:41
1+X云计算运维与开发(中级)
云计算
运维
kafka
ORACLE之RAC
集群
常用命令
ORACLE之RAC
集群
常用命令RAC的守护进程/etc/init.d/init.ohasdRAC的日常管理命令1)节点层2)网络层3)
集群
层4)应用层节点层olsnodes-n-p-i--这个命令用来显示
集群
点列表检查
集群
节点
XiaoHG_CSDN
·
2024-09-05 13:01
oracle
数据库
Spark
Spark是一个快速的、通用的
集群
计算系统,主要用于大规模数据处理。它最早由加州大学伯克利分校的AMPLab开发,并于2010年开源,后来由Apache软件基金会管理。
傲雪凌霜,松柏长青
·
2024-09-05 11:20
后端
大数据
spark
大数据
分布式
Spring Cloud开发实战
SpringCloud是当今Java开发行业最为流行的分布式开发架构,使用其可以方便的搭建
高可用
、高性能、分布式的系统服务架构,本课程基于SpringCloudAlibaba的套件进行了实现架构的完整讲解
yootk
·
2024-09-05 11:47
李兴华原创Java编程教材
spring
cloud
spring
后端
java
spring
boot
mybatis
jvm
Hadoop-MapReduce机制原理
Reduce阶段步骤:7、MapReduce阶段图1、MapReduce概述 HadoopMapReduce是一个分布式计算框架,用于轻松编写分布式应用程序,这些应用程序以可靠,容错的方式并行处理大型硬件
集群
H.S.T不想卷
·
2024-09-05 11:46
大数据
hadoop
mapreduce
大数据
kafka消费者重复消费同一个topic
场景是sparkstreaming消费kafka数据在这里sparkstream和kafka都是单节点的
集群
模式。同时起两个不同的groupid的应用,发现会发生后起来的应用消费不到数据。
小琳ai
·
2024-09-05 10:06
大数据
kafka
重复消费
consumer
k8s访问外部mysql_Kubernetes连接外部数据源
Kubernetes架构下比较核心的问题是数据如何persistance,虽然提供了Persistentvolumn的方式,但是对于像数据库之类的产品在kubernetes
集群
环境中运行和管理还是很有难度的
健玮
·
2024-09-05 08:24
k8s访问外部mysql
负载均衡的详细说明
当一台服务器的性能达到极限时,我们可以使用服务器
集群
来提高网站的整体性能。那么,在服务器
集群
中,需要有一台服务器充当调度者的角色,用户的
submarineas
·
2024-09-05 08:23
django
2、mysql-canal-zk-kafka-es数据同步
方案总体介绍:通过zookeeper管理canal和kafka
集群
,zk本身也做
集群
配置;通过canal作为mysql的从库实时读取binlog,然后将数据以json格式发送到kafka平台,会有一个专门消费
kobe0429
·
2024-09-05 08:01
k8s调度器Scheduler
k8s调度器SchedulerKubernetesScheduler(简称k8sScheduler)是Kubernetes
集群
中的一个核心组件,它负责将Pod调度到合适的Node上运行,以实现
集群
资源的优化分配和负载均衡
条纹布鲁斯
·
2024-09-05 07:51
kubernetes
容器
云原生
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他