E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Postgresql主从集群
HDFS的设计架构
1.HDFS的设计思想HDFS的设计目标是解决大规模数据存储和处理的问题,其核心设计思想包括:(1)分布式存储-数据被分割成多个块(Block),并分布存储在
集群
中的多个节点上。
F_0125
·
2025-03-09 05:21
Hadoop
hdfs
hbase
hadoop
无人机+自组网:中继通信增强技术详解
在无人机
集群
中,每个无人机都可以作为终端节点、中继节点或中心节点,实
无人机技术圈
·
2025-03-09 04:00
无人机技术
无人机
一致性哈希HashRing
一致性哈希HashRing一致性哈希算法是一种高效的分布式存储和负载均衡技术,广泛应用于分布式系统中,如缓存
集群
、分布式数据库等。
留白1108
·
2025-03-09 04:12
哈希算法
算法
一致性哈希
ElasticSearch学习笔记 --- 调研笔记知识点
4.安装Marvel(ES的管理和监控)5.特点:分布式的实时文件存储,每个字段都被索引并可被搜索分布式的实时分析搜引擎可以扩展到上百台服务器,处理PB级机构化或非结构化数据6.
集群
是一组具有相同cl
杨鑫newlfe
·
2025-03-09 03:00
大数据挖掘与大数据应用案例
搜索引擎
ES03 - ES其他知识点
ES其他知识点文章目录ES其他知识点一:分布式
集群
和路由计算1:单节点
集群
2:故障转移3:水平扩容4:宕机故障5:路由计算二:分片控制流程1:协调节点2:写流程3:读流程4:更新流程5:多文档操作流程5.1
是小崔啊
·
2025-03-09 03:42
#
elasticSearch
elasticsearch
大数据
搜索引擎
K8S
集群
节点扩容
k8s231192.168.99.2312C4Gmaster1.23.1720.10.24k8s232192.168.99.2322C4Gwoker1.23.1720.10.24k8s233(需上线)192.168.99.2332C4Gwoker1.23.1720.10.24当现有
集群
中的节点资源不够用
小小大胖子3
·
2025-03-09 02:38
kubernetes
java
容器
当Citus添加工作节点时报错---citus_add_node(‘database-2‘, 5433)
不得不说,毕业设计push我学习了很多新鲜的知识具体报错由于硬件条件不允许,我在两台虚拟机上部署了三个
postgresql
以组成一个协调节点和两个工作节点的
集群
,其中database-1节点上部署了一个工作节点
学软件的小铃铛
·
2025-03-09 02:30
数据库
大数据运维实战指南:零基础入门与核心技术解析(第一篇)
大数据运维实战指南:零基础入门与核心技术解析(第一篇)系列文章目录第一篇:大数据运维概述与核心技能体系第二篇:Hadoop生态体系与
集群
部署实战第三篇:分布式存储系统运维与优化第四篇:资源调度框架YARN
emmm形成中
·
2025-03-09 01:19
大数据
运维
【K8S问题系列 | 10】在K8S
集群
怎么查看各个pod占用的资源大小?【已解决】
要查看Kubernetes
集群
中各个Pod占用的资源大小(包括CPU和内存),可以使用以下几种方法:1.使用kubectltop命令kubectltop命令可以快速查看当前Pod的CPU和内存使用情况。
颜淡慕潇
·
2025-03-09 01:34
kubernetes
容器
云原生
后端
问题解决
K8s(八):如何进行 Kubernetes
集群
健康检查?
K8s(八):如何进行Kubernetes
集群
健康检查?
Seal^_^
·
2025-03-09 01:00
#
Kubernetes
【云原生】容器化与编排技术
持续集成
kubernetes
容器
云原生
K8s
集群健康检查
Spring Boot 项目中慢SQL优化方案
以下是一些常用的慢SQL优化方案,涵盖了从SQL语句本身到数据库配置、应用层优化的多个方面:1.识别慢SQL:慢查询日志(SlowQueryLog):MySQL、
PostgreSQL
等数据库都提供了慢查询日志功能
冰糖心书房
·
2025-03-09 01:29
Spring
Boot
2025
Java面试系列
spring
boot
sql
后端
hadoop框架与核心组件刨析(四)MapReduce
MapReduce的核心思想分而治之:将大规模数据集分割成多个小块,分布到
集群
中的多个节点上并行处理。Map阶段:将输入数据转换为键值对(Key-ValuePair)
小刘爱喇石( ˝ᗢ̈˝ )
·
2025-03-09 00:42
hadoop
mapreduce
大数据
如何收集 Kubernetes
集群
的日志
一、Kubernetes日志收集核心方案1.EFKStack(Elasticsearch+Fluentd+Kibana)•适用场景:企业级日志分析、复杂查询需求、长期日志存储。•组件作用:•Fluentd:日志收集器(部署为DaemonSet,每个Node运行一个实例)。•Elasticsearch:日志存储与索引(支持分布式、高并发)。•Kibana:可视化仪表盘(日志搜索、图表展示)。2.Lo
沉默的八哥
·
2025-03-09 00:42
运维
kubernetes
运维
Go语言的GoFly快速开发框架已经支持
Postgresql
和Mysql两种数据库
两个数据库的选择我们框架为了方便大家开发能更加业务场景选择不同侧重性能要求的数据,我们把MySQL和
PostgreSQL
两个在开源界很有名气数据库都支持进去。
GoFly开发者
·
2025-03-08 21:18
Golang应用开发
Go实战课程
数据库
postgresql
mysql
Go开发框架
golang
gin
Nginx代理Redis哨兵
主从
配置
Nginx代理Redis哨兵
主从
配置一、环境Nginx版本:1.21.6Center7.5及以上或MasOS搭建Redis哨兵
主从
模式Springboot集成Redis哨兵
主从
模式提示:Nginx必须安装
Rewloc
·
2025-03-08 21:39
springboot
redis
Redis主从复制
哨兵模式
redis
nginx
nginx
【AntDB数据库 问答日日新】8.24(5)AntDB分布式架构
集群
节点不包括下面哪一项
17.AntDB分布式架构
集群
节点不包括下面哪一项?A、GTMCOORDB、CoordinatorC、DatanodeD、Proxy答案:D解析:无难度:普通18.部署AntDB分布式,
数据库爱好者一枚呀
·
2025-03-08 18:55
AntDB数据库
运维
分布式
数据库
docker版本实现MySQL
主从
架构
下载MySQL镜像[root@k8s-master~]#dockerpullmysql:5.75.7:Pullingfromlibrary/mysql72a69066d2fe:Pullcomplete93619dbc5b36:Pullcomplete99da31dd6142:Pullcomplete626033c43d70:Pullcomplete37d5d7efb64e:Pullcomplete
互联网老辛
·
2025-03-08 17:55
从零开始学k8s
docker
MySQL
主从
架构配合ShardingJdbc实现读写分离
application.ymlfdy-db-sharding.yamlShardingJdbcDatasourceAutoInitConnectionConfig.java目录架构搭建基于Docker去创建MySQL的
主从
架构读写分离
eddie_k2
·
2025-03-08 16:17
#
ShardingJdbc
MySQL
mysql
架构
数据库
微信群二维码采集,帮助企业或个人获客
前几天准备找人换群来着却发现采
集群
二维码接口,自己动手写了个免费微信群二维码采集工具下载好,直接打开使用即可使用软件下载地址:微群多多.zip-蓝奏云
e4ert
·
2025-03-08 16:44
软件
软件需求
spark
集群
,kafka
集群
和zookeeper的docker
集群
快速搭建
准备操作安装docker(宿主机)yuminstalldocker(宿主机时centos用yum管理包)systemctldaemon-reload(重加载deamon服务,是docker的核心)systemctlrestartdocker.service(重启docker服务)docker常用命令dockerps-a查看所有容器dockersearchUbuntu寻找Ubuntu的镜像docke
醉与浮
·
2025-03-08 15:05
tools
docker
spark
kafka
ZooKeeper的初识(Zookeeper基本知识,ZooKeeper shell,ZooKeeper数据模型 ,ZooKeeper Watcher 监听机制,ZooKeeper选举机制)
Zookeeper基本知识Zookeeper
集群
搭建Zookeeper
集群
搭建指的是ZooKeeper分布式模式安装。通常由2n+1台servers组成。
kismetG
·
2025-03-08 15:33
Azkaban
Zookeeper基本知识
ZooKeeper
shell
ZooKeeper数据模型
ZooKeeper
Watcher
监听机制
ZooKeeper选举机制
Ubuntu快速安装kafka
集群
搭建
集群
做少需要三台服务器一个centos和两个ubuntu每台都按照下面做:安装JDKsudoapt-getinstalldefault-jrejava-versionapt-getinstalldefault-jdkjava-version
拥抱世界的精彩
·
2025-03-08 15:32
kafka集群
ubuntu搭建kafka集群
kafka集群
Kafka 在 Linux 下的
集群
配置和安装
Kafka在Linux下的
集群
配置和安装ApacheKafka是一个流行的分布式流处理平台,广泛用于实时数据管道和流处理应用。
J老熊
·
2025-03-08 15:31
kafka
linux
java
面试
系统架构
运维
docker
linux下
postgresql
的连接数查看及管理
.查询当前连接数:selectcount(*)frompg_stat_activity;2.查询最大连接数showmax_connections;3.修改最大连接数SHOWconfig_file:查看
postgresql
.conf
tiguer
·
2025-03-08 11:14
数据库
sql
算力
集群
+Pycharm+SSH连接经验(自用)
创建实例(ssh)->Xshell8(公私密钥)->远程服务器(添加公钥匙,获取公私密钥的内容)->j将私钥内容保存为与公钥一样文件名、文件格式不同、保存路径相同(帮助在pycharm上进行ssh连接)->然后就可以在Xshell8中输入sshn1,然后就可以创建自己的虚拟环境,这个是对Xshell8来使用的如果要使用pycharm来使用,直接可以跳过最后一步,直接在pycharm中进行设置即可。
代码的建筑师
·
2025-03-08 10:17
学习记录
笔记
服务器
pycharm
ssh
算力集群
量化企业间合作关系、竞争关系和资源流动
公式被用来量化企业间合作关系、竞争关系和资源流动的程度,并通过分析网络结构来识别产业链中的关键企业和
集群
合作权重(W_cooperation)公式:Wcooperation(i,j)=α⋅max(freq
Atlas Shepherd
·
2025-03-08 09:26
python
算法
人工智能
大数据Hadoop
集群
运行程序
目录1运行自带的MapReduce程序2常见错误1运行自带的MapReduce程序下面我们在Hadoop
集群
上运行一个MapReduce程序,以帮助读者对分布式计算有个基本印象。
赵广陆
·
2025-03-08 08:37
hadoop
hadoop
big
data
mapreduce
Pod 一直处于Pending状态,可能的原因有哪些?
3.调度策略限制•节点亲和性/反亲和性:Pod需要特定节点标签,但
集群
无匹配节点。•污点(Taints)与容忍(Tolerations
沉默的八哥
·
2025-03-08 07:18
运维
kubernetes
运维
PostgreSQL
生产环境升级指南:pg_upgrade 快速完成版本升级!
前言
PostgreSQL
的版本号由主要版本号和次要版本号组成。例如,在10.1中,10是主要版本,1是次要版本。关于更多版本的规划,请参考
PostgreSQL
版本路线图。
pitt1997
·
2025-03-08 07:13
数据库
学习笔记
PostgreSQL
pg_upgrade
生产环境升级
PostgreSQL大版本升级
K8s 1.27.1 实战系列(五)Namespace
Kubernetes1.27.1中的Namespace(命名空间)是
集群
中实现多租户资源隔离的核心机制。
白昼ron
·
2025-03-08 05:15
K8s
kubernetes
容器
K8s
Namespace
命名空间
yaml
ns
[通讯协议]Modbus协议
Modbus是
主从
方式通信,通信由主机发起,一问一答式,从机无法主动向主机发送数据。通信方式类似于
LIN-JUN-WEI
·
2025-03-08 05:34
通讯协议
物联网
网络协议
c语言
K8S常见的面试题
答:和大多数分布式系统一样,K8S
集群
至少需要一个主节点(Master)和多个计算
水月清辉
·
2025-03-08 04:21
k8s
Kafka
2.核心原理2.1架构组成Broker:Kafka
集群
中的单个节点,负责消息存储和传递。Producer:向KafkaTopic发布消息的客户端。Consumer:从Topic订阅并消费消息的客户端。
茶本无香
·
2025-03-08 04:19
kafka
分布式
Oracel DG安装指南
以便实施人员能根据当前业务特点,规划、建设符合高可用、高可靠的数据库
集群
系统。具体由OracleDG环境拓扑、Oracle单机数据库规划部分构成!
一直在路上的码农
·
2025-03-08 03:58
运维
数据库
#
Oracle
oracle
数据库
运维
【DevOps】Jenkins+Kubernetes:K8S
集群
外部署的Jenkins,设置动态Jenkins-slave工作节点到K8S
集群
中
spm=1003.2001.3001.4143Jenkins部署,设置动态agent到K8S
集群
中centosdockerjenkinskubernets7.920.102.28919.10通常情况下jenkins
运维归一
·
2025-03-08 02:15
DevOps
jenkins
docker
kubernetes
rabbitmq 学习 之 mirror queue cluster 搭建(26)
官网:https://www.rabbitmq.com/ha.html高可用(镜像)队列默认情况下,queues存放在RabbitMQ
集群
的单个节点之上。
xiaoliuliu2050
·
2025-03-08 02:15
rabbitmq
k8s service type_RabbitMQ(k8s)-随手笔记
比如说支付、订单功能,服务后移,长时间操作的功能,同步数据我们通过监听数据变化实现功能联动特点分布式各节点互相冗余元数据(erlang.cookie,队列、交换机、绑定元数据、vhost元数据)实现分布式
集群
weixin_39873325
·
2025-03-08 02:42
k8s
service
type
基于k8s安装jenkins
集群
k8s
集群
:master:192.168.0.200node1:192.168.0.201node2:192.168.0.202思路:通过在manager的namespace中,创建jenkins服务,
水上冰石
·
2025-03-08 01:08
云原生-运维架构
jenkins
k8s
kafka+zk三台
集群
问题排查
问题描述:项目中人大金仓同步工具同步数据增量到kafka
集群
,无法自动创建topic,以及出现同步到topic时连接失败的问题,经过排查修改配置参数最终解决。
未竟
·
2025-03-07 23:44
大数据组件
消息队列
kafka
zookeeper
big
data
Canal+MySQL+Kafka+Zookeeper
canal.properties(2)conf/example/instance.propertiesⅢ、开启canal二、MySQLⅠ、搭建与基础使用Ⅱ、开启二进制日志三、Kafka+Zookeeper
集群
正大光明瑞士卷
·
2025-03-07 22:06
mysql
kafka
java-zookeeper
YashanDB更换服务器IP
本文内容来自YashanDB官网,原文内容请见https://doc.yashandb.com/yashandb/23.3/zh/%E5%AE%89%E8%A3%85%...本文主要介绍当一个单机部署的数据库
集群
中
·
2025-03-07 21:05
数据库
MySQL
主从
同步延迟全场景解决方案手册
一、硬件与网络层优化(10分钟见效)1.1磁盘IO优化方案#使用iostat诊断磁盘性能(重点关注%util和await)iostat-dx1/dev/sdb#优化措施:1.主库binlog与从库relaylog分离磁盘2.使用NVMeSSD替换SATA盘(IOPS提升5-10倍)3.调整RAID卡写策略:MegaCli-SetCachedWrite-0-aAll#禁用写缓存(安全优先)MegaC
·
2025-03-07 21:29
YashanDB更换服务器IP
本文内容来自YashanDB官网,原文内容请见https://doc.yashandb.com/yashandb/23.3/zh/%E5%AE%89%E8%A3%85%...本文主要介绍当一个单机部署的数据库
集群
中
·
2025-03-07 21:57
数据库
KubeBlocks
它提供了通用的API和命令行工具kbcli,支持MySQL、
PostgreSQL
、MongoDB、Redis、Kafka等多种数据库引擎。
喝醉酒的小白
·
2025-03-07 20:49
K8s
学习
docker-compose部署mongodb 5.0.5
集群
一、服务器10.1.1.16510.1.1.16410.1.1.169二、生成mongodb.keyroot@mongodb:/data#opensslrand-base64756>mongodb.keyu2aDJG+yz9uLwdWSavN/yh7noG0wfnTvOalKO5xNuTMQ85daIqkWnOh1YgKzbosrqTvU1Np2PU4QpLJIHtwU1XfHgvkCQRR7ox
inventecsh
·
2025-03-07 19:00
docker
mongodb
容器
9种 分布式ID生成方案,让你一次学个够
拿MySQL数据库举个栗子:在我们业务数据量不大的时候,单库单表完全可以支撑现有业务,数据再大一点搞个MySQL
主从
同步读写分离也能对付。
我有一头小花驴
·
2025-03-07 16:23
计算机
程序人生
程序员
分布式
数据库
mysql
常见分布式ID生成方案
常见分布式ID生成方案文章目录一、为什么要用分布式ID1、什么是分布式ID2、那么分布式ID需要满足哪些条件二、分布式ID有哪些生成方式1、基于UUID2、基于数据库自增ID3、基于数据库
集群
模式4、基于数据库的号段模式
amo的代码园_毕设
·
2025-03-07 15:16
Java基础
分布式
java
vue.js
spring
boot
java-ee
maven
tomcat
从单块巨石到星辰大海:分布式与微服务的本质思考
完美系统"的幻想,在妥协中寻找最优解2.分布式三定律物理定律:光速限制下的通信延迟不可消除经济定律:成本边际效应决定拆分粒度组织定律:康威定律的幽灵始终在场(系统架构≈组织架构)3.典型范式对比模式特征案例
主从
架
斗-匕
·
2025-03-07 14:21
分布式
微服务
架构
Mysql8
主从
复制(兼容低高版本)
Mysql
主从
复制理论知识
主从
复制必要前提
主从
复制必要的条件:主库开启binlog日志(设置log-bin参数)
主从
server-id不同从库服务器能连同主库实现原理原理:实现整个
主从
复制,需要由slave
热心市民运维小孙
·
2025-03-07 13:16
adb
android
美国AI圈破防了。。。
微软、Meta和谷歌等巨头正在将资源投入到庞大的10万GPU
集群
中进行人
强化学习曾小健
·
2025-03-07 13:43
LLM大语言模型
人工智能
上一页
4
5
6
7
8
9
10
11
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他