E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
PostgreSQL集群
第一篇:k8s架构与组件详解
这些对
集群
做出全局决策(比如调度),以及检测和响应
集群
事件的组件集合也称为控制平面。其实K8s官
※网络笨猪※
·
2025-03-01 05:04
##云原生-容器化-K8S##
架构
如何使用Spark Streaming将数据写入HBase
1.环境准备HBase:确保HBase
集群
已经安装并运行。Spark:确保Spark已经安装,并且Spark版本与HBase的Hadoop版本兼容。
Java资深爱好者
·
2025-03-01 05:02
spark
hbase
大数据
如何在CentOS使用Docker搭建MinIO容器并实现无公网ip远程访问本地服务
Cpolar4.配置MinIO公网地址5.远程访问MinIO管理界面6.固定MinIO公网地址前言MinIO是一个开源的对象存储服务器,可以在各种环境中运行,例如本地、Docker容器、Kubernetes
集群
等
秋说
·
2025-03-01 05:31
内网穿透
centos
docker
tcp/ip
SkyWalking Server配置文件
application.yml/config/application.yml1、cluster
集群
相关配置#
集群
配置cluster:#选择哪一种
集群
模式selector:${SW_CLUSTER:standalone
五百年前FHYA
·
2025-03-01 04:55
数据监测
skywalking
数据库必知必会系列:数据库分片与分布式事务
文章目录1.背景介绍分库分表分片
集群
分布式事务数据迁移2.核心概念与联系主从复制活动复制CAP原则BASE理论3.核心算法原理和具体操作步骤以及数学模型公式详细讲解分库分表水平分表垂直分库分片
集群
垂直拆分水平切分垂直切分水平拆分根据主键范围根据业务字段划分分布式事务两阶段提交协议三阶段提交协议可靠消息最终一致性
AI天才研究院
·
2025-03-01 03:51
AI大模型企业级应用开发实战
大数据
人工智能
语言模型
Java
Python
架构设计
kafka-leader -1问题解决
以下是可能导致出现kafkaleader-1的一些常见原因及相关分析:1.副本同步问题:在Kafka
集群
中,每个分区都有多个副本,包括一个领导者副本和多个追随者副本。
xiao-xiang
·
2025-03-01 03:17
kafka
kafka
Elasticsearch
集群
快照的定期备份设置指南
Elasticsearch
集群
快照的定期备份设置指南概述快照:在给定时刻对整个
集群
或者单个索引进行备份,以便在之后出现故障时可以基于之前备份的快照进行快速恢复。
碧水澜庭
·
2025-03-01 01:39
运维管理类工具
elasticsearch
运维
Linux部署elasticsearch
集群
操作系统CentOS7.61.安装jdk环境直接使用yum安装yuminstalljava-1.8.0-openjdk*配置环境变量vim/etc/profile#添加:JAVA_HOME=/usr/lib/jvm/java-1.8.0-openjdk-1.8.0.282.b08-1.el7_9.x86_64/CLASS_PATH=.:$JAVA_HOME/libPATH=$JAVA_HOME/b
西望千秋雪
·
2025-03-01 01:38
es
es
elasticsearch
Elasticsearch
集群
部署详解
文章目录Elasticsearch功能与特性:Elasticsearch单节点安装部署Elasticsearch
集群
安装部署附件1、安装Java(JDK)2、问题一2、问题二Elasticsearch功能与特性
Jeffrey_Zeng_
·
2025-03-01 01:38
elasticsearch
linux
PostgreSQL
Like查询与正则表达式
安装
PostgreSQL
之后,
PostgreSQL
会创建一个名为“postgres”的用户,创建一个名为“postgres”的数据库。我们就可以使用这个默认的库做实验。
西召
·
2025-03-01 00:00
PostgreSQL
PostgreSQL
like
模糊查询
谈谈DeepSeek-v3在算力约束下的出色工作
加完班挤点时间读个论文吧.Deepseek-v3仅用了2048块H800GPU就超越了Llama3405B模型,要知道Meta训练Llama3可是用了16384块H100,而DSv3的训练成本非常低在所有人追求更大规模
集群
的时候
强化学习曾小健
·
2025-02-28 22:19
Deepseek原理与使用
人工智能
Redis 同步机制详解
Redis采用主从复制(Replication)机制来进行数据同步,同时在RedisCluster(
集群
模式)下也使用Gossip协议进行节点间数据同步和状态传播。
夏天的味道٥
·
2025-02-28 22:18
Redis
redis
数据库
缓存
PostgreSQL
常用函数
PostgreSQL
常用函数
PostgreSQL
作为一款企业级开源数据库,其丰富的函数库为开发者提供了强大的数据处理工具。
shy好好学习
·
2025-02-28 20:39
Pg数据库
postgresql
数据库
postgresql
的表占内存很小但表所在的数据库占内存很大
最近在项目中遇到一个问题,让我排查了很久,在这里记录一下。在项目中需要存储的数据有的很大,所在建表的时候该字段就用大文本记录(text),java中用@Lob注释属性字段。使用jap自动建表的方式,结果造成有写情况下回记录非常多的数据,造成数据库磁盘占用率高且张得很快。有一个现象是,查看表占用的空间时显示表占用空间很小。但是查看表所在的数据库时,就会发现数据库占了很大的空间。原因就是,记录了大量的
飘零未归人
·
2025-02-28 20:07
#
postgresql
#
java
database
postgresql
:Error: ERROR: function round(double precision, integer) does not exist;
我一开始想把时间差转为分钟数,用于以下的语句:selectround(avg(floor(extract(epochfrombook.time)-extract(epochfrombook.sell_tiem))/60))结果返回的数据不是整型。,所以修改为:selectround(avg(floor(extract(epochfrombook.time)-extract(epochfromboo
飘零未归人
·
2025-02-28 20:37
#
postgresql
#
java
database
sql
PostgreSQL
用户创建删除及error while loading shared libraries解决方法
1.为数据库创建一个pg_test_user用户;[root@kevinlib]#su-postgres[postgres@kevin~]$createuserpg_test_usercreateuser:errorwhileloadingsharedlibraries:libpq.so.5:cannotopensharedobjectfile:Nosuchfileordirectory上面显示没
socrates
·
2025-02-28 20:03
数据库
PostgreSQL
Linux
PostgreSQL系列
postgresql
library
attributes
path
linux
user
kafka stream对比flink
以下是两者的核心区别和适用场景分析:1.定位与架构差异KafkaStreams定位:轻量级库(无需独立
集群
),深度集成Kafka,适用于构建与Kafka紧密耦合的流处理应用。
后季暖
·
2025-02-28 14:23
kafka
flink
分布式
部署
postgresql
_exporter监控pgsql
rds.amazonaws.com"PG_PORT="5432"PG_PASSWORD="bagayalu321"PG_USER="monitor_user"EXPORTER_VERSION="0.16.0"#
PostgreSQL
exporter
sj1163739403
·
2025-02-28 14:21
监控
postgresql
kafka-web管理工具cmak
一.背景:日常运维工作中,采用cli的方式进行kafka
集群
的管理,还是比较繁琐的(指令复杂?)。为方便管理,可以选择一些开源的webui工具。推荐使用cmak。
xiao-xiang
·
2025-02-28 14:49
kafka
kafka
分布式
消息队列(RocketMQ+Kafka)
消息队列的场景应用场景:异步(电商订单的创建、支付、发货流程)解耦削峰填谷(淘宝的双十一)需解决的问题:消息重复(唯一ID,幂等)消息丢失(ack确认机制,死信队列)消息堆积(增加消费者,增加消费能力,增加
集群
分担
八千里路云和月laiker
·
2025-02-28 14:16
算法
rocketmq
kafka
分布式
Mysql 主从
集群
同步延迟问题怎么解决
网络与硬件资源优化网络环境优化:检查主从服务器之间的网络连接,确保网络稳定且带宽充足,降低网络延迟和丢包率。可以通过更换高性能网络设备、优化网络拓扑结构等方式来实现。硬件资源调整:监控主从数据库服务器的CPU、内存、磁盘I/O等资源使用情况。若资源紧张,可通过增加硬件配置(如升级CPU、增大内存、更换为SSD硬盘)来提升服务器处理事务的能力;或在业务低峰期执行数据操作,降低请求量。业务逻辑与事务优
涛粒子
·
2025-02-28 12:35
mysql
数据库
redisCluster
集群
相关查询结果详解
redisCluster
集群
相关查询结果详解进入redis进群查看
集群
信息CLUSTERINFO命令CLUSTERNODES命令info命令infoCommandstats命令查询服务器相关key的大小单个
ghostp
·
2025-02-28 11:28
redis
redis
redis架构系列——Cluster
集群
模式详解
设计的主要特点和基本原理Redis
集群
目标高性能和线性可扩展性,最多可达1000个节点。没有代理,使用异步复制,并且不对值执行合并操作。
庄隐
·
2025-02-28 10:55
#
组件
redis
架构
Redis Cluster
集群
详解
数据分片(Sharding)哈希槽(HashSlot)机制:
集群
将数据划分为16384个哈希槽,每个键通过CRC16(key)%16384计算归属的槽。
高冷小伙
·
2025-02-28 10:21
redis
数据库
缓存
redis
集群
迅速搭建(个人学习和测试用)
笔者使用ubuntu操作系统下载redis地址:Indexof/releases/,选择最新的版本下载。解压后进入目录,直接make就可以编译。编译成功后在src目录下会生成redis-server和redis-cli可执行文件。进入redis目录下的utils/create-cluster目录,执行./create-clusterstart,快速启动6个实例zy@zy-VirtualBox:~/
yinhezhanshen
·
2025-02-28 08:02
redis
学习
java
python使用kafka原理详解_Python操作Kafka原理及使用详解
什么是KafkaKafka是一个分布式流处理系统,流处理系统使它可以像消息队列一样publish或者subscribe消息,分布式提供了容错性,并发处理消息的机制二、Kafka的基本概念kafka运行在
集群
上
形象顧問Aking
·
2025-02-28 07:19
Linux上用C++和GCC开发程序实现不同
PostgreSQL
实例下单个数据库的多个Schema之间的稳定高效的数据迁移
设计一个在Linux上运行的GCCC++程序,同时连接两个不同的
PostgreSQL
实例,两个实例中分别有一个数据库的多个Schema的表结构完全相同,复制一个实例中一个数据库的多个Schema里的所有表的数据到另一个实例中一个数据库的多个
weixin_30777913
·
2025-02-28 07:49
c++
数据库
postgresql
Postgresql
查询数据库列表,表列表,字段列表
--列出数据库列表SELECT*FROMpg_database;--查询表字段明细SELECTcol.table_schema,col.table_name,col.ordinal_position,col.column_name,col.data_type,col.character_maximum_length,col.numeric_precision,col.numeric_scale,c
小毛驴850
·
2025-02-28 06:13
postgresql
数据库
非关系型数据库和关系型数据库的区别
常见的关系型数据库有MySQL、
PostgreSQL
、Oracle等。非关系型数据库(NoSQL):数据没有固定的模式,存储方式更加灵活。可以是键值对、文档、列族、图等形式。
纠结哥_Shrek
·
2025-02-28 05:40
数据库
nosql
Redis hot key管理
同bigkey一样,hotkey也会带来一系列问题,如拖慢Redis性能、造成Redis
集群
节点间负载不均衡、大量请求造成Redis缓存击穿等。1.查询
Zhi@Li
·
2025-02-28 03:52
Redis运维
redis
数据库
缓存
数据库架构
dba
通过docker和gitlab实现项目自动打包部署
Gitlab如何实现自动打包部署到docker
集群
?
hxj..
·
2025-02-28 02:13
服务部署
docker
容器
运维
Redis分布式存储案例面试题
:1、哈希取余分区(小厂回答)2、一致性哈希算法分区(中厂回答)3、哈希槽分区(大厂回答,推荐回答)1、哈希取余分区2亿条记录就是2亿个(k,v),我们单机不行必须要分布式多机,假设有3台机器构成一个
集群
哎呀哎呀诶
·
2025-02-28 02:10
Redis
redis
分布式
数据库
技术分享| 分布式系统中服务注册发现组件的原理及比较
随着容器技术的兴起,服务
集群
部署在系统各处,服务之间的远程调用都需要通过服务发现来实现。
anyRTC
·
2025-02-28 00:27
音视频
分布式系统
音视频
分布式系统
Consul
Zookeeper
etcd
Xxl-job 3.0.0 切换
postgresql
数据库执行器无法注册
项目场景:提示:这里简述项目相关背景:例如:项目场景:示例:通过蓝牙芯片(HC-05)与手机APP通信,每隔5s传输一批传感器数据(不是很大)问题描述提示:这里描述项目中遇到的问题:例如:数据传输过程中数据不时出现丢失的情况,偶尔会丢失一部分数据APP中接收数据代码:@Overridepublicvoidrun(){bytes=mmInStream.read(buffer);mHandler.ob
lbyxkey
·
2025-02-27 23:46
java
用Docker搭建Redis主从复制的
集群
同样再到redis-slave1容器的命令窗口里,通过dockerexec-itredis-slave1/bin/bash命令进入容器的命令行窗口,也通过redis-cli命令进入客户端命令行,也再通过inforeplication命令查看该Redis服务器的主从模式的状态,部分结果如下所示。1c:\work>dockerexec-itredis-slave1/bin/bash2root@2e32
2401_84046635
·
2025-02-27 20:45
程序员
docker
redis
eureka
深入理解 Kubernetes 命名空间:高效管理与隔离资源的关键
命名空间的作用1.资源隔离2.多租户支持3.资源管理和策略控制4.简化管理创建和使用命名空间命名空间与
集群
中的其他资源结语在Kubernetes(k8s)中,命名空间(Namespace)是资源隔离和组织管理的核心概念之一
简单简单小白
·
2025-02-27 16:21
kubernetes
贪心算法
java
周边生态 | WAL-G 与 DBeaver 新版增加 Cloudberry 支持
ApacheCloudberry™(Incubating)是Apache软件基金会孵化项目,由Greenplum和
PostgreSQL
衍生而来,作为领先的开源MPP数据库,可用于建设企业级数据仓库,并适用于大规模分析和
·
2025-02-27 13:58
数据库
【YashanDB 知识库】yasboot
集群
状态命令登录失败问题
【标题】yasboot
集群
状态命令登录失败问题【问题分类】功能使用【关键字】yasboot、
集群
状态、无效用户名/密码、sys用户、null密码【问题描述】用户在执行yasbootclusterstatus-cyashan-d
·
2025-02-27 13:57
数据库程序员
minio多主机分布式部署
Minio多主机分布式docker-compose
集群
部署_miniodocker-compose-CSDN博客
一剑丶飘香
·
2025-02-27 12:14
云计算
Cassini_Network-Aware Job Schedulingin Machine Learning Clusters
这篇论文介绍了CASSINI,一种用于机器学习(ML)
集群
的网络感知作业调度器。研究背景背景介绍:这篇文章的研究背景是深度学习数据集和模型规模的不断增长,对高效GPU
集群
的需求日益增加。
一只积极向上的小咸鱼
·
2025-02-27 07:37
机器学习
人工智能
华为MRS产品组件
MRS:MRS是一个在华为云上部署和管理Hadoop系统的服务,一键即可部署Hadoop
集群
。
QianJin_zixuan
·
2025-02-27 06:59
hadoop
hive
大数据
数据库架构
gaussdb
深入解析Zookeeper脑裂问题与CAP取舍:从原理到实战
“脑裂”(Split-brain)现象是指在一个分布式
集群
中,由于网络分区等原因,导致
集群
中的节点被分割成两个或多个独立的部分,每个部分都认为自己是唯一活跃的服务提供者。
guihong004
·
2025-02-27 05:26
java面试题
zookeeper
分布式
云原生
集群
部署Elasticsearch+Logstash+Kibana+Filebeat+Kafka+Zookeeper
目录引言一、安装Zookeeper步骤1、准备阶段(全部节点操作,以node1为例)(1)关闭防火墙和系统安全机制(全部节点操作,以node1为例)(2)同步时钟源(全部节点操作,以node1为例)(3)JDK的安装(全部节点操作,以node1为例)(4)配置hosts(全部节点操作,以node1为例)2、安装Zookeeper软件包(全部节点操作,以node1为例)3、修改配置文件(全部节点操作
YH746
·
2025-02-27 05:25
日志分析系统
linux
深入探讨K8s资源管理和性能优化
#作者:曹付江文章目录前言:1.监控Kubernetes
集群
的资源利用率1.1Prometheus1.2Kubernetes度量服务器1.3Grafana1.4自定义指标2.识别资源瓶颈2.1.监控工具
磐基Stack专业服务团队
·
2025-02-27 04:50
Kubernetes
kubernetes
性能优化
容器
运维案例之记一次Kubernetes
集群
证书过期或延期操作处理实践指南
欢迎关注「WeiyiGeek」公众号点击下方卡片即可关注我哟!设为「星标⭐」每天带你基础入门到进阶实践再到放弃学习!涉及网络安全运维、应用开发、物联网IOT、学习路径、个人感悟等知识“花开堪折直须折,莫待无花空折枝。”作者主页:[https://www.weiyigeek.top]作者博客:[https://blog.weiyigeek.top]作者答疑学习交流群:
全栈工程师修炼指南
·
2025-02-26 21:48
云原生落地实用指南
kubernetes
运维
docker
容器
云原生
Elasticsearch补充(3) --Linux
集群
安装ES
1安装Elasticsearch1.1创建普通用户ES不能使用root用户来启动,必须使用普通用户来安装启动。这里我们创建一个普通用户以及定义一些常规目录用于存放我们的数据文件以及安装包等。创建一个es专门的用户(必须)使用root用户在三台机器执行以下命令useradderainmpasswderainm注:这里我创建的是我的用户,第二个passwd用户名后会设置自己的密码1.2为普通用户era
erainm
·
2025-02-26 20:44
大数据学习
elasticsearch
2.部署kafka:9092
官方文档:http://kafka.apache.org/documentation.html(虽然kafka中集成了zookeeper,但还是建议使用独立的zk
集群
)Kafka3台
集群
搭建环境:操作系统
AustinCien
·
2025-02-26 20:43
kafka
zookeeper
elk
1.部署zookeeper
集群
:2181
官网:ApacheZooKeeperZookeeper
集群
的工作是超过半数才能对外提供服务,成员数量一般为奇数台环境:操作系统:centos7软件版本:zookeeper-3.4.12.tar.gz防火墙
AustinCien
·
2025-02-26 20:12
zookeeper
kafka
elk
分布式
云原生
【无人
集群
系列---大疆无人
集群
技术进展、技术路线与未来发展方向】
大疆无人
集群
技术进展、技术路线与未来发展方向一、技术进展1.核心技术创新(1)
集群
协同控制技术(2)感知与能源系统升级2.行业应用落地(1)智慧城市与安防(2)应急救援(3)物流与测绘二、技术路线解析1
Dymc
·
2025-02-26 19:32
无人集群
低空经济
无人集群
无人机
低空经济
通信
实战探秘Nginx的六大应用场景与配置指南,让网络服务如虎添翼
一、负载均衡应用场景:当面对大量用户访问时,通过Nginx实现后端服务器
集群
间的负载均衡,可有效分散请求压力,保障服务稳定性和响应速度。配置示例:http
IT运维先森
·
2025-02-26 17:25
nginx
nginx
运维
上一页
6
7
8
9
10
11
12
13
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他