E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
RocketMQ集群
探索大数据处理:利用 Apache Spark 解锁数据价值
ApacheSpark作为一个快速、通用的
集群
计算框架,以其出色的性能和丰富的API,成为大数据处理的利器。那么,ApacheSpark究竟如何帮助我们高效处理海量数据?接下来,让我们一起深入探讨。
Echo_Wish
·
2025-02-19 07:59
实战高阶大数据
apache
spark
大数据
rabbitmq3.5.1 原理和
集群
安装
.51cto.com/2382721/1864895http://kaibinyuan.blog.51cto.com/7304008/1610110原因:最近有一个异步需要使用消息队列,或许最终会选择阿里的
rocketmq
「已注销」
·
2025-02-19 06:58
大数据
网络
运维
RabbitMQ,
RocketMQ
,Kafka 消息模型对比分析
消息模型消息队列的演进消息队列模型早期的消息队列是按照”队列”的数据结构来设计的。生产者(Producer)产生消息,进行入队操作,消费者(Consumer)接收消息,就是出队操作,存在于服务端的消息容器就称为消息队列。当然消费者也可能不止一个,存在的多个消费者是竞争的关系,消息被其中的一个消费者消费了,其它的消费者就拿不到消息了。发布订阅模型如果一个人消息想要同时被多个消费者消费,那么上面的队列
Java架构设计
·
2025-02-19 06:57
java
Java程序员
消息模型
开发语言
程序人生
Kubernetes 服务发现背后的秘密武器——CoreDNS
Kubernetes服务发现背后的秘密武器——CoreDNS在Kubernetes
集群
中,CoreDNS是一个关键的基础组件,负责域名解析和服务发现。
weixin_42587823
·
2025-02-19 05:47
dns
kubernetes
服务发现
容器
coredns
Redis
集群
模式的工作原理能说一下么?
面试题Redis
集群
模式的工作原理能说一下么?在
集群
模式下,Redis的key是如何寻址的?分布式寻址都有哪些算法?了解一致性hash算法吗?
小新杂谈社
·
2025-02-19 05:16
缓存
后端面试
redis
数据库
缓存
分布式
二十redis之gossip协议
通过节点之间不断交换信息,一段时间后所有节点都会知道整个
集群
完整的信息。gossip算法,意思是八卦算法,在办公室中只要一个人八卦一下,在有限的时间内,办公室内的所有人都会知道八卦消息。
我爱看明朝
·
2025-02-19 05:46
后端
RocketMQ
源码分析-Rpc通信模块(remoting)二
前言今天继续
RocketMQ
-Rpc通信模块(remoting)的源码分析。
吃水果的猪儿虫
·
2025-02-19 05:13
java-rocketmq
rocketmq
rpc
rocketmq
源码解析之NamesrvController启动②创建mqclient②
说在前面接上次,更多源码解析请关注“天河聊架构”微信公众号源码解析netty连接管理handlerclassNettyConnectManageHandlerextendsChannelDuplexHandler{@Overridepublicvoidconnect(ChannelHandlerContextctx,SocketAddressremoteAddress,SocketAddressl
qq_23283355
·
2025-02-19 05:13
mq
rocketmq
dubbo
springboot
消息队列
RocketMQ
七、
rocketMQ
的网络通信模块
关于
rocketMQ
的netty消息处理,实际上都在一个
rocketmq
-remoting模块中。不管是nameserver还是broker,从netty的handler开始是统一的结构。
vinylon1022
·
2025-02-19 05:43
RocketMQ
java
spring
cloud
alibaba
RocketMQ
性能调优篇-困扰我半年多的
RocketMQ
-timeout-exception-终于被破解了
1、网络超时现象时不时总是接到项目组反馈说生产环境MQ发送超时,客户端相关的日志截图如下:今天的故事将从张图开始。2、问题排查2.1初步分析上图中有两条非常关键日志:invokeSync:waitresponsetimeoutexception网络调用超时reciveresponse,butnotmatchedanyrequest这条日志非常之关键,表示尽管客户端在获取服务端返回结果时超时了,但客
2401_84048290
·
2025-02-19 04:09
程序员
rocketmq
php
开发语言
【Elasticsearch源码解读】代码包结构概述
以下是这些包的主要功能:####action封装了Elasticsearch的各种操作,如索引、搜索、删除等,提供了与
集群
交互的接口。
risc123456
·
2025-02-19 03:58
elasticsearch
一文读懂Ingress-Nginx以及实战教程
Ingress-Nginx简介Ingress-Nginx是Kubernetes的一个入口控制器,它允许您将外部HTTP和HTTPS流量路由到
集群
内的服务。
努力的小T
·
2025-02-19 02:47
Kubernetes
Linux
云计算运维基础
nginx
运维
服务器
linux
kubernetes
云原生
采用分布式部署deepseek
1.环境准备硬件需求:确保您的
集群
环境中有足够的GPU资源,并且所有机器之间可以通过高速网络互联。软件依赖:安装必要的库和工具,如PyTorch、Transformers等。
慧香一格
·
2025-02-19 02:14
AI
学习
分布式
deepseek
Redis 主从复制的原理详解
主从复制是Redis
集群
高可用架构的基础,它不仅提高了系统的可用性,还为读写分离、数据备份等场景提供了支
海里真的有鱼
·
2025-02-19 01:08
redis
数据库
缓存
360智算中心:万卡GPU
集群
落地实践
360内部对于智算中心的核心诉求是性能和稳定性,本文将深入探讨360智算中心在万卡GPU
集群
中的落地实践过程,包括算力基础设施搭建、
集群
优
ZVAyIVqt0UFji
·
2025-02-18 23:47
大规模GPU
集群
的进阶之路
研发团队在负责制定硬件选型策略并设计优化下一代大规模GPU
集群
的软硬件架构时,我们需要关注GPU技术的最新进展、重点研究问题以及潜在的技术突破。一、GPU在重点研究的问题算力提升与
卢旗
·
2025-02-18 23:47
人工智能
智能算力中心万卡GPU
集群
架构深度解析
智能算力中心万卡GPU
集群
架构深度分析 自ChatGPT发布,科技界大模型竞赛如火如荼。
科技互联人生
·
2025-02-18 23:13
科技
数码
人工智能
人工智能
gpu算力
硬件架构
使用 INFINI Gateway 保护 Elasticsearch
集群
之阻断不合理的查询
经过调查,这些案例主要分为两类:一类是由于查询吞吐量超出了
集群
的处理能力,另一类则是在执行某些不合理的查询时触发了OOM。
·
2025-02-18 22:34
数据库
基于eBPF的智能诊断平台:实现云原生系统的自愈型运维体系
引言:从被动运维到预测性自愈的进化当某电商平台通过eBPF实时诊断系统提前48小时预测到MySQL
集群
的锁竞争风暴时,其核心是千万级指标粒度的内核状态分析与AI驱动的根因定位算法的结合。
桂月二二
·
2025-02-18 21:58
云原生
运维
CPP
集群
聊天服务器开发实践(七):Github上传项目
github链接:GitHub-arduino-ctrl/ClusterServer:基于json+muduo+mysql+nginx+redis的
集群
服务器与客户端通信源码步骤如下:1.github新建代码仓库
杨枝甘露小码
·
2025-02-18 18:15
CPP集群聊天服务器开发
服务器
github
CPP
集群
聊天服务器开发实践(一):用户注册与登录
目录1客户端用户注册与登录1.1主要思想1.2网络层1.3业务层1.4数据层1.5测试结果1客户端用户注册与登录1.1主要思想实现网络层、业务层、数据层的解耦,提高系统的可维护性。网络层:主要实现对客户端连接、客户端读写请求的捕获与回调,将其分发到多个线程中执行。业务层:主要实现客户端读写请求回调的具体操作,当前阶段主要包含:登录业务、注册业务、用户异常退出业务数据层:主要实现数据库中表的CUAD
杨枝甘露小码
·
2025-02-18 18:45
CPP集群聊天服务器开发
服务器
c++
数据库
单例模式
C++
集群
聊天服务器项目博客目录
C++
集群
聊天服务器项目博客目录C++
集群
聊天服务器项目总概述-CSDN博客github源码地址:DarlingGYQ/chatserver:基于C++11的可以工作在nginxtcp负载均衡环境中的
集群
聊天服务器和客户端源码环境配置
为了前进而后退,为了走直路而走弯路
·
2025-02-18 18:43
C++
项目
c++
服务器
开发语言
消息队列简述
当前使用较多的消息队列有RabbitMQ、
RocketMQ
、ActiveMQ、Kafka、ZeroMQ、MetaMq等,而部分数据库如Redis、Mysql以及
八二年的栗子
·
2025-02-18 18:39
java
rancher k3s 默认应用服务,内部DNS访问域名是什么
rancherk3s默认应用服务,内部DNS访问域名是什么默认
集群
域名服务域名格式Rancher自身服务的域名特殊情况与注意事项示例场景在Rancher管理的K3s
集群
中,默认的内部DNS访问域名遵循Kubernetes
santer_x
·
2025-02-18 16:56
rancher
kafka搭建
确定环境2.整理机器清单3.确定组件版本4JDK安装5kafka安装5.1master安装5.2slave_1从节点安装5.3slave_2从节点安装5.4配置环境变量5.5启动kafak5.5kafka
集群
一键管理脚本总结前言
瀟湘夜雨-秋雨梧桐
·
2025-02-18 15:19
kafka
分布式
zookeeper
大数据
数据仓库
内存服务器主要是指什么?
内存服务器一般会采用分布式内存架构,将多个服务器节点组合成一个内存
集群
,可以进行共享内存资源,使内存服务器获得良好的扩展性,以此来支持一些大规模的并发操作;同时内存服务器可以存储
wanhengidc
·
2025-02-18 15:46
服务器
运维
分布式架构和
集群
架构的区别
目录1.分布式架构2.
集群
架构1.分布式架构分布式架构是每个服务器都是运行不同的程序,提供的功能不一样,相互协作形成一个完整的生态,再对外提供服务,各个服务器之间有存在相互通信调用的情况,架构图如下。
胡萝卜炒白萝卜
·
2025-02-18 14:34
架构
分布式架构
集群架构
使用Docker安装Spark
集群
(带有HDFS)
本实验在CentOS7中完成第一部分:安装Docker这一部分是安装Docker,如果机器中已经安装过Docker,可以直接跳过[root@VM-48-22-centos~]#systemctlstopfirewalld[root@VM-48-22-centos~]#systemctldisablefirewalld[root@VM-48-22-centos~]#systemctlstatusfi
Sicilly_琬姗
·
2025-02-18 10:52
云计算
大数据
docker
spark
hdfs
使用Docker部署Spark
集群
使用Docker部署Spark
集群
克隆包含启动脚本的git仓库启动Spark0.8.0
集群
并切换至SparkShell环境不带参数运行部署脚本*运行一些小的例子终止
集群
克隆包含启动脚本的git仓库*gitclone-bblogpostgit
小孩真笨
·
2025-02-18 10:17
工程开发技术
Cloud
Data
Docker
Spark
从0开始使用Docker搭建Spark
集群
为什么要在Docker上搭建Spark
集群
吃鱼的羊
·
2025-02-18 10:16
SPARK
Hadoop
Windows环境下es8的
集群
部署
原创文章:Windows环境下es8的
集群
部署–编程屋目录1相关概念1.1单机
集群
1.2
集群
Cluster1.3节点Node2Windows下部署2.1节点node-10012.2节点node-10022.3
想养一只萨摩耶~
·
2025-02-18 07:24
Elasticsearch
elasticsearch
大数据
服务器
Windows环境下构建本地多节点Elasticsearch
集群
Windows环境下构建本地多节点Elasticsearch
集群
在大数据领域,Elasticsearch是一个经常使用的分布式搜索和分析引擎。
静谧星光c
·
2025-02-18 06:45
windows
elasticsearch
jenkins
大数据
ElasticSearch中的JVM性能调优
在我搭建ES
集群
过程中,参照important-settings官方文档来的,并没有对JVM参数做过多的调整。
java领域
·
2025-02-18 05:33
spring
spring
boot
java
后端
mysql
深入浅出了解HBase及RDD编程
HBase为什么能存储海量数据创建一个HBase表配置Spark编写程序读取HBase数据编写程序向HBase写入数据关于搭建HBase高可用
集群
的图文教程,可参考我的另一篇博文——安装并配置HBase
山海王子
·
2025-02-18 03:11
大数据
hbase
MongoDB分片
集群
搭建及扩容
准备工作在CentOS7上安装MongoDB分片
集群
6Servers代表:6台服务器上都要操作.环境准备On6Servers给虚拟机设置静态IPvi/etc/sysconfig/network-scripts
老虎大人
·
2025-02-18 02:29
Aerospike 缓存超时错误的深度解析与解决方案
错误背景假设我们正在尝试将数据推入Aerospike
集群
中以创建一个高效的缓存系
t0_54coder
·
2025-02-18 00:58
编程问题解决手册
缓存
php
开发语言
个人开发
在Hadoop
集群
中实现数据安全:技术与策略并行
在Hadoop
集群
中实现数据安全:技术与策略并行随着大数据技术的广泛应用,Hadoop已经成为处理和存储海量数据的首选平台。
Echo_Wish
·
2025-02-17 23:50
实战高阶大数据
hadoop
大数据
分布式
Redis+Sentinel安装与配置
在这里我们搭建的是一个1主3从的redis+3个哨兵
集群
的环境,由于是在一台物理机上,所有我们用端口区分。
weixin_30532973
·
2025-02-17 23:49
数据库
网络
lua
redis sentinel模式 与 redis 分片
集群
配置
模式高可用性数据分片部署复杂度适用场景Sentinel模式高无中等中小规模,需要高可用性
集群
模式高支持复杂大规模,需要高可用性和数据分片RedisSentinel模式(在主从复制的基础上引入Sentinel
癸酉金鸡
·
2025-02-17 22:36
redis
sentinel
数据库
linux 搭建kafka
集群
目录、一、环境准备二、文件配置三、
集群
启动一、环境准备1、我这里是准备三台服务器节点ipnode1192.168.72.132node2192.168.72.133node3192.168.72.1342
节点。csn
·
2025-02-17 21:04
linux
kafka
运维
从零构建高可用MySQL
集群
:Percona XtraDB Cluster 实战部署
实战指南:基于PerconaXtraDBCluster构建高可用MySQL
集群
架构引言:为什么选择PXC?
Deutsch.
·
2025-02-17 20:49
mysql
数据库
PXC搭建MySQL8
集群
一、环境准备1、CentOS7.9.x2、PerconaXtraDBCluster8.0.x3、NavicatPremium15.0.274、准备3台CentOS7.9.x服务器IP_1:192.168.101.111IP_2:192.168.101.112IP_3:192.168.101.113二、使用yum安装pxc8.0.x在3台服务器上参考以下步骤依次安装2.1安装percona-rele
慕雨城
·
2025-02-17 20:47
数据库
mysql
YashanDB共享
集群
本文内容来自YashanDB官网,原文内容请见https://doc.yashandb.com/yashandb/23.3/zh/%E6%A6%82%E5%BF%B5%...共享
集群
基于YashanDB
·
2025-02-17 19:53
数据库
mysql8.0使用PXC实现高可用(Rocky8.0环境)
目录搭建PXC
集群
配置hosts解析用MySQL软件模块的命令(三台都需要)下载PXC安装包启用PXC80版本安装PXC
集群
初始化数据库第一个节点需要以引导模式启动:查看临时密码修改密码免密登录查询
集群
信息查看证书修改证书查询
集群
信息同步状态监控节点
致奋斗的我们
·
2025-02-17 19:13
openEuler
Linux
云原生高级
oracle
数据库
mysql
linux
openEurler
adb
Rocky8.0
python编写mapreduce job教程
它可以运行在本地模式或Hadoop
集群
上。以下是一个简单的MapReduce示例,它计算文本文件中每个单词的出现次数。安装mrjob首先,你需要安装mrjob库。
weixin_49526058
·
2025-02-17 19:12
python
mapreduce
hadoop
RPC框架Dubbo深入分析
依赖于Zookeeper的稳定性Redis支持基于客户端双写的
集群
方式,性能高要求服务器时间同步,用于检查心跳过期脏数据Multicast去中心化,不需要安装注册中心依赖于网络拓普和路由,跨机房有风险SimpleDogfooding
radcb55226
·
2025-02-17 16:17
程序员
rpc
dubbo
网络协议
Sentinel
目录一、Sentinel简介核心特性二、环境准备1.控制台安装2.SpringBoot集成三、核心功能实战1.流量控制2.熔断降级3.热点参数限流四、高级配置1.规则持久化(Nacos集成)2.
集群
流控五
华农第一蒟蒻
·
2025-02-17 14:24
java修炼
sentinel
开发语言
java
Knox原理与代码实例讲解
ApacheKnox是一个反向代理服务器,旨在为ApacheHadoop
集群
提供单一入口点,增强安全性和集中化管理。它位于Hadoop
集群
与客户端应用程序之间,充当网关和负载均衡器的角色。
AI天才研究院
·
2025-02-17 14:50
计算
DeepSeek
R1
&
大数据AI人工智能大模型
计算科学
神经计算
深度学习
神经网络
大数据
人工智能
大型语言模型
AI
AGI
LLM
Java
Python
架构设计
Agent
RPA
Linux Docker 部署 Elasticsearch (ES)
集群
详解教程
1.安装Docker首先,确保你的Linux系统上已经安装了Docker。如果尚未安装,可以通过以下命令进行安装:sudoyuminstall-yyum-utilssudoyum-config-manager--add-repohttps://download.docker.com/linux/centos/docker-ce.reposudoyuminstalldocker-cedocker-c
努力的小T
·
2025-02-17 12:10
Linux
云计算运维基础
docker
linux
docker
elasticsearch
运维
服务器
云计算
大数据
记GBase8a一次简单的典型sql优化
原文地址:https://www.gbase.cn/community/post/3549某客户反映一条业务测试sql查询缓慢(3节点
集群
),百万级数据量用时6-8s,不满足小于1秒的业务需求!
GBase技术大咖
·
2025-02-17 12:40
GBase8a
数据库
sql
性能优化
上一页
9
10
11
12
13
14
15
16
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他