E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Zabbix分布式监控系统
clickhouse最佳实践(一):clickhouse千亿级日志系统单机到集群架构演进历程
监控和维护6.集群横向扩展最佳实践系列文章持续完善中,记录了业务系统从碰到瓶颈到迭代的过程1.初始阶段:单机部署针对ClickHouse(以下简称CK)单机的优化过程,通常包括以下几个方面,以确保在非
分布式
环境中达到最佳性能
Biturd
·
2025-02-09 11:31
clickhouse
架构
微服务架构中的事件驱动设计:使用 Kafka 和 Apache Pulsar 实现高效的事件流管理
随着大规模
分布式
系统的复杂性不断增加,事件流平台如ApacheKafka和ApachePulsar在事件驱动架构
桂月二二
·
2025-02-09 08:08
架构
微服务
kafka
spark1.6.0
分布式
安装
1.概述本文是对spark1.6.0
分布式
集群的安装的一个详细说明,旨在帮助相关人员按照本说明能够快速搭建并使用spark集群。
问道9527
·
2025-02-09 08:33
spark
spark
分布式
集群
spark安装与环境配置
http://spark.apache.org/downloads.html考虑到spark之后要结合hadoop一起使用,所以下载和已经安装hadoop版本均兼容的spark(首先安装好hadoop选择伪
分布式
配置
Handoking
·
2025-02-09 08:03
大数据进阶中
spark
python
安装
NoSQL 数据库有哪些类型?
并且,NoSQL数据库天生支持
分布式
,数据冗余和数据分片等特性,旨在提供可扩展的高可用高性能数据存储解决方案。一个常见的误解是NoSQL数据库或非关系型数据库不能很好地
HUNAG-DA-PAO
·
2025-02-09 07:02
数据库
nosql
面试官:Spring中都用到了哪些设计模式?
写作是对自己学习的总结和记录,如果您对Java、
分布式
、微服务、中间件、SpringBoot、SpringCloud等技术感兴趣,可以关注我的动态,我们一起学习,一起成长!
猿码天地
·
2025-02-09 07:31
设计模式
面试技巧
Java
spring
设计模式
java
aop
spring
boot
深度剖析
分布式
存储架构
【摘要】本文介绍了
分布式
存储的架构类型、
分布式
理论、不同的
分布式
文件系统和
分布式
键值系统等,较为系统详尽。全文约2万字,可收藏。
罗伯特之技术屋
·
2025-02-09 07:28
大数据及数据管理(治理)专栏
计算机工程的科学与探索专栏
分布式
架构
数据库
RabbitMQ技术深度解析:打造高效消息传递系统
引言在当前的
分布式
系统架构中,消息队列作为一种高效的消息传递机制,扮演着越来越重要的角色。RabbitMQ,作为广泛使用的开源消息代理,以其高可用性、扩展性和灵活性赢得了众多开发者的青睐。
lozhyf
·
2025-02-09 05:17
工作
学习
面试
rabbitmq
分布式
一个RPC框架应该解决哪些问题?
RPC(RemoteProcedureCall,远程过程调用)框架的核心目标是简化
分布式
系统中的通信,使得分布在不同计算机上的系统或服务能够像调用本地函数一样,轻松地进行远程调用。
叫我DPT
·
2025-02-09 03:59
rpc
rpc
图数据库 | 17、高可用
分布式
设计(上)
在设计高性能、高可用图数据库的时候,从单实例、单节点出发,一般有3种架构演进选项:主备高可用、
分布式
共识和大规模水平
分布式
。
XAI嬴图
·
2025-02-09 03:28
图数据库原理
架构与应用
数据库
分布式
Linux: 时间服务器chrony
环境时间服务器:192.168.186.10主机名:
zabbix
-server其他服务器:192.168.186.11主机名:
zabbix
-agent-1其他服务器:192.168.186.12主机名:
zJayLiao
·
2025-02-09 02:22
chrony
Linux
linux
分布式
限流——Redis实现令牌桶算法
令牌桶算法令牌桶算法(TokenBucketAlgorithm)是一种广泛使用的流量控制(流量整形)和速率限制算法。这个算法能够控制网络数据的传输速率,确保数据传输的平滑性,防止网络拥堵,同时也被应用于软件系统中限制请求的速率,如API限流等场景。工作原理令牌的生成:系统以固定的速率向令牌桶中添加令牌(token),直到桶满为止。桶的容量(即最大令牌数)限制了短时间内可以发送的最大数据量。请求的处
zainful
·
2025-02-09 01:15
java
开发语言
jvm
分布式
redis
学习小记-使用Redis的令牌桶算法实现
分布式
限流
在介绍令牌桶算法前先介绍一下漏桶算法(LeakyBucket)漏桶算法(LeakyBucket)漏桶算法是一种固定容量的容器模型,它通过控制数据流入和流出的速度来限制数据的传输速率。漏桶算法的主要特点包括:固定容量:漏桶的容量是固定的,一旦桶满,多余的数据将被丢弃或拒绝。持续泄露:桶中的“水”(数据)以固定速率持续流出。突发处理:可以在桶未满时快速处理突发流量,但一旦桶满,流量将被限制。Redis
菜鸟翻身做主人
·
2025-02-09 01:14
redis
ClickHouse vs StarRocks 选型对比
越来越多的人将目光锁定在列存的
分布式
数据库上。
金州饿霸
·
2025-02-09 00:07
Big
Data
分布式数据库
clickhouse
有Redis为什么还要本地缓存?谈谈你对本地缓存的理解?
既然,已经有了Redis可以实现
分布式
缓存了,为什么还需要本地缓存呢?接下来,我们一起来看。为什么需要本地缓存?
·
2025-02-08 23:38
java
【Linux】【Gitlab】 Gitlab 社区版(免费)搭建步骤
1.简介IT源码版本管理工具,常见的版本管理有VSS(VisualSourceSafe)、CVS、SVN、GIT;本篇主要介绍GIT,
分布式
源码版本管理工具,并在此基础上搭建起来的web服务GIT目前开源市场有
Peter.Feng
·
2025-02-08 22:51
工程类
linux
运维
DolphinScheduler:大数据任务调度利器
DolphinScheduler是Apache开源的一款
分布式
、大数据任务调度系统,致力于解决复杂的任务依赖管
hsukk17
·
2025-02-08 21:48
大数据工具类
大数据
Redis 进阶必备技能
目录Redis进阶必备技能Redis基础数据结构StringListSetHashZsetRedis进阶使用布隆过滤器
分布式
锁深入原理IO模型通信协议持久化主从同步SentinelRedis集群工作原理
魏小言
·
2025-02-08 18:54
架构设计
数据库
redis
rdb
aof
分布式锁
【Redis】事务因WATCH的键被修改而失败 事务队列中的操作被自动丢弃 UNWATCH的应用场景
**
分布式
锁**7.**监控和调优**总结**`WATCH`的作用****`UNWATCH`的作用****`UNWATCH`的应用场景**1.**显式取消监控**2.
阿猿收手吧!
·
2025-02-08 18:21
#
Redis
redis
数据库
服务器
c++
开发语言
缓存
Web3时代的开放之门:区块链技术与创新生态
区块链技术的本质区块链技术是一种去中心化的
分布式
账本技术,通过将数据存储在多个节点上,并使用密码学技术确保数据的安全性和完
dingzd95
·
2025-02-08 17:44
web3
区块链
物联网
DKG(Distributed Key Generation)协议
一、DKG是什么DKG(
分布式
密钥生成)提供了一种去中心化的方法,使各个参与方在不相互信任的情况下生成共享密钥,以确保安全通信和多方参与的机密性。
smilejiasmile
·
2025-02-08 16:11
#
密码学及其区块链应用
区块链从
1.0
到
3.0
的技术分享锦集及讲解
dkg
crypto
【
分布式
理论五】
分布式
调用(3):服务注册与发现
通过合理的服务注册机制、负载均衡策略以及健康检测,
分布式
系统可以
roman_日积跬步-终至千里
·
2025-02-08 15:05
分布式架构
分布式
【面试场景】MySQL
分布式
主键选取
文章目录一.MySQL的自增主键二.UUID三.雪花ID(推荐)我的博客地址一.MySQL的自增主键适合单表的情况,在
分布式
分库分表下可能会有一些问题主键冲突问题在
分布式
系统中,多个数据库节点独立生成自增主键
5faith
·
2025-02-08 15:04
面试
mysql
分布式
分布式
计算框架
分布式
计算就是为了把多个计算逻辑能够放到多台机器上执行,执行的逻辑一般使用java或者python等,还牵扯到数据如何分片。
wlstephenw
·
2025-02-08 15:03
分布式
【MapReduce】
分布式
计算框架MapReduce
分布式
计算框架MapReduce什么是MapReduce?
桥路丶
·
2025-02-08 15:00
大数据Hadoop快速入门
big
data
互联网
分布式
ID解决方案
业界实现方案1.基于UUID2.基于DB数据库多种模式(自增主键、segment)3.基于Redis4.基于ZK、ETCD5.基于SnowFlake6.美团Leaf(DB-Segment、zk+SnowFlake)7.百度uid-generator()基于UUID生成唯一IDUUID生成策略推荐阅读DDD领域驱动与微服务架构设计设计模式与技术组件大厂案例-百度工程效率如何优化垃圾回收机制?-CSD
fajianchen
·
2025-02-08 15:30
系统设计
IT架构
分布式
爬虫
分布式
框架PySpider
介绍PySpider是一个基于Python的
分布式
爬虫框架,它以其强大的功能和灵活性在数据爬取领域得到广泛应用。
菠菜很好吃
·
2025-02-08 15:30
python
爬虫
分布式
Nacos 深入解析:用法、原理与实际应用
Nacos(DynamicNamingandConfigurationService)作为一款阿里巴巴开源的
分布式
服务发现与配置管理平台,提供了强大且灵活的服务发现、配置管理、健康检查、负载均衡等功能。
夜深微雨醉初醒
·
2025-02-08 13:48
#
微服务技术栈/Nacos
nacos
Zookeeper的选举过程
Zookeeper的选举代码分析Zookeeper的Leader选举是它
分布式
一致性和高可用性的关键机制。
夜深微雨醉初醒
·
2025-02-08 13:17
#
zookeeper
分布式
云原生
架构是怎样练成的-楼宇
监控系统
案例
项目背景这是一个楼宇集中
监控系统
,目的是对楼宇中感兴趣的设备进行集中监控,如门磁、配电柜、空调、温度湿度传感器、火警等各类安防、消防、能效、计算机设备,在中央控制室就可以尽在掌
workflower
·
2025-02-08 13:47
设计方法
架构
设计模式
软件工程
软件需求
系统架构
分布式
探索
一、为什么要使用
分布式
id?
匠道
·
2025-02-08 12:41
分布式
mysql高可用集群MGR组复制的介绍、部署及配置说明
高一致性:基于
分布式
paxos协议实现组复制,保证数据一致性;高容错性:自动检测机制,只要不是大多数节点都宕机就可以继续工作,内置防脑裂保护机制;高扩展性:节点的增加与移除会自动更新组成员信
lytcreate.
·
2025-02-08 12:41
Mysql
大数据
mysql
数据库
Spring框架
Spring初识Spring简介Spring是一个开源的轻量级JavaEE(现在称为JakartaEE)开发框架,用于构建企业级应用程序和
分布式
系统。
慕容峻才
·
2025-02-08 11:02
spring
java
后端
kafka 集群为什么依赖 zookeeper ?
在Kafka集群中,ZooKeeper扮演了关键的角色,负责协调和管理Kafka的
分布式
系统。
将臣三代
·
2025-02-08 10:55
kafka
zookeeper
分布式
Elasticsearch从入门到精通超详细版本(全)
索引增删改查3.2文档增删改查3.3批量处理3.4高级查询4.集群环境部署4.1window系统4.2linux系统4.2.1单点部署4.2.2集群部署5.深层次概念前言在讲解重点知识的时候,先科普一个知识
分布式
免费开源搜索引擎搜索的东西包括视频文章图片将数据分为
码农研究僧
·
2025-02-08 09:52
100天精通全栈
elasticsearch
数据库
什么是Kafka?有什么主要用途?
Kafka是一个
分布式
流处理平台,最初由LinkedIn开发并开源,后来成为Apache软件基金会的一个顶级项目。它被设计用于高吞吐量、持久性、
分布式
的数据流处理。
还能在学一小时
·
2025-02-08 09:51
十四
Kafka
kafka
分布式
分布式
系统开发实战:微服务架构,实战:基于CQRS微服务通信
实战:基于CQRS微服务通信AxonFramework是一个适用于Java的、基于事件驱动的轻量级CQRS框架,既支持直接持久化Aggregate状态,也支持采用EventSourcing。AxonFramework的应用架构如图9-6所示。图9-6AxonFramework应用架构本节,我们将基于AxonFramework来实现一个CQRS应用“axon-cqrs”。该应用展示了:“开通银行账户
写代码的珏秒秒
·
2025-02-08 08:36
Java
编程
程序员
架构
微服务
java
第19章《VTK并行渲染》
VTK提供了一些工具和方法来利用多核处理器、
分布式
计算环境以及GPU加速来进行并行渲染。1.并行渲染的目标加速数据处理:通过将计算任务分配给多个处理器或计算节点,减少数据处理时间。
《雨声》
·
2025-02-08 07:32
VTK小白入门
算法
c++
信息可视化
计算机视觉
GaussDB 关键架构目标
在产品形态上,提供面向云数据库服务GaussDB的
分布式
安装包和集中式安装包,提供面向本地化安装的小型化安装包。根据华为云提供的调查报告,当前全球数据库市场增长超预期,云是数据库增长最重要驱动力。
关沵什么柿
·
2025-02-08 05:47
gaussdb
架构
Apache Kafka:高吞吐
分布式
流平台的深度解析
引言:流数据时代的挑战在实时推荐、物联网数据处理、金融交易监控等场景中,传统消息队列面临三大核心挑战:海量数据吞吐:日均千亿级消息处理需求超低延迟要求:毫秒级端到端传递延迟数据持久保障:故障恢复后消息零丢失ApacheKafka凭借其独特的设计哲学,成为解决这些问题的行业标准方案。本文将从架构设计、核心机制到实践应用进行全面解析。一、Kafka核心概念全景图1.1消息系统拓扑模型plaintext
lozhyf
·
2025-02-08 04:07
学习
工作
分布式
apache
kafka
Kafka 之事务消息
前言:在
分布式
消息系统中,事务消息也是一个热门课题,在项目的实际业务场景中,如果用到事务消息的场景也不少见,那Kafka作为一个高性能的
分布式
消息中间件,同样也支持事务消息,本篇我们将对Kafka的事务消息展开讨论
码农爱java
·
2025-02-08 04:09
Kafka
Kafka
MQ
消息中间件
事务消息
微服务
Spring
Boot
三、大数据之Zookeeper完全
分布式
集群搭建
Zookeeper环境变量(6)配置文件分发(7)集群启动(8)zookeeper群启脚本(9)Zookeeper官方文档说明:Zookeeper安装包Zookeeper简介:Zookeeper是一个开源的
分布式
的
尘.埃
·
2025-02-08 03:37
大数据生态框架搭建
zookeeper
大数据
Scrapy框架爬虫教程——入门篇
与其他爬虫框架(如BeautifulSoup、Selenium等)的对比1.2Scrapy的优势高效的网络请求处理灵活的爬取策略强大的数据处理功能内置的
分布式
爬虫支持2.安装与环境搭建2.1安装Python
杨胜增
·
2025-02-08 03:03
scrapy
爬虫
XXL-MQ v1.3.0 |
分布式
消息队列
ReleaseNotes1、【增强】消费者分组属性"group"支持为空,为空时自动赋值UUID,方便实现多分组广播消费;2、【增强】海量数据堆积:消息数据存储在DB中,原生兼容支持"MySQL、TIDB"两种存储方式,前者支持千万级消息堆积,后者支持百亿级别消息堆积(TIDB理论上无上限);3、【优化】消费者批量注册发现,提高注册发现性能;4、【优化】消息流转日志格式优化,提升日志可读性;5、【
·
2025-02-08 02:59
消息队列消息中间件任务调度
OpenHarmony 4.0 Release发布,同步升级API 10
应用开发能力更加丰富;HDF新增200多个HDI接口,硬件适配更加便捷;优化图形框架和方舟编译器(ArkCompiler),用户交互体验得到进一步提升;ArkUI组件定制化能力和组件动效能力也得到进一步增强;
分布式
硬件支持的范围扩大到音频和
·
2025-02-08 02:56
harmonyos
XXL-MQ v1.3.0 |
分布式
消息队列
ReleaseNotes1、【增强】消费者分组属性"group"支持为空,为空时自动赋值UUID,方便实现多分组广播消费;2、【增强】海量数据堆积:消息数据存储在DB中,原生兼容支持"MySQL、TIDB"两种存储方式,前者支持千万级消息堆积,后者支持百亿级别消息堆积(TIDB理论上无上限);3、【优化】消费者批量注册发现,提高注册发现性能;4、【优化】消息流转日志格式优化,提升日志可读性;5、【
·
2025-02-08 02:25
消息队列消息中间件任务调度
5
分布式
ID
这里讲一个比较常用的
分布式
防重复的ID生成策略,雪花算法一个用户体量比较大的
分布式
系统必然伴随着分表分库,分机房部署,单体的部署方式肯定是承载不了这么大的体量。
40岁的系统架构师
·
2025-02-08 01:21
分布式
算法
物联网设备安全性:挑战和解决方案
攻击者可能会试图远程破坏物联网(IoT)设备以窃取数据,进行DDoS攻击(DistributedDenialofServiceattacks,
分布式
拒绝服务攻击),或试图破坏网络的其余部分。
电子科技圈
·
2025-02-08 00:48
Silicon
Labs
物联网
嵌入式硬件
iot
mcu
Licode简介及与SRS对比
设计思想:
分布式
架构:支持横向扩展(多个节点组成集群)。房间管理:以“房间(Room)”
Ryan-S
·
2025-02-08 00:14
webrtc
Licode
OpenHarmony 4.0 Release发布,同步升级API 10
应用开发能力更加丰富;HDF新增200多个HDI接口,硬件适配更加便捷;优化图形框架和方舟编译器(ArkCompiler),用户交互体验得到进一步提升;ArkUI组件定制化能力和组件动效能力也得到进一步增强;
分布式
硬件支持的范围扩大到音频和
锐湃
·
2025-02-07 23:40
harmony
wpf
上一页
2
3
4
5
6
7
8
9
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他