----分布式

kafka简单使用

kafka的特点：可靠性：分布式、分区、复制和容错可拓展性：kafka消息传递系统轻松缩放，无需停机耐用性：kafka使用分布式提交日志，消
zeroLinked·2025-02-09 18:18

Springboot整合kafka简单使用

kafka一，介绍Kafka是一个开源的分布式流处理平台，最初由LinkedIn开发并贡献给Apache软件基金会。它设计用于构建高性能、持久性、可伸缩和容错的实时数据管道和流处理应用程序。
陈小唬·2025-02-09 18:17

深入解析 GBase 数据库集群架构：高可用与高性能的结合

一、GBase数据库集群架构的特点1.分布式存储与计算GBase的集群架构采用分布式存储与计算的设计，将数据分布到多个节点中，每个节点
big crab·2025-02-09 17:43

【大数据技术】Kafka实时分析用户行为日志（python+zookeeper+kafka）

Kafka实时分析用户行为日志（python+zookeeper+kafka）搭建完全分布式高可用大数据集群（ZooKeeper）搭建完全分布式高可用大数据集群（Kafka）本机PyCharm远程连接虚拟机
Want595·2025-02-09 17:13

在Jupyter Notebook中进行大数据分析：集成Apache Spark

ApacheSpark是一个快速的统一分析引擎，支持大数据处理和分布式计算。本教程将详细介绍如何在JupyterNotebook中集成和使用Spark进行大数据分析。
范范0825·2025-02-09 17:42

Zookeeper 权威指南

作者：禅与计算机程序设计艺术1.简介1997年，Apache发布了ZooKeeper项目，基于Google的Chubby论文，解决分布式协调服务问题。
AI天才研究院·2025-02-09 17:41

Hadoop解决数据倾斜方法？思维导图 代码示例（java 架构)

数据倾斜（DataSkew）是分布式计算框架中常见的问题，特别是在MapReduce作业里。
用心去追梦·2025-02-09 16:04

游戏案例｜Service Mesh 在欢乐游戏的应用演变和实践

在微服务分布式架构以及游戏后台运维研发有丰富的经验。前言欢乐游戏工作室后台是分布式微服务架构，目前稳定承载着多款游戏，数千万DAU以及数百万级在线。
「已注销」·2025-02-09 16:34

MapReduce是什么？

它是分布式计算的一个重要概念，通常用于处理海量数据并进行并行计算。MapReduce的基本思想是将计算任务分解为两个阶段：Map阶段和Reduce阶段。
头发那是一根不剩了·2025-02-09 16:03

Kubernetes云原生技术和docker的区别（deepseek R1）

作用：在多个服务器（节点）上部署容器，处理负载均衡、故障恢复、自动扩缩容等分布式系统
m0nesy_8680·2025-02-09 15:01

MR30分布式IO模块：驱动智能制造工厂的工业互联与高效控制新范式

作为工业数据连接领域的领军者，明达技术凭借其自主研发的MR30分布式IO模块，以创新的技术架构与卓越的性能表现，为全球制造企业构建了高效、灵活、可靠的工业互联与智能控制体系，成为智能制造工厂升级的“核心引擎
明达技术·2025-02-09 15:30

hyperf-throttle-requests，一个超牛的 PHP 限流神器

在分布式系统和微服务架构中，API的稳定性和可用性至关重要。为了保护后端服务不受恶意攻击和流量高峰的影响，请求频率限制（RateLimiting）成为了一种常见的策略。
·2025-02-09 14:29

clickhouse集群方案及表引擎最佳实践

clickhouse集群方案很多资料过于凌乱，也有一些还不错，但是其最佳实践部分讲的不够详细，例如：Clickhouse最佳实战之分布式集群方案研究那我们来讲讲我们的实践及面临过的问题。
yangls的技术博客·2025-02-09 13:42

clickhouse最佳实践（一）：clickhouse千亿级日志系统单机到集群架构演进历程

监控和维护6.集群横向扩展最佳实践系列文章持续完善中，记录了业务系统从碰到瓶颈到迭代的过程1.初始阶段：单机部署针对ClickHouse（以下简称CK）单机的优化过程，通常包括以下几个方面，以确保在非分布式环境中达到最佳性能
Biturd·2025-02-09 11:31

微服务架构中的事件驱动设计：使用 Kafka 和 Apache Pulsar 实现高效的事件流管理

随着大规模分布式系统的复杂性不断增加，事件流平台如ApacheKafka和ApachePulsar在事件驱动架构
桂月二二·2025-02-09 08:08

spark1.6.0分布式安装

1.概述本文是对spark1.6.0分布式集群的安装的一个详细说明，旨在帮助相关人员按照本说明能够快速搭建并使用spark集群。
问道9527·2025-02-09 08:33

spark安装与环境配置

http://spark.apache.org/downloads.html考虑到spark之后要结合hadoop一起使用，所以下载和已经安装hadoop版本均兼容的spark(首先安装好hadoop选择伪分布式配置
Handoking·2025-02-09 08:03

NoSQL 数据库有哪些类型?

并且，NoSQL数据库天生支持分布式，数据冗余和数据分片等特性，旨在提供可扩展的高可用高性能数据存储解决方案。一个常见的误解是NoSQL数据库或非关系型数据库不能很好地
HUNAG-DA-PAO·2025-02-09 07:02

面试官：Spring中都用到了哪些设计模式？

写作是对自己学习的总结和记录，如果您对Java、分布式、微服务、中间件、SpringBoot、SpringCloud等技术感兴趣，可以关注我的动态，我们一起学习，一起成长！
猿码天地·2025-02-09 07:31

深度剖析分布式存储架构

【摘要】本文介绍了分布式存储的架构类型、分布式理论、不同的分布式文件系统和分布式键值系统等，较为系统详尽。全文约2万字，可收藏。
罗伯特之技术屋·2025-02-09 07:28

RabbitMQ技术深度解析：打造高效消息传递系统

引言在当前的分布式系统架构中，消息队列作为一种高效的消息传递机制，扮演着越来越重要的角色。RabbitMQ，作为广泛使用的开源消息代理，以其高可用性、扩展性和灵活性赢得了众多开发者的青睐。
lozhyf·2025-02-09 05:17

一个RPC框架应该解决哪些问题？

RPC（RemoteProcedureCall，远程过程调用）框架的核心目标是简化分布式系统中的通信，使得分布在不同计算机上的系统或服务能够像调用本地函数一样，轻松地进行远程调用。
叫我DPT·2025-02-09 03:59

图数据库 | 17、高可用分布式设计（上）

在设计高性能、高可用图数据库的时候，从单实例、单节点出发，一般有3种架构演进选项：主备高可用、分布式共识和大规模水平分布式。
XAI嬴图·2025-02-09 03:28

分布式限流——Redis实现令牌桶算法

令牌桶算法令牌桶算法（TokenBucketAlgorithm）是一种广泛使用的流量控制（流量整形）和速率限制算法。这个算法能够控制网络数据的传输速率，确保数据传输的平滑性，防止网络拥堵，同时也被应用于软件系统中限制请求的速率，如API限流等场景。工作原理令牌的生成：系统以固定的速率向令牌桶中添加令牌（token），直到桶满为止。桶的容量（即最大令牌数）限制了短时间内可以发送的最大数据量。请求的处
zainful·2025-02-09 01:15

学习小记-使用Redis的令牌桶算法实现分布式限流

在介绍令牌桶算法前先介绍一下漏桶算法（LeakyBucket）漏桶算法（LeakyBucket）漏桶算法是一种固定容量的容器模型，它通过控制数据流入和流出的速度来限制数据的传输速率。漏桶算法的主要特点包括：固定容量：漏桶的容量是固定的，一旦桶满，多余的数据将被丢弃或拒绝。持续泄露：桶中的“水”（数据）以固定速率持续流出。突发处理：可以在桶未满时快速处理突发流量，但一旦桶满，流量将被限制。Redis
菜鸟翻身做主人·2025-02-09 01:14

ClickHouse vs StarRocks 选型对比

越来越多的人将目光锁定在列存的分布式数据库上。
金州饿霸·2025-02-09 00:07

有Redis为什么还要本地缓存？谈谈你对本地缓存的理解？

既然，已经有了Redis可以实现分布式缓存了，为什么还需要本地缓存呢？接下来，我们一起来看。为什么需要本地缓存？
·2025-02-08 23:38

【Linux】【Gitlab】 Gitlab 社区版（免费）搭建步骤

1.简介IT源码版本管理工具，常见的版本管理有VSS（VisualSourceSafe）、CVS、SVN、GIT；本篇主要介绍GIT，分布式源码版本管理工具，并在此基础上搭建起来的web服务GIT目前开源市场有
Peter.Feng·2025-02-08 22:51

DolphinScheduler：大数据任务调度利器

DolphinScheduler是Apache开源的一款分布式、大数据任务调度系统，致力于解决复杂的任务依赖管
hsukk17·2025-02-08 21:48

Redis 进阶必备技能

目录Redis进阶必备技能Redis基础数据结构StringListSetHashZsetRedis进阶使用布隆过滤器分布式锁深入原理IO模型通信协议持久化主从同步SentinelRedis集群工作原理
魏小言·2025-02-08 18:54

【Redis】事务因WATCH的键被修改而失败 事务队列中的操作被自动丢弃 UNWATCH的应用场景

**分布式锁**7.**监控和调优**总结**`WATCH`的作用****`UNWATCH`的作用****`UNWATCH`的应用场景**1.**显式取消监控**2.
阿猿收手吧！·2025-02-08 18:21

Web3时代的开放之门：区块链技术与创新生态

区块链技术的本质区块链技术是一种去中心化的分布式账本技术，通过将数据存储在多个节点上，并使用密码学技术确保数据的安全性和完
dingzd95·2025-02-08 17:44

DKG（Distributed Key Generation）协议

一、DKG是什么DKG（分布式密钥生成）提供了一种去中心化的方法，使各个参与方在不相互信任的情况下生成共享密钥，以确保安全通信和多方参与的机密性。
smilejiasmile·2025-02-08 16:11

【分布式理论五】分布式调用（3）：服务注册与发现

通过合理的服务注册机制、负载均衡策略以及健康检测，分布式系统可以
roman_日积跬步-终至千里·2025-02-08 15:05

【面试场景】MySQL分布式主键选取

文章目录一.MySQL的自增主键二.UUID三.雪花ID(推荐)我的博客地址一.MySQL的自增主键适合单表的情况,在分布式分库分表下可能会有一些问题主键冲突问题在分布式系统中，多个数据库节点独立生成自增主键
5faith·2025-02-08 15:04

分布式计算框架

分布式计算就是为了把多个计算逻辑能够放到多台机器上执行，执行的逻辑一般使用java或者python等，还牵扯到数据如何分片。
wlstephenw·2025-02-08 15:03

【MapReduce】分布式计算框架MapReduce

分布式计算框架MapReduce什么是MapReduce？
桥路丶·2025-02-08 15:00

互联网分布式ID解决方案

业界实现方案1.基于UUID2.基于DB数据库多种模式(自增主键、segment)3.基于Redis4.基于ZK、ETCD5.基于SnowFlake6.美团Leaf(DB-Segment、zk+SnowFlake)7.百度uid-generator()基于UUID生成唯一IDUUID生成策略推荐阅读DDD领域驱动与微服务架构设计设计模式与技术组件大厂案例-百度工程效率如何优化垃圾回收机制？-CSD
fajianchen·2025-02-08 15:30

爬虫分布式框架PySpider

介绍PySpider是一个基于Python的分布式爬虫框架，它以其强大的功能和灵活性在数据爬取领域得到广泛应用。
菠菜很好吃·2025-02-08 15:30

Nacos 深入解析：用法、原理与实际应用

Nacos（DynamicNamingandConfigurationService）作为一款阿里巴巴开源的分布式服务发现与配置管理平台，提供了强大且灵活的服务发现、配置管理、健康检查、负载均衡等功能。
夜深微雨醉初醒·2025-02-08 13:48

Zookeeper的选举过程

Zookeeper的选举代码分析Zookeeper的Leader选举是它分布式一致性和高可用性的关键机制。
夜深微雨醉初醒·2025-02-08 13:17

分布式探索

一、为什么要使用分布式id？
匠道·2025-02-08 12:41

mysql高可用集群MGR组复制的介绍、部署及配置说明

高一致性：基于分布式paxos协议实现组复制，保证数据一致性；高容错性：自动检测机制，只要不是大多数节点都宕机就可以继续工作，内置防脑裂保护机制；高扩展性：节点的增加与移除会自动更新组成员信
lytcreate.·2025-02-08 12:41

Spring框架

Spring初识Spring简介Spring是一个开源的轻量级JavaEE（现在称为JakartaEE）开发框架，用于构建企业级应用程序和分布式系统。
慕容峻才·2025-02-08 11:02

kafka 集群为什么依赖 zookeeper ？

在Kafka集群中，ZooKeeper扮演了关键的角色，负责协调和管理Kafka的分布式系统。
将臣三代·2025-02-08 10:55

Elasticsearch从入门到精通超详细版本（全）

索引增删改查3.2文档增删改查3.3批量处理3.4高级查询4.集群环境部署4.1window系统4.2linux系统4.2.1单点部署4.2.2集群部署5.深层次概念前言在讲解重点知识的时候，先科普一个知识分布式免费开源搜索引擎搜索的东西包括视频文章图片将数据分为
码农研究僧·2025-02-08 09:52

什么是Kafka？有什么主要用途？

Kafka是一个分布式流处理平台，最初由LinkedIn开发并开源，后来成为Apache软件基金会的一个顶级项目。它被设计用于高吞吐量、持久性、分布式的数据流处理。
还能在学一小时·2025-02-08 09:51

分布式系统开发实战：微服务架构，实战：基于CQRS微服务通信

实战：基于CQRS微服务通信AxonFramework是一个适用于Java的、基于事件驱动的轻量级CQRS框架，既支持直接持久化Aggregate状态，也支持采用EventSourcing。AxonFramework的应用架构如图9-6所示。图9-6AxonFramework应用架构本节，我们将基于AxonFramework来实现一个CQRS应用“axon-cqrs”。该应用展示了：“开通银行账户
写代码的珏秒秒·2025-02-08 08:36

第19章《VTK并行渲染》

VTK提供了一些工具和方法来利用多核处理器、分布式计算环境以及GPU加速来进行并行渲染。1.并行渲染的目标加速数据处理：通过将计算任务分配给多个处理器或计算节点，减少数据处理时间。
《雨声》·2025-02-08 07:32

GaussDB 关键架构目标

在产品形态上，提供面向云数据库服务GaussDB的分布式安装包和集中式安装包，提供面向本地化安装的小型化安装包。根据华为云提供的调查报告，当前全球数据库市场增长超预期，云是数据库增长最重要驱动力。
关沵什么柿·2025-02-08 05:47
上一页 2 3 4 5 6 7 8 9 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他