分布式+集群

DKG（Distributed Key Generation）协议

一、DKG是什么DKG（分布式密钥生成）提供了一种去中心化的方法，使各个参与方在不相互信任的情况下生成共享密钥，以确保安全通信和多方参与的机密性。
smilejiasmile·2025-02-08 16:11

【分布式理论五】分布式调用（3）：服务注册与发现

通过合理的服务注册机制、负载均衡策略以及健康检测，分布式系统可以
roman_日积跬步-终至千里·2025-02-08 15:05

【面试场景】MySQL分布式主键选取

文章目录一.MySQL的自增主键二.UUID三.雪花ID(推荐)我的博客地址一.MySQL的自增主键适合单表的情况,在分布式分库分表下可能会有一些问题主键冲突问题在分布式系统中，多个数据库节点独立生成自增主键
5faith·2025-02-08 15:04

分布式计算框架

分布式计算就是为了把多个计算逻辑能够放到多台机器上执行，执行的逻辑一般使用java或者python等，还牵扯到数据如何分片。
wlstephenw·2025-02-08 15:03

【MapReduce】分布式计算框架MapReduce

分布式计算框架MapReduce什么是MapReduce？
桥路丶·2025-02-08 15:00

互联网分布式ID解决方案

业界实现方案1.基于UUID2.基于DB数据库多种模式(自增主键、segment)3.基于Redis4.基于ZK、ETCD5.基于SnowFlake6.美团Leaf(DB-Segment、zk+SnowFlake)7.百度uid-generator()基于UUID生成唯一IDUUID生成策略推荐阅读DDD领域驱动与微服务架构设计设计模式与技术组件大厂案例-百度工程效率如何优化垃圾回收机制？-CSD
fajianchen·2025-02-08 15:30

爬虫分布式框架PySpider

介绍PySpider是一个基于Python的分布式爬虫框架，它以其强大的功能和灵活性在数据爬取领域得到广泛应用。
菠菜很好吃·2025-02-08 15:30

Nacos 深入解析：用法、原理与实际应用

Nacos（DynamicNamingandConfigurationService）作为一款阿里巴巴开源的分布式服务发现与配置管理平台，提供了强大且灵活的服务发现、配置管理、健康检查、负载均衡等功能。
夜深微雨醉初醒·2025-02-08 13:48

Zookeeper的选举过程

Zookeeper的选举代码分析Zookeeper的Leader选举是它分布式一致性和高可用性的关键机制。
夜深微雨醉初醒·2025-02-08 13:17

安装mysql的MGR集群

3、MGR集群搭建方便，master故障会自动进行切换，不影响业务正常访问。
秋天枫叶35·2025-02-08 12:44

分布式探索

一、为什么要使用分布式id？
匠道·2025-02-08 12:41

mysql高可用集群MGR组复制的介绍、部署及配置说明

MGR提供了高可用、高扩展、高可靠的MySQL集群服务。
lytcreate.·2025-02-08 12:41

celery rabbitmq内存异常排查过程及内存组成解析

现象celery在用rabbitmq集群当broker的时候，经常会出现rabbitmq某个节点内存爆满的问题。
「已注销」·2025-02-08 12:11

Spring框架

Spring初识Spring简介Spring是一个开源的轻量级JavaEE（现在称为JakartaEE）开发框架，用于构建企业级应用程序和分布式系统。
慕容峻才·2025-02-08 11:02

kafka 集群为什么依赖 zookeeper ？

kafka集群为什么依赖zookeeper？在Kafka集群中，ZooKeeper扮演了关键的角色，负责协调和管理Kafka的分布式系统。
将臣三代·2025-02-08 10:55

Elasticsearch从入门到精通超详细版本（全）

目录前言1.安装1.1工具postman2.基于Http操作2.1基本增删改查2.2多功能查询2.3索引的映射3.基于java操作3.1索引增删改查3.2文档增删改查3.3批量处理3.4高级查询4.集群环境部署
码农研究僧·2025-02-08 09:52

什么是Kafka？有什么主要用途？

Kafka是一个分布式流处理平台，最初由LinkedIn开发并开源，后来成为Apache软件基金会的一个顶级项目。它被设计用于高吞吐量、持久性、分布式的数据流处理。
还能在学一小时·2025-02-08 09:51

Zookeeper（38）Zookeeper的Follower和Observer的区别是什么？

Zookeeper集群由三种角色组成：Leader、Follower和Observer。每种角色在集群中的职责和行为各不相同。
辞暮尔尔-烟火年年·2025-02-08 09:48

分布式系统开发实战：微服务架构，实战：基于CQRS微服务通信

实战：基于CQRS微服务通信AxonFramework是一个适用于Java的、基于事件驱动的轻量级CQRS框架，既支持直接持久化Aggregate状态，也支持采用EventSourcing。AxonFramework的应用架构如图9-6所示。图9-6AxonFramework应用架构本节，我们将基于AxonFramework来实现一个CQRS应用“axon-cqrs”。该应用展示了：“开通银行账户
写代码的珏秒秒·2025-02-08 08:36

k8s部署go-fastdfs

前置环境：已部署k8s集群，ip地址为192.168.10.1~192.168.10.5，总共5台机器。
小梦想的博客·2025-02-08 07:35

第19章《VTK并行渲染》

VTK提供了一些工具和方法来利用多核处理器、分布式计算环境以及GPU加速来进行并行渲染。1.并行渲染的目标加速数据处理：通过将计算任务分配给多个处理器或计算节点，减少数据处理时间。
《雨声》·2025-02-08 07:32

从Paxos到Zookeeper：分布性一致性原理与实践（初识Zookeeper）

(4)顺序保证(5)事件通知2.Zookeeper的核心（核心机制）3.Zookeeper的优势二.Zookeeper的基本概念1.数据节点（znode）2.数据结构3.会话4.Watcher机制5.集群节点
洒脱的六边形战士加辣·2025-02-08 06:56

hive 连接Datagrip失败

在hadoop的core-site.xml文件中修改内容：将root用户名改成自己的用户名，比如我这里的用户名是sxr，将其都替换为sxr如下图所示：修改完记得保存，注意，如果是运行在三台虚拟机组成的集群上
都给我吃吧·2025-02-08 06:55

GaussDB 关键架构目标

在产品形态上，提供面向云数据库服务GaussDB的分布式安装包和集中式安装包，提供面向本地化安装的小型化安装包。根据华为云提供的调查报告，当前全球数据库市场增长超预期，云是数据库增长最重要驱动力。
关沵什么柿·2025-02-08 05:47

Elasticsearch 解决只能查询10000条数据方案

解决办法主要有以下几种：【方式一】（修改完配置文件，需要重启集群中的ES服务）修改Elasticsearch集群中的配置文件config/elasticsearch.yml，在配置文件最后增加一行，如下
沿途欣赏i·2025-02-08 05:13

中间件：SpringBoot集成Redis

Redis具有高性能、低延迟的特点，并且支持数据持久化、主从复制和集群模式，可以满足各种应用场景的需求
豪宇刘·2025-02-08 04:42

Apache Kafka：高吞吐分布式流平台的深度解析

引言：流数据时代的挑战在实时推荐、物联网数据处理、金融交易监控等场景中，传统消息队列面临三大核心挑战：海量数据吞吐：日均千亿级消息处理需求超低延迟要求：毫秒级端到端传递延迟数据持久保障：故障恢复后消息零丢失ApacheKafka凭借其独特的设计哲学，成为解决这些问题的行业标准方案。本文将从架构设计、核心机制到实践应用进行全面解析。一、Kafka核心概念全景图1.1消息系统拓扑模型plaintext
lozhyf·2025-02-08 04:07

Kafka 之事务消息

前言：在分布式消息系统中，事务消息也是一个热门课题，在项目的实际业务场景中，如果用到事务消息的场景也不少见，那Kafka作为一个高性能的分布式消息中间件，同样也支持事务消息，本篇我们将对Kafka的事务消息展开讨论
码农爱java·2025-02-08 04:09

三、大数据之Zookeeper完全分布式集群搭建

目录Zookeeper简介：（1）集群部署规划（2）安装Zookeeper（3）配置zook.cfg文件（4）配置服务器编号（5）配置Zookeeper环境变量（6）配置文件分发（7）集群启动（8）zookeeper
尘.埃·2025-02-08 03:37

Scrapy框架爬虫教程——入门篇

与其他爬虫框架（如BeautifulSoup、Selenium等）的对比1.2Scrapy的优势高效的网络请求处理灵活的爬取策略强大的数据处理功能内置的分布式爬虫支持2.安装与环境搭建2.1安装Python
杨胜增·2025-02-08 03:03

XXL-MQ v1.3.0 ｜ 分布式消息队列

ReleaseNotes1、【增强】消费者分组属性"group"支持为空，为空时自动赋值UUID，方便实现多分组广播消费；2、【增强】海量数据堆积：消息数据存储在DB中，原生兼容支持"MySQL、TIDB"两种存储方式，前者支持千万级消息堆积，后者支持百亿级别消息堆积（TIDB理论上无上限）；3、【优化】消费者批量注册发现，提高注册发现性能；4、【优化】消息流转日志格式优化，提升日志可读性；5、【
·2025-02-08 02:59

OpenHarmony 4.0 Release发布，同步升级API 10

应用开发能力更加丰富；HDF新增200多个HDI接口，硬件适配更加便捷；优化图形框架和方舟编译器（ArkCompiler），用户交互体验得到进一步提升；ArkUI组件定制化能力和组件动效能力也得到进一步增强；分布式硬件支持的范围扩大到音频和
·2025-02-08 02:56

MapReduce的代码编写

Job对象，通过getInstance()函数设置当前main函数所在的类，设置后运行代码可以找到函数的入口；③设置MapReduce的输入输出路径用于输入数据和输出计算的数据结果；注意若要是输出的路径在集群中已经存在
hjy1821·2025-02-08 02:27

XXL-MQ v1.3.0 ｜ 分布式消息队列

ReleaseNotes1、【增强】消费者分组属性"group"支持为空，为空时自动赋值UUID，方便实现多分组广播消费；2、【增强】海量数据堆积：消息数据存储在DB中，原生兼容支持"MySQL、TIDB"两种存储方式，前者支持千万级消息堆积，后者支持百亿级别消息堆积（TIDB理论上无上限）；3、【优化】消费者批量注册发现，提高注册发现性能；4、【优化】消息流转日志格式优化，提升日志可读性；5、【
·2025-02-08 02:25

Redis性能优化18招

Redis性能优化的18招目录前言选择合适的数据结构避免使用过大的key和value[使用RedisPipeline](#使用RedisPipeline)控制连接数量合理使用过期策略使用Redis集群充分利用内存优化使用
繁川·2025-02-08 01:22

5 分布式ID

这里讲一个比较常用的分布式防重复的ID生成策略，雪花算法一个用户体量比较大的分布式系统必然伴随着分表分库，分机房部署，单体的部署方式肯定是承载不了这么大的体量。
40岁的系统架构师·2025-02-08 01:21

物联网设备安全性：挑战和解决方案

攻击者可能会试图远程破坏物联网（IoT）设备以窃取数据，进行DDoS攻击（DistributedDenialofServiceattacks，分布式拒绝服务攻击），或试图破坏网络的其余部分。
电子科技圈·2025-02-08 00:48

Licode简介及与SRS对比

设计思想：分布式架构：支持横向扩展（多个节点组成集群）。房间管理：以“房间（Room）”
Ryan-S·2025-02-08 00:14

OpenHarmony 4.0 Release发布，同步升级API 10

应用开发能力更加丰富；HDF新增200多个HDI接口，硬件适配更加便捷；优化图形框架和方舟编译器（ArkCompiler），用户交互体验得到进一步提升；ArkUI组件定制化能力和组件动效能力也得到进一步增强；分布式硬件支持的范围扩大到音频和
锐湃·2025-02-07 23:40

kafka 控制器是什么？有什么作用？思维导图 代码示例（java 架构)

Kafka控制器（Controller）是Kafka集群中的一个特殊节点，它负责协调和管理集群内的一系列关键操作。
用心去追梦·2025-02-07 23:08

多服务器分布式系统架构,集中式架构与分布式架构，你了解多少？

原标题：集中式架构与分布式架构，你了解多少？
WhatOnEarth一探究竟·2025-02-07 22:06

从集中式到分布式

同时，随着微型计算机的出现，越来越多廉价的PC机成为了各大IT企业架构的首选，分布式的处理方式越来越受到业界的青睐----计算机系统正在经历一场前所未有的从集中式到分布式架构的变革。
weixin_33895695·2025-02-07 22:06

k8s部署rabbitmq集群

1部署集群1.1安装#创建一个中间件的命名空间kubectlcreatenamespacemiddleware#创建ConfigMap,包含RabbitMQ的配置文件内容kubectlapply-frabbitmq-configmap.yaml
warrah·2025-02-07 22:06

分布式系统架构

同时，随着微型计算机的出现，越来越多廉价的PC机成为了各大IT企业架构的首选，分布式的处理方式越来越受到业界的青睐----计算机系统正在经历一场前所未有的从集中式到分布式架构的变革。从集中式到分布式
JyNeo·2025-02-07 22:05

分布式和集中式架构

1、从集中式到分布式1.1：集中式的特点所谓集中式系统就是指由一台或多台主计算机组成中心节点，数据集中存储在这个中心节点中，并且整个系统的所有业务单元都集中部署在这个中心节点上，系统所有功能均有其集中处理
diaohudou1168·2025-02-07 22:01

RocketMQ 底层原理

RocketMQ底层原理概述RocketMQ是阿里巴巴开源的分布式消息中间件，后来捐赠给Apache基金会。它具备高性能、高可靠、低延迟等特点，广泛应用于分布式系统中。
·2025-02-07 22:49

如何监控容器或K8s中的OpenSearch

OpenSearch简介OpenSearch是一款开源的分布式搜索引擎(从ElasticSearch特定版本分叉而来)，可以执
·2025-02-07 22:46

Kafka 和 RocketMQ 对比总结

Kafka和RocketMQ对比总结1.主要区别特性KafkaRocketMQ设计目标高吞吐量、分布式日志系统金融级消息队列，强调消息可靠性和事务消息模型基于分区（Partition）的发布-订阅模型基于主题
·2025-02-07 21:43

一文搞懂Kafka的设计与实现

作者：禅与计算机程序设计艺术1.背景介绍ApacheKafka是一个开源流处理平台，主要用于实时数据传输、存储、分析和应用的一种分布式消息系统。
AI天才研究院·2025-02-07 21:27

Git：Git基础概念与安装_2024-07-17_18-59-31.Tex

Git的设计灵感来源于BitKeeper和Monotone，但其独特的分布式架构和性能优化使其在开源社区中迅速流行起来。
chenjj4003·2025-02-07 19:47
上一页 18 19 20 21 22 23 24 25 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他