故障恢复分布式系统第28页

【隐私计算】tf-encrypted隐私计算框架/库基础

TFEncrypted的目标是使保护隐私的机器学习变得可用，而不需要密码学、分布式系统或高性能计算方面的专业知识。同时，现在TFEncrypted已经完全支持te

Mr.zwX·2023-12-15 22:21

图解Paxos

一.简要介绍在《聊聊分布式存储——问题与矛盾》中已经提到，在对一个分布式系统进行架构设计时，往往会在可用性和一致性之间反复权衡。为了解决分布式一致性问题，产生了一系列一致性协议和算法。

join_a922·2023-12-15 21:52

深入浅出理解kafka存储机制

所以它必然要面临分布式系统遇到的高并发、高可用、高性能等三高问题。对于Kafka的存储需要保证以下几点：存储的主要是消息流（可以是简单的文本格式也可以是其他格式）。

乖的小肥羊·2023-12-15 21:03

kafka初识

请介绍一下zookeeper(Zookeeper协同的是什么)概念说明Zk是分布式环境下的第三方协同服务，帮助分布式系统，比如存储、计算、调度等均需要协同服务。

TSBigDate·2023-12-15 21:30

【IEEE】2区SCI，接收领域广，稳定检索47年！

此外，区块链作为一门新兴的交叉学科,涉及密码学应用（加密，隐私等），分布式系统（共识，体系构架），计算机网络（P2P），数据库以及编程语言（智能合约）等，目前正在快速地发展。

欧亚学术·2023-12-15 19:09

深入理解RabbitMQ消息中间件

二、消息中间件1.简介信息中间件是一种应用于分布式系统的基础软件，它位于各类应用/服务与操作系统/数据库系统以及其他系统软件之间，主要解决分布式环境下数据传输、数据访问、事务处理、安全认证等问题。

五言六舌·2023-12-15 18:55

缓存穿透问题与解决方案

缓存穿透的影响2.1后端系统负载过重2.2数据库压力增大2.3用户体验降低3.解决缓存穿透的方案3.1布隆过滤器3.2缓存空对象3.3热点数据预加载3.4异步更新缓存3.5缓存击穿监控与报警4.结语引言在分布式系统中

达芬奇要当程序员·2023-12-15 17:25

缓存雪崩问题与应对策略

2.缓存雪崩的影响2.1系统性能下降2.2数据库压力激增2.3用户请求失败率增加3.应对策略3.1多级缓存3.2限流与降级3.3异步缓存更新3.4并发控制3.5优化缓存失效时间4.结语缓存雪崩是一个在分布式系统中经常遇到的问题

达芬奇要当程序员·2023-12-15 17:24

基于Raft算法的DLedger-Library分析 | 京东物流技术团队

1背景在分布式系统应用中，高可用、一致性是经常面临的问题，针对不同的应用场景，我们会选择不同的架构方式，比如master-slave、基于ZooKeeper选主。

京东云开发者·2023-12-15 16:34

500 lines or less学习笔记（九）——内存中的图数据库（Dagoba）

实现了一个内存中的图数据库,用来解决一些现实中的问题,本文不仅介绍了整体的设计思路和设计原则,还详细介绍了图数据库实现的一些细节,很多地方值得学习.作者介绍Dann喜欢和他两岁的孩子建造东西，比如编程语言，数据库，分布式系统

简单一点点·2023-12-15 14:40

便捷搭建 Zookeeper 服务器的方法，好用，收藏~

由于ZooKeeper便捷的使用方式、卓越的性能和良好的稳定性，被广泛地应用于诸如Hadoop、HBase、Kafka和Dubbo等大型分布式系统中。整理了一份Java面试宝典完整版PDFZo

程序员白楠楠·2023-12-15 14:03

SLA服务可用性4个9是什么意思？如何保证服务的高可用性 HA（High Availability）?

高可用HA（HighAvailability）是分布式系统架构设计中必须考虑的因素之一，它通常是指，通过设计减少系统不能提供服务的时间。方法论上，高可用是通过冗余+自动故障转移来实现的。

禅与计算机程序设计艺术·2023-12-15 14:00

如何高效的阅读Hadoop源代码？

其次，需要注意，阅读Hadoop源代码的效率，因人而异，如果你有足够的分布式系统知识储备，看过类似的系统，则能够很快地读它的源代码

丨程序之道丨·2023-12-15 14:54

【基础知识】Hadoop生态系统

Hadoop是一个开源的分布式计算框架,主要用于大数据的存储和处理，即一个包含多种组件的综合分布式系统,组件相互协作完成从数据存储到计算分析的完整功能。

偏振万花筒·2023-12-15 12:40

古有程咬金“三板斧”威震隋唐，现有我“三板斧”大破分布式

在分布式系统的很多场景中，我们为了保证数据的最终一致性，需要很多的技术方案来支持，比如分布式事务、分布式锁等。有的时候，我们需要保证一个方法在同一时间内只能被同一个线程执行。

风平浪静如码·2023-12-15 12:33

RocketMQ的架构是什么样的❓

RocketMQ，作为一款强大的分布式消息中间件，广泛应用于各种大规模分布式系统中，为异步消息通信提供了可靠的解决方案。

二狗plus·2023-12-15 11:56

跨线程保持上下文

上下文传播意味着在分布式系统的不同组件或服务中传递上下文信息或状态，这些应用程序通常由运行在不同机器或容器上的多个服务组成。这

沃趣数据库管理平台·2023-12-15 10:15

【SpringBoot篇】详解基于Redis实现短信登录的操作

Session进行登录操作具体使用✨编写拦截器✨配置拦截器基于Redis实现发送手机验证码操作总体思路具体步骤基于Redis实现短信登录并注册的操作总体思路具体步骤前言使用Redis进行登录适用于以下情况：分布式系统

在下小吉.·2023-12-15 08:50

JAVA可序列化

这对于在分布式系统中传递对象、在不同应用程序之

CP-DD·2023-12-15 06:05

Prometheus监控Etcd集群

Raft是一个来自Stanford的新的一致性算法，适用于分布式系统的日志复制，Raft通过选举的方式来实现一致性，在Raft中，任何一个节点都可能成为leader。Et

正在输入中…………·2023-12-15 05:24

＜redis集群＞一.主从复制

2）故障恢复：当主节点出现问题时，可以由从节点提供服务，实现快速的故障恢复；实际上是一种服务的冗余

我真的学不会救救我吧·2023-12-15 03:57

【数据采集与集成】实验-万维网运行原理分析

zhushatong·2023-12-15 03:28

【Flink系列五】Checkpoint及Barrier原理

Savepoint状态后端（statebackend）本文先设置一个前提，流处理的数据都是可回放的（可以理解成消费的kafka的数据）一致性检查点（checkpoints）图1checkpoint是Flink故障恢复的核心

周润发的弟弟·2023-12-15 02:11

2021-06-06 Redis缓存雪崩与解决方案

服务器雪崩的场景与解决方案什么是应用服务雪崩雪崩问题分布式系统都存在这样一个问题，由于网络的不稳定性，决定了任何一个服务的可用性都不是100%的。

飘渺丶_3c75·2023-12-15 02:31

第七章 SpringCloud Alibaba 实现微服务集成Sentinel

什么是SentinelSentinel(分布式系统的流量防卫兵)是阿里开源的一套用于服务容错的综合性解决方案。它以流量为切入点,从流量控制、熔断降级、系统负载保护等多个维度来保护服务的稳定性。

小小码农>>>>·2023-12-15 00:28

鸿蒙操作系统架构

下面是Android和鸿蒙的主要区别的简要总结：Android鸿蒙开发语言Java、Kotlin鸿蒙开发语言（HML、JS、Java等）架构单一系统架构分布式系统架构设备适配性需要针对不同设备进行适配支持全场景设备

全面解读·2023-12-14 23:14

第十四章： Spring Boot 整合spring-session,使用redis共享

SpringBoot整合spring-session,使用redis共享前沿本文重点讲述：springboot工程中使用spring-session机制进行安全认证，并且通过redis存储session，满足集群部署、分布式系统的

半部论语·2023-12-14 20:55

【Python百宝箱】数据巨轮启航：Python大数据处理库全攻略，引领数据科学新浪潮

friklogff·2023-12-14 18:22

Flink之状态编程

状态的分类托管状态：由Flink统一管理的，状态的存储访问、故障恢复和重组等一系列问题都由Flink实现。算子状态：状态由算子内所

十七✧ᐦ̤·2023-12-14 16:34

Flink的容错机制

检查点：用存档读档的方式，将之前的某个时间点的所有状态保存下来，故障恢复继续处理的结果应该和发送故障前完全一致，这就是所谓的检查点。

十七✧ᐦ̤·2023-12-14 16:44

点评项目——分布式锁

2023.12.10集群模式下的并发安全问题及解决随着现在分布式系统越来越普及，一个应用往往会部署在多台机器上（多节点），通过加锁可以解决在单机情况下的一人一单安全问题，但是在集群模式下就不行了。

我真的很帅阿·2023-12-14 14:07

Redis集群:分布式的less is more

**这篇文章主要提供一个highlevel的视角，也就是聚焦于所有分布式系统都会有的一些问题，而不仅限于Redis，阅读时可以多带入自己熟悉的系统的视角。**比

SakamataZ·2023-12-14 12:10

分布式之raft一致性算法

1.CAP定理在一个分布式系统中，CAP三者不可兼得，最多只有两者可以满足，正所谓鱼和熊掌不可兼得一致性Consistency：所有的节点在同一时间的数据一致可用性Availability：服务在正常响应时间内可用分区容错性

乖的小肥羊·2023-12-14 12:40

kafka 详细介绍

以下是Kafka的一些详细介绍：分布式架构：Kafka是一个分布式系统，允许数据被分布式地存储在多个节点上

不想步入秃头的年龄·2023-12-14 12:37

RabbitMQ架构

RabbitMQ是一个分布式系统一、使用rabbitmq时的系统架构图通过路由键将交换机和队列进行绑定，从而实现消息的发送和接收。

Gem_kaili·2023-12-07 00:52

命令与事件的区别：分布式系统中的命令与事件

当我们在分布式系统中构建新组件时，往往会发现自己被很多看上去独特的用例所包围。每个问题似乎都是一个新问题，需要对其进行单独分析和讨论才能解决。实际上，我们会遇到的大多数用例都属于某些常见模式。

睡魔的谎言·2023-12-06 22:47

The Design of a Practical System for Fault-Tolerant Virtual Machines

blog.luoyuanhang.com/2017/05/20/ftvm-notes/论文地址：TheDesignofaPracticalSystemforFault-TolerantVirtualMachines在分布式系统中

小睿千万别秃头·2023-12-06 22:11

RocketMQ主从同步

RocketMQ作为一款优秀的分布式消息中间件，分布式系统的一个很重要的特点就是要保证系统的高可用(HA)，RocketMQ则是通过主从同步机制保证系统的高可用。

mingxungu·2023-12-06 16:38

windows下安装配置kafka

ZooKeeper是一个开源的分布式协调服务，它提供了可靠的数据存储和协调机制，用于协调分布式系统中的各个节点。Kafka使用ZooKeeper来存储和管理集群的元数据、配置信息和状态。

熊出没·2023-12-06 11:39

C# 雪花算法生成Id工具类

雪花算法主要用于解决分布式系统的唯一Id生成问题，在生产环境中可以部署一个单独的服务来运行雪花算法，然后通过请求该服务获取全局Id。

rjcql·2023-12-06 10:43

Zookeeper(服务注册中心)安装以及启动服务

概述ZooKeeper是一个分布式的开源协调服务，用于管理和协调大规模分布式系统中的各种任务。它提供了一个简单的分层命名空间，以及对数据的强一致性（ACID特性）和高可用性的支持。

丁真学java·2023-12-06 06:53

Zookeeper

在分布式组件中zookeeper这个中间件是鼻祖的地位在分布式系统中，协调和管理各个节点是至关重要的任务。Zookeeper是一个高性能的分布式协调服务，为分布式应用程序提供了一致性和可靠性的服务。

admiraldeworm·2023-12-06 06:50

老司机带你一课学透，核心分布式事务框架之Alibaba Seata框架经验总结

在现代分布式系统中，保证数据的一致性和可靠性是一项重要的挑战。AlibabaSeata是一款开源的分布式事务解决方案，它提供了强大的支持，帮助开发者处理分布式事务。

沃威2268731·2023-12-06 05:51

生产实践：基于K8S的私有化部署解决方案

公众号「架构成长指南」，专注于生产实践、云原生、分布式系统、大数据技术分享。

架构成长指南·2023-12-06 02:32

什么是革命性技术eBPF？为什么可观测性领域都得用它

公众号「架构成长指南」，专注于生产实践、云原生、分布式系统、大数据技术分享。如果有一种技术可以监控和采集任何应用信息，支持任何语言，并且应用完全无感知，零侵入，想想是不是很激动，那么这个技术是什么呢？

架构成长指南·2023-12-06 02:02

Spring Bean 命名各种方式，看着一篇就够了

公众号「架构成长指南」，专注于生产实践、云原生、分布式系统、大数据技术分享。在Spring框架中，每个bean必须至少有一个唯一的名称。