高并发&高可用

nosql数据库技术与应用知识点

Hdfs、MongoDB、HBase等数据清洗(入仓)Hive等数据处理、分析(Spark、Flink等)数据可视化数据挖掘、机器学习应用(Python、SparkMLlib等)大数据时代存储的挑战(三高)高并发

皆过客，揽星河·2024-09-16 08:42

MongoDB知识概括

解释：“三高”需求：①Highperformance-对数据库高并发读写的需求。②HugeStorage-对海量数

GeorgeLin98·2024-09-16 06:58

华为云分布式缓存服务DCS 8月新特性发布

分布式缓存服务（DistributedCacheService，简称DCS）是华为云提供的一款兼容Redis的高速内存数据处理引擎，为您提供即开即用、安全可靠、弹性扩容、便捷管理的在线分布式缓存能力，满足用户高并发及数据快速访问的业务诉求

华为云PaaS服务小智·2024-09-16 04:43

Redis:缓存击穿

缓存击穿(热点key)：部分key(被高并发访问且缓存重建业务复杂的)失效,无数请求会直接到数据库，造成巨大压力1.互斥锁：可以保证强一致性线程一：未命中之后，获取互斥锁，再查询数据库重建缓存，写入缓存

我的程序快快跑啊·2024-09-16 03:03

KVM+GFS分布式存储系统构建KVM高可用

一、案列分析1.1案列概述本章案例主要使用之前章节所学的KVM及GlusterFs技术,结合起来从而实现KVM高可用。利用GlusterFs分布式复制卷，对KVM虚拟机文件进行分布存储和冗余。

henan程序媛·2024-09-16 00:17

mybatis 二级缓存失效_Mybatis 缓存原理及失效情况解析

将用户经常查询的数据放在缓存(内存)中，用户去查询数据就不用从磁盘上(关系型数据库数据文件)查询，从缓存中查询，从而提高查询效率，解决了高并发系统的性能问题。2、为什么要使用缓存减少和数据库的交互次

weixin_39844942·2024-09-16 00:41

[转载] NoSQL简介

随着互联网web2.0网站的兴起，传统的关系数据库在应付web2.0网站，特别是超大规模和高并发的SNS类型的web2.0纯动态网站已经显得力不从心，暴露了很多难以克服的问题，而非关系型的数据库则由于其本身的特点得到了非常迅速的发展

weixin_30325793·2024-09-15 23:40

高并发内存池（4）——实现CentralCache

1，获取单例对象的指针2，FetchRangeObj函数3，GetOneSpan函数实现4，ReleaseListToSpans函数实现一，CentralCache的简单介绍CentralCache是高并发内存池这个项目的中间层

Niu_brave·2024-09-15 21:58

SpringBoot整合ES搜索引擎实现网站热搜词及热度计算

__c=1000，移动端可微信小程序搜索“历代文学”）总架构师，15年工作经验，精通Java编程，高并发设计，Springboot和微服务，熟悉Linux，ESXI虚拟化以及云原生Docker和K8s，

码踏云端·2024-09-15 18:51

【仿RabbitMQ消息队列项目day2】使用muduo库中基于protobuf的应用层协议进行通信

muduo库是⼀个基于非阻塞IO和事件驱动的C++高并发TCP网络编程库。简单来理解，它就是对原生的TCP套接字的封装，是一个比socket编程接口更好用的编程库。

月夜星辉雪·2024-09-15 16:37

为什么Node.js不适合CPU密集型应用？

虽然这种模型在处理高并发I/O密集型任务时非常高效，因为它避免了传统多线程模型中的线程上下文切换开销，但这也意味着它不能充分利用现代多核CPU的计算能力。

weixin_54503231·2024-09-15 16:06

使用 RabbitMQ 实现秒杀订单系统的异步消息处理

使用RabbitMQ实现秒杀订单系统的异步消息处理在秒杀系统中，如何确保高并发环境下的订单处理稳定高效是个很大的挑战。为了解决这个问题，我们通常会引入消息队列，通过异步处理来削峰填谷。

c137范特西·2024-09-15 14:59

老生常谈：MySQL高可用架构

引言“高可用”是互联网一个永恒的话题，先避开MySQL不谈，为了保证各种服务的高可用有几种常用的解决方案。服务冗余：把服务部署多份，当某个节点不可用时，切换到其他节点。

我有一头小花驴·2024-09-15 14:24

Spring Boot 请求处理流程：从负载均衡到多实例并发 - 电子商务网站实例

SpringBoot请求处理流程：从负载均衡到多实例并发-电子商务网站实例SpringBoot请求处理流程：从负载均衡到多实例并发SpringBoot作为一个强大的Java应用开发框架，能够有效地处理高并发请求

烟雨国度·2024-09-15 13:49

MySQL MHA

一、MySQLMHA高可用环境概述1.什么是MHAMHA（MasterHighAvailability）是一款用于MySQL数据库集群的高可用解决方案，主要解决MySQL单点故障问题。

pokemon..·2024-09-15 12:33

Java应用的数据库连接池连接池性能测试

性能测试可以帮助我们评估连接池在高并发条件下的表现，以及识别可能的性能瓶颈。本文将介绍如何对Java应用中的数据库连接池进行性能测试。

微赚淘客机器人开发者联盟@聚娃科技·2024-09-15 08:04

Nginx Hard模式

其特点是能支持高并发请求处理，并且占用较少的内存资源，提供稳定的、丰富的模块库，有很高的配置灵活性。目前，几乎所有的web项目，都配有Nginx。

西木风落·2024-09-15 07:57

【Linux 从基础到进阶】Kubernetes 集群搭建与管理

它提供了容器编排功能，能够管理大量的容器实例，并支持应用的自动扩展、高可用性和自愈能力。

爱技术的小伙子·2024-09-15 03:00

Java高并发编程详解系列-深入理解Thread构造

上篇分享中主要是对线程的基本概念和基本操作做了一个分享，同时提出了两种常用的创建多线程的方法，当然在后期的分享中也会提及到更多的创建线程的方式，到后期的分享的时候再说。这次主要是深入的理解一下Thread的构造函数，通过构造函数对于Thread有一个更加深入的了解。这里首先提供一个JDK1.6的ThreadAPI截图线程命名规范从源码分析可以看到在Thread类中默认提供了线程的命名方式，这个

nihui123·2024-09-15 02:26

Java高并发编程详解系列-Balking设计模式

导语在实际操作中当某个线程因为发现其他线程正在进行相同的工作而放弃即将开始的任务，这种情况就被称为是Balking模式，Balking英文的意思是犹豫。在多个线程监控某个共享变量，A线程监控到共享变量发生变化后立即触发某个动作，但是这个这个时候发现了B线程也对该变量开始了行动，这个时候A变量就放弃了准备工作。下面就来详细的讲解一下关于Balking模式什么是Balking模式在餐厅吃饭的时

nihui123·2024-09-15 02:56

Java高并发编程详解系列-Future设计模式

导语假设，在一个使用场景中有一个任务需要执行比较长的时间，通常需要等待任务执行结束之后或者是中途出错之后才能返回结果。在这个期间调用者只能等待，对于这个结果Future设计模式提供了一种凭据式的解决方案。在日常生活中，这种方案也是存在的。例如去洗衣店洗衣服，当你把衣服放到洗衣店，等他洗完需要一段时间，这个时候洗衣店就会给你一凭证，你可以通过这个凭证到时候去取洗好的衣服。这个例子就是生活中的Fu

nihui123·2024-09-15 02:56

Spark集群的三种模式

文章目录1、Spark的由来1.1Hadoop的发展1.2MapReduce与Spark对比2、Spark内置模块3、Spark运行模式3.1Standalone模式部署配置历史服务器配置高可用运行模式

MelodyYN·2024-09-15 01:16

Redis 集群

目录Redis主从复制Redis主从复制简介Redis主从复制的作用Redis主从复制流程搭建Redis主从复制master节点slave节点验证哨兵故障转移机制部署哨兵Redis集群作用数据分区高可用

確定饿的猫·2024-09-14 23:36

论文分享系列（二）——论微服务架构及其应用

前端Web服务由负载均衡与服务器集群结合，实现高并发的前台界面；平台保障服务以Eureka为中心

马斯洛金字塔下的小灵猴儿·2024-09-14 22:25

Redisson分布式锁实现原理和使用

redis单机模式分布式锁可靠，稳定性更高，支持集群模式，支持锁根据业务时长自动延迟释放redis普通分布式锁存在一定的缺陷——它加锁只作用在一个Redis节点上，如果通过sentinel和cluster保证高可用

牧竹子·2024-09-14 22:25

HBase（一）——HBase介绍

格式一致2、使用方便：SQL语言通用，可用于复杂查询3、复杂操作：支持SQL，可用于一个表以及多个表之间非常复杂的查询缺点：1、读写性能比较差，尤其是海量数据的高效率读写2、固定的表结构，灵活度稍欠3、高并发读写需求

weixin_30595035·2024-09-14 22:22

Redis的持久化和高可用性

目录一、淘汰策略1、背景2、淘汰策略二、持久化1、背景2、fork进程写时复制机制3、Redis持久化方式1、aof2、rdb三、高可用1、主从复制2、Redis哨兵模式3、Rediscluster集群一

小辛学西嘎嘎·2024-09-14 21:44

PostgreSQL进阶教程

进阶教程目录事务和并发控制事务事务隔离级别锁高级查询联合查询窗口函数子查询CTE（公用表表达式）数据类型自定义数据类型数组JSON高级索引部分索引表达式索引GIN和GiST索引性能调优查询优化配置优化备份与恢复物理备份逻辑备份扩展与插件PostGISpg_cron集群与高可用

爱分享的码瑞哥·2024-09-14 19:05

实现多级缓存的六种策略方法

保证多级缓存数据一致性是一个复杂的任务，尤其是在分布式和高并发环境中。以下是一些常见的方法和策略，可以帮助实现多级缓存的数据一致性1.缓存失效策略1.1主动失效在更新数据库时，主动使相关缓存失效。

Kixuan214·2024-09-14 17:50

掌握检索技术：构建高效知识检索系统的架构与算法23

一、工程架构工程架构在构建检索系统中决定了系统的可扩展性、高可用性和性能。比如需要考虑的基本点：分布式架构：水平扩展：采用分布式架构，将检索任务分布到多个节点上，实现水平扩展。

是小旭啊·2024-09-14 13:50

Reactive 编程-Vert.x

与传统的阻塞式编程不同，Reactive编程能够更好地处理高并发和异步操作，特别适合实时系统、流处理以及需要快速响应的场景。

Flying_Fish_Xuan·2024-09-14 12:48

掌握检索技术：构建高效知识检索系统的架构与算法21

一、工程架构工程架构在构建检索系统中决定了系统的可扩展性、高可用性和性能。比如需要考虑的基本点：分布式架构：水平扩展：采用分布式架构，将检索任务分布到多个节点上，实现水平扩展。

是小旭啊·2024-09-14 12:18

K8S - Emptydir - 取代ELK 使用fluentd 构建logging saidcar

由于k8s的无状态service通常部署在多个POD中，实现多实例面向高并发。

nvd11·2024-09-14 10:38

命令行工具部署达梦数据库 DMDPC（BP 多副本架构）

解达梦数据库DPC集群的主要使用场景：DMDPC关注和解决的是大数据、计算与存储分离、高可用、支持全部的SQL标准、拥有完整的事务处理能力和集群规模能够动态伸缩的业务场景：大量的复杂查询操作要求优化器能够生成优良的执行计划

百代繁华一朝都-绮罗生·2024-09-14 06:39

DM8 分布计算集群（DMDPC）Docker 命令行部署指南

它不仅保留了传统单机数据库的大部分功能，还提供了分布式计算集群所特有的高可用性、高扩展性、高性能、高吞吐量以及对用户透明等高级特性。本文借助命令行工具部署DPC集群。

69岁法外狂徒·2024-09-14 06:36

Redis总结（八）redis单线程还是多线程问题

redis为什么可以支持高并发和它内部的工作模式有不可分割的关系：绝大部分请求是纯粹的内存操作（非常快速）采用单线程,避免了不必要的上下文切换和竞争条件非阻塞IO-IO多路复用Redis客户端对服务端的每次调用都经历了发送命令

卢小记·2024-09-14 04:37

【HDFS主从集群】存在两个独立的问题和解决方案

主从集群存在两个独立的问题和解决方案单点“主”的两个独立的问题以下是解决方案HA高可用方案：解决单点故障导致集群整体不可用问题Federation联邦机制：解决NN压力过大问题总结一般很多技术都是主从结构

流辉fglow·2024-09-14 03:48

云原生应用——软件的未来

传统的软件部署模式已经难以满足现代企业对于敏捷性、可伸缩性和高可用性的需求。因此，云原生应用应运而生，它代表了软件开发和运维的新范式，预示着软件的未来。什么是云原生应用？

快乐非自愿·2024-09-14 01:37

高并发下的分布式缓存 | Write-Through缓存模式

缓存系列文章链接如下：高并发下的分布式缓存|缓存系统稳定性设计高并发下的分布式缓存|设计和实现LRU缓存高并发下的分布式缓存|设计和实现LFU缓存高并发下的分布式缓存|Cache-Aside缓存模式高并发下的分布式缓存

非科班大厂码农（同名公众号）·2024-09-13 19:59

PostgreSQL 性能优化全方位指南：深度提升数据库效率

在现代互联网应用中，数据库性能优化是系统优化中至关重要的一环，尤其对于数据密集型和高并发的应用而言，PostgreSQL（以下简称PG）凭借其丰富的特性和强大的功能，成为很多企业的首选。

Koishi_TvT·2024-09-13 16:14

二进制方式部署K8s高可用集群

1二进制方式部署K8s高可用集群1.1kubeadm和二进制安装k8s适用场景分析kubeadm是官方提供的开源工具，是一个开源项目，用于快速搭建kubernetes集群，目前是比较方便和推荐使用的。

麻辣头马头·2024-09-13 13:22

Kafka 应用场景

数据复制：Kafka允许在多个集群之间实现无缝数据复制，确保高可用性和

zinuxer·2024-09-13 12:15

Redis-1 缓存穿透、缓存击穿、缓存雪崩

大量针对该数据的高并发请求可能会导致数据

七折困·2024-09-13 09:26

Redis高可用

目录持久化主从复制哨兵Cluster集群RDB持久化手动触发自动触发RDB执行流程RDB载入AOF持久化执行流程命令追加文件写入和文件同步appendfsyncalwaysappendfsyncnoappendfsynceverysecond文件重写文件重写流程载入对比nginx、tomcat、mysql等服务都具有预防单点故障、提高整体性能和安全性的功能，当然，Redis也不例外在Redis中，

確定饿的猫·2024-09-13 04:20

Redis7_16 高阶篇第七章 Redis中的缓存预热/缓存雪崩/缓存击穿/缓存穿透问题详解

实现缓存雪崩定义引起缓存雪崩的原因规避/解决方案1.Redis中key设置为永不过期或过期时间错开2.Redis缓存集群实现高可用3.多缓存结合预防雪崩4.服务降级5.使用云服务缓存击穿定义引起缓存击穿的原因规避

孤尘Java·2024-09-13 01:32

缓存预热/雪崩/穿透/击穿

MySQL中的数据同步至Redis的过程2.缓存雪崩Redis主机出现故障，或有大量的key同时过期大面积失效导致Redis不可用Redis中key设置为永不过期，或者过期时间错开Redis缓存集群实现高可用多缓存结合预防雪崩服务降级

当归. z Z·2024-09-13 00:29

消息总线RabbitMQ

它可以用于大型软件系统各个模块之间的高效通信，支持高并发，支持可扩展。

Crystalqy·2024-09-12 17:15

Redis 多线程模型详解

近年来，Redis开始引入部分多线程机制，以提高并发性能，特别是在处理网络I/O和数据持久化时。

CopyLower·2024-09-12 16:08

Oracle数据库中的Oracle Real Application Clusters是什么

OracleRAC的核心特点包括：高可用性：如果任何一个节点发生故障，其他节点可以继续处理请求，从而保持应用程序的连续运行。数据库实例之间的负载均衡可以自动进行，减少单

2401_85812053·2024-09-12 16:05

Eureka介绍与使用，超级详细

Eureka介绍与使用指南Eureka是由Netflix开发的一个RESTful服务，主要用于中间层服务的发现，具有高可用性、可扩展性和容错性。

康斯坦丁·奥尔基耶维奇·洛夫斯基·2024-09-12 14:21

推荐频道