redis集群分片

C# 手动写入日志，过大写入新文件

下面采用IO异步写入以及文件过大分片等方式解决问题。
锋君·2025-06-22 11:03

TCP/IP协议栈socket实现浅析(中) 报文发送相关函数及流程分析

层流程TCP层流程用户数据拷贝至skbsk_buff结构排布tcp分段流程及传输算法TCP头封装后发送到网络层IP层流程查找路由及封装ip头路由查找fib查找路由表项创建Netfilter钩子处理处理ip分片将包发送到链路层链路层处理查找邻居表创建邻居表
香蕉割草机·2025-06-22 02:02

redis集群的三种部署方式

一、主从同步redis的主从同步工作原理简单概括为：1、从服务器（SlaveServer）向（主服务器，Master）发送sync（同步）命令2、master启动后台存盘进程，并收集所有修改数据命令3、master完成存盘后，传送整个数据文件到slave4、slave接受数据文件，加载到内存中完成首次完全同步5、后续有新数据产生时，master继续将新的数据命令传递给slave完成同步redis的
Spring_Lws·2025-06-21 17:04

面试题：设计一个分布式“附近的人”功能（如微信附近的人、交友应用位置匹配）

**非功能性需求**-低延迟：查询响应时间UserA`-**消息队列(Kafka)**-异步解耦：接收高并发写入，批量消费到数据库-分区策略：按`UserID`哈希分区保证顺序-**分片数据库(GeoShard
程序员孟猛·2025-06-21 13:06

MapReduce

工作原理：Mapper接收输入的分片（InputSplit），通常是文件的一部分，然后根据业务逻辑将这些数据转换为键值对。
2401_8554978·2025-06-21 05:50

Redis集群服务器重启后虚拟IP中断，应该如何处理

Redis集群服务器重启后虚拟IP中断，应该如何处理第一步，先登录阿里云账号，然后在阿里云网站中把所有的集群服务器按照主从顺序一次停止。第二步，先把从服务器完全启动成功之后，再把主服务器完全启动成功。
Jerry 二河小鱼·2025-06-21 03:36

MySQL分库分表完全实战指南

数据量爆炸式增长2.查询性能急剧下降3.并发压力过大✅分库分表带来的收益分库分表的类型垂直拆分（按业务功能划分）垂直分库实例垂直分表实例↔️水平拆分（按数据量划分）水平分库实例水平分表实例分库分表策略详解分片键选择原则
·2025-06-21 02:30

TiDB 替换 HBase 全场景实践指南 ——从架构革新到业务赋能

tidb.net/blog/c687d474第一章：HBase的历史使命与技术瓶颈1.1HBase的核心价值与经典场景作为Hadoop生态的核心组件，HBase凭借LSM-Tree存储引擎和Region分片机制
TiDB 社区干货传送门·2025-06-20 23:41

08 Redis之集群的搭建和复制原理+哨兵机制+CAP定理+Raft算法

5Redis集群2.8版本之前,Redis采用主从集群模式.实现了数据备份和读写分离2.8版本之后,Redis采用Sentinel哨兵集群模式,实现了集群的高可用5.1主从集群搭建首先,基本所有系统,“
·2025-06-20 17:57

Java分片策略：使用ShardingSphere实现数据库分片

文章目录引言一、ShardingSphere核心架构概述1.1架构组件设计1.2分片规则配置体系二、数据库分片策略实现2.1水平分片算法2.2范围分片策略三、表分片策略与优化3.1复合分片键策略3.2分片性能优化四
程序媛学姐·2025-06-19 20:01

【经典前端面试题】如何实现大文件分片上传

前言相信各位在前端面试的时候都经常被问到“如何实现大文件分片上传”，甚至还有在线的coding编程题，希望面试的人手动实现一个大文件上传的demo。
啊儿法·2025-06-19 19:54

前端分片传递数据给后端

html:合并functionupload(blob){varxhr=newXMLHttpRequest()xhr.open('POST','/blob',true)xhr.setRequestHeader('Content-Type','text/plain')xhr.setRequestHeader('File-ID','15')//传递文件IDxhr.send(blob)}document.
·2025-06-19 19:24

分库分表查询实现方案详解

如何确定数据在哪个库哪个表跨库查询问题：需要查询多个库/表时的数据合并分页排序问题：跨库分页和排序的复杂性事务一致性：跨库事务保证聚合计算：跨库的SUM、COUNT等聚合操作1.2分库分表查询方案对比方案实现方式优点缺点适用场景客户端分片应用层实现路由逻辑简单直接
ldwtxwh·2025-06-19 19:53

Vue分片上传于后端接收分片文件

前言做毕设时需要将大文件进行上传到后端进行保存，结合多方面的资料搜集完成了这个功能，但是还是没有做到文件分片上传时统计总上传进度。前端部分实现需要得到一个文件对象，这里不作出叙述了。
邻家小妹妹·2025-06-19 19:23

前端大文件分片上传与断点续传方案

##一、背景与需求在处理大文件上传时（如视频、设计稿等），传统单次上传方式存在以下问题：-网络波动导致上传失败需重新上传-服务器限制单次请求大小-无法暂停/恢复上传-上传进度难以跟踪分片上传与断点续传方案能有效解决这些问题
weixin_47233946·2025-06-19 13:07

大文件上传(断点续传等)

文章目录文件切片上传chunks所有分片上传成功后，发送合并chunks请求断点续传刷新网页继续上传优化闲时上传webWorker限制请求数量文件切片/***文件切片*@param{File}file切片文件
神奇大叔·2025-06-19 13:06

IndexedDB 实现断点续传、分片上传

使用IndexedDB存储文件元数据和分片状态，确保上传过程可靠，支持暂停/恢复以及跨浏览器会话的自动续传。1.项目环境准备1.1技术栈Vue3：使用CompositionAPI和Setup语法糖。
菜喵007·2025-06-19 12:01

Vue大文件上传:让你的文件秒传、断点续传、分片上传---需要后端支持--案例后端使用node

（2）分片上传：大文件分片传给后端，后端自己组合成一个完整的文件。（3）断点续传：分片上传一半没成功，然后从断点处继续接着上传。（1）秒传a、前端思路：用户上传文件计算文件的ha
陶甜也·2025-06-19 01:45

Redis集群模式之Redis Cluster（2）

上篇文章我们讲解了RedisCluster中的主要模块和两种重定向方式，这篇文章我们来讲解一下RedisCluster的状态监测和维护。RedisCluster状态监测及维护要讲解RedisCluster中节点的状态如何维护，我们要先知道RedisCluster中的节点有哪些状态，gossip协议是什么以及具体的通讯（心跳）机制。节点状态RedisCluster中的每个节点都维护着一份在自己看来当
码农开荒路·2025-06-18 07:10

redis-cluster集群模式

【redis-cluster模式】（redis5.0）1.优点：解决了redis内存不够用问题，通过多个master来增大redis集群内存master之间相互通讯，相互选举，保证故障转移主从复制，master
纱络三·2025-06-18 06:07

redis集群密码JAVA怎么连_从Java连接到AWS Elasticache(Redis集群)的正确方...

这取决于您如何配置redis集群.是否启用集群模式.您可以在控制台中找到它Redis(clustermodedisabled)clusters,usethePrimaryEndpointforallwriteoperations.UsetheindividualNodeEndpointsforreadoperations
weixin_39995764·2025-06-17 13:10

大数据领域 OLAP 的分布式查询执行计划优化

大数据领域OLAP的分布式查询执行计划优化关键词：OLAP、分布式查询、执行计划优化、查询引擎、并行计算、数据分片、成本模型摘要：本文深入探讨了大数据环境下OLAP系统的分布式查询执行计划优化技术。
大数据洞察·2025-06-17 02:20

6.分布式数据库与分库分表

目录一、分库分表核心概念•核心目标：突破单库性能瓶颈，应对海量数据与高并发•垂直拆分：按业务模块拆分（用户库、订单库、商品库）•水平拆分：单表数据分片（用户ID取模、时间范围分片）二、分片策略与避坑指南
nu11cat·2025-06-16 18:30

鸿蒙开发实战之DRM Kit打造美颜相机数字版权堡垒

一、核心版权保护场景通过DRMKit实现三大内容防护：素材加密保护付费滤镜动态解密（硬件级安全存储）用户作品AES-256-CBC加密（密钥分片存储）版权水印溯源隐形数字水印（抗截图/翻拍）区块链存证（
·2025-06-16 17:26

[每周一更]-(第146期)：BigCache使用指南：打造高并发无GC压力的本地缓存

适用场景适用场景描述大量缓存键值（数十万级以上）内存分片+避免GC停顿高并发读写缓存支持每秒上百万级的R/W本地
·2025-06-15 18:32

Linux Socket编程——多线程并发

如同进程，线程由内核按时间分片进行管理。在单处理器系统中，内核使用时间分片来模拟线程的并发执行，这种方式和进程的相同。而在多处理器系统中，如同多个进程，线程实际上一样可以并发执行。
0 error ~ 0 warning·2025-06-15 06:09

Elasticsearch增删改查语句

创建索引库：不带映射的PUT/索引名称{ "settings":{  "number_of_shards":3,  //主分片数  "number_of_replicas":1 //每个主分片的副本数}
想躺平的咸鱼干·2025-06-15 03:17

【Java】 Springboot+Vue 大文件断点续传

【Java】Springboot+Vue大文件断点续传，【Java】Springboot+Vue大文件分块上传，【Java】Springboot+Vue大文件分片上传，【Java】Springboot+
M_Snow·2025-06-15 01:05

结合redis实现文件分片秒传断点续传

**分片上传**--检查分片是否已上传（通过RedisSet）-只上传缺失分片-每个分片独立保存到临时目录3.**断点续传**--刷新页面后重新计算MD5-检查已上传分片列表-继续上传剩余分片4.
学会沉淀。·2025-06-14 21:01

高并发架构设计：热点隔离的艺术

本文将聚焦线程池隔离（流量层隔离）与数据分片（数据层隔离）两大核心技术，揭示如何构建具备弹性能力的系统架构。
递归尽头是星辰·2025-06-14 18:44

Redis集群模式之哨兵模式（2）

上篇文章我们讲解了哨兵模式是干什么的以及怎么干的。这篇文章我们通过几个问题来深入理解一下哨兵模式。Redis哨兵模式是如何工作的？（1）每个哨兵节点以每秒钟一次的频率向它所知的主节点服务器、从节点服务器和其他哨兵节点实例发送一个Ping命令。（2）如果一个实例距离最后一次有效回复Ping命令的时间超过down-after-milliseconds选项所指定的值，则这个实例会被当前的哨兵节点标记为主
码农开荒路·2025-06-14 16:53

NoSQL之Redis集群

一、核心目标自动分片(AutomaticSharding)：将数据分布存储在集群的多个节点上。
UFIT·2025-06-14 15:16

网络IP分片

目录IP的版本号IP标识位如何理解分片？MTU跟谁有关系，为谁服务的？
啊QQQQQ·2025-06-14 08:09

c#杂谈之四(模式匹配)

、模式匹配1.1Null检查1.2类型测试1.3比较离散值1.4关系模式1.5多个输入1.6列表模式1.7var1.8对位模式1.9扩展对位模式1.20解构模式1.21弃元模式1.22属性模式1.23分片模式一
永恒的宁静·2025-06-14 05:46

golang struct数组排序_深入理解golang的基本类型排序与slice排序

C默认是对数组进行排序，C++是对一个序列进行排序，Go则更宽泛一些，待排序的可以是任何对象，虽然很多情况下是一个slice(分片，类似于数组)，或是包含slice的一个对象。
Flipboard红板报·2025-06-14 04:42

Redis+Kafka实现动态延时任务

+Kafka实现动态延时任务的存储与下发执行，保证与MySQL的最终一致性从“业务背景”、“技术方案”、“为何用Redis+Kafka”、“如何保证最终一致性”四个角度来分析：一、业务背景在实现大文件分片上传
苏格拉没有底_coder·2025-06-13 17:59

MongoDB：大数据分布式存储的理想之选

MongoDB分布式存储架构：从第一性原理到大数据实践的技术全景解析关键词MongoDB、分布式存储、NoSQL、大数据分片、副本集、CAP定理、BASE理论摘要本报告以MongoDB为核心，系统解析其作为大数据分布式存储理想之选的技术本质
大数据洞察·2025-06-13 15:11

大模型多显卡多服务器并行计算方法与实践指南

分布式训练主要分为两种模式：数据并行：将数据分片到不同设备，每个设备拥有完整的模型副本模型并行：将模型分割到不同设备，每个设备处理部分模型计算现代大模型训练通常结合这两种方式，形成混合并行策略。
非著名架构师·2025-06-13 13:27

ES集群的故障转移

集群的master节点会监控集群中的节点状态，如果发现有节点宕机，会立即将宕机节点的分片数据迁移到其它节点，确保数据安全，这个叫做故障转移。
想躺平的咸鱼干·2025-06-13 06:40

ES集群的节点

海量数据存储问题:将索引库从逻辑上拆分为N个分片(shard)，存储到多个节点单点故障问题:将分片数据在不同节点备份(replica)ES集群当中集群节点不同的职业划分节点类型配置参数默认值节点职责概述
想躺平的咸鱼干·2025-06-13 06:40

9.IP数据包分片计算

IP数据报分片计算题目1：主机发送5400字节数据，MTU=1400字节（IPv4），填写分片后的字段值。
Dawn³·2025-06-13 00:58

NoSQL之Redis集群

目录Redis集群方式主从模式哨兵模式集群模式集群模式简介数据分片方式客户端分片代理分片服务器端分片负载均衡的实现故障的转移故障的处理多slave选举安装redis(每个节点都要安装)修改配置文件(每个节点都要配置
惊起白鸽450·2025-06-12 22:10

uniapp 集成腾讯云 IM 富媒体消息（地理位置/文件）

核心实现方式：标准消息类型：直接使用SDK内置类型（文件、图片等）自定义消息类型：通过TIM.TYPES.MSG_CUSTOM承载结构化数据文件上传服务：集成tim-upload-plugin处理大文件分片上传多端渲染
^Rocky·2025-06-12 17:30

ShardingSphere源码解析：跨库查询案例分析（含广播表详解）

引言在分布式系统中，数据分片是解决数据规模增长的重要手段。ShardingSphere作为分布式数据库中间件，提供了强大的分片查询能力。
凉冰不加冰·2025-06-12 15:52

基于阿里云 大文件分片上传（oss + layui + js版本）：

Html部分作品视频作品附件上传作品上传文件格式为zip或rarJs部分：//初始化上传组件upload.render({elem:'',//上传按钮id值或者class值size:"1048576",//限制上传大小1Gexts:"mp4|MP4",//限制上传文件大小url:"/",//文件上传地址auto:false,choose:function(obj){varfiles=this.fi
masterphp·2025-06-11 21:45

1亿的Redis key如何高效统计

前言有些小伙伴在工作中，可能遇到过这样的场景：老板突然要求统计Redis中所有key的数量，你随手执行了KEYS*命令，下一秒监控告警疯狂闪烁——整个Redis集群彻底卡死，线上服务大面积瘫痪。
meslog·2025-06-11 18:23

NoSQL 之Redis集群

Redis集群的实现方法一般有客户端分片、代理分片和服务器端分片三种解决方案目录一：Redis集群方式主从复制哨兵模式集群模式（Redis-Cluster）二、数据分片方式客户端分片代理分片服务器分片三
靑木312·2025-06-11 13:47

Elasticsearch 7.8.0：深度解析与应用指南

文章涵盖了Elasticsearch的安装、启动、配置、索引与查询、数据分片与副本设置、安全与监控，
懒癌弓箭手起源·2025-06-11 09:16

Elasticsearch索引和文档

目录一、索引（Index）1.命名与唯一性2.多分片架构3.副本（Replicas）4.映射（Mapping）5.元数据与设置6.操作二、文档（Document）1.JSON格式2.唯一标识3.索引过程
lzyever·2025-06-11 02:58

Elasticsearch的搜索流程描述

Elasticsearch的搜索流程是一个结合分布式查询、分片协同、结果聚合和排序的复杂过程，其设计目标是在海量数据中实现快速检索和精准结果返回。
安审若无·2025-06-11 02:28
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他