分片

基于springboot断点续传或分片上传

前言在做文件上传，尤其是大文件上传过程中，比如大视频等，经常会碰到这么一种情况，就是用户希望这一次没有上传完，或者中途因为网络原因上传失败了，下一次继续上传的时候可以接着上次没有传完的地方继续上传，这样既可以保证上传的进度，又不用重新上传，避免耗时的等待，这个需求该怎么实现呢？思路分析大体来说，可以分为下面几步进行思考对于前端页面来说，考虑到一次上传大文件后端可能承受不住压力，就需要将文件进行分段
小码农叔叔·2025-02-24 10:47

分布式之Gossip协议

Gossip协议参考：Gossip协议详解|JavaGuideRedis进阶-高可拓展：分片技术（RedisCluster）详解|Java全栈知识体系Redis如何通过Gossip协议进行通信的？
点滴~·2025-02-24 05:46

2.ELK之Elasticsearch常用DSL语句(kibana语句)

零、ES基本操作1、查看索引/mapping2、查看集群健康状态3、查询ES中所有的index4、删除索引5、查看索引的分片情况6、根据docid查询文档7、常规查找——在/index/type中查找8
焱齿·2025-02-22 23:04

文件分片上传 python

服务端功能上传分片保存@app.route('/upload_filesliceprocess',methods=['POST'])defupload_filesliceprocess():file=request.files
wu_jing_sheng0·2025-02-22 22:24

19、《Springboot+MongoDB整合：玩转文档型数据库》

通过15+个典型代码示例，演示如何高效操作文档数据库，深入剖析MongoTemplate与MongoRepository的差异化使用场景，提供索引优化方案与分片集群配置实战经验，最后针对生产环境常见问题给出解
wolf犭良·2025-02-22 17:50

前端大文件上传

因此，通常需要采用分片上传、断点续传、并发控制等技术来优化上传体验”2.核心实现方案“我通常会采用以下方案来实现大文件上传：文件分片：将大文件切割成固定大小的块（例如1MB或5MB），通过Blob.slice
爱学习的前端er·2025-02-22 11:28

RocketMQ结构介绍

每个Broker在实际部署过程中对应一台服务器，每个Broker可以存储多个Topic的消息，每个Topic的消息也可以分片存储于不同的Broker。
北漂人Java·2025-02-22 07:26

三大平台云数据库生态服务对决

title:三大平台云数据库生态服务对决date:2025/2/21updated:2025/2/21author:cmdragonexcerpt:包含自动分片算法实现、跨云迁移工具链开发、智能索引推荐系统构建等核心内容
·2025-02-21 14:03

以太网协议介绍

以太网主要协议关系介绍二.协议介绍及帧结构2.1媒体访问控制子层协议MAC2.2地址解析协议ARP2.2.1ARP帧结构2.2.2ARP协议工作原理2.3网际互连协议IP2.3.1IP协议帧2.3.2IP数据报分片重组
归宿688·2025-02-20 07:47

区块链前沿技术深度洞察：开启数字信任新时代

一、可扩展性突破：分片与Layer2解决方案随着区块链应用的日益广泛，可扩展性成为亟待解决的关键问题。分片技术作为以太坊2.0的核心
·2025-02-19 15:36

mongodb分片集群搭建

环境准备操作系统：centos6.5mongodb版本：v3.6.23三台阿里云服务器：10.168.2.138、10.168.4.204、10.168.4.205搭建目标两个分片复制集（ShardedReplicaSet
不会写诗的程序猿·2025-02-19 11:59

mongoDB分片集群部署

一、MongoDB背景MongoDB是一款功能完善的分布式文档数据库，是一款非常出名的NoSQL数据库。当前国内使用Mongodb的大型实践越来越多，MongoDB为我司提供了重要的数据库存储服务，支撑着每天近千万级QPS峰值读写，数万亿级数据量存储服务。MongoDB在高性能、动态扩缩容、高可用、易部署、易使用、海量数据存储等方面拥有很大优势。近些年，MongoDB在DB-Engines流行度排
glnullops·2025-02-19 11:57

Centos7 搭建Mongodb 分片集群4.0/ PSA（三成员副本集）

MongoDB简介：1、优点和缺点：2、MongoDB适用的业务场景：Centos7搭建Mongodb分片集群一、安装MongoDB社区版4.01、配置程序包管理系统（`yum`）2、安装对应版本的MongoDB
乱蹦的小鱼干·2025-02-19 10:21

多实例部署mongodb分片集群架构（mongodb sharding cluster）

一、介绍1.Shard（分片）功能:存储实际的数据副本。每个shard是一个MongoDB副本集，副本集内部可以有多个节点，以确保数据的高可用性和容错能力。
信仰圣光么·2025-02-19 09:19

Redis Cluster入门指南：原来分布式缓存可以这么简单！

不是让收银员007加班，而是：增加多个收银台（分片存储）每个收银台配备备
weixin_42587823·2025-02-19 05:48

Join字段类型超容易上手的好吧(Elasticsearch)

在Elasticsearch中Join不能跨索引和分片，所以保存文档信息时要保证父子文档使用相同的路由参数来保证父文
籽麟网络·2025-02-18 20:11

记一次生产事故：MongoDB数据分布不均的解决方案

一共有8个分片，面对这个情况我首先想到的是手动拆分数据块，但这不是解决此问题的根本办法。
悲伤荷包蛋hb·2025-02-18 02:33

MongoDB分片集群搭建及扩容

准备工作在CentOS7上安装MongoDB分片集群6Servers代表：6台服务器上都要操作.环境准备On6Servers给虚拟机设置静态IPvi/etc/sysconfig/network-scripts
老虎大人·2025-02-18 02:29

redis sentinel模式 与 redis 分片集群 配置

模式高可用性数据分片部署复杂度适用场景Sentinel模式高无中等中小规模，需要高可用性集群模式高支持复杂大规模，需要高可用性和数据分片RedisSentinel模式（在主从复制的基础上引入Sentinel
癸酉金鸡·2025-02-17 22:36

在nodejs中使用RabbitMQ（六）sharding消息分片

RabbitMQ的分片插件（rabbitmq_sharding）允许将消息分布到多个队列中，这在消息量很大或处理速度要求高的情况下非常有用。
konglong127·2025-02-17 03:26

【Elasticsearch】分片与副本机制：优化数据存储与查询性能

博主简介：CSDN博客专家，历代文学网（PC端可以访问：https://literature.sinhy.com/#/?__c=1000，移动端可微信小程序搜索“历代文学”）总架构师，15年工作经验，精通Java编程，高并发设计，Springboot和微服务，熟悉Linux，ESXI虚拟化以及云原生Docker和K8s，热衷于探索科技的边界，并将理论知识转化为实际应用。保持对新技术的好奇心，乐于分
程风破～·2025-02-16 09:38

集群与分片：深入理解及应用实践

集群的定义集群的类型什么是分片？
一休哥助手·2025-02-16 09:07

深入理解Elasticsearch集群与分片：原理及配置方案

二、分片是什么主分片：还是以图书
一勺菠萝丶·2025-02-16 08:34

java 缓存篇2

缓存的部署方式单机主从哨兵集群特性主从（Master-Slave）哨兵（Sentinel）集群（Cluster）数据分片不支持不支持支持，基于slot进行水平分片高可用性部分支持（手动故障转移）高可用性
dzl84394·2025-02-16 06:48

数据库扩展之道：分区、分片与大表优化实战

title:数据库扩展之道：分区、分片与大表优化实战date:2025/2/15updated:2025/2/15author:cmdragonexcerpt:随着数据量的爆炸式增长，传统单机数据库的性能和存储能力逐渐成为瓶颈
·2025-02-15 18:23

ClickHouse创建分布式表

ClickHouse创建分布式表当数据量剧增的时候，clickhouse是采用分片的方式进行数据的存储的，类似于redis集群的实现方式。
期待着2013·2025-02-15 06:41

往es中写入一条数据的，请求流程

往Elasticsearch（ES）中写入一条数据的请求流程涉及多个步骤，包括客户端请求、节点处理、数据分片和副本同步等。以下是详细的流程解析。
C18298182575·2025-02-14 09:01

Elasticjob在同一个实例上运行的多个分片任务

一、#创作灵感#elasticjob在同一个实例上运行的多个分片任务（实例数量小于分片数量）很多贴子、AI说可以实际不可以，很可能是官方说明翻译时出现了误差每个分片由一个独立的作业服务器执行，可以同时处理多个分片
飞火流星02027·2025-02-13 02:03

Elasticsearch 监控指标概览：关键维度全知晓

文章目录前言：监控Elasticsearch集群的重要性1、集群健康维度：分片和节点2、搜索性能维度：请求率和延迟3、索引性能维度：刷新(refresh)和合并(Merge)时间4、节点运行状况维度：内存
磐基Stack专业服务团队·2025-02-12 19:35

华为云数据库DDS产品深度赋能

产品深度赋能，主要面向DA、交付、一线、二线数据库从业者，针对DDS常见问题及产品特性进行介绍，涉及：产品特性介绍、产品使用场景介绍、产品常见问题介绍、DDS实例使用规范及最佳实践介绍、DDS副本集内部机制和分片集群内部原理介绍等
程思扬·2025-02-12 12:50

RocketMQ实战—10.营销系统代码优化

大纲1.营销系统引入MQ实现异步化来进行性能优化2.基于MQ释放优惠券提升系统扩展性3.基于Redis实现重复促销活动去重4.基于促销活动创建事件实现异步化5.推送任务分片和分片消息batch合并发送实现
东阳马生架构·2025-02-12 00:50

clickhouse集群方案及表引擎最佳实践

数据一致性问题某些云服务厂商提供的其实是单机版，比如某个集群单分片，两副本，但其实只开放一台机器的ip和端口，所有读写都在一台机器上，这样就没有数据一致性问题，但这不是正确的集群，这种单机使用中建表都不需要
yangls的技术博客·2025-02-09 13:42

【文件上传、秒传、分片上传、断点续传、重传】

文章目录获取文件对象文件上传（秒传、分片上传、断点续传、重传）优化获取文件对象input标签的onchange方法接收到的参数就是用户上传的所有文件文件上传#inputFile,#inputDirectory
CaraYQ·2025-02-09 07:32

NoSQL 数据库有哪些类型?

并且，NoSQL数据库天生支持分布式，数据冗余和数据分片等特性，旨在提供可扩展的高可用高性能数据存储解决方案。一个常见的误解是NoSQL数据库或非关系型数据库不能很好地
HUNAG-DA-PAO·2025-02-09 07:02

分布式计算框架

分布式计算就是为了把多个计算逻辑能够放到多台机器上执行，执行的逻辑一般使用java或者python等，还牵扯到数据如何分片。
wlstephenw·2025-02-08 15:03

分布式数据库缓存的基本概念？MemCache和redis的详细比较？

目前市场上常见的数据库缓存系统是MemChace和Redis,他们的主要区别如下：MemChace：数据类型是简单的key/value结构，不支持持久性，分布式存储为客户端哈希分片/一致性哈希，支持多线程
mischen520·2025-02-07 11:24

DB分布式 思维导图-java架构 代码示例

核心概念分片(Sharding)：将数据水平分割成多个部分存储于不同的节点上
用心去追梦·2025-02-06 11:08

一致性 hash 算法理解与实现

算法间的对比在分布式分片中，存在着几种算法:取模，分段，一致性hash。
·2025-02-06 01:53

（王道考研计算机网络）第四章网络层-第三节1：IP数据报格式及分片

注意事项、目录导航和思维导图王道考研408计算机组成原理万字笔记王道考研408数据结构+计算机算法设计与分析万字笔记王道考研408操作系统+Linux系统编程万字笔记文章目录一：IP数据报格式二：IP数据报分片一
快乐江湖·2025-02-05 14:38

ip数据报考研

总长度16数据报最大长度65535字节，若超过MTU则需分片。标识16同一数据报分片后标识相同，用于重组。标志（MF/DF）3DF=1时禁止
代码小白 ac·2025-02-05 14:34

mycat和mysql

MyCat是数据库中间件，支持数据库集群，提供高可用性的数据分片集群。可以管理多个机器上的数据库组成的集群。MyCat分片：海量数据存储的解决方案。
沐漜·2025-02-05 09:29

MySQL知识点总结（十九）

InnoDB集群主要的应用场合如下：弹性复制环境，这种复制基础架构中涉及的服务器数量非常的不稳定高可用分片环境，分片是一种流行的写横向扩展方法，每个分片可以映射到一个复制组作为标准主从复制的替代方案使用
a_j58·2025-02-05 00:54

关于将HashMap替换原有Map的key保持value不变报错java.util.ConcurrentModificationException的处理方案

前言由于苦逼的在公司支持上线，在等待es集群分片完成过程，实在闲的无聊，将之前本地Notion记得一些笔记扔上来一些打发下时间吧(￣.￣)需求有个类似下面的数据为Map>>，其中key为资源id，value
梦岚如雪·2025-02-03 11:56

分库分表后如何进行join操作

在分库分表后的系统中，进行表之间的JOIN操作比在单一数据库表中复杂得多，因为涉及的数据可能位于不同的物理节点或分片中。
fajianchen·2025-02-02 22:46

Redis 热 key 的终极解决方案？京东、得物、b 站都是如何解决的？

从数据层角度看，Redis集群某个分片的数据缺失，导致缓存雪崩。从应用层角度看，用户请求将大量超时和不可访问出现Redis热key的场景有很多，比如：爆款商品、刷子用户、秒杀商品等。不过我们很多
·2025-02-02 18:11

HDFS总结

HDFS是Hadoop体系中数据存储管理的基础HDFS是基于流数据模式访问和处理超大文件的需求而开发的1.流式数据：将数据序列化为字节流来存储，这样不会破坏文件的结构和内容，而且字节流直接存储在磁盘上，可以分片或分块
ChenJieYaYa·2025-01-31 20:03

【Elasticsearch 】悬挂索引（Dangling Indices）

Elasticsearch悬挂索引（DanglingIndices）解析与管理1.悬挂索引的定义悬挂索引（DanglingIndices）是指存在于节点上但未被集群元数据识别的索引分片。
risc123456·2025-01-31 17:31

实习成长之路：关于ElasticSearch深度分页带来的思考，如何解决深度分页和跳页

因为ES的分页查询其实是这样来的因为ElasticSeach的天生分布式的原因，我们的数据是分散在几个分片中的，而我们设置了from+size需要对全部数据进行查
会写代码的花城·2025-01-30 14:42

MongoDB 大俗大雅，上来问分片真三俗 -- 4 分什么分

开头还是介绍一下群，如果感兴趣PolarDB,MongoDB,MySQL,PostgreSQL,Redis,OceanBase,SqlServer等有问题，有需求都可以加群群内有各大数据库行业大咖，可以解决你的问题。加群请联系liuaustin3，（共2710人左右1+2+3+4+5+6+7+8+9）(123456群均已爆满，7群400+，开8群9群)这是MongoDB宣传周的第五篇，这周真漫长，
Austindatabases·2025-01-30 11:48

cgroup 简介

cgroup的功能在于将一台计算机上的资源（CPU，memory，network）进行分片，来防止进程间不利的资源抢占。术语cgroup：关联一组task和一组subsystem的配置参数。
小黑屋关门了·2025-01-29 22:11
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他