ClickHouse分片

MongoDB副本集与分片综合应用

一、MongoDB副本集1.1、MongoDB复制在mongodb学习阶段，一般用的都是单台服务器，一个mongod服务进程。如果仅仅作为学习开发是可以的，但是如果用到生产环境，风险会很高，例如服务器崩溃、硬件出现问题，最坏的情况是磁盘或网络出问题可能会导致数损坏或数据不可访问。MongoDB复制是将数据同步在多个服务器的过程。复制提供了数据的冗余备份，并在多个服务器上存储数据副本，提高了数据的可
李明一.·2025-02-26 01:26

Elasticsearch索引设计与分片策略深度优化-手记

一、索引设计的黄金法则（从踩坑到精通的必经之路）1.字段类型显式声明原则动态映射是新手最易踩的坑，某金融平台曾因金额字段被自动识别为text类型，导致聚合查询时触发OOM。正确做法应显式声明核心字段：PUT/financial_transactions{"mappings":{"dynamic":false,//关闭动态映射"properties":{"txn_id":{"type":"keywo
一起学开源·2025-02-25 10:15

Elasticsearch安装与应用

本文将详细介绍Elasticsearch的安装使用、分片机制以及其它相关功能。一、Elasticsearch的安装Ela
伟大无须多言·2025-02-24 23:24

支持增量备份、Redis分片集群继续优化...还有更多Addon功能优化等你体验！

KubeBlocksv0.9.3正式发布啦！本次发布包含了一些新功能、关键的错误修复以及各种改进，继续优化数据库管理体验。更多新功能等您探索！以下是详细的更新内容。升级指南指路：https://cn.kubeblocks.io/docs/preview/user-docs/upgrade-kubeb...KubeBlocks新特性MemberJoinAction：生命周期操作支持memberjoi
·2025-02-24 14:30

ClickHouse SQL 查询中别名导致报错的问题分析与解决方案

一、引言在使用ClickHouse数据库进行数据查询时，SQL语句中的别名使用是常见的优化手段之一。但是，不当的别名使用可能会引发解析错误，影响查询结果的正确性。
水涵幽树·2025-02-24 14:22

基于springboot断点续传或分片上传

前言在做文件上传，尤其是大文件上传过程中，比如大视频等，经常会碰到这么一种情况，就是用户希望这一次没有上传完，或者中途因为网络原因上传失败了，下一次继续上传的时候可以接着上次没有传完的地方继续上传，这样既可以保证上传的进度，又不用重新上传，避免耗时的等待，这个需求该怎么实现呢？思路分析大体来说，可以分为下面几步进行思考对于前端页面来说，考虑到一次上传大文件后端可能承受不住压力，就需要将文件进行分段
小码农叔叔·2025-02-24 10:47

分布式之Gossip协议

Gossip协议参考：Gossip协议详解|JavaGuideRedis进阶-高可拓展：分片技术（RedisCluster）详解|Java全栈知识体系Redis如何通过Gossip协议进行通信的？
点滴~·2025-02-24 05:46

2.ELK之Elasticsearch常用DSL语句(kibana语句)

零、ES基本操作1、查看索引/mapping2、查看集群健康状态3、查询ES中所有的index4、删除索引5、查看索引的分片情况6、根据docid查询文档7、常规查找——在/index/type中查找8
焱齿·2025-02-22 23:04

文件分片上传 python

服务端功能上传分片保存@app.route('/upload_filesliceprocess',methods=['POST'])defupload_filesliceprocess():file=request.files
wu_jing_sheng0·2025-02-22 22:24

大数据-257 离线数仓 - 数据质量监控 监控方法 Griffin架构

MapReduce（已更完）Hive（已更完）Flume（已更完）Sqoop（已更完）Zookeeper（已更完）HBase（已更完）Redis（已更完）Kafka（已更完）Spark（已更完）Flink（已更完）ClickHouse
m0_74823705·2025-02-22 21:50

19、《Springboot+MongoDB整合：玩转文档型数据库》

通过15+个典型代码示例，演示如何高效操作文档数据库，深入剖析MongoTemplate与MongoRepository的差异化使用场景，提供索引优化方案与分片集群配置实战经验，最后针对生产环境常见问题给出解
wolf犭良·2025-02-22 17:50

前端大文件上传

因此，通常需要采用分片上传、断点续传、并发控制等技术来优化上传体验”2.核心实现方案“我通常会采用以下方案来实现大文件上传：文件分片：将大文件切割成固定大小的块（例如1MB或5MB），通过Blob.slice
爱学习的前端er·2025-02-22 11:28

RocketMQ结构介绍

每个Broker在实际部署过程中对应一台服务器，每个Broker可以存储多个Topic的消息，每个Topic的消息也可以分片存储于不同的Broker。
北漂人Java·2025-02-22 07:26

clickhouse集群搭建

准备三台机器，192.168.20.7，192.168.20.8，192.168.20.10用于搭建clickhouse集群。
fusugongzi·2025-02-21 15:00

三大平台云数据库生态服务对决

title:三大平台云数据库生态服务对决date:2025/2/21updated:2025/2/21author:cmdragonexcerpt:包含自动分片算法实现、跨云迁移工具链开发、智能索引推荐系统构建等核心内容
·2025-02-21 14:03

以太网协议介绍

以太网主要协议关系介绍二.协议介绍及帧结构2.1媒体访问控制子层协议MAC2.2地址解析协议ARP2.2.1ARP帧结构2.2.2ARP协议工作原理2.3网际互连协议IP2.3.1IP协议帧2.3.2IP数据报分片重组
归宿688·2025-02-20 07:47

ClickHouse 数仓

ClickHouse是OLAP并且面向列的数据管理系统.具有高性能分析任何应用,从是嵌入式服务到成百台服务器.开源并且面向列的SQL存储ClickHouse首先是一个开源的SQL数仓,并且带有高性能,成熟
大怀特·2025-02-20 04:56

区块链前沿技术深度洞察：开启数字信任新时代

一、可扩展性突破：分片与Layer2解决方案随着区块链应用的日益广泛，可扩展性成为亟待解决的关键问题。分片技术作为以太坊2.0的核心
·2025-02-19 15:36

mongodb分片集群搭建

环境准备操作系统：centos6.5mongodb版本：v3.6.23三台阿里云服务器：10.168.2.138、10.168.4.204、10.168.4.205搭建目标两个分片复制集（ShardedReplicaSet
不会写诗的程序猿·2025-02-19 11:59

mongoDB分片集群部署

一、MongoDB背景MongoDB是一款功能完善的分布式文档数据库，是一款非常出名的NoSQL数据库。当前国内使用Mongodb的大型实践越来越多，MongoDB为我司提供了重要的数据库存储服务，支撑着每天近千万级QPS峰值读写，数万亿级数据量存储服务。MongoDB在高性能、动态扩缩容、高可用、易部署、易使用、海量数据存储等方面拥有很大优势。近些年，MongoDB在DB-Engines流行度排
glnullops·2025-02-19 11:57

Centos7 搭建Mongodb 分片集群4.0/ PSA（三成员副本集）

MongoDB简介：1、优点和缺点：2、MongoDB适用的业务场景：Centos7搭建Mongodb分片集群一、安装MongoDB社区版4.01、配置程序包管理系统（`yum`）2、安装对应版本的MongoDB
乱蹦的小鱼干·2025-02-19 10:21

多实例部署mongodb分片集群架构（mongodb sharding cluster）

一、介绍1.Shard（分片）功能:存储实际的数据副本。每个shard是一个MongoDB副本集，副本集内部可以有多个节点，以确保数据的高可用性和容错能力。
信仰圣光么·2025-02-19 09:19

Redis Cluster入门指南：原来分布式缓存可以这么简单！

不是让收银员007加班，而是：增加多个收银台（分片存储）每个收银台配备备
weixin_42587823·2025-02-19 05:48

Join字段类型超容易上手的好吧(Elasticsearch)

在Elasticsearch中Join不能跨索引和分片，所以保存文档信息时要保证父子文档使用相同的路由参数来保证父文
籽麟网络·2025-02-18 20:11

记一次生产事故：MongoDB数据分布不均的解决方案

一共有8个分片，面对这个情况我首先想到的是手动拆分数据块，但这不是解决此问题的根本办法。
悲伤荷包蛋hb·2025-02-18 02:33

MongoDB分片集群搭建及扩容

准备工作在CentOS7上安装MongoDB分片集群6Servers代表：6台服务器上都要操作.环境准备On6Servers给虚拟机设置静态IPvi/etc/sysconfig/network-scripts
老虎大人·2025-02-18 02:29

redis sentinel模式 与 redis 分片集群 配置

模式高可用性数据分片部署复杂度适用场景Sentinel模式高无中等中小规模，需要高可用性集群模式高支持复杂大规模，需要高可用性和数据分片RedisSentinel模式（在主从复制的基础上引入Sentinel
癸酉金鸡·2025-02-17 22:36

APO全量日志对接logstash和fluent日志采集生态

出现错误日志时，计算日志错误指标故障现场日志应用程序出现慢或者错误trace时，将这段时间内的日志收集并写入clickhouse中。
·2025-02-17 15:14

APO v0.7.0 更新：日志功能完整版发布！

在v0.6.0版本中，APO发布了基于ClickHouse开箱即用的高效日志方案，为用户提供了采集、处理和检索全量日志的基础功能。新版本在此基础上进一步强化了日志处理和检索的能力，提升了用户体验。
·2025-02-17 15:44

在nodejs中使用RabbitMQ（六）sharding消息分片

RabbitMQ的分片插件（rabbitmq_sharding）允许将消息分布到多个队列中，这在消息量很大或处理速度要求高的情况下非常有用。
konglong127·2025-02-17 03:26

【Elasticsearch】分片与副本机制：优化数据存储与查询性能

博主简介：CSDN博客专家，历代文学网（PC端可以访问：https://literature.sinhy.com/#/?__c=1000，移动端可微信小程序搜索“历代文学”）总架构师，15年工作经验，精通Java编程，高并发设计，Springboot和微服务，熟悉Linux，ESXI虚拟化以及云原生Docker和K8s，热衷于探索科技的边界，并将理论知识转化为实际应用。保持对新技术的好奇心，乐于分
程风破～·2025-02-16 09:38

集群与分片：深入理解及应用实践

集群的定义集群的类型什么是分片？
一休哥助手·2025-02-16 09:07

深入理解Elasticsearch集群与分片：原理及配置方案

二、分片是什么主分片：还是以图书
一勺菠萝丶·2025-02-16 08:34

java 缓存篇2

缓存的部署方式单机主从哨兵集群特性主从（Master-Slave）哨兵（Sentinel）集群（Cluster）数据分片不支持不支持支持，基于slot进行水平分片高可用性部分支持（手动故障转移）高可用性
dzl84394·2025-02-16 06:48

【clickhouse踩坑记录】ClickHouse查询性能优化（入门级）

背景用了一年多的ClickHouse，但好像都没系统地去学一遍，趁着最近有点时间，相对全面地去看了一圈ClickHouse的内容。
一条咸鱼的记录·2025-02-15 20:35

数据库扩展之道：分区、分片与大表优化实战

title:数据库扩展之道：分区、分片与大表优化实战date:2025/2/15updated:2025/2/15author:cmdragonexcerpt:随着数据量的爆炸式增长，传统单机数据库的性能和存储能力逐渐成为瓶颈
·2025-02-15 18:23

Centos7安装Clickhouse单节点部署

部署流程1、关闭防火墙&沙盒关闭防火墙并关闭开机自启动systemctlstopfirewalld&&systemctldisablefirewalld查看selinux状态是否为disabled，否则修改[root@localhost~]#getenforceEnforcing修改为disabledvim/etc/selinux/config#修改SELINUX=disabled#重启生效reb
lcz-2000·2025-02-15 12:59

centos7 安装单机 ClickHouse

前言ClickHouse是俄罗斯的Yandex于2016年开源的列式存储数据库（DBMS），使用C++语言编写，主要用于在线分析处理查询（OLAP），能够使用SQL查询实时生成分析数据报告本篇首先介绍下如何基于
小码农叔叔·2025-02-15 06:46

ClickHouse创建分布式表

ClickHouse创建分布式表当数据量剧增的时候，clickhouse是采用分片的方式进行数据的存储的，类似于redis集群的实现方式。
期待着2013·2025-02-15 06:41

centos7安装部署clickhouse数据库 小白详细教程

目录1.系统概述...21.1服务器环境概述...31.2操作系统...31.3数据库软件...32.数据库账户说明...32.1数据库账户...33.ClickHouse运行环境安装部署...43.1
这是个错觉·2025-02-15 06:09

ClickHouse集群搭建（CENTOS7环境）

ClickHouse集群搭建（CENTOS7环境）1.rpm包下载下载的rpm包版本-rw-r--r--1rootroot1342545月2817:07clickhouse-client-20.3.9.70
huaxia2002·2025-02-15 05:07

CentOS7 部署安装ClickHouse

一、什么是ClickHouseClickHouse是俄罗斯的Yandex于2016年开源的列式存储数据库（DBMS），使用C++语言编写，主要用于在线分析处理查询（OLAP），能够使用SQL查询实时生成分析数据报告
zhua.er·2025-02-15 05:06

5. clickhouse 单节点多实例部署

：centos7安装部署软件版本部署方式centos7zookeeperzookeeper-3.4.10伪分布式hadoophadoop-3.1.3伪分布式hivehive-3.1.3-bin伪分布式clickhouse21.11.10.1
Toroidals·2025-02-15 05:35

往es中写入一条数据的，请求流程

往Elasticsearch（ES）中写入一条数据的请求流程涉及多个步骤，包括客户端请求、节点处理、数据分片和副本同步等。以下是详细的流程解析。
C18298182575·2025-02-14 09:01

Elasticjob在同一个实例上运行的多个分片任务

一、#创作灵感#elasticjob在同一个实例上运行的多个分片任务（实例数量小于分片数量）很多贴子、AI说可以实际不可以，很可能是官方说明翻译时出现了误差每个分片由一个独立的作业服务器执行，可以同时处理多个分片
飞火流星02027·2025-02-13 02:03

Elasticsearch 监控指标概览：关键维度全知晓

文章目录前言：监控Elasticsearch集群的重要性1、集群健康维度：分片和节点2、搜索性能维度：请求率和延迟3、索引性能维度：刷新(refresh)和合并(Merge)时间4、节点运行状况维度：内存
磐基Stack专业服务团队·2025-02-12 19:35

华为云数据库DDS产品深度赋能

产品深度赋能，主要面向DA、交付、一线、二线数据库从业者，针对DDS常见问题及产品特性进行介绍，涉及：产品特性介绍、产品使用场景介绍、产品常见问题介绍、DDS实例使用规范及最佳实践介绍、DDS副本集内部机制和分片集群内部原理介绍等
程思扬·2025-02-12 12:50

RocketMQ实战—10.营销系统代码优化

大纲1.营销系统引入MQ实现异步化来进行性能优化2.基于MQ释放优惠券提升系统扩展性3.基于Redis实现重复促销活动去重4.基于促销活动创建事件实现异步化5.推送任务分片和分片消息batch合并发送实现
东阳马生架构·2025-02-12 00:50

ClickHouse Kafka 引擎教程

你将看到如下所示的输出，其中显示了其分区的主题和当前状态。Topic:readingsPartitionCount:6ReplicationFactor:2Configs:Topic:readingsPartition:0Leader:0Replicas:0,2Isr:0,2Topic:readingsPartition:1Leader:2Replicas:2,1Isr:2,1Topic:read
2401_86984695·2025-02-10 05:36

clickhouse集群方案及表引擎最佳实践

clickhouse集群方案很多资料过于凌乱，也有一些还不错，但是其最佳实践部分讲的不够详细，例如：Clickhouse最佳实战之分布式集群方案研究那我们来讲讲我们的实践及面临过的问题。
yangls的技术博客·2025-02-09 13:42
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他