分片集群搭建

k8s安装ingress-nginx

目录前言准备helm安装包修改values.yaml安装ingress测试功能前言k8s集群搭建参考：https://blog.csdn.net/centrl/article/details/134291473
墨家先生·2023-11-15 14:20

python中split的用法取第二个分片_Python中split()函数的用法及实际使用示例

Python中split()函数，通常用于将字符串切片并转换为列表。一、函数说明：split()：语法：str.split(str="",num=string.count(str))[n]拆分字符串。通过制定分隔符将字符串进行切片，并返回分割后的字符串列表[list]参数：str：分隔符，默认为空格，但不能为空("")num:表示分割次数。如果指定num，则分割成n+1个子字符串，并可将每个字符串
weixin_39622150·2023-11-15 13:52

算法之哈希算法

哈希函数的应用安全加密唯一标识数据校验散列函数负载均衡数据分片分布式存储问题总结：参考资料前言哈希算法和散列函数其实很多同学可能会混淆，一头雾水，其实散列函数只是哈希算法的一种实践应用。
遇见更好的自己、·2023-11-15 13:35

超越任务调度的极致：初探分布式定时任务 XXL-JOB 分片广播

XXL-JOB是一个分布式任务调度平台，支持分片任务执行。1.依赖引入在项目中引入XXL-JOB的相关依赖。
鲨鱼辣椒不吃辣c·2023-11-15 09:01

RabbitMQ+keepalived+haproxy搭建高可用集群

RabbitMQ+keepalived+haproxy搭建高可用集群一、集群简介1.1RabbitMQ集群1.2集群架构二、RabbitMQ集群搭建RabbitMQ普通集群模式2.1环境准备2.2host
哒不死的小小强·2023-11-15 07:45

keepalived+haproxy+redis-cluster 高可用负载均衡redis集群搭建

搭建高可用redis-cluster集群KeepAlived+Redis+Haproxy实现主从热备、负载均衡、秒级切换实战Redis+Keepalived+Haproxy的集群架构，分别用六个端口，实现多路复用，最终实现主从热备、负载均衡、秒级切换。一、部署Redis集群1、环境一台虚拟机模拟6个节点，创建出3master、3salve环境redis1:192.168.182.120:（6001
Bejpse·2023-11-15 07:42

AWS-S3通用存储操作，操作minio、oss、cos等所有兼容s3协议的云存储（含有大文件分片上传实现）

一、介绍通用存储操作common包，支持所有兼容amazon-s3协议的云存储，如minio、oss、cos等，以后客户用啥云储存一套代码都能搞定了，真棒~二、代码结构三、代码实现3.1pom.xmlsay-common-ossaws-java-sdk-s3com.amazonaws${aws.version}spring-weborg.springframeworklombokorg.proje
say荣帅·2023-11-15 07:06

Redis搭配RedisTemplate实现分布式锁实战实例

原因是：可能是由于Redis的主从复制或者分片集群等机制导致的。在主从复制或者分片集群中，可能会发生多个节点同时订阅了相同的键空间通知，从而导致同一个键空间事件被多次触发。
持键写浮生·2023-11-15 06:04

一个Demo搞定前后端大文件分片上传、断点续传、秒传

1前言文件上传在项目开发中再常见不过了，大多项目都会涉及到图片、音频、视频、文件的上传，通常简单的一个Form表单就可以上传小文件了，但是遇到大文件时比如1GB以上，或者用户网络比较慢时，简单的文件上传就不能适用了，用户辛苦传了好几十分钟，到最后发现上传失败，这样的系统用户体验是非常差的。或者用户上传到一半时，把应用退出了，下次进来再次上传，如果让他从头开始传也是不合理的。本文主要通过一个Demo
小小码农>>>>·2023-11-15 05:28

Ubuntu22.04 Hadoop3.3.4 jdk18.02 安装配置

3.3.4_x_y_z423的博客-CSDN博客(112条消息)hadoop3.3.4集群安装部署_hwbays的博客-CSDN博客加倍推荐，Hadoop集群配置内容讲的及其详细基于docker的hadoop集群搭建一
落非·2023-11-15 05:15

大数据技术栈-Hadoop3.3.4-完全分布式集群搭建部署-centos7（完全超详细-小白注释版）虚拟机安装+平台部署

目录环境条件：1、安装虚拟机（已安装好虚拟机的可跳转至二、安装JDK与Hadoop）（1）直接新建一台虚拟机（2）首次启用虚拟机，进行安装一、集群前置环境搭建（三台机器分别设置hostname、网卡（ip）配置、ssh免密登录）1、查看一下本机与虚拟机的网卡和ip信息（1）首先，查看本机的网卡配置，使用cmd查看ipconfg，找到VMware的虚拟网卡，查看ip（2）查看虚拟机的网卡配置和网络信
Hao.715·2023-11-15 05:43

【k8s集群搭建(一)：基于虚拟机的linux的k8s集群搭建_超详细_解决并记录全过程步骤以及自己的踩坑记录】

虚拟机准备3台Linux系统k8s集群安装每一台机器需要安装以下内容：docker:容器运行环境kubelet:控制机器中所有资源bubelctl:命令行kubeladm:初始化集群的工具Docker安装安装一些必要的包，yum-util提供yum-config-manager功能，另两个是devicemapper驱动依赖#yuminstall-yyum-utilsyuminstall-yyum-
2020. 12.13·2023-11-15 02:50

MongoDB 面试题

如果在一个分片（shard）停止或者很慢的时候,我
青鱼入云·2023-11-14 21:46

RocketMQ基本概念

）生产者组（Producer-Group）消费者（Consumer）消费者组（Consumer-Group）消息代理（Broker）消息队列（Queue）Broker-Topic-Queue的关联以及分片的概念分片命名服务
三文鱼先生·2023-11-14 17:51

ZooKeeper+Kafka+ELK+Filebeat集群搭建实现大批量日志收集和展示

大致流程：将nginx服务器（web-filebeat）的日志通过filebeat收集之后，存储到缓存服务器kafka，之后logstash到kafka服务器上取出相应日志，经过处理后写入到elasticsearch服务器并在kibana上展示。一、集群环境准备4c/8G/100G10.10.200.33Kafka+ZooKeeper+ES+Filebeat+ES-head4c/8G/100G10
蜜蜜不吃糖·2023-11-14 09:35

ElasticSearch---查询es集群状态、分片、索引

查看es集群状态：curl-XGEThttp://localhost:9200/_cat/health?v如果?后面加上pretty，能让返回的json格式化。加上?v的返回结果，如下：epochtimestampclusterstatusnode.totalnode.datashardsprireloinitunassignpending_tasksmax_task_wait_timeactiv
乐之者v·2023-11-14 09:04

TS流中BAT与SDT等表的解析

由于传输的文件比较大，文件分片传输，形成包（也可以叫帧）；由各个包组合在一起，就能形成这完整的文件。
wu694128·2023-11-14 08:45

Redis05-集群方案

目录Redis集群方案主从复制主从复制的基本原理主从复制的工作流程乐观复制主从复制的优势哨兵机制哨兵的关键作用服务状态监控哨兵选举Master规则分片集群分片集群中的数据读写数据写入数据读取一致性哈希和客户端分片
Elaine202391·2023-11-14 08:08

Redis集群，你真的学会了吗？

目录1、为什么引入集群1.1、先来了解集群是什么1.2、哨兵模式的缺陷+引入集群解决了什么问题1.3、使用集群，如何存储数据2、三种主流的分片方式【经典面试题】2.1、哈希求余算法2.1.1、哈希求余算法的介绍
龙洋静·2023-11-14 02:58

Elasticsearch curl操作

v'查看索引分片:curl-u'elastic:xxxx'-XGET'192.168.x.x:9200/_cat/indices?
Dream答案·2023-11-14 00:50

Elasticsearch集群搭建

本次集群搭建基于Elasticsearch7.8.1下载地址（Elastic中文社区）：https://elasticsearch.cn/download/#seg-12一、节点规划ES服务器节点分配192.168.0.01master192.168.0.02slave192.168.0.03slave192.168.0.04slave192.168.0.05slave
Dream答案·2023-11-14 00:50

一、Hadoop3.1.3集群搭建

一、集群规划hadoop01(209.2)hadoop02(209.3)hadoop03(209.4)HDFSNameNodeDataNodeDataNodeSecondaryNameNodeDataNodeYARNNodeManagerResourceManagerNodeManagerNodeManagerNameNode和SecondaryNameNode不要放在同一台服务器上二、创建用户u
Dream答案·2023-11-14 00:18

linux ssh免密登录配置

在hadoop集群搭建的过程中，通常会对集群服务进行群启/群停的操作，而集群中的主机执行启动命令通常需要通过ssh登录到其它主机，为了解决ssh时不输入用密码的问题，在这里研究了下ssh免密登录，操作步骤记录如下
ths512·2023-11-13 22:56

Kubernetes 单master 集群搭建

kubeadm是官方社区推出的一个用于快速部署kubernetes集群的工具。这个工具能通过两条指令完成一个kubernetes集群的部署：#创建一个Master节点$kubeadminit#将一个Node节点加入到当前集群中$kubeadmjoin1.安装要求在开始之前，部署Kubernetes集群机器需要满足以下几个条件：一台或多台机器，操作系统CentOS7.x-86_x64硬件配置：2GB
萧曵 丶·2023-11-13 19:06

史上最全 SpringCloudAlibaba入门教程，从零开始带你深入♂学习（六）——nacos的集群搭建和负载均衡

SpringCloudAlibaba（六）——nacos的集群搭建和负载均衡nacos集群概念统一种软件服务的多个节点对一个系统提供服务称之为这个软件服务集群领取资料预备环境准备64bitOSLinux
爱分享的板栗老哥·2023-11-13 16:02

ElasticSearch---查询es集群状态、分片、索引

查看es集群状态：curl-XGEThttp://localhost:9200/_cat/health?v如果?后面加上pretty，能让返回的json格式化。加上?v的返回结果，如下：epochtimestampclusterstatusnode.totalnode.datashardsprireloinitunassignpending_tasksmax_task_wait_timeactiv
乐之者v·2023-11-13 15:04

分布式数据库系统期末复习

期末复习写在最前面一、分布式数据库系统概述DDBS基本概念作用和特点优缺点二、分布式数据库系统的结构体系结构：有哪几种类型模式结构（从数据角度分析）组件结构（从功能）三、分布式数据库设计数据分片定义分片类型分片作用分配设计分片原则
是Yu欸·2023-11-13 14:51

【ceph】集群搭建（centos7-1908）

一环境准备1安装虚拟机pc机1T硬盘16G内存。vmwareworkstation15创建4台虚拟机,网络为桥接。编号hostnameip对应下图节点ceph-1dev-ceph1192.168.199.175/24admin-nodeceph-2dev-ceph2192.168.199.164/24node1ceph-3dev-ceph3192.168.199.105/24node2ceph-4
稔稔·2023-11-13 13:35

Day10:YARN与Hive入门

优秀是一种习惯知识点01：回顾知识点02：目标知识点03：MapReduce补充：分片规则知识点04：MapReduce补充：ReduceJoin知识点05：MapReduce补充：MapJoin知识点
人间清醒vv子·2023-11-13 12:08

Zookeeper--集群搭建（亲测可用）

一、单机版1、下载首先cd到/usr/locla目录下，然后wegt下载：1）root@centos-7#cd/usr/local2)wgethttps://archive.apache.org/dist/zookeeper/zookeeper-3.4.9/zookeeper-3.4.9.tar.gz2、解压tar-zxvfzookeeper-3.4.9.tar.gz3、进入到/zookeeper
天εə界·2023-11-13 11:53

Redis集群数据分片机制说明

Redis集群简介RedisCluster是Redis的分布式解决方案，在3.0版本正式推出，有效地解决了Redis分布式方面的需求。RedisCluster一般由多个节点组成，节点数量至少为6个才能保证组成完整高可用的集群，其中三个为主节点，三个为从节点。三个主节点会分配槽，处理客户端的命令请求，而从节点可用在主节点故障后，顶替主节点。如上图所示，该集群中包含6个Redis节点，3主3从，分别为
漫天雪_昆仑巅·2023-11-13 09:47

Redis核心技术与实战

Redis三大主线高性能主线，包括线程模型、数据结构、持久化、网络框架；高可靠主线，包括主从复制、哨兵机制；高可扩展主线，包括数据分片、负载均衡。
IT--Fly·2023-11-13 05:51

MongoDB单实例安装(Linux)

mysql是关系型数据库mongodb是面向文档存储的非关系型数据库，数据以json的格式进行存储mongodb可用来永久存储，也可用来缓存数据mongodb提供副本集和分片集群功能，操作简单mongodb
ZzzkiYoumi·2023-11-13 00:04

elastic-job 完结篇

一elastic-job1.1案例场景分析1.设置4个分片，10秒执行一次。
健康平安的活着·2023-11-12 23:27

Hadoop集群搭建（完全分布式版本）

一、准备工作三台虚拟机：master、node1、node2时间同步ntpdatentp.aliyun.com调整时区cp/usr/share/zoneinfo/Asia/Shanghai/etc/localtimejdk1.8（三台都要配置）java-version修改主机名三台分别执行vim/etc/hostname并将内容指定为对应的主机名关闭防火墙：systemctlstopfirewal
大数据CV工程师·2023-11-12 21:28

hadoop完全分布式集群搭建（超详细）-大数据集群搭建

hadoop完全分布式集群搭建本次搭建完全分布式集群用到的环境有：jdk1.8.0hadoop-2.7.7本次搭建集群所需环境也给大家准备了，下载链接地址：https://share.weiyun.com
beixi@·2023-11-12 21:56

kafka集群搭建

kafka集群搭建环境准备host配置安装zookeeper集群配置相应myidkafka集群搭建更新kafka配置问题排查集群不生效问题（停掉某个节点后，kafka某个topic服务失效）sessionclose
快乐的木子李·2023-11-12 18:10

ElasticSearch7.x - HTTP 操作 - 索引操作

PUT请求：http://192.168.254.101:9200/shopping说明{"acknowledged"【响应结果】:true,#true操作成功"shards_acknowledged"【分片结果
Java橙旭源·2023-11-12 15:35

K8S 部署mongoDB 6.0 分片集群 —— 筑梦之路

#vimmongodb-sharded-cluster-Secret.yamlapiVersion:v1kind:Secretmetadata:name:mongodb-sharded-clusternamespace:"default"labels:app.kubernetes.io/name:mongodb-shardedhelm.sh/chart:mongodb-sharded-6.0.3a
筑梦之路·2023-11-12 15:05

SRS流媒体服务器——WebRTC推拉流演示

github.com/ossrs/srs/wiki/v4_CN_WebRTC#rtmp-to-rtcSRS安装部署相关内容：SRS流媒体服务器——单机环境搭建和源码目录介绍SRS流媒体服务器——Forward集群搭建和源码分析
Lumos`·2023-11-12 14:58

Clickhouse学习笔记01——入门及安装

的特点2.1列式存储2.2DBMS功能2.3多样化引擎2.4高吞吐写入能力2.5数据分区和线程并行2.6一些限制2.7哪些公司在使用clickhouse3.优缺点3.1优点3.2缺点4.核心概念4.1数据分片
mp9105·2023-11-12 14:44

Mysql DATE_SUB索引问题是否生效?

查询一个月内的数据,有其他筛选条件.SQL从稍微复杂一点的聚合SQL(包括,Max,Groupby,Sum)更改了一个简单的查询SQL.所有的聚合在代码中实现.但是查询结果还是比较慢,并且是在将where条件分片之后
爱打架的小白兔·2023-11-12 12:33

kafka-02 kafka集群搭建与使用

安装前的环境准备由于Kafka是用Scala语言开发的，运行在JVM上，因此在安装Kafka之前需要先安装JDK。#yuminstalljava-1.8.0-openjdk*-ykafka依赖zookeeper，所以需要先安装zookeeper#wgethttp://mirror.bit.edu.cn/apache/zookeeper/stable/zookeeper-3.4.12.tar.gz#
沐宇熙·2023-11-12 10:01

制作Docker镜像，在前端的应用

一般，Dockerfile共包括四部分：基础镜像信息不可能从头到尾创建一个完整的镜像,Docker镜像是分片的文件系统,如果从头到尾创建就是重复劳动,可以基于别人创建好的基础上添加.维护者信息镜像操作指令容器启动时执行指令一个简单的
桃子阿哥·2023-11-12 09:43

【分布式技术专题】「OSS中间件系列」Minio的文件服务的存储模型及整合Java客户端访问的实战指南

数据管理元数据与数据一起存放在磁盘上：数据部分纠删分片以后存储在磁盘上，元数据以明文形式存放在元数据文件里（xl.json）。假定对象名字为obj-with-metad
洛神灬殇·2023-11-12 08:44

【计算机网络笔记】IP分片

系列文章目录什么是计算机网络？什么是网络协议？计算机网络的结构数据交换之电路交换数据交换之报文交换和分组交换分组交换vs电路交换计算机网络性能（1）——速率、带宽、延迟计算机网络性能（2）——时延带宽积、丢包率、吞吐量/率计算机网络体系结构概念OSI参考模型基本概念OSI参考模型中非端-端层（物理层、数据链路层、网络层）功能介绍OSI参考模型中端-端层（传输层、会话层、表示层、应用层）功能介绍TC
不怕娜·2023-11-12 07:22

学习笔记之Redis的学习（二）：常用命令、配置文件介绍、数据持久化方式、集群搭建

目录上篇简述一、Redis的常用命令二、Redis的配置文件介绍三、数据持久化方式1、RDB方式(默认)2、AOF方式四、Redis集群的搭建1、Redis集群介绍1.1Redis-Cluster架构图1.2、Redis-Cluster选举:容错1.3、Redis-Cluster数据存储2、安装伪集群2.1需求：2.2创建伪集群步骤：2.3测试集群以下总结了关于Redis比较全面的知识笔记以及面试
Coder_Oldou·2023-11-12 07:53

【网络编程】网络层——IP协议

文章目录基本概念路径选择主机和路由器IP协议格式分片与组装网段划分IP地址的数量限制私网IP地址和公网IP地址深入认识局域网路由基本概念TCP作为传输层控制协议，其保证的是数据传输的可靠性和传输效率，但
星河万里᭄ꦿ࿐·2023-11-12 00:35

Clickhouse 学习笔记（6）—— ClickHouse 分片集群

（5）——ClickHouse副本-CSDN博客与副本对比：副本虽然能够提高数据的可用性，降低丢失风险，但是每台服务器实际上必须容纳全量数据，对数据的横向扩容没有解决要解决数据水平切分的问题，需要引入分片的概念
THE WHY·2023-11-12 00:52

Elasticsearch 7.10 之 Slow Log

SearchSlowLog分片级别的慢速搜索日志允许将慢速搜索（查询和提取阶段）记录到专用日志文件中。
王大丫丫·2023-11-11 20:30
上一页 25 26 27 28 29 30 31 32 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他