E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
minio集群搭建
3、RocketMQ基础-RocketMQ
集群搭建
RocketMQ
集群搭建
各角色介绍Producer:消息的发送者;举例:发信者Consumer:消息接收者;举例:收信者Broker:暂存和传输消息;举例:邮局NameServer:管理Broker;举例
站得高看得远
·
2023-12-31 16:35
Docker搭建mysql主从复制集群
Docker搭建mysql主从复制
集群搭建
步骤准备docker镜像dockersearchmysqldockerpullmysql准备映射路径#master路径准备mkdir-m777/Users/a1
whhwch1986
·
2023-12-31 16:59
数据库
docker
mysql
adb
k8s
集群搭建
【1个master_1个node】 亲测成功!
k8s
集群搭建
k8s_1个master_1个node_
集群搭建
步骤小结1:安装docker2:安装kubeadm/kubectl/kubelet3:创建master节点的集群(并安装网络插件calico
优雅のbug
·
2023-12-31 15:45
kubernetes
容器
云原生
docker搭建
minio
集群,集群分享文件URL踩坑问题
一、环境准备3台机器,Ip地址依次为IP1,IP2,IP3二、设置服务器时间同步
Minio
集群需要各个节点的时间保持同步,使用NTP作为时间同步服务,这里以
Minio
-1(IP1)为上游服务器,其它2个节点为下游服务器
程序员阿明
·
2023-12-31 13:52
docker
容器
运维
minio
的javaAPI
章节快捷访问:第一章:
minio
介绍与安装https://blog.csdn.net/hzw2312/article/details/106077729第二章:
minio
单机版,使用客户端备份文件https
白加黑_5898
·
2023-12-31 11:05
Kafka集群详解
Kafka介绍Kafka集群介绍Kafka集群特点Kafka
集群搭建
在这里插入图片描述Kafka集群如何进行故障切换Kafka集群Leader的选举Kafka集群如何快速横向拓展Kafka
集群搭建
最佳实践
有梦想的攻城狮
·
2023-12-31 10:00
架构设计
kafka
kafka集群
TimescaleDB分布式
集群搭建
Multi-nodeTimescaleDBallowsyoutotieseveraldatabasestogetherintoalogicaldistributeddatabasetocombinetheprocessingpowerofmanyphysicalPostgreSQLinstances.Oneofthedatabasesexistsonanaccessnodeandstoresmet
pigcoffee
·
2023-12-31 09:15
分布式
postgresql
minio
命令行详解
客户端命令–mcNAME:mc-
MinIO
Clientforobjectstorageandfilesystems.USAGE:mc[FLAGS]COMMAND[COMMANDFLAGS|-h][ARGUMENTS
demon7552003
·
2023-12-31 08:56
Java中间件
minio
命令行
zookeeper
集群搭建
超详细教程
这里写目录标题前言详细步骤1、下载安装包2、解压3、修改配置文件4、将zookeeper目录分发到其他节点5、修改其他节点的myid文件6、编写操作zookeeper集群的脚本7、启动集群8、连接zookeeper集群结尾前言大家好,我是风云,欢迎大家关注我的博客,在未来的日子里我们一起来学习大数据相关的技术,一起努力奋斗,遇见更好的自己!正如大家知道的那样,在大数据领域呢,有很多组件都会依赖zo
笑看风云路
·
2023-12-31 08:25
Zookeeper
集群搭建系列
zookeeper
linux
zookeeper
集群搭建
1.依赖该教程依赖已经准备好的linux环境,请先查看:LINUX集群环境准备2.下载和解压点击下载tar-zxvfapache-zookeeper-3.8.0-bin.tar.gz-C/opt/modulecd/opt/modulemvapache-zookeeper-3.8.0-binzookeeper-3.8.03.配置3.1.创建集群唯一标识准备一个数据文件夹,并创建节点唯一标识myidc
被遗忘的优雅
·
2023-12-31 08:54
zookeeper
Zookeeper
集群搭建
系列文章目录Ubuntu常见基本问题Hadoop3.1.3安装(单机、伪分布)Hadoop
集群搭建
HBase2.2.2安装(单机、伪分布)Zookeeper
集群搭建
HBase
集群搭建
Spark安装和编程实践
WE-ubytt
·
2023-12-31 08:53
大数据处理与应用
zookeeper
hadoop
大数据
zookeeper之
集群搭建
1.集群角色zookeeper集群下,有3种角色,分别是领导者(Leader)、跟随着(Follower)、观察者(Observer)。接下来我们分别看一下这三种角色的作用。领导者(Leader):事务请求(写操作)的唯一调度者和处理者,保证集群事务处理的顺序性;集群内部各个服务器的调度者。对于create、setData、delete等有写操作的请求,则要统一转发给leader处理,leader
瑜伽娃娃
·
2023-12-31 08:52
Zookeeper
zookeeper
linux
分布式
Docker 安装
Minio
1、检索和拉取
Minio
镜像#查看本地镜像dockerimages#检索
minio
镜像dockersearch
minio
#拉取
minio
镜像dockerpull
minio
/
minio
[root@localhost
在奋斗的大道
·
2023-12-31 05:14
Java架构专栏
系统运维
docker
容器
运维
FastDFS
集群搭建
简介FastDFS是什么?我们这里可以看一下度娘的解释。FastDFS是一个开源的轻量级分布式文件系统,它对文件进行管理,功能包括:文件存储、文件同步、文件访问(文件上传、文件下载)等,解决了大容量存储和负载均衡的问题。我这里使用服务器环境是centos7注意:FastDFS只能上传500MB的小文件FastDFS角色简介tracker:跟踪者,负责调度存储服务。storage:用于文件存储。cl
fanlcwowo
·
2023-12-31 03:39
linux
服务器
运维
K8s部署
Minio
使用NFS持久化存储
一、介绍
Minio
是一款高性能的对象存储服务器,它兼容AmazonS3API。它的设计目的是为了提供云存储服务的性能和可扩展性,同时还保持着本地存储的简单性和易用性。
睡不醒的猪儿
·
2023-12-31 00:36
kubernetes
容器
云原生
一篇掌握Elasticsearch7.10
集群搭建
到实战
目录一、背景二、内容概要三、基础概念四、ES版本选择Elasticsearch版本选择ES客户端SDK版本选择五、Elasticsearch多租户多租户下的架构租户的识别和路由六、ES
集群搭建
集群部署架构单集群示例多集群示例
南天一梦N
·
2023-12-30 22:49
spring
JAVA杂七杂八
spring
elasticsearch
es
maven
spring
boot
分布式_
minio
_纠删码
minio
一、概述之前我们安装的是non-ecstandalone版本的安装,是不具备纠删码功能(数据恢复)纠删码erasurecode丢了一般磁盘仍然可以恢复数据纠删码将对象拆分为一半数据,一半是奇偶校验块
伍六七_ba5e
·
2023-12-30 22:44
linux(centos7)mysql8.0主从
集群搭建
(两台机器)
docker安装:(转载)centos7安装Docker详细步骤(无坑版教程)-CSDN博客环境信息主数据库服务器:192.168.1.10从数据库服务器:192.168.1.111.mysql8.0镜像下载dockerpullmysql:8.0.232.创建docker容器2.1在主数据库上创建docker容器dockerrun-d--namemainer-p8008:3306-eMYSQL_R
屌丝的程序员
·
2023-12-30 21:07
数据库相关知识
mysq8.0主从
mysql集群
docker搭建mysql集群
分布式集群
MinIo
搭建
关于分布式集群
MinIo
单机
Minio
服务存在单点故障,如果是一个有N块硬盘的分布式
Minio
,只要有N/2硬盘在线,数据就是安全的、可读的。不过需要至少有N/2+1个硬盘在线,才能创建新的对象。
屌丝的程序员
·
2023-12-30 21:37
minio
minio集群
minio集群搭建
【大数据入门核心技术-Hadoop】(六)Hadoop3.2.1高可用
集群搭建
目录一、Hadoop部署的三种方式1、Standalonemode(独立模式)2、Pseudo-Distributedmode(伪分布式模式)3、Clustermode(集群模式)二、准备工作1、先完成zk高可用搭建2、/etc/hosts增加内容3、各台服务器分别创建目录4、关闭防火墙和禁用swap交换分区5、三台机器间免密6、安装jdk7、下载好hadoop安装包三、高可用配置1、配置core
forest_long
·
2023-12-30 18:49
大数据技术入门到21天通关
hadoop
大数据
hdfs
zookeeper
hive
在Linux中进行ZooKeeper
集群搭建
在公网IP为x.x.x.x、y.y.y.y和z.z.z.z并装有AlibabaCloudLinux3.2104LTS64位的服务器上进行zookeeper
集群搭建
,都安装server-jre-8u202
Jerry 二河小鱼
·
2023-12-30 18:21
2023运维
linux
zookeeper
运维
服务器
树莓派安装
MinIO
先卸载旧版本的go使用apt-get默认安装的是低版本golang,如果之前已经安装了低版本的golang,使用下面命令卸载掉apt-getpurgegolang-go到官网下载最新版安装包下载地址这里选择go1.20.5.linux-arm64.tar.gz解压sudotar-zxfgo.tar.gz-C/usr/local创建软连接sudoln-s/usr/local/go/bin/go/us
凉二爸爸
·
2023-12-30 16:35
Centos7.6 Docker私服搭建-docker registry
传统架构演进从单体到微服务Docker常用命令K8s
集群搭建
(Harbor)私服仓库(手把手教你搭建DockerRegistry私服基于SSL证书改造RegistryDocker搭建私服(本地镜像库)+
ccren
·
2023-12-30 10:50
分布式环境配置
框架搭建问题汇总
Docker
docker-registry
vmware
宿主机安装
Centos7
Linux|
minio
对象存储服务的部署和初步使用总结
前言:
minio
是一个非常轻量化的对象存储服务,是可以算到云原生领域的。
晚风_END
·
2023-12-30 09:30
kubernetes
linux
运维
服务器
云原生
kubernetes
云原生|对象存储|
minio
分布式集群的搭建和初步使用(可用于生产)
前言:
minio
作为轻量级的对象存储服务安装还是比较简单的,但分布式集群可以大大提高存储的安全性,可靠性。
晚风_END
·
2023-12-30 09:28
云原生
分布式
全文检索
大数据
linux
wpf
Hadoop开发环境搭建
文章目录第1关:配置开发环境-JavaJDK的配置第2关:配置开发环境-Hadoop安装与伪分布式
集群搭建
hadoop-env.sh配置yarn-env.sh配置core-site.xml配置hdfs-site.xml
柔雾
·
2023-12-30 09:42
hadoop
大数据
分布式
Hadoop分布式
集群搭建
(三台虚拟机)
一.准备工作搭建好VMwareWorkstationPro(我这里装的版本是16)二.新建虚拟机hadoop01搭建hadoop集群需要三台虚拟机1.新建虚拟机——>自定义(高级)2.不用改动,点击下一步3.映像文件稍后再加入4.选择Linux——>CentOS764位5.可以在存放虚拟机的文件内新建一个文件夹,专门放hadoop集群需要的虚拟机(有三个)6.处理器数量设置一个就好7.内存不够的选
# Ling
·
2023-12-30 07:00
hadoop
大数据
分布式
Hadoop
集群搭建
教程(完全分布式)
环境准备:本案例使用VMwareWorkstationPro虚拟机创建服务器来搭建Hadoop集群,所用软件及版本及简要配置方法如下:1.VMwareWorkstationPro15.5.1(推荐使用15以上版本,感觉优化比14好了许多)2.Ubuntu16.0464bit(3台,用户名均为Hadoop,主机名分别为node-1,node-2,node-3)注意:三台虚拟机用户名需要一致,也可以对
这是一个死肥宅
·
2023-12-30 07:27
hadoop
hadoop
大数据
8、服务提供者和消费者注册进微服务以及服务提供者的
集群搭建
1、创建cloud-provider-payment8002image.png仿照cloud-provider-payment8001创建cloud-provider-payment80022、服务提供者注册进Eureka集群image.png在cloud-provider-payment8001和cloud-provider-payment8002中分别将注册地址改成集群地址eureka:cli
Kari开源
·
2023-12-30 06:52
集群部署篇--Redis 哨兵模式
文章目录前言一、哨兵模式介绍:1.1介绍:1.2工作机制:二、哨兵模式搭建:2.1redis主从搭建:2.2setinel
集群搭建
:2.2.1配置:sentinel.conf:2.2.2运行容器:2.2.3
拽着尾巴的鱼儿
·
2023-12-29 18:24
java工具篇
db数据库
redis
bootstrap
数据库
集群部署篇--Redis 集群分片模式
文章目录前言一、Redis分片集群介绍1.1介绍:1.2工作机制:1.2.1节点:1.2.2槽slot:1.2.3故障转移:二、Redis分片
集群搭建
:2.1配置文件:2.2redis部署:2.3redis
拽着尾巴的鱼儿
·
2023-12-29 18:52
java工具篇
db数据库
redis
数据库
缓存
如何在 Ubuntu 16.04 上使用
Minio
设置对象存储服务器
而且,凭借其占用空间小、界面简单以及与多种云存储服务的兼容性,
Minio
对象存储服务器具有强大的功能。
Minio
是一款开源对象存储服务器,它将照片、视频、虚拟机映像、容器和日志文件等非结
timi先生
·
2023-12-29 14:18
编程笔记
服务器
ubuntu
linux
k8s部署 CNI 网络组件与k8s
集群搭建
(二)
目录部署CNI网络组件部署flannelK8S中Pod网络通信FlannelUDP模式的工作原理ETCD之Flannel提供说明FlannelVXLAN模式跨主机的工作原理在node01节点上操作在master01节点上操作部署Calicok8s组网方案对比Calico主要由三个部分组成Calico工作原理在master01节点上操作node02节点部署在node01节点上操作在node02节点上
whtqwq
·
2023-12-29 14:56
docker
运维
容器
云原生
kubernetes
网络
Redis 主从集群 —— 超详细操作演示!
五、Redis主从集群五、Redis主从集群5.1主从
集群搭建
5.1.1、伪
集群搭建
与配置5.1.2、分级管理5.1.3、容灾冷处理5.2主从复制原理5.2.1、主从复制原理5.2.2、数据同步演变过程
酷酷的懒虫
·
2023-12-29 10:19
数据库
#
redis
redis
数据库
缓存
03.生成Kubernetes集群证书文件
K8S入门学习的难点是
集群搭建
,
集群搭建
的难点是tls证书Kubeadm部署的集群证书默认是一年,所以在证书到期之前需要进行手动更新(生产环境这样可能有风险)这里我把证书生成的过程全部用脚本自动生成,默认有效期
CodingDemo
·
2023-12-29 07:42
Kubernetes入门实战
kubernetes
容器
云原生
Elasticsearch:1.
集群搭建
简介基本概念cluster代表一个集群,集群中有多个节点,其中有一个为主节点,这个主节点是可以通过选举产生的,主从节点是对于集群内部来说的。es的一个概念就是去中心化,字面上理解就是无中心节点,这是对于集群外部来说的,因为从外部来看es集群,在逻辑上是个整体,你与任何一个节点的通信和与整个es集群通信是等价的。shards代表索引分片,es可以把一个完整的索引分成多个分片,这样的好处是可以把一个大
小六的昵称已被使用
·
2023-12-29 06:57
07、Docker 安装
MinIO
Docker安装
MinIO
中文官网拉取镜像dockerpull
minio
/
minio
数据文件映射mkdir-p/docker/
minio
/data运行容器dockerrun-d\-p9000:9000\
这个昵称不容易
·
2023-12-29 03:30
Docker
docker
容器
运维
minio
文件系统
分布式文件系统MinIO
kubeadm来搭建k8s集群。
二进制的搭建更适合50台主机以上的大集群,kubeadm更适合中小型企业的
集群搭建
主机配置建议:2c4G主机节点IP组件master20.0.0.101docker、kubeadm、kubelet、kubectl
相遇蟹堡王,尽享蟹黄堡
·
2023-12-29 02:37
kubernetes
容器
云原生
Spark
集群搭建
文章目录搭建前准备安装搭建解压并重命名环境变量配置配置文件yarn-site.xmlspark-env.sh官网求π(PI)案例启动spark-shell通过浏览器查看显示查看Spark的网页信息展示搭建前准备下载地址:Indexof/dist/spark(apache.org)配置好hadoop环境,hdfs和yarn服务正常可以启动start-dfs.shstart-yarn.sh安装搭建解压
撕得失败的标签
·
2023-12-29 00:42
大数据技术
spark
大数据
分布式
hadoop
yarn
hdfs
Hive和Spark生产
集群搭建
(spark on doris)
1.环境准备1.1版本选择序号bigdata-001bigdata-002bigdata-003bigdata-004bigdata-005MySQL-8.0.31mysqlDataxDataxDataxDataxDataxDataxSpark-3.3.1SparkSparkSparkSparkSparkHive-3.1.3HiveHive1.2主要组件官网hive官网:https://hive.
tuoluzhe8521
·
2023-12-28 23:56
Hive相关
hive
spark
hadoop
大数据
yarn
Redis
集群搭建
很easy
前言哨兵模式虽然让读写分离更加高可用,但单台服务器由于本身的内存和CPU瓶颈,对于高并发和大数据业务的应用场景还是远远不能满足;对于这种情况,有点经验的小伙伴会毫不犹豫的想到集群,搞他好几个节点,负载均衡再加上故障转移,岂不美哉。是的,就是这个理,接下来玩玩。正文集群,相信这个词小伙伴应该听的耳朵起茧子了吧;多搞几台服务器,让请求/命令平均分发到各个服务器,避免单台服务器承载过大压力;对于Redi
Code综艺圈
·
2023-12-28 23:14
【
Minio
】上传报错:The difference between the request time and the server‘s time is too large.
原因:应用服务器与存储服务器时间对应不上导致的查看:解决:1.手动修改系统时间date-s"2023122710:28:00"2.时间同步hwclock--systohc
皮卡丘-ysh
·
2023-12-28 21:53
【日常工作Bug篇】
服务器
运维
java
springboot整合
minio
做文件存储
一,
minio
介绍
MinIO
是一个基于ApacheLicensev2.0开源协议的对象存储服务。
豆豆的java之旅
·
2023-12-28 17:38
springboot整合
java
开源
minio
-AWS-S3存储的部署及go操作详细
介绍
MinIO
是一个开源的分布式对象存储服务,它允许用户在私有云或公有云环境中构建自己的对象存储基础设施。
liuyunshengsir
·
2023-12-28 12:49
go语言
开源
aws
golang
zookeeper
集群搭建
一、介绍zookeeper是一个高可用的分布式协调器,官网二、功能统一命名服务、统一配置管理、统一集群管理、服务器节点动态上下线、软负载均衡等三、单机安装zookeeper需要jdk环境,所以需要先安装jdk,安装教程3.1、文件下载下载zookeeper压缩文件3.2、解压tar-zxvfapache-zookeeper-3.5.7-bin.tar.gz-C/opt/module/3.3、修改配
有人看我吗
·
2023-12-28 12:38
#
zookeeper
zookeeper
分布式
云原生
python中使用
minio
对象存储
#
minio
_client.pyfrom
minio
import
Minio
from
minio
.errorimportInvalidResponseErrorimportos#定义一个类,用于
minio
的操作
澂玙
·
2023-12-28 11:50
笔记
python
【Java编程系列】
Minio
实现文件上传下载
热门系列:【Java编程系列】AmazonS3实现文件上传下载目录热门系列:1、前言2、
Minio
实战代码2.1
Minio
环境部署2.2
Minio
的Sdk对接实现2.2.1
Minio
Maven依赖2.2.2
minio
善良勤劳勇敢而又聪明的老杨
·
2023-12-28 09:26
Java专栏
minio
minio上传下载
minio存储
minio预览
minio永久访问
Spring Boot整合
Minio
实现上传凭证、分片上传、秒传和断点续传
概述SpringBoot整合
Minio
后,前端的文件上传有两种方式:文件上传到后端,由后端保存到
Minio
这种方式好处是完全由后端集中管理,可以很好的做到、身份验证、权限控制、文件与处理等,并且可以做一些额外的业务逻辑
技术小羊
·
2023-12-28 09:40
spring
boot
java
SpringBoot 整合
MinIO
实现视频的分片上传/断点续传(亲测可行)
1、前言之前做了一个慕课网上的仿短视频开发,里面有很多比较粗糙的实现,比如视频上传部分是直接由前端上传云服务,没考虑到客户的网络环境质量等问题,如果一个视频快上传完了,但是网断了没有上传完成需要客户重新上传,这对于用户体验是极差的。那么我们对于视频文件的上传可以采取断点续传,上传过程中,如果出现网络异常或程序崩溃导致文件上传失败时,将从断点记录处继续上传未上传完成的部分,断点续传依赖于MD5和分片
Java知音_
·
2023-12-28 08:40
spring
boot
java
后端
spring
前端
spring boot -
minio
分片上传
springboot-
minio
分片上传主要分三个接口:分片上传分片合并分片完整性校验Md5UploadController@RestControllerpublicclassMd5UploadController
iiaythi
·
2023-12-28 08:31
spring
boot
minio
上一页
6
7
8
9
10
11
12
13
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他