minio集群搭建

Sealos的k8s高可用集群搭建

Sealos介绍](https://sealos.io/zh-Hans/docs/Intro)Sealos是一个Go语言开发的简单干净且轻量的Kubernetes集群部署工具，能很好的支持在生产环境中部署高可用的Kubernetes集群。Sealos特性与优势支持离线安装，工具与部署资源包分离，方便不同版本间快速升级。证书有效期默认延期至99年。工具使用非常简单。支持使用自定义配置文件，可灵活完成
da pai ge·2025-02-13 22:55

使用亚马逊针对 PyTorch 和 MinIO 的 S3 连接器进行模型检查点处理

2023年11月，Amazon宣布推出适用于PyTorch的S3连接器。适用于PyTorch的AmazonS3连接器提供了专为S3对象存储构建的PyTorch数据集基元（数据集和数据加载器）的实现。它支持用于随机数据访问模式的地图样式数据集和用于流式处理顺序数据访问模式的可迭代样式数据集。适用于PyTorch的S3连接器还包括一个检查点接口，用于将检查点直接保存和加载到S3存储桶，而无需先保存到本
MinIO分布式存储·2025-02-13 11:37

k8s第一章：kubeadm集群搭建

开源容器应用自动化部署技术KubernetesKubernetes这个单词来自于希腊语，含义是舵手或领航员；生产环境级别的容器编排编排是什么意思:1.按照一定的目的依次排列；2.调配、安排；Kubernetes，也称为K8S，其中8是代表中间“ubernete”的8个字符，是Google在2014年开源的一个容器编排引擎，用于自动化容器化应用程序的部署、规划、扩展和管理，它将组成应用程序的容器分组
琴剑诗酒·2025-02-12 13:27

minio在文件服务器上显示的是文件夹和xl.meta的文件形式

在linux上安装好minio之后，上传文件测试，文件存储目录下显示的文件是xl.meta形式的，并不是与预想中的实体文件形式，原因是因为新安装的minio的版本比较新，貌似2022年6月份之后的版本就改成这种形式的文件了
筱小虾米·2025-02-11 16:20

ELK系列（二）Kafka集群3.4.0搭建

ELK系列传送门ELK系列（一）ElasticSearch8.9.2集群搭建ELK系列（二）Kafka集群3.4.0搭建ELK数据流规划ELK接入nginx-acces日志数据流规划数据流向filebeat
诉光海·2025-02-10 15:40

Elasticsearch 7 集群搭建问题排查：常见故障解决方案与优化技巧

然而，在实际部署中，尤其是集群搭建阶段，许多用户都会遇到配置问题，导致集群无法成功建立。
程序员的开发手册·2025-02-10 14:36

java文件上传粗糙版

粗糙版图片上传1.导入依赖io.miniominio8.5.22.配置minio地址跟对应的桶业务层实现类importio.minio.MinioClient;//导入MinioClient，用于与MinIO
ok！不当人·2025-02-10 14:33

Kubernetes备份方案：Velero+Minio

Kubernetes备份方案：Velero+Minio背景Velero1.Velero是什么2.应用场景3.支持的目标存储4.与k8s版本对应关系5.Velero工作流程备份与恢复实践Velero客户端
登高··2025-02-08 17:19

安装mysql的MGR集群

3、MGR集群搭建方便，master故障会自动进行切换，不影响业务正常访问。
秋天枫叶35·2025-02-08 12:44

三、大数据之Zookeeper完全分布式集群搭建

目录Zookeeper简介：（1）集群部署规划（2）安装Zookeeper（3）配置zook.cfg文件（4）配置服务器编号（5）配置Zookeeper环境变量（6）配置文件分发（7）集群启动（8）zookeeper群启脚本（9）Zookeeper官方文档说明：Zookeeper安装包Zookeeper简介：Zookeeper是一个开源的分布式的，为分布式应用提供协调服务的Apache项目。Zoo
尘.埃·2025-02-08 03:37

【大数据入门核心技术-Flume】（二）Flume安装部署

修改环境变量3、修改并配置flume-env.sh文件4、验证是否安装成功一、准备工作1、基本Hadoop环境安装参考Hadoop安装【大数据入门核心技术-Hadoop】（五）Hadoop3.2.1非高可用集群搭建
forest_long·2025-02-07 08:33

MinIO

一、三种部署方式单节点单硬盘测试环境使用，不提供任何超出底层存储卷实现的额外可靠性或可用性（RAID、LVM等）单节点多硬盘提供了驱动器级别的可靠性以及故障转移、恢复功能，可以配置容忍损失高达一半所有驱动器的能力。多节点多硬盘（推荐）提供了企业级别的性能、可用性和扩展性，支持纠删码配置，可以容忍多达一半的节点或者驱动器的丢失，同时继续提供读操作。二、检查清单1、存储要求使用本地存储：不建议使用sa
*老工具人了*·2025-02-07 06:47

大数据集群搭建基础：Hadoop完全分布式搭建学习指南！！

Hadoop完全分布式搭建学习指南Hadoop版本：Hadoop2.XJDK版本：JDK1.8一、准备工作设置主机名和IP在三台CentOS7.4机器上分别设置主机名和IP：node1:192.168.14.10node2:192.168.14.20node3:192.168.14.30修改主机名（以node1为例）：hostnamectlset-hostnamenode1配置网络（依据具体网络环
初次知晓·2025-02-07 01:16

Redis主从复制+哨兵集群搭建

哨兵模式什么是哨兵模式主从切换技术的方法是：当主服务器宕机后，需要手动把一台从服务器切换为主服务器，这就需要人工干预，费事费力，还会造成一段时间内服务不可用。这不是一种推荐的方式，更多时候，我们优先考虑哨兵模式。Redis从2.8开始正式提供了Sentinel（哨兵）架构来解决这个问题。反客为主的自动版，能够后台监控主机是否故障，如果故障了根据投票数自动将从库转换为主库。哨兵模式是一种特殊的模式，
元气满满的热码式·2025-02-05 08:20

【Docker项目实战】使用Docker部署MinIO对象存储（详细教程）

【Docker项目实战】使用Docker部署MinIO对象存储前言一、MinIO介绍1.1MinIO简介1.2主要特点1.3主要使用场景二、本次实践规划2.1本地环境规划2.2本次实践介绍三、本地环境检查
江湖有缘·2025-02-04 10:38

ElasticSearch集群搭建步骤

文章目录一、前言二、使用RPM安装Elasticsearch导入ElasticsearchGPG密钥从RPM存储库安装三、设置基本安全性生成证书使用TLS加密节点间通信四、为Elasticsearch加密HTTP客户端通信五、配置集群编辑elasticsearch.yml启动集群一、前言Elasticsearch是一个开源的分布式搜索和分析引擎，用于全文搜索、结构化搜索、分析和可视化大规模数据。它
Asui2233·2025-02-03 08:35

Python连接MinIO进阶教程：文件类型指定、上传与获取预览链接

文章目录概要1.指定文件内容类型2.获取文件的预览链接（PresignedURL）使用fput_object上传文件4.完整示例与总结概要在上一篇文章中，我们介绍了如何使用Python连接MinIO服务器
北海yy·2025-02-01 07:34

Python实现链接MinIO，并将文件数据从MinIO批量下载并保存到本地

MinIO是一个高性能的对象存储服务，它兼容亚马逊S3云存储服务接口，非常适合于存储大容量非结构化的数据，比如说“图片、视频、日志文件、备份数据和容器/虚拟机镜像”等。
写python的鑫哥·2025-02-01 07:30

PostgreSQL的一主一从集群搭建部署 (同步)

一、实验环境虚拟机名IP身份简称keep-postgres12-node1192.168.122.87主节点node1keep-postgres12-node2192.168.122.89备节点node2二、安装数据库源码包方式（主）1、创建用户[root@keep-postgres12-node1~]#groupaddpostgres[root@keep-postgres12-node1~]#u
keep__go·2025-01-30 23:00

web集群搭建

扩展多个web应用原因：单台web服务器能抗住的访问是有限的，配置多台web服务器能提升更高的访问速度，能够接受更多的用户请求。优点：提高冗余提高性能实现方法：1.准备web02服务器2.安装nginx和php环境[root@web01~]#scp/etc/yum.repos.d/[email protected]:/etc/yum.repos.d/nginx.repo[root@
℡永恒·2025-01-27 04:07

基于MySQL8.0安装部署MHA集群（一主两从）

写在前面之前搭建过MySQL5.7版本的MHA集群，因为一些需要，现进行MySQL8.0版本的MHA集群搭建，搭建步骤基本与5.7版本相似，所以某些测试部分、问题解决、安装包、mha的IP漂移配置文件可以参照我之前写的博文
收买神的欢心·2025-01-25 16:53

MinIO

简介Golang语言实现兼容亚马逊S3云存储服务接口，适合存储大量非结构化数据官方文档：MinIODocker安装MinIO创建并运行容器dockerrun-d\--nameminio\-p9000:9000
xiaolin0333·2025-01-25 10:15

【大数据入门核心技术-Hive】（十六）hive表加载csv格式数据或者json格式数据

一、环境准备hive安装部署参考：【大数据入门核心技术-Hive】（三）Hive3.1.2非高可用集群搭建【大数据入门核心技术-Hive】（四）Hive3.1.2高可用集群搭建二、hive加载Json格式数据
forest_long·2025-01-24 12:27

十分钟精通MinIO：minio的原理、部署、操作

一、认识MinIOMinio是一个简单易用的云存储服务，就像是一个放在网络上的大文件柜。想象一下，你有一间放满了各种文件的房间，有时候你需要把这些文件分享给朋友或者在不同地方访问它们。
周盛欢·2025-01-24 10:43

Minio容器启动配置https

不建议这样使用，建议使用nginx做反向代理，建议使用内网url作为上传文件api的endpoint1、公钥和私钥配置根据官网描述（HowtosecureaccesstoMinIOserverwithTLS
非ban必选·2025-01-23 16:51

Linux系统下minio设置SSL证书进行HTTPS远程连接访问

文章目录1.配置SSL证书使用HTTPS访问2.MINIOSDK忽略证书验证3.使用受信任的证书1.配置SSL证书使用HTTPS访问生成域名对应的SSL证书，下载Apache版本，我目前只发现Apache
薄荷街的兔比先生·2025-01-23 15:16

Java与AWS S3的文件操作

AWSS3的特点AWSS3的应用场景二、Java整合S3方法使用MinIO客户端操作S3使用AWSSDK操作S3（推荐使用）三、总结一、什么是AWSS3？
老友@·2025-01-23 09:03

SpringBoot+Minio实现多文件下载和批量下载

文章目录SpringBoot+minio实现多文件下载1、SpringBoot+minio实现多文件打成一个压缩包下载1.添加依赖2.配置MinIO客户端3.创建下载和压缩逻辑4.创建控制器方法来触发下载
北执南念·2025-01-23 07:14

Flink系列-2、Flink架构体系

https://flink.apache.org/学习资料：https://flink-learning.org.cn/目录Flink中的重要角⾊Flink数据流编程模型Libraries支持Flink集群搭建
技术武器库·2025-01-23 04:55

python--对象存储服务器

Object）桶（Bucket）终端节点（Endpoint）访问域名知名的对象存储服务器提供商微软云Azure：MicrosoftAzureBlobStorage华为云OBS:阿里云OSS:腾讯云COSMinIO
赵钱孙李的赵·2025-01-23 03:44

Docker部署minio-arm64版本，阿里官方推荐

一、下载minio下载地址：https://dl.min.io/server/minio/release/linux-arm64/二、创建minio目录//启动目录mkdir/data/minio//bin
m0_60721649·2025-01-22 12:07

Docker部署minio-arm64版本

一、下载minio下载地址：https://dl.min.io/server/minio/release/linux-arm64/二、创建minio目录//启动目录mkdir/data/minio//bin
GSL_566·2025-01-22 11:33

Redis 单机、哨兵、集群搭建

1.Redis单机搭建（以6.0.6版本为例）安装gcc套装。yuminstallcppyuminstallbinutilsyuminstallglibcyuminstallglibc-kernheadersyuminstallglibc-commonyuminstallglibc-develyuminstallgccyuminstallmake升级gcc。yum-yinstallcentos-r
·2025-01-22 11:42

分布式存储的技术选型之HDFS、Ceph、MinIO对比

分布式存储的技术选型比：HDFS、Ceph、MinIO对比一文读懂分布式存储在当今数字化时代，数据呈爆炸式增长，分布式存储技术应运而生，成为大数据存储与管理的得力助手。
Linux运维老纪·2025-01-22 00:40

kubernetes 集群搭建(二进制方式)

Kubernetes作为当今最流行的容器编排平台，提供了强大的功能来管理和扩展容器化应用。除了使用kubeadm等工具简化集群的创建过程外，直接通过二进制文件安装Kubernetes组件也是一种常见的方法。这种方式给予用户更多的控制权，并且适用于那些希望深入理解Kubernetes内部工作原理的人。本文将详细介绍如何通过二进制方式搭建一个功能齐全的Kubernetes集群，并分享一些实用技巧和注意
難釋懷·2025-01-21 02:50

minio免费文件管理器（windows版本），若依RuoYi-Vue-Plus框架使用，有需要的可以下载，因为官网下载特别慢

MinIO是一款开源的对象存储系统，它提供类似AmazonS3的云存储服务，适用于各种规模的企业。
程序员WANG·2025-01-20 10:43

Spring Boot 集成 MinIO 实现文件上传

SpringBoot集成MinIO实现文件上传一、Minio服务准备MinIO的搭建过程参考Docker搭建MinIO对象存储。登录MinIO控制台，新建一个Bucket，修改Bucket权限为公开。
Flobby529·2025-01-19 16:47

【MongoDB 分片集群架构详解】

ScaleUp）VS水平扩容（ScaleOut）2.分片集群架构2.1核心概念2.1.1数据分片2.1.2配置服务器（configServer）2.1.3查询路由（mongos）3.环境搭建3.1分片集群搭建
从你 全世界 路过·2025-01-19 08:48

【Java将File完美转为MultipartFile】:亲测有效

由于multipartFile有很多有用的api,但是有时候我们接收到前台的参数是文件名和文件内容,而不是文件,此时不能使用multipartFile接收,导致处理起来很不方便,比如我用minio上传文件
阿火~·2024-09-15 07:26

【Linux 从基础到进阶】Kubernetes 集群搭建与管理

Kubernetes集群搭建与管理Kubernetes（简称K8s）是一个用于自动化部署、扩展和管理容器化应用程序的开源平台。
爱技术的小伙子·2024-09-15 03:00

Docker-compose minio集群部署

docker-compose离线安装docker及docker-compose_docker-compose离线安装-CSDN博客三、docker-compose.yml文件按docker-compose文件启动，minio
有点菜的运维·2024-09-14 19:04

docker-compose部署minio分布式集群

1、节点情况建议：minio节点数最好4节点以上，nginx独立部署在其他服务器。
伏案惊涛·2024-09-14 19:32

Linux+Docker：3分钟实现MinIO在线部署与Java集成

Linux下使用Docker安装MinIO1.拉取MinIO镜像dockerpullminio/minio2.创建挂载目录mkdir-p/opt/minio/datamkdir-p/optl/minio
码龄23年·2024-09-14 14:29

elasticsearch数据迁移之elasticdump

系列文章目录第一章es集群搭建第二章es集群基本操作命令第三章es基于search-guard插件实现加密认证第四章es常用插件文章目录系列文章目录前言一、elasticdump是什么？
迷茫运维路·2024-09-14 12:47

DMDPC安装部署

本文是在1台Linux虚拟机上通过创建四个实例的方式进行集群搭建.2.DMDPC集群规划DMD
丷月亮是指路牌·2024-09-14 06:39

Redis安装详解（单机安装，sentinel哨兵模式，Cluster模式）

1.2linux中安装2Redis主从复制安装3Redis哨兵模式安装4Springboot项目操作RedisSentinel集群5官方cluster分区搭建5.1部署架构5.2RedisCluster的优势5.3集群搭建
dream21st·2024-09-13 22:18

使用minio给存储的对象添加过期时间

在一些场景中，储存的对象需要定时清理保证留出足够的磁盘空间，如果时linux的本地文件，需要采取定时任务清理，但是minio提供了这样的能力环境软件版本docker24.0.4minioRELEASE.2023
[奸笑]这个不是斜眼笑[奸笑]·2024-09-11 21:31

【Redis】Redis 集群搭建与管理: 原理、实现与操作

目录集群(Cluster)基本概念数据分片算法哈希求余⼀致性哈希算法哈希槽分区算法(Redis使⽤)集群搭建(基于docker)第⼀步:创建⽬录和配置第⼆步:编写docker-compose.yml第三步
Hsu琛君珩·2024-09-11 00:02

使用ansible的剧本制作salt-master与salt-minion的安装与启动服务过程

虚拟机版本：RockyLinuxrelease8.6(GreenObsidian)准备几台虚拟机ipv4地址主机名192.168.137.13center192.168.137.14sp-1192.168.137.15sp-2192.168.137.16sp-3一、center主机的配置1.vim/etc/hosts127.0.0.1localhostlocalhost.localdomainlo
qq_42750608·2024-09-10 23:57

MySQL8.0 集群搭建

文章目录环境准备安装MySQL8.0配置主服务配置从服务器主从复制：即主服务器上的所有操作（创建库，修改表等）会被同步到从服务器上，但是在从服务器上的操作不会进入到主服务器中环境准备两台服务器，一主一从安装docker#国内源curl-fsSLhttps://get.docker.com|bash-sdocker--mirrorAliyun启动dockersystemctlstartdocker配
我有一只肥螳螂·2024-09-09 08:46
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他