minio集群搭建第12页

springboot整合minio做文件存储

一,minio介绍MinIO是一个基于ApacheLicensev2.0开源协议的对象存储服务。

豆豆的java之旅·2023-12-28 17:38

开源minio-AWS-S3存储的部署及go操作详细

介绍MinIO是一个开源的分布式对象存储服务，它允许用户在私有云或公有云环境中构建自己的对象存储基础设施。

liuyunshengsir·2023-12-28 12:49

zookeeper集群搭建

一、介绍zookeeper是一个高可用的分布式协调器，官网二、功能统一命名服务、统一配置管理、统一集群管理、服务器节点动态上下线、软负载均衡等三、单机安装zookeeper需要jdk环境，所以需要先安装jdk，安装教程3.1、文件下载下载zookeeper压缩文件3.2、解压tar-zxvfapache-zookeeper-3.5.7-bin.tar.gz-C/opt/module/3.3、修改配

有人看我吗·2023-12-28 12:38

python中使用minio对象存储

#minio_client.pyfromminioimportMiniofromminio.errorimportInvalidResponseErrorimportos#定义一个类，用于minio的操作

澂玙·2023-12-28 11:50

【Java编程系列】Minio实现文件上传下载

善良勤劳勇敢而又聪明的老杨·2023-12-28 09:26

Spring Boot整合Minio实现上传凭证、分片上传、秒传和断点续传

概述SpringBoot整合Minio后，前端的文件上传有两种方式：文件上传到后端，由后端保存到Minio这种方式好处是完全由后端集中管理，可以很好的做到、身份验证、权限控制、文件与处理等，并且可以做一些额外的业务逻辑

技术小羊·2023-12-28 09:40

SpringBoot 整合 MinIO 实现视频的分片上传/断点续传（亲测可行）

1、前言之前做了一个慕课网上的仿短视频开发，里面有很多比较粗糙的实现，比如视频上传部分是直接由前端上传云服务，没考虑到客户的网络环境质量等问题，如果一个视频快上传完了，但是网断了没有上传完成需要客户重新上传，这对于用户体验是极差的。那么我们对于视频文件的上传可以采取断点续传，上传过程中，如果出现网络异常或程序崩溃导致文件上传失败时，将从断点记录处继续上传未上传完成的部分，断点续传依赖于MD5和分片

Java知音_·2023-12-28 08:40

spring boot - minio 分片上传

springboot-minio分片上传主要分三个接口:分片上传分片合并分片完整性校验Md5UploadController@RestControllerpublicclassMd5UploadController

iiaythi·2023-12-28 08:31

Nacos使用快速入门

namespace给微服务配置namespaceNacos与Eureka的区别Nacos做配置中心快速入门在nacos中添加配置文件从微服务拉取配置配置热更新方式一方式二配置共享配置共享的优先级Nacos集群搭建集群结构图搭建集群初始化

Binary Oracle·2023-12-28 07:45

Nginx+keepalived从入门到集群搭建（手把手教学，建议收藏）

目录一、什么是Nginx二、Nginx的相关概念1.正向代理2.反向代理3.负载均衡4.动静分离三、Nginx安装1.安装2.其他配置3.windows中nginx安装四、Nginx常用命令1.查看nginx版本号2.启动3.关闭4.重新加载命令五、Nginx的配置文件1.配置文件位置2.分析nginx.conf配置文件六、Nginx配置-反向代理11.实现效果：2.tomcat启动3.nginx

秃了也弱了。·2023-12-28 06:03

【头歌实训】Spark 完全分布式的安装和部署

文章目录第1关：Standalone分布式集群搭建任务描述相关知识课程视频Spark分布式安装模式示例集群信息配置免密登录准备Spark安装包配置环境变量修改spark-env.sh配置文件修改slaves

撕得失败的标签·2023-12-27 20:56

【头歌实训】Spark 完全分布式的安装和部署（新）

文章目录第1关：Standalone分布式集群搭建任务描述相关知识课程视频Spark分布式安装模式主机映射免密登录准备Spark安装包配置环境变量修改spark-env.sh配置文件修改slaves文件分发安装包启动

撕得失败的标签·2023-12-27 20:56

使用 Docker 安装 Redis、MySQL、MinIO 和 RocketMQ

使用Docker安装Redis、MySQL、MinIO和RocketMQ是一个简单且高效的方法，特别是在开发和测试环境中。以下是每个服务的基本安装步骤。

翱翔-蓝天·2023-12-27 18:51

分布式_minio_java整合minio

minio一、概述使用java语言整合minio准备工作：java（maven）minioserverroot@ubuntu:/minio#dockerps-aCONTAINERIDIMAGECOMMANDCREATEDSTATUSPORTSNAMES69916d0c5a05minio

伍六七_ba5e·2023-12-27 17:05

架构设计内容分享(五十二)：亿级短视频，如何架构？

InstagramReels,YouTubeShorts）的宏观业务架构1）与用户相关的子系统2）与视频发布相关的子系统3）点赞和评论相关子系统4）推荐子系统技术选型：常见的NOSQL存储框架选型基于MinIO

之乎者也··2023-12-27 14:44

基于hostpath的k8s pod日志持久化

基于hostpath的k8spod日志持久化前置条件：step1：修改服务的yaml文件step2：推送日志到minio版保存step3：优化附加：简单了解前置条件：考虑到pod的多副本，但同时需要将日志集中收集起来

最美dee时光·2023-12-27 11:33

Flink on K8S集群搭建及StreamPark平台安装

1.环境准备1.1介绍在使用Flink&Spark时发现从编程模型,启动配置到运维管理都有很多可以抽象共用的地方,目前streampark提供了一个flink一站式的流处理作业开发管理平台,从流处理作业开发到上线全生命周期都做了支持,是一个一站式的流出来计算平台。未来spark开发也在规划范围内，目前还不支持1.2下载StreamPark安装包下载：https://streampark.apach

tuoluzhe8521·2023-12-27 10:45

Es三节点+vip集群搭建部署方案

线上环境Es三节点集群搭建部署方案1.目标Es集群架构图!

大雪冬至·2023-12-27 10:12

Minio文件服务器（上传文件）

官网：https://www.minio.org.cn/开源的分布式对象存储服务器Window安装用户名和密码相同创建bucket，并且将策略改成public一、添加依赖二、代码publicclassFileUploadTest

A尘埃·2023-12-27 09:05

下载minio

1.下载windowminiohttps://dl.minio.io/client/mc/release/windows-amd64/mc.exe2.启动miniosetMINIO_ROOT_USER=

东隅北海·2023-12-27 08:26

mongodb生成自签名证书以及配置SSL以及mongo集群搭建(亲测有效)版本-5.0.6

@[TOC](mongodb生成自签名证书以及配置SSL(亲测有效)版本-5.0.6一直以来都是向大神学习，今天也做回大神分享，哈哈！！几个小时的努力不算白费。一、自签名证书生成1、生成根证书ca.pem1、生成CA私钥(ca.key)（不加密）opensslgenrsa-outca.key20482、生成CA证书签名请求(ca.csr)opensslreq-new-keyca.key-outca

HappyLearnerL·2023-12-27 08:38

【运维路不弯】最简单的k8s集群搭建(基于ubuntu22.04 cloud-img)

配置详情节点k8sdockercontainerdmasterv1.26.024.0.61.6.22node1v1.26.024.0.61.6.22node2v1.26.024.0.61.6.22node3v1.26.024.0.61.6.22所有节点操作替换系统源cat/etc/apt/sources.list#默认注释了源码镜像以提高aptupdate速度，如有需要可自行取消注释debhttp

指剑·2023-12-27 07:43

Hadoop-Hbase集群搭建

1.下载http://archive.cloudera.com/cdh5/cdh/5/hbase-1.2.0-cdh5.7.0.tar.gz2.解压#解压到指定的文件夹tarxzvfhbase-1.2.0-cdh5.7.0.tar.gz-C/usr/loca/hadoop/app3.配置文件修改进入目录:/usr/local/hadoop/app/hbase-1.2.0-cdh5.7.0/conf

GuangHui·2023-12-27 07:17

【大数据HA】HAProxy实现thrift协议HMS服务的高可用-附Chatgpt协助截图

【大数据】Docker部署HMS(HiveMetastoreService)并使用Trino访问Minio-CSDN博客本来想到的是Nginx，但是在进一步分析，HMS发布的是thrift协议，一种tcp

秦拿希·2023-12-27 05:08

Rancher小白学习之路

load-balancer/_indexhttp://docs.rancher.cn/docs/rancher1/rancher-service/load-balancer/_indexRancher2.5集群搭建

weixin_42124960·2023-12-27 01:07

基于Cloudflare内网穿透实现自建图床

基于Cloudflare内网穿透实现自建图床图床的选择自建图床的选择安装MinIO基于dockercompose安装启动MinIO测试MinIO功能结合Cloudflare内网穿透功能，实现外网访问准备一个域名

入秋的大橘·2023-12-26 22:09

vue2、vue3实现用aws s3协议操作minio进行文件存储和读取

亚马逊s3API文档最开始安装了@aws-sdk/client-s3，但是不知道为什么一直报错，所以用了aws-sdk准备工作：需要已经搭建好minio、创建好桶1.vue2安装插件yarnaddaws-sdks3

查查茶茶丸·2023-12-26 19:09

docker安装入门及redis,minio,rabbitmq应用安装

部分笔记来自黑马课堂：【黑马程序员Docker快速入门到项目部署，MySQL部署+Nginx部署+docker自定义镜像+DockerCompose项目实战一套搞定-哔哩哔哩】https://b23.tv/niWEhEF一、什么是docker：快速构建、运行、管理应用的工具。--帮助我们快速部署提高开发效率。二、Docker是做什么的Docker可以帮助我们下载应用镜像，创建并运行镜像的容器，从而

小瞿码上有·2023-12-26 13:03

SpringBoot整合阿里云OSS、天翼云OSS、MinIO对象存储

大家好！我是sum墨，一个一线的底层码农，平时喜欢研究和思考一些技术相关的问题并整理成文，限于本人水平，如果文章和代码有表述不当之处，还请不吝赐教。以下是正文！对象存储是什么？对象存储是一种数据存储方式，它将数据分割成不同的对象，并为每个对象分配一个唯一的标识符，用于访问和操作数据。这些对象被存储在多个服务器上，以确保数据的可靠性和可用性。对象存储适合存储大量数据，具有可扩展性、低成本和高安全性等

sum墨·2023-12-26 11:37

iceberg1.4.2+spark3.4.2+minio

在idea里面编写iceberg的数据写入和创建表动作，虽然简单，但是官网没有给出完整例子，包括jar包的依赖。最大的坑就是版本不兼容。通过下面完整例子，编写Iceberg的完整代码。pom.xml文件需要引入的包org.scala-langscala-library${scala.version}junitjunit4.4testorg.specsspecs1.2.5testorg.apache

smileyboy2009·2023-12-26 10:25

idea开发delta.io数据湖

通过idea的spark操作delta.ideamaven的pom.xmlio.miniominio8.5.7org.apache.sparkspark-core_2.123.5.0o

smileyboy2009·2023-12-26 10:52

iceberg1.4.2 +minio通过spark创建表，插入数据

iceberg是一种开放的表格式管理，解决大数据数据中结构化，非结构化和半结构化不统一的问题。主要是通过对表的管理实现增删改查，同时支持历史回滚（版本旅行）等操作。下层支持hadoop，s3,对象存储，上层支持hive，spark，flink等应用。实现在中间把两部分隔离开来，实现一种对接和数据管理的标准。有这个标准，不管是谁建的表，都可以操作和访问。比如我用spark创建表，flink去读取的时

smileyboy2009·2023-12-26 06:39

Kubernetes-通过Rancher从Harbor私有仓库拉取镜像

引言前一篇文章详细描述了如何使用rancher搭建Kubernetes高可用集群，集群搭建好了后，我们就需要开始部署应用了，那么如何从私有镜像仓库拉取镜像呢？

Statmoon·2023-12-26 04:03

CDH框架搭建【小白易上手】

CDH框架搭建Vmware安装CentOS虚拟机java环境搭建mysql环境搭建CDH集群搭建遇到的问题1.磁盘空间不够2.centOS版本过低3.连接虚拟机ip失败4.node0节点无法加入集群Vmware

刀锋0001·2023-12-26 02:14

RocketMQ

MQ的优缺点各种MQ产品的比较RockeetMQ快速入门准备工作下载RocketMQ安装RocketMQ启动RocketMQ测试RocketMQ发送消息接收消息RocketMQ集群搭建角色介绍集群搭建方式集群特点集群模式

Xiaolei.Shi·2023-12-25 23:52

RabbitMq学习笔记11（小滴课堂）

讲解RabbitMQ高可用普通集群模式介绍讲解RabbitMQ高可用mirror镜像集群模式介绍讲解RabbitMQ高可用普通集群搭建基础准备停止节点：删除单节点：我们已经查不到之前的容器了。

抹茶味的西瓜汁·2023-12-25 19:36

HBase 集群搭建

文章目录安装前准备兼容性官方网址集群搭建搭建Hadoop集群搭建Zookeeper集群解压缩安装配置文件高可用配置分发HBase文件服务的启停启动顺序停止顺序验证进程查看Web端页面安装前准备兼容性1）

撕得失败的标签·2023-12-25 19:05

hadoop 3.3大数据集群搭建系列2-安装zookeeper

一.下载并解压cd/home/softwarewgethttps://mirrors.tuna.tsinghua.edu.cn/apache/zookeeper/zookeeper-3.6.3/apache-zookeeper-3.6.3-bin.tar.gz--no-check-certificatetar-xvfapache-zookeeper-3.6.3-bin.tar.gz-C/home二

只是甲·2023-12-25 11:04

4.3 媒资管理模块 - Minio系统上传图片与视频

文章目录一、上传图片1.1需求分析1.2数据模型1.2.1media_files媒资信息表1.3准备Minio环境1.3.1桶环境1.3.2连接Minio参数1.3.3Minio配置类1.4接口定义1.4.1

我爱布朗熊·2023-12-25 08:59

4.2 媒资管理模块 - 项目搭建、minio文件系统

文章目录一、搭建媒资服务工程1.1media-api工程1.1.1bootstrap.yaml1.1.2Maven1.1.3Nacos1.2media-service工程1.2.1bootstrap.yaml1.2.2Maven1.2.3Nacos1.2.4分页插件1.3media-model工程1.3.1QueryMediaParamsDto1.3.2MediaFiles1.3.3MediaPr

我爱布朗熊·2023-12-25 08:25

零基础搭建k8s集群（一）- 基础准备

基础准备零基础搭建k8s集群（二）-依赖软件安装零基础搭建k8s集群（三）-提前放行相关的网络端口零基础搭建k8s集群（四）-构建k8s集群一、前言本栏目主题会讲解k8s集群的零基础构建，从环境准备、防火墙管理、集群搭建

不认输的猴·2023-12-24 23:53

Redis集群

二、Redis集群能干什么三、Redis集群槽位四、Redis集群的分片1、哈希取余分区算法3、哈希槽分区算法五、集群搭建1、3主3从redis集群配置2、3主3从redis集群读写3、主从容错切换迁移

Poetry-Distance·2023-12-24 19:26

使用minio实现大文件断点续传

部署minio拉取镜像dockerpullminio/miniodockerimages新建映射目录新建下面图片里的俩个目录data(存放对象-实际的数据)config存放配置开放对应端口我使用的是腾讯服务器所以在腾讯的安全页面开启

康世行·2023-12-24 17:39

MySQL主从架构及读写分离实战

目录一、实验目的与环境二、基础环境介绍三、搭建主从集群1、理论基础2、同步的原理3、搭建主从集群3.1配置master主服务器3.2配置slave从服务3.3主从集群测试3.4集群搭建扩展：3.5、GTID

Memory_2020·2023-12-24 09:04

RocketMQ 入门：MQ 基础概念、集群搭建与高可用配置，消息示例详解

RocketMQ入门视频地址：千锋教育RocketMQ全套视频教程，快速掌握MQ消息中间件什么是MQ？MessageQueue（消息队列），从字面上理解：首先它是一个队列。FIFO先进先出的数据结构——队列。消息队列就是所谓的存放消息的队列。消息队列解决的不是存放消息的队列的目的，解决的是通信问题。1、同步通信情况下比如以电商订单系统为例，如果各服务之间使用同步通信，不仅耗时较久，且过程中受到网络

沉梦听雨.·2023-12-24 08:44

Hadoop+Hive学习笔记-4

Hadoop集群搭建配置三台虚拟机之间的免密登录1切换到root用户：crontab-e在第一行写入：*/5****/usr/sbin/ntpdatentp1.aliyun.com三台机器都一同操作，这一步让三台机器的时间服务器一致

fwings260·2023-12-24 08:22

服务器运维专有名词

专有名词云上虚拟私有云（VirtualPrivateCloud，VPC）IDC机房专线Kubernetes集群搭建以及基本使用【具详细】有了docker为什么还需要k8shttps://blog.csdn.net

wowocpp·2023-12-24 04:10

linux 搭建自己的 OSS 服务器 minio 搭建OSS服务器 springboot整合minio 文件服务器设置minio bucket的策略 policy

目录1.minio官网地址2.需要环境一台可以上网的Linux服务器3.在minion官网找到如图4.访问地址：http://ip:9000/5.设置minio后台启动添加访问连接minio获取的连接默认

笨小孩编程·2023-12-24 00:55

linux下载minio

一、概述中文官网：MinIO|高性能，对Kubernetes友好的对象存储英文官网：MinIO|HighPerformance,KubernetesNativeObjectStorage二、Minio是什么

开心是星星·2023-12-24 00:25

通过python脚本上传本地/远程服务器文件到minio

前言将文件上传到MinIO对象存储后，MinIO会将文件存储为对象(.meta文件)，并为每个对象生成相应的元数据。元数据是描述对象的属性和信息的数据。通常，元数据包括对象的名称、大小、创建日期等。

publicman_·2023-12-24 00:23

推荐频道

minio集群搭建