MinIO对象存储

分布式_minio_java整合minio

minio一、概述使用java语言整合minio准备工作：java（maven）minioserverroot@ubuntu:/minio#dockerps-aCONTAINERIDIMAGECOMMANDCREATEDSTATUSPORTSNAMES69916d0c5a05minio
伍六七_ba5e·2023-12-27 17:05

架构设计内容分享(五十二)：亿级短视频，如何架构？

InstagramReels,YouTubeShorts）的宏观业务架构1）与用户相关的子系统2）与视频发布相关的子系统3）点赞和评论相关子系统4）推荐子系统技术选型：常见的NOSQL存储框架选型基于MinIO
之乎者也··2023-12-27 14:44

基于hostpath的k8s pod日志持久化

基于hostpath的k8spod日志持久化前置条件：step1：修改服务的yaml文件step2：推送日志到minio版保存step3：优化附加：简单了解前置条件：考虑到pod的多副本，但同时需要将日志集中收集起来
最美dee时光·2023-12-27 11:33

Spark生产集群各种使用

1.环境配置1.1版本说明要求版本是否必须其他事项Hadoop3.3.4是hadoop3.3.0之后原生支持国内主要对象存储Hive3.1.3否实测没有Hive也可以使用sparksql，使用hive更好的管理
tuoluzhe8521·2023-12-27 10:15

Minio文件服务器（上传文件）

官网：https://www.minio.org.cn/开源的分布式对象存储服务器Window安装用户名和密码相同创建bucket，并且将策略改成public一、添加依赖二、代码publicclassFileUploadTest
A尘埃·2023-12-27 09:05

下载minio

1.下载windowminiohttps://dl.minio.io/client/mc/release/windows-amd64/mc.exe2.启动miniosetMINIO_ROOT_USER=
东隅北海·2023-12-27 08:26

【大数据HA】HAProxy实现thrift协议HMS服务的高可用-附Chatgpt协助截图

【大数据】Docker部署HMS(HiveMetastoreService)并使用Trino访问Minio-CSDN博客本来想到的是Nginx，但是在进一步分析，HMS发布的是thrift协议，一种tcp
秦拿希·2023-12-27 05:08

基于Cloudflare内网穿透实现自建图床

基于Cloudflare内网穿透实现自建图床图床的选择自建图床的选择安装MinIO基于dockercompose安装启动MinIO测试MinIO功能结合Cloudflare内网穿透功能，实现外网访问准备一个域名
入秋的大橘·2023-12-26 22:09

vue2、vue3实现用aws s3协议操作minio进行文件存储和读取

亚马逊s3API文档最开始安装了@aws-sdk/client-s3，但是不知道为什么一直报错，所以用了aws-sdk准备工作：需要已经搭建好minio、创建好桶1.vue2安装插件yarnaddaws-sdks3
查查茶茶丸·2023-12-26 19:09

docker安装入门及redis,minio,rabbitmq应用安装

部分笔记来自黑马课堂：【黑马程序员Docker快速入门到项目部署，MySQL部署+Nginx部署+docker自定义镜像+DockerCompose项目实战一套搞定-哔哩哔哩】https://b23.tv/niWEhEF一、什么是docker：快速构建、运行、管理应用的工具。--帮助我们快速部署提高开发效率。二、Docker是做什么的Docker可以帮助我们下载应用镜像，创建并运行镜像的容器，从而
小瞿码上有·2023-12-26 13:03

SpringBoot整合阿里云OSS、天翼云OSS、MinIO对象存储

对象存储是什么？对象存储是一种数据存储方式，它将数据分割成不同的对象，并为每个对象分配一个唯一的标识符，用于访问和操作数据。这些对象被存储在多个服务器上，以确保数据的可靠性和可用性。
sum墨·2023-12-26 11:37

iceberg1.4.2+spark3.4.2+minio

在idea里面编写iceberg的数据写入和创建表动作，虽然简单，但是官网没有给出完整例子，包括jar包的依赖。最大的坑就是版本不兼容。通过下面完整例子，编写Iceberg的完整代码。pom.xml文件需要引入的包org.scala-langscala-library${scala.version}junitjunit4.4testorg.specsspecs1.2.5testorg.apache
smileyboy2009·2023-12-26 10:25

idea开发delta.io数据湖

通过idea的spark操作delta.ideamaven的pom.xmlio.miniominio8.5.7org.apache.sparkspark-core_2.123.5.0o
smileyboy2009·2023-12-26 10:52

iceberg1.4.2 +minio通过spark创建表，插入数据

下层支持hadoop，s3,对象存储，上层支持hive，spark，flink等应用。实现在中间把两部分隔离开来，实现一种对接和数据管理的标准。有这个标准，不管是谁建的表，都可以操作和访问。
smileyboy2009·2023-12-26 06:39

jvm中实例（引用），对象存储位置

一个完整的Java程序运行过程会涉及以下内存区域：1、寄存器：JVM内部虚拟寄存器，存取速度非常快，程序不可控制。2、栈：保存局部变量的值，包括：1.用来保存基本数据类型的值；2.保存类的实例，即堆区对象的引用(指针)。也可以用来保存加载方法时的帧。3、堆：用来存放动态产生的数据，比如new出来的对象。注意创建出来的对象只包含属于各自的成员变量，并不包括成员方法。因为同一个类的对象拥有各自的成员变
742744538徐睿·2023-12-26 04:36

4.3 媒资管理模块 - Minio系统上传图片与视频

文章目录一、上传图片1.1需求分析1.2数据模型1.2.1media_files媒资信息表1.3准备Minio环境1.3.1桶环境1.3.2连接Minio参数1.3.3Minio配置类1.4接口定义1.4.1
我爱布朗熊·2023-12-25 08:59

4.2 媒资管理模块 - 项目搭建、minio文件系统

文章目录一、搭建媒资服务工程1.1media-api工程1.1.1bootstrap.yaml1.1.2Maven1.1.3Nacos1.2media-service工程1.2.1bootstrap.yaml1.2.2Maven1.2.3Nacos1.2.4分页插件1.3media-model工程1.3.1QueryMediaParamsDto1.3.2MediaFiles1.3.3MediaPr
我爱布朗熊·2023-12-25 08:25

vue前端上传图片到阿里云OSS，超详细上传图片与视频教程

1.简介与日常使用阿里云OSS是一款由阿里巴巴云计算有限公司开发的基于云端的对象存储服务。它为企业和个人存储海量数据提供了完美的解决方案。
欧阳呀·2023-12-25 02:32

22.序列化

序列化和反序列化:序列化:指把堆内存中的Java对象数据,通过某种方式把对象存储到磁盘文件中或者传递给其他网络的节点(在网络上传输).我们把这个过程称之为序列化.反序列化:把磁盘中的对象数据或者把网络节点上的对象数据
若愚同学·2023-12-24 23:29

使用minio实现大文件断点续传

部署minio拉取镜像dockerpullminio/miniodockerimages新建映射目录新建下面图片里的俩个目录data(存放对象-实际的数据)config存放配置开放对应端口我使用的是腾讯服务器所以在腾讯的安全页面开启
康世行·2023-12-24 17:39

BUG记录 | 使用阿里云OSS实现文件上传后，得到的url无法在浏览器中打开

项目背景SpringBoot的项目，使用阿里云对象存储OSS对项目中的文件进行存储，所需文件也会通过IDEA中由官方Demo改编而成的工具类作为接口，调用接口后上传问题描述使用阿里云OSS实现文件上传后
Alita11101_·2023-12-24 09:03

Flink 数据类型和序列化

大数据生态中大多数技术组件都是运行在JVM上的，Flink也是运行在JVM上，基于JVM的数据分析引擎都需要将大量的数据存储在内存中，这就不得不面临JVM的一些问题，比如Java对象存储密度较低等。
大笑哈哈哈哈·2023-12-24 08:48

Flink 数据序列化

量身定制的序列化框架大家都知道现在大数据生态非常火，大多数技术组件都是运行在JVM上的，Flink也是运行在JVM上，基于JVM的数据分析引擎都需要将大量的数据存储在内存中，这就不得不面临JVM的一些问题，比如Java对象存储密度较低等
程序猿进阶·2023-12-24 08:17

linux 搭建自己的 OSS 服务器 minio 搭建OSS服务器 springboot整合minio 文件服务器 设置minio bucket的策略 policy

目录1.minio官网地址2.需要环境一台可以上网的Linux服务器3.在minion官网找到如图4.访问地址：http://ip:9000/5.设置minio后台启动添加访问连接minio获取的连接默认
笨小孩编程·2023-12-24 00:55

linux下载minio

一、概述中文官网：MinIO|高性能，对Kubernetes友好的对象存储英文官网：MinIO|HighPerformance,KubernetesNativeObjectStorage二、Minio是什么
开心是星星·2023-12-24 00:25

通过python脚本上传本地/远程服务器文件到minio

前言将文件上传到MinIO对象存储后，MinIO会将文件存储为对象(.meta文件)，并为每个对象生成相应的元数据。元数据是描述对象的属性和信息的数据。通常，元数据包括对象的名称、大小、创建日期等。
publicman_·2023-12-24 00:23

Minio文件服务器的搭建

1.下载安装包#创建文件夹（自定义）mkdir-p/usr/local/minioFilemkdir-p/usr/local/minioFile/datatouch/usr/local/minioFile
搬砖爱好者.·2023-12-24 00:23

Minio快速入门(Linux)

什么是Minio?MinIO是在GNUAffero通用公共许可证v3.0下发布的高性能对象存储。它与AmazonS3云存储服务API兼容。
Lixu-·2023-12-24 00:22

kkfileview与minio整合实现文件上传与预览

kkfileview与minio整合实现文件上传与预览1.概叙kkfileview比较火热的在线预览工具，giteestat10K+。点击这里跳转kkfileview官网。
吃坨西红柿·2023-12-24 00:52

在Linux下探索MinIO存储服务如何远程上传文件

文章目录前言一.创建Buckets和AccessKeys二.Linux安装Cpolar三.创建连接MinIO服务公网地址四.远程调用MinIO服务小结五.固定连接TCP公网地址六.固定地址连接测试结语前言
聆风吟_·2023-12-24 00:22

OpenStack（3）：手动部署OpenStack Queens（3.镜像服务）

您可以将通过Image服务提供的虚拟机映像存储在各种位置，从简单的文件系统到OpenStackObjectStorage等对象存储系统。为简单起见，本指南介绍如何配置I
BJ天涯·2023-12-24 00:56

Ceph的优势及其特点？

Ceph的优势及其特点：Ceph是一个分布式的数据对象存储，Ceph相对其他存储系统具有如下优势CRUSH算法：ceph摒弃了传统的集中式存储元数据寻址的方案，而使用CRUSH算法完成数据的寻址操作。
cherry@kerry·2023-12-24 00:40

[C++] 多态机制的实现原理之虚函数表

程序运行时，父类指针可以根据具体指向的子类对象，来执行不同的函数虚函数实现多态每一个有虚函数的类（或者有虚函数的类的派生类）都有一个虚函数表虚函数表占4个字节类对象存储空间的最前端存放的就是虚函数表的指针该类的任何对象中都放着虚函数表的指针
hywmj·2023-12-23 17:25

MINIO在java中的使用

引言MinIO是全球领先的对象存储先锋，目前在全世界有数百万的用户.在标准硬件上，读/写速度上高达183GB/秒和171GB/秒。
IT小学僧·2023-12-23 14:48

使用 Lambda 函数URL + CloudFront 实现S3镜像回源

1.背景说明亚马逊云科技S3是一种对象存储服务，提供行业领先的可扩展性、数据可用性、安全性和性能。各种规模和行业的客户都可以在S3存储和保护任意量的数据。
亚马逊云开发者·2023-12-23 12:16

minio 分布式对象存储

分布式文件系统应用1.1、Minlo介绍Minlo是一个基于ApacheLicensev2.0开源协议的对象存储服务。
锅锅嗨·2023-12-23 09:55

在CentOS 7上使用普通用户`minio`安装和配置MinIO

当然，以下是在CentOS7上使用普通用户minio安装和配置MinIO的完整步骤，包括设置密码、设置开机自启动，以及使用minio用户启动和关闭服务的过程：创建MinIO用户:sudouseradd-mminiosudopasswdminio
ascarl2010·2023-12-23 09:54

【分布式技术专题】「OSS中间件系列」Minio的文件服务的存储模型及整合Java客户端访问的实战指南

Minio的元数据数据存储MinIO对象存储系统没有元数据数据库，所有的操作都是对象级别的粒度的，这种做法的优势是:个别对象的失效，不会溢出为更大级别的系统失效。便于实现“强一致性”这个特性。
洛神灬殇·2023-12-23 08:39

SpringBoot中常见配置配置，MySQL、Redis、MinIO等

SpringBoot中配置启动端口号server:port:8501spring:application:name:server-managerprofiles:active:dev#当前使用的配置文件servlet:multipart:max-file-size:20MB#最大文件max-request-size:20MB##最大请求数据库相关MySQLspring:datasource:typ
Bunny0212·2023-12-23 08:07

Kubernetes的基本概念和术语--node

除了Master，Kubernetes集群中的其他机器被称为Node，在较早的版本中也被称为Minion。与Master一样，Node可以是一台物理主机，也可以是一台虚拟机。
%九思%·2023-12-23 03:28

QByteArray 是 Qt 框架中的一个类，用于存储和操作字节数组（byte array）

QByteArray类提供了一系列方法来处理字节数据，包括：存储字节数据：你可以使用QByteArray对象存储字节数据，例如图片、二进制文件等。
Respect@·2023-12-22 23:21

文件上传存储工具

x-file-storagex-file-storage:一行代码将文件存储到本地、FTP、SFTP、WebDAV、谷歌云、阿里云OSS、华为云OBS、七牛云Kodo、腾讯云COS、百度云BOS、又拍云USS、MinIO
程序员小刚·2023-12-22 21:23

k8s搭建minio集群

1.stsMINIO_ROOT_PASSWORD不得少于8位,minio新版本把可视化独立出来,需要--console-address":5000"自己设置端口apiVersion:apps/v1kind
MoonSoin·2023-12-22 18:36

CEPH篇 块存储、文件存储和对象存储意义和差异及ubuntu20.4下 ceph安装

理解块存储、文件存储和对象存储的应用场景和选择应用场景分布式存储的应用场景相对于其存储接口，现在流行分为三种:对象存储:也就是通常意义的键值存储，其接口就是简单的GET、PUT、DEL和其他扩展，如七牛
管哥-运维·2023-12-22 13:43

解决文件导出过大-＞java压缩zip文件--封装工具类

阿丹：在业务逻辑中的数据存在一部分业务场景，在导出文件或者视频的时候需要将文件暂存在服务器上再上传到oss对象存储或者fastdfs中让用户来下载使用。
一单成·2023-12-22 13:42

Rocky Linux 9.3 安装 MinIO 最新版本 （超级详细版本）

安装步骤MinIO官网文件目录运行以下curl命令将MinIO的二进制文件下载到“/usr/local/bin/minio”curl-o/usr/local/bin/miniohttps://dl.min.io
Gosse0405·2023-12-22 10:52

Qt之QNetworkAccessManager 从本地和内存中上传数据到Http服务器

简述接连做了好几个服务器的项目，例如文件传输用的Ftp和对象存储服务器(ObjectStorageService)，简单的信息传输用的WebServer，之前也有用过HttpServer不过都和WebServer
Ilson_·2023-12-22 10:13

linux 上安装 minio

第一步，下载wgethttps://dl.minio.org.cn/server/minio/release/linux-amd64/minio第二步，修改权限chmod+xminio第三步，设置Pathmvminio
BatmanWayne·2023-12-22 06:26

魔众图床系统：打造您的专属私有化图床，轻松管理云储存

这个系统不仅具备了高效、安全、稳定的特性，还提供了多样化的储存方式，包括本地、阿里云、腾讯云、七牛云对象存储等。这意味着您可以根据自己的需求，灵活地选择存储方式和配置。
魔众·2023-12-22 05:02

oss实现文件上传和下载（前后端分离）

首先你需要注册阿里云oss，如果之前没有进行注册，则进行注册（一般用支付宝），注册登录之后搜索oss点击对象存储oss，进入以下界面，点击管理控制台点击Bucket创建Bucket（因为我之前创建过，所以如果你没有创建过你的页面和我有点区别
甜城里的同学·2023-12-22 04:19
上一页 7 8 9 10 11 12 13 14 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他