分布式文件系统MinIO

如何在Linux搭建MinIO服务并实现无公网ip远程访问内网管理界面

文章目录前言1.Docker部署MinIO2.本地访问MinIO3.Linux安装Cpolar4.配置MinIO公网地址5.远程访问MinIO管理界面6.固定MinIO公网地址前言MinIO是一个开源的对象存储服务器
学编程的小程·2024-02-28 01:39

OSS业务存储适配器模式

流程当我们配置了阿里云，腾讯云，minio等多个云存储厂商的业务代码时，如果我们要修改具体使用哪一种厂商的云存储，那么我们的controller层和service层就会需要改变业务代码；此时我们可以使用适配器模式来进行松耦合
Fairy要carry·2024-02-20 17:33

MinIO 和 Apache Tika：文本提取模式

Tl;dr:在这篇文章中，我们将使用MinIOBucketNotifications和ApacheTika进行文档文本提取，这是大型语言模型训练和检索增强生成LLM和RAG等关键下游任务的核心。
MinIO官方账号·2024-02-20 16:42

minio 并发数_c#(asp.net)线程配置总结

本文为大家介绍有关c#(asp.net)线程配置的相关知识，有需要的朋友可以参考下。同一时刻只能发起的工作线程数量。1、(maxWorkerThreads*CPU逻辑数量)-minFreeThreads比如2个CPU默认配置maxWorkerThreads=100，minFreeThreads=176，则同时最大只能有24个工作线程。(这里不管代码示例:这个配置的值，经过测试，不管此处maxcon
Directeur宋铮·2024-02-20 11:20

文件服务器MinIO的下载与安装

前言本篇文章基于win10操作系统以及Linux环境下载与启动MinIO文件服务器虚拟机的创建详见：http://t.csdn.cn/ZF57j1、Win10系统1.下载MinIOMinIO中文官网：http
我是聂可·2024-02-20 11:17

论文阅读-Hydra: 用于持久内存和RDMA网络的分散文件系统

然而，现有的分布式文件系统采用为传统磁盘设计的传统集中式客户端-服务器架构，导致访问延迟
向来痴_·2024-02-20 07:26

C# 通过S3 给minio上上传数据

classOSSAmazonToolsCSharp{staticprivatestringaccessKey="RPW421T9GSIO4A45Y9ZR";staticprivatestringsecretKey="2owKYy9emSS90Q0pXuyqpX1OxBCyEDYodsiBemcq";staticprivateAmazonS3Configconfig=newAmazonS3Confi
深夜奶爸·2024-02-20 06:45

访问minio地址的图片_SpringBoot2 整合MinIO中间件，实现文件便捷管理

一、MinIO简介1、基础描述MinIO是一个开源的对象存储服务。
高世界·2024-02-20 06:45

Mino基于JAVA API 对文件对象的基础操作封装

/***@authorqianxm*@date2020/6/3016:58*/@Log4jpublicclassMinioUtils{publicstaticvoidfileUpload(Stringendpoint
michelle-q·2024-02-20 06:15

如何在微服务中使用 MinIO 进行配置

MinIO是一个自由软件和开源对象存储服务器，可与微服务架构协同工作。使用MinIO可以轻松地扩展存储容量，支持高并发、分布式的对象存储，并且拥有各种强大的功能（如访问控制、加密等）。
阿宽...·2024-02-20 06:15

通过minio服务器压缩文件的下载和解压

1：下载压缩文件到本地服务器//下载压缩文件publicstaticvoidmain(String[]args){try{//初始化MinIO客户端MinioClientminioClient=MinioClient.builder
小徐敲java·2024-02-20 06:14

Golang - 使用CentOS 7 安装Golang环境

解压缩Go语言包：使用以下命令解压缩下载的Go语言包[root@VM-24-3-centosminio]#tar-C/usr/local-xzfgo1.21.5.linux-amd64.tar.gz[root
小小工匠·2024-02-20 06:00

GlusterFS：开源分布式文件系统的深度解析与应用场景实践

GlusterFS作为一款开源的、高度可扩展的分布式文件系统，以其独特的无中心元数据设计和灵活的卷管理机制，在众多场景中脱颖而出，为解决大规模数据存储难题提供了强有力的支持。
超逮虾户·2024-02-19 19:20

文件上传-第三方服务阿里云OSS

也可以建立分布式集群,专门的微服务来存储文件常见的技术比如Minio。对于中小型公司，并且上传文件私密性不高的话可以使用第三方的存储服务，比如阿里云、华为云等。
sunyunfei1994·2024-02-19 16:54

hadoop硬件配置 高可用 datanode namenode硬件配置

每个分布式文件系统分块在NameNode的内存中大小约为250个字节，此外还要加上文件和目录所需的250字节空间。
xcagy·2024-02-19 13:07

精彩回顾 I DatenLord Hackathon 2023圆满结束！

达坦科技基于其跨云分布式文件系统DatenLord项目，结合AI大模型时代背景，搭建了擂台。我们邀请参赛者为DatenLord的极端场景设计并实现缓存p2p传输和同步模块。
·2024-02-19 12:34

【2019-04-28】Hadoop分布式文件系统

Hadoop自带HDFS(hadoopdistributefilesystem)。HDFS默认数据块128M。HDFS有两类工作节点：一个管理节点namenode、多个工作节点datenode，namenode维护文件系统树以及整颗树内所有的文件和目录。namenode记录每个文件中各个数据块所在的数据节点信息。但不永久保存块的位置信息，这些信息会在系统启动时根据数据节点信息重建。namenode
BigBigFlower·2024-02-19 11:56

分布式文件系统 SpringBoot+FastDFS+Vue.js【四】

分布式文件系统SpringBoot+FastDFS+Vue.js【四】八、文件的下载和删除功能8.1.FastDFSClient.java8.2.FileServerController.java8.3
良辰美景好时光·2024-02-19 10:21

分布式文件系统 SpringBoot+FastDFS+Vue.js【二】

分布式文件系统SpringBoot+FastDFS+Vue.js【二】六、实现上传功能并展示数据6.1.创建数据库6.2.创建springboot项目fastDFS-java6.3.引入依赖6.3.fastdfs-client
良辰美景好时光·2024-02-19 10:20

分布式文件系统 SpringBoot+FastDFS+Vue.js【三】

分布式文件系统SpringBoot+FastDFS+Vue.js【三】七、创建后台--分角色管理7.1.创建后台数据库表7.2.创建实体类7.2.1.Admin7.2.2.Menu7.2.3.MenuBean7.2.4
良辰美景好时光·2024-02-19 10:20

分布式文件系统 SpringBoot+FastDFS+Vue.js

分布式文件系统SpringBoot+FastDFS+Vue.js一、分布式文件系统1.1.文件系统1.2.什么是分布式文件系统1.3.分布式文件系统的出现1.3.主流的分布式文件系统1.4.分布式文件服务提供商
良辰美景好时光·2024-02-15 05:20

OpenShift AI - 运行欺诈检测模型和流程

《OpenShift/RHEL/DevSecOps汇总目录》说明：本文已经在OpenShift4.14+RHODS2.50的环境中验证文章目录准备运行环境安装OpenShiftAI环境安装Minio对象存储软件创建
dawnsky.liu·2024-02-14 19:04

一二三应用开发平台文件处理设计与实现系列之7——minio多节点共享磁盘模式验证

背景在不了解minio架构设计之前，我根据既往经验推测minio是将文件读写封装实现了一个应用系统，如要实现高可用，则需要部署两个minio节点，共享同一块磁盘。
学海无涯，行者无疆·2024-02-13 09:55

一二三应用开发平台文件处理设计与实现系列之6——集成minio实现文件存储

背景前面完成了minio的技术预研，今天基于文件存储框架，集成minio，实现平台使用对象存储组件来存储文件的功能。
学海无涯，行者无疆·2024-02-13 09:54

MinIO启动报错“WARNING: Console endpoint is listening on a dynamic port...”

我是自己写了一个shell启动MinIO，在shell中使用--console-address'部署minio的
铁根·2024-02-13 02:05

创新S3存储桶检索：Langchain社区S3加载器搭载OpenAI API

本文演示了使用MinIO、Langchain和OpenAI的GPT-3.5模型的实际实现，重点总结了存储在MinIO存储桶中的文档。
MinIO官方账号·2024-02-12 18:52

SpringBoot图片上传工具minio

SpringBoot图片上传工具其一：minio一、将导入minio依赖（已安装启动）io.miniominio8.0.0二、在application.yml添加相关配置minio:endpoint:http
one piece（｡ò ∀ ó｡）·2024-02-12 17:27

GFS分布式文件系统

目录引言一、文件系统的作用1.1、文件系统的挂载使用二、GlusterFS简介三、GlusterFS特点3.1、扩展性和高性能3.2、高可用性3.3、全局同一命名空间3.4、弹性卷管理3.5、基于标准协议四、GlusterFS术语五、GlusterFS构成六、GlusterFS的工作流程理解：七、弹性HASH算法弹性HASH算法优点八、GFS支持七种卷8.1、分布式卷（Distributevolu
IT.cat·2024-02-12 14:56

GFS 分布式文件系统

一、GlusterFS概述1．GlusterFS简介GlusterFS是一个开源的分布式文件系统。由存储服务器、客户端以及NFS/Samba存储网关（可选，根据需要选择使用）组成。
「已注销」·2024-02-12 14:56

详解 GFS分布式文件系统 （条带卷/复制卷/分布式条带卷/分布式复制卷）

GFS分布式文件系统一.GlusterFS概述1.GlusterFS简介2.GlusterFS特点3.GlusterFS术语4.模块化堆栈式架构5.GlusterFS工作流程6.弹性HASH算法7.GlusterFs
W.scaler·2024-02-12 14:55

关于Java项目使用MinIo对象存储服务的解决方法

关于Java项目使用MinIO存储对象服务的解决方案最近公司项目需要改造升级，将原先存储在数据库中的文件对象改为从文件服务器中获取，最终决定使用MinIO来存储业务中的文件，MinIO平台支持多个存储桶以及海量对象
ℳ墨尔本·2024-02-12 14:19

COC《部落战争》各兵种中英文名称对照

Archer）哥布林（Goblin）巨人（Giant）炸弹人（WallBreaker）气球兵（Balloon）法师（Wizard）天使（Healer）飞龙（Dragon）皮卡（P.E.K.K.A）亡灵（Minion
金御札·2024-02-12 14:28

畅购商城(十二)：接入微信扫码支付

好好学习，天天向上本文已收录至我的Github仓库DayDayUP：github.com/RobodLee/DayDayUP，欢迎Star畅购商城(一)：环境搭建畅购商城(二)：分布式文件系统FastDFS
Robod·2024-02-12 07:05

极限挑战：使用 Go 打造百亿级文件系统的实践之旅

JuiceFS企业版是一款为云环境设计的分布式文件系统，单命名空间内可稳定管理高达百亿级数量的文件。构建这个大规模、高性能的文件系统面临众多复杂性挑战，其中最为关键的环节之一就是元数据引擎的设计。
·2024-02-11 18:49

C#系列-使用 Minio 做图片服务器实现图片上传 和下载（13）

1、Minio服务器下载和安装要在本地安装和运行MinIO服务器，你可以按照以下步骤进行操作：1.访问MinIO的官方网站：https://min.io/，然后点击页面上的”Download”按钮。
管理大亨·2024-02-11 16:22

Minio Decommission Server Pools

MinIOsupportsdecommissioningandremovingserverpoolsfromadeploymentwithtwoormorepools.Todecommission,theremustbeatleastoneremainingpoolwithsufficientavailablespacetoreceivetheobjectsfromthedecommissione
网络飞鸥·2024-02-11 11:17

convert docker run command to kubectl for one time execution 将docker run命令转换为kubectl一次执行

尝试运行一个docker镜像一次，以使用流行的S3clientminio执行一个任务，该环境是我正在使用Kubernetes处理的环境。
网络飞鸥·2024-02-11 11:17

minio: expand decommission pools in argocd

expandthetenant(tenant.pools.size)inminio1.installtenantfromappofapps,poolname:pool-02.toexpandtenant
网络飞鸥·2024-02-11 11:47

minio server pool 的特点小结

minioserverpool是目前minio官方推荐的集群扩容方案，使用上简单，算是做到了真的集群扩容能力，操作简单，维护成本并不是很大。
网络飞鸥·2024-02-11 11:47

MFS 分布式存储

MFS分布式存储MooseFS是一个具备冗余容错功能的分布式网络文件系统，它将数据分别存放在多个物理服务器或单独磁盘或分区上，确保一份数据有多个副本，然而对于访问MFS的客户端或者用户来说，整个分布式文件系统集群看起来就像一个资源一样
中门对狙·2024-02-11 01:30

2022-01-14 HDC2021技术分论坛：新能力让数据多端协同更便捷，数据跨端迁移更高效！

作者：yijian，终端OS分布式文件系统专家；gongashi，终端OS分布式数据管理专家HarmonyOS作为分布式操作系统，其分布式数据管理能力非常重要。
麻酱不会打麻将·2024-02-11 01:59

C#系列-C#访问hadoop API（9）

在C#中访问Hadoop通常涉及到与Hadoop分布式文件系统（HDFS）进行交互，以及可能执行MapReduce作业或其他Hadoop生态系统组件（如HBase或Hive）。
管理大亨·2024-02-10 22:27

minio上传文件在文件服务器上显示的是xl.meta的形式

近期安装minio的时候，安装好之后，在web上传一张图片后，然后去服务器上看文件储存的形式，一看是xl.meta形式，于是我就开始百度搜索，原来是版本问题，于是我安装了老版本版本RELEASE.2022
月亮走丢了耶·2024-02-10 09:43

Spinnaker多云持续交付平台: 部署Minio存储服务

目录一、实验1.环境2.K8Sstorage节点部署NFS3.K8S动态创建PV4.K8Smaster节点部署HELM34.K8Smaster节点部署Minio存储服务（第一种方式安装）5.Minio客户端安装
cronaldo91·2024-02-09 09:40

Spring Boot + Vue.js + FastDFS 实现分布式图片服务器（IDEA教学)

IDEA教学笔记详细课程目录什么是文件系统什么是分布式文件系统主流分布式文件系统介绍FastDFS介绍FastDFS工作原理FastDFS安装与配置FastDFS测试-搭建环境
公众号-老炮说Java·2024-02-09 07:46

React + SpringBoot + Minio实现文件的预览

思路：后端提供接口，从minio获取文件的预览链接，返回给前端，前端使用组件进行渲染展示这里我从minio获取文件预览地址用到了一个最近刚开源的项目，挺好用的，大伙可以试试，用法也很简单官网：https
山城️777·2024-02-09 07:52

常用的文件系统、存储类型小整理

趁假期整理学习一番~名称OSSFastDFSJuiceFSCIFSCephFSEFSNFS全称ObjectStorageService(对象存储服务)FastDistributedFileSystem(快速分布式文件系统
Hehuyi_In·2024-02-09 06:16

从源代码级别看懂MinIO对象存储网关的实现

我在《MinIO对象存储的网关架构设计》一文中介绍了MinIO的网关架构设计，它的整体架构如下图所示：MinIO对象存储的网关架构设计从架构图可以很清楚的看到MinIO网关的分层结构，那么这一篇我就从MinIO
飞雪无情·2024-02-09 05:39

3.3-媒资管理之MinIo分布式文件系统上传视频

文章目录媒资管理5上传视频5.1需求分析5.2断点续传技术5.2.1什么是断点续传5.2.2分块与合并测试5.2.3视频上传流程5.2.4minio合并文件测试5.3接口定义5.4上传分块开发5.4.1DAO
ANnianStriver·2024-02-08 17:36

Mongodb GridFS——适合大小超过16MB的文件

一、概述GridFS是基于mongodb存储引擎是实现的“分布式文件系统”，底层基于mongodb存储机制，和其他本地文件系统相比，它具备大数据存储的多个优点。
0X码上链·2024-02-08 15:48
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他