分布式文件系统MinIO

FastDFS分布式文件系统介绍及单机版安装

一、分布式文件系统分布式文件系统(DistributedFileSystem)是一个软件/软件服务器，这个软件可以用来管理文件，但这个软件所管理的文件通常不是在一个服务器节点上，而是在多个服务器节点上，
生出来，我养！·2023-09-05 04:27

Spring Boot手把手教学(22): 如何从零搭建一个FastDFS分布式文件系统

这个章节我们介绍如何搭建一个FastDFS分布式文件系统。FastDFS是一个开源的高性能分布式文件系统（DFS）。它的主要功能包括：文件存储，文件同步和文件访问，以及高容量和负载平衡。
解忧杂货铺Q·2023-09-05 04:55

FastDFS分布式文件存储服务器和Nginx

什么是FastDFSFastDFS是用C语言编写的一款开源的分布式文件系统。
strive_one·2023-09-05 04:53

【go-fastdfs】go-fastdfs 分布式文件系统搭建

文章目录【go-fastdfs】go-fastdfs分布式文件系统搭建〇、缘起一、从头开始：FastDFS简介二、主角出场：go-fastdfs(go语言版本的FastDFS)1.介绍2.安装3.配置4
Richardlygo·2023-09-05 04:53

FastDFS分布式文件系统简介及单机版安装步骤详解

FastDFS是一个开源的轻量级分布式文件系统,它对文件进行管理,功能包括:文件存储,文件同步,文件访问(文件上传,文件下载)等,解决了大容量存储和负载均衡的问题。
RobertoHuang·2023-09-05 04:53

大数据-玩转数据-Hadoop+Storm与Spark架构方案比较

大数据-玩转数据-Hadoop+Storm与Spark架构方案比较Hadoop+Storm方案结构图Spark方案结构图Hadoop的数据处理工作在硬盘层面，借助HDFS(分布式文件系统)，可以将架构下每一台电脑中的硬盘资源聚集起来
web17886480312·2023-09-04 22:46

minio安装/使用

利用docker安装minio[root@rabbitmqdocker]#dockersearchminioINDEXNAMEDESCRIPTIONSTARSOFFICIALAUTOMATEDdocker.iodocker.io
寂寞旅行·2023-09-04 08:09

hadoop核心架构

通过对Hadoop分布式计算平台最核心的分布式文件系统HDFS、MapReduce处理过程，以及数据仓库工具Hive和分布式数据库Hbase的介绍，基本涵盖了Hadoop分布式平台的所有技术核心。
凉意先生·2023-09-04 06:38

服务器更换ssl证书

一、minio文件1、修改两个文件名2、将这两个文件上传到服务器，目录为：/tmp/.minio/certs3、重启minio文件服务器，dockerstop容器id和dockerstart容器id二、
阔阔飞翔·2023-09-04 05:00

分布式计算在云计算中的作用

本文主要从云计算分布式架构、分布式文件系统、分布式表格系统和分布式计算系统来讲述实现云计算特点的分布式计算。关键词：云计算，分布式计算，
EmmauelZ·2023-09-03 22:54

SpringBoot开发符合S3协议的文件存储服务

背景公司最近的业务大量涉及安可项目，要求避免使用第三方组件，原有开发框架支持本地文件存储/Minio/各类云存储，现在要求文件独立存储且文件服务需要自研，经调研评估后决定基于SpringBoot开发文件存储服务
code2roc·2023-09-03 17:35

Minio笔记

目录1.Minio相关介绍1.1相关网址1.2Minio介绍1.3Minio基础概念1.4纠删码EC(ErasureCode)1.5存储方案2.环境搭建2.1单机部署介绍2.2单机部署（无纠删码模式）2.3
贴地飞行lyh·2023-09-03 11:30

Docker部署minio

1.Docker方式部署1.拉取镜像dockerpulldocker.io/minio/minio2.创建映射目录mkdir-p/home/server/minio/configmkdir-p/home
RedEric·2023-09-03 05:23

Gopan-基于go-zero实现慕课网实战仿百度网盘项目

liuxianloveqiqi/Gopan架构技术栈功能实现http框架gozerorpc框架gozeroorm框架gorm数据库Innodb-cluster,redis-cluster对象存储腾讯云cos，minio
Xian-dayandnight·2023-09-03 04:51

租房网站实战

User表=User结构体Orm：数据库中的每一个表都会和代码中的Orm插件对应Fastdfs：分布式文件系统，在这里用于储存大文件，配合Nginx实现下载文件，进行
RickJay·2023-09-03 01:31

linux安装minio以及springboot整合使用

文章目录1.linux安装minio2.springboot整合minio使用1.linux安装minio1.新建文件夹mkdir/home/minio#数据文件夹mkdir/home/minio/data
simon-_-·2023-09-03 01:19

docker安装minio

1.拉取镜像dockerpullminio/minio:RELEASE.2023-03-24T21-41-23Z2.运行dockerrun-p9000:9000-p9090:9090--nameminio-d
小叶lr·2023-09-02 20:53

SpringBoot开发符合S3协议的文件存储服务

背景公司最近的业务大量涉及安可项目，要求避免使用第三方组件，原有开发框架支持本地文件存储/Minio/各类云存储，现在要求文件独立存储且文件服务需要自研，经调研评估后决定基于SpringBoot开发文件存储服务
·2023-09-02 15:38

Spring Boot配置MinIO（实现文件上传、读取、下载、删除）

一、MinIOMinIO是一个基于ApacheLicensev2.0开源协议的对象存储服务。
angelasp·2023-09-02 13:41

Millions of Little Minions Using Packets for Low Latency Network Programming and Visibility

摘要本文提出了一种实用的方法，可以快速地将新的dataplane功能引入网络:终端主机将小程序嵌入到包中，以主动查询和操作网络的内部状态。我们展示了这个“小数据包程序”(TPP)接口如何实现对网络行为（这是之前不具备的能力）的可见性，使它们能够与网络一起工作以实现所需的功能。我们的设计充分利用了每个组件的最佳性能:(a)交换机以线速度执行小的数据包程序(最多5个指令)(b)端主机可以针对网络状态执
灵活胖子·2023-09-02 10:56

了解Apache跟Apache Hadoop和Apache Spark的原理，应用；

HDFSHadoop实现了一个分布式文件系统（HadoopDistributedFileSystem），简称HDFS。HDFS有高容错性的特点，并且设
lwh_python·2023-09-02 08:38

520页（17万字）集团大数据平台整体解决方案word

请勿商用，如有侵权请联系删除，更多浏览公众号：智慧方案文库1.1.1系统总体逻辑结构4-14系统总体逻辑结构图参见上图，基于Hadoop构建的企业级数据仓库，包含：分布式列式存储数据库Hyperbase和分布式文件系统
2023小目标·2023-09-02 01:40

RuoYi-Vue-Plus 4.7.0 发布 稳定性版本

依赖升级updatespringboot2.7.9=>2.7.11修复DoS漏洞updatexxljob2.3.1=>2.4.0updateminio升级至最新版避免低版本信息泄漏问题updatehutool5.8.15
程序员万万·2023-09-01 21:11

minio 文件预览_Minio+Nginx搭建私有图床，写博客从未这么爽

本方案要求：有一台有公网IP的服务器，可以是云服务器或者有公网IP的家庭网络。如果事先了解Docker、Nginx等可能会更方便。前因写博客的时候一大痛点就是图片的处理，MarkDown格式好用是好用，但是没办法直接附带图片信息，只能放一个链接，图片存在本地的话发给别人的文档里图就没了，存在网上就涉及图床的选择问题，又是另一个麻烦事。大家分享出来的解决方案也是五花八门，有用公有云块存储的，有用收费
weixin_39983554·2023-09-01 16:08

FastDFS分布式存储服务器安装

分布式图片服务器FastDFS1.什么是FastDFSFastDFS是用c语言编写的一款开源的分布式文件系统。
敲代码的令狐葱·2023-09-01 13:26

大数据平台的SQL查询引擎有哪些？

前言大数据平台中Hadoop的分布式文件系统（HDFS）之上形成了一种极具特色的技术群体，那就是SQL查询引擎。
守护石技术研究·2023-09-01 13:19

minio文件服务器开启https

一、准备证书你要有https安全证书，我的是适用于nginx的证书私钥xxxx.key公钥xxxx.pem二、上传证书到minio服务器然后看看你的miniodocker有没有把/root/.minio
奇怪的点·2023-09-01 13:29

2022-03-08

使用Velero备份k8s集群获取Velero安装命令，开源项目地址：Velero部署Minio对象存储apiVersion:v1kind:Namespacemetadata:name:velero--
A蜗牛_8644·2023-09-01 11:34

java 批量下载将多个文件（minio中存储）压缩成一个zip包

我的需求是将minio中存储的文件按照查询条件查询出来统一压成一个zip包然后下载下来。
muguo321·2023-09-01 10:38

外部访问Kubeflow默认安装的mino ui

前提条件1、k8s集群正常安装2、kubeflow在K8S集群上正常安装image.png信息查看minioserviceimage.pngistio网关信息image.png访问设置：1、通过Kubectlportforwordimage.pngimage.png2
dawsongzhao·2023-09-01 01:03

springboot文件上传异步报错

因为迁移的生产环境，在新的服务器发生了之前没有遇到的问题，这种问题是在异步文件上传的时候才会出现错误信息如下16:17:50.009ERRORc.w.einv.minio.service.impl.MinioFileServiceImpl
warrah·2023-08-31 23:23

Minio分布式存储系统

Minio分布式存储系统Minio简介分布式系统高可用设计分布式设计数据保护高可用限制一致性安全Minio纠删码Minio如何使用纠删码Minio优点位衰减bitrot保护应用场景Minio简介Minio
m0_67403073·2023-08-31 19:32

minio入门

1介绍Minio是个基于Golang编写的开源对象存储套件，虽然轻量，却拥有着不错的性能。
Tony.Cheng·2023-08-31 19:01

Minio架构简介

简介 Minio是一个go编写基于ApacheLicensev2.0开源协议的对象存储系统,是为海量数据存储、人工智能、大数据分析而设计，它完全兼容AmazonS3接口，十分符合存储大容量的非结构化数据从几十
东风微鸣·2023-08-31 19:30

Hive-安装与配置（1）

持续更新中，感谢各位前辈朋友们支持学习~文章目录1.Hive环境介绍2.搭建环境准备3.建立Hive元数据库4.安装配置Hive1.Hive环境介绍Hive在Hadoop生态系统中运行，依赖Hadoop分布式文件系统
beixi@·2023-08-31 09:01

Minio-异常

java.lang.IllegalArgumentException:sourcetestbucket/chunk/0:size1048576mustbegreaterthan5242880解疑：Minio
超超～～·2023-08-31 05:31

阿里云矢量图标透明背景转换/展示时变为黑色解决方法

下载了一个矢量图标，背景是透明的上传到minio然后在前端展示，发现透明（白色）的地方变成黑色了处理方法：去除透明的底色。使用window的画图程序打开保存一遍，将透明色转为白色OK
→_→BéLieve·2023-08-31 04:40

自建minio实现doris的快速备份与恢复

为了保险起见，而且能够达到快速的备份恢复，我们实现自主搭建一套minio对象存储。二.目的1.当FE元数据发生损坏无法恢复时，我们能快速的从minio恢复，内网带
spark大数据玩家·2023-08-31 03:47

MinIO框架安装使用+实现上传需求

MinIO框架什么是MinIO框架如何安装（Docker版）安装步骤1.查询MinIO的服务版本2.拉取MinIO3.启动报错在docker中没有操作文件的权限4.访问简单配置1.找到创建用户界面2.设置用户信息
左灯右行的爱情·2023-08-31 03:34

在 Spring Boot 中集成 MinIO 对象存储

MinIO是一个开源的对象存储服务器，专注于高性能、分布式和兼容S3API的存储解决方案。本文将介绍如何在SpringBoot应用程序中集成MinIO，以便您可以轻松地将对象存储集成到您的应用中。
编码行者·2023-08-31 02:14

vulhub之MinIO信息泄露漏洞(CVE-2023-28432)

0x02漏洞描述MinIO是一款高性能、分布式的对象存储系统.它是一款软件产品,可以100%的运行在标准硬件。即X86等低成本机器也能够很好的运行MinIO。兼容亚马逊S3云存储服务接口，非常适合于
gaynell·2023-08-31 01:10

hadoop异常： org.apache.hadoop.mapreduce.lib.input.InvalidInputException: Input path does not exit

其次是集群获取分布式文件系统没有做配置，默认是本地（你电脑下的路径）所以分布式系统找不到路径。设置如下图：以WordCount为例最终结果如下
缘不易·2023-08-31 01:35

OpenShift 4 - 可观测性之用 OpenTelemetry+Tempo 实现 Distributed Tracing

《OpenShift/RHEL/DevSecOps汇总目录》说明：本文已经在支持OpenShift4.13的环境中验证文章目录技术架构部署DistributedTracing运行环境安装minio环境安装
dawnsky.liu·2023-08-30 22:24

OpenShift 4 - 基于 MinIO 安装 Red Hat Quay 镜像仓库

《OpenShift/RHEL/DevSecOps汇总目录》说明：本文已经在OpenShift4.13+Quay3.9的环境中验证本文适合在单机OpenShift环境安装RedHatQuay镜像仓库。另外《OpenShift4-安装ODF并部署红帽Quay(1Worker)》也可以在单节点部署。而《OpenShift4-安装ODF并部署红帽Quay(3Worker)》可以在3节点的集群上部署。文章
dawnsky.liu·2023-08-30 22:24

基于Docker部署Spark和MinIO Server

介绍使用Docker搭建Spark集群和MinIO云存储服务，并通过Spark访问MinIO，实现读写功能。
_吹灭读书灯_·2023-08-30 21:48

Hadoop学习笔记（六）——分布式文件系统

二体系结构和基本概念1特点：可拓展容错：有备份高可用：对于多个Master高吞吐：多台机器并发读2设计分布式文件系统思路1系统架构HDFS有多
L先生_c77f·2023-08-30 18:47

4、大数据系统组件

大数据生态圈首先是Hadoop，它是大数据系统的基础组件，很多其他组件都依赖它分布式存储、计算，它是Apache旗下一套开源软件平台，在这个平台之下还包括了HDFS（分布式文件系统
朗如行玉山_5b30·2023-08-30 16:08

Fastdfs集群搭建

一、简单介绍：FastDFS是一个开源的高性能分布式文件系统（DFS）。它的主要功能包括：文件存储，文件同步和文件访问，以及高容量和负载平衡。
LuMaman·2023-08-30 15:05

大数据Flink简介与架构剖析并搭建基础运行环境

Flink基础运行环境搭建Docker安装docker-compose文件编写创建并运行容器访问Flinkweb界面前言前面我们分别介绍了大数据计算框架Hadoop与Spark,虽然他们有的有着良好的分布式文件系统和分布式计算引擎
小沈同学呀·2023-08-30 13:28

springboot整合MinIO实现视频的分片上传/断点续传

目录1、前言2、数据库结构3、后端实现3.1、根据MD5获取是否存在相同文件Controller层Service层3.2、初始化一个上传任务Controller层Service层3.3、获取每个分片的预签名上传地址Controller层Service层3.4、合并分片Controller层Service层4、分片文件清理问题5、Demo地址1、前言之前做了一个慕课网上的仿短视频开发，里面有很多比较
Robinsyn_L·2023-08-30 11:21
上一页 24 25 26 27 28 29 30 31 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他