E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
分布式文件系统MinIO
轻松搭建:用 Docker 快速配置强大的
MinIO
存储
前言
MinIO
是一个开源的对象存储服务器,可以通过Docker进行部署。这个简单的指南将帮助你快速开始使用
MinIO
。步骤:1.安装Docker确保在你的机器上安装了Docker。
CodeArtisanX
·
2023-12-21 15:42
docker
容器
运维
hdfs如何把一整个目录都复制到本地, 包括目录中的子目录和子文件
在Hadoop
分布式文件系统
(HDFS)中,你可以使用hadoopfs-copyToLocal命令将整个目录复制到本地。该命令支持递归复制,包括目录中的子目录和子文件。
言之。
·
2023-12-21 14:27
hdfs
hadoop
大数据
Spring Boot +
MinIO
实现文件切片极速上传技术
文章目录1.引言2.文件切片上传简介3.技术选型3.1SpringBoot3.2
MinIO
4.搭建SpringBoot项目5.集成
MinIO
5.1配置
MinIO
连接信息5.2
MinIO
配置类6.文件切片上传实现
IT·陈寒
·
2023-12-21 06:44
SpringBoot框架学习
微服务架构设计
Java面试技巧
spring
boot
后端
java
GFS
分布式文件系统
gfdglusterFS开源的
分布式文件系统
存储服务器客户端以及网络(NFS/samba)网关传统式老的分布式系统是依赖于元服务器,元服务器保存存储节点的目录树信息。
早上的星星
·
2023-12-20 20:22
mysql
数据库
SeaweedFS介绍安装集群部署总结
什么是SeaweedFSSeaweedFS是一种简单的、高度可扩展的
分布式文件系统
。SeaweedFS是一个非常优秀的由go语言开发的分布式存储开源项目。
编程无霸哥
·
2023-12-20 17:07
HDFS工作机制和原理
HDFS是一种分部式的文件系统,在他出现以前就已经存在了很多中
分布式文件系统
,但是他们都是部署在服务器上,需要高的POSIX接口,同时他们默认服务器是稳定的可以提供大量资源。
Tim在路上
·
2023-12-20 15:36
ceph存储服务结构介绍以及速度优化的方法
以下是这些存储服务的简要介绍和结构:CephFS(Ceph文件系统):结构:CephFS是Ceph提供的
分布式文件系统
,它基于RADOS(可扩展自动分布式对象存储)构建。
小果运维
·
2023-12-20 14:19
ceph
ceph
存储
分布式
优化
速度
el-form与el-upload结合上传带附件的表单数据(后端篇)
1.写在之前本文采用SpringBoot+
MinIO
+MySQL+MybatisPlus技术栈,参考ruoyi-vue-pro项目。
honor_zhang
·
2023-12-20 10:17
java
spring
boot
MinIO
Docker 快速安装
MinIO
sudomkdir-p/app/
minio
/datasudochmod-R777/app/
minio
dockerrun\-p9000:9000\-p9090:9090\--name
minio
\--restart
再ZzZ
·
2023-12-20 10:29
docker
linux
服务器
MinIO
如何在本地Docker中部署
MinIO
服务并实现远程访问管理界面
文章目录前言1.Docker部署
MinIO
2.本地访问
MinIO
3.Linux安装Cpolar4.配置
MinIO
公网地址5.远程访问
MinIO
管理界面6.固定
MinIO
公网地址前言
MinIO
是一个开源的对象存储服务器
灰灰快醒醒
·
2023-12-20 00:24
docker
容器
运维
go-fastdfs
go-fastdfs是一个基于http协议的
分布式文件系统
,它基于大道至简的设计理念,一切从简设计,使得它的运维及扩展变得更加简单,它具有高性能、高可靠、无中心、免维护等优点。
芋头哥
·
2023-12-19 20:41
中间件
docker
go-fastdfs
Docker部署
MinIO
对象存储服务器结合内网穿透实现远程访问
文章目录前言1.Docker部署
MinIO
2.本地访问
MinIO
3.Linux安装Cpolar4.配置
MinIO
公网地址5.远程访问
MinIO
管理界面6.固定
MinIO
公网地址前言
MinIO
是一个开源的对象存储服务器
阿四啊
·
2023-12-19 19:56
内网穿透_cpolar
docker
服务器
容器
从零开始了解大数据(三):HDFS
分布式文件系统
篇
目录前言一、HDFS
分布式文件系统
基础1.数据与元数据2.分布式存储系统的核心属性3.HDFS的设计目标4.HDFS的重要特性二、HDFSShell操作1.HDFSShell命令行简介2.HDFSShell
橘子-青衫
·
2023-12-19 13:23
大数据
从零开始了解大数据
大数据
数据分析
数据挖掘
hadoop
短视频矩阵系统多账号搭建技术源码(源头3年开发者技术独立搭建)
通过使用
分布式文件系统
(例如AWSS3)和自动化上传工具,可以实现批量上传功能,并通过设置定时任务和
云罗互动yx898978
·
2023-12-19 13:52
短视频矩阵源码
矩阵
矩阵源码
短视频矩阵源码
docker在线安装
minio
1、下载最新
minio
dockerpull
minio
/
minio
2、在宿主机创建/usr/local/data/
minio
docker/config和/usr/local/data/
minio
docker
巴赫旧约666
·
2023-12-19 12:14
docker
容器
运维
MinIo
的操作与使用和避坑
SpringBoot项目)思路1:尝试从Maven仓库中替换该jar包思路2:改造有问题的jar包踩坑2:磁盘不足导致上传文件失败四、封装一些简单的方法官方API文档:Documentation官方中文文档:
MinIO
小强签名设计
·
2023-12-19 09:52
Java
Minio
S3
对象存储
springboot2.X手册:放弃fastdfs,整合
Minio
做文件服务器真香
什么是
Minio
Minio
是Apcche旗下的一款开源的轻量级文件服务器,基于对象存储,协议是基于ApacheLicensev2.0,开源可用于商务。
程序员闪充宝
·
2023-12-19 07:46
分布式存储
java
openstack
cxf
hdfs
SpringBoot 之
minio
分布式详解,部署整合!
1、前言在javaweb编程中,目前微服务体系的框架越来越流行了,随着服务的拆分,可能我们的项目的细粒度,会变得很细。一般的项目,基本上都会涉及到文件的存储。对于文件的存储,这个在微服务的体系下,我们可以将文件抽取出一个独立的文件微服务。然后提供相应的api(上传,下载,删除)等......对于独立的文件微服务,我们可以根据项目的需求,使用策略模式,整合多个文件服务器,例如:阿里云Oss、fast
Java程序媛不睡觉
·
2023-12-19 07:38
spring
boot
分布式
java
【微服务】springboot整合
minio
详解
目录一、前言二、
Minio
概述2.1
Minio
简介2.1
Minio
特点三、
Minio
环境搭建3.1部署过程3.1.1拉取镜像3.1.2启动容器3.1.3访问web页面四、
Minio
基本使用4.1基本概念
逆风飞翔的小叔
·
2023-12-19 07:04
微服务架构与设计
java使用minio
minio使用详解
spring集成minio
minio详解
docker搭建minio
Linux端口开放-
minio
外网访问不了
二、查看你的服务的端口号是否对外开放。命令:1.查询已经对外开放的端口netstat-anp2.查询指定端口是否已经开放firewall-cmd--query-port=3306/tcp返回yes/no。此时也有可能返回firewalldisnotrunning,此时需要打开防火墙在开放端口。开放端口号命令:添加指定需要开放的端口:firewall-cmd--add-port=3306/tcp--
wow~~~~
·
2023-12-19 07:16
linux
服务器
网络
大数据技术11:Hadoop 原理与运行机制
前言:HDFS(HadoopDistributedFileSystem)是Hadoop下的
分布式文件系统
,具有高容错、高吞吐量等特性,可以部署在低成本的硬件上。
Java架构何哥
·
2023-12-18 21:56
大数据治理
hadoop
大数据
分布式
Hadoop分布式系统基础框架
SpringBoot集成分布式对象存储(分布式文件)
MinIO
一、什么是
MinIO
?一句话:
MinIO
是高性能、可扩展、云原生支持、操作简单、开源的分布式对象存储产品。
小虎哥的技术博客
·
2023-12-18 19:11
minio
8.x版本设置policy桶策略
5.java代码设置桶策略总结前言
minio
是一个文件存储服务器,他实现了亚马逊s3协议,所以在文件管理管理上有着更加细粒的权限划分,同时它有着部署简便
满小超的代码世界
·
2023-12-18 17:54
springboot
java
docker 安装
minio
教程
参考:https://blog.csdn.net/weixin_43888891/article/details/122021704下载最新版
Minio
镜像dockerpull
minio
/
minio
等同于
内心的一片海
·
2023-12-18 16:42
docker
容器
运维
Hadoop Single Node Cluster的安装
安装位置设置SSH无密码登录安装hadoop下载安装设置hadoop环境变量修改hadoop配置设置文件设置core-site.xml设置YARN-site.xml设置mapred-site.xml设置HDFS
分布式文件系统
创建并格式化
艾醒(AiXing-w)
·
2023-12-18 16:50
hadoop
hadoop
大数据
分布式
Ceph存储
没有冗余,不具备容错功能raid1100%容错raid5最少三块性能不如raid0容错不如raid1raid0+raid1性能+容错raid时代-->分布式存储(ceph)时代1PB级别用raid很难实现
分布式文件系统
文件系统管理的物理存储资源不一定直接连接在本地节点上
叫我家驹范
·
2023-12-18 15:15
存储
王者荣耀游戏
sxtBackground类Bullet类Champion类ChampionDaji类GameFrame类GameObject类
Minio
n类
Minio
nBlue类
Minio
nRed类Turret类TurretBlue
无趣丶v
·
2023-12-18 14:12
游戏
SpringBoot 2.2.5 整合
Minio
,实现文件云存储功能,附带整理好的工具类
说明
Minio
可以做为云存储的解决方案用来保存海量的图片,视频,文档。由于采用Golang实现,服务端可以工作在Windows,Linux,OSX和FreeBSD上。
天不生我小金
·
2023-12-18 10:45
docker初探及
minio
测试
docker安装以centos为例,官方推荐centos7以上https://docs.docker.com/engine/install/centos/推荐安装方式指定源repository$sudoyuminstall-yyum-utils$sudoyum-config-manager\--add-repo\https://download.docker.com/linux/centos/do
X作业写完了吗
·
2023-12-18 07:50
minio
异常处理:S3 API Requests must be made to API port
1、创建
minio
服务时候需要映射出console端口和api端口,指定console端口和api端口dockerrun-p9000:9000-p9099:9099--name
minio
-d--restart
kingbal
·
2023-12-18 05:36
Java
CentOS
java
开发语言
GFS
分布式文件系统
GFS
分布式文件系统
:全称:gfdglusterFS开源的分布式的文件系统存储服务器客户端以及网络(NFS/samba)网关传统式老的分布式系统元服务器,元服务器保存存储节点的目录树信息。
DDYYmmm
·
2023-12-18 05:26
运维
Hadoop (海量数据存储及计算) 基本概念
[1]Hadoop实现了一个
分布式文件系统
(HadoopDistributedFileSystem),简称HDFS。
ronmy
·
2023-12-18 02:51
大数据
Hadoop
大数据
海量数据
存储
分布式文件系统
之HDFS
前言一、HDFS简介1.1HDFS产出背景及定义1)HDFS产生背景先给大家介绍一下什么叫HDFS,我们生活在信息爆炸的时代,随着数据量越来越大,在一个操作系统存不下所有的数据,那么就分配到更多的操作系统管理的磁盘中,但是不方便管理和维护,迫切需要一种系统来管理多台机器上的文件,这就是分布式文件管理系统。HDFS只是分布式文件管理系统中的一种。2)HDFS定义HDFS(HadoopDistribu
僖僖cc
·
2023-12-17 17:41
hdfs
hadoop
大数据
从传统型数据库到非关系型数据库
其本质是一个具有数据存储功能的复杂系统软件,数据库最终把数据保存在计算机硬盘,但数据库并不是直接读写数据在硬盘,而是中间隔了一层操作系统,通过文件系统把数据保存为本地文件系统的数据文件;我们讲过Hadoop,
分布式文件系统
僖僖cc
·
2023-12-17 17:38
数据库
nosql
TL6478(TI TMS320C6748 DPS)EVM开发板技术讲座 第三讲:USB 驱动程序安装
通过
MiniO
TG转换头将评估板OTG接口和PC机USB接口连接,然后在PC机中安装USB驱动程序,具体驱动程序是在产品资料"Demo\HostApp\USB_DEV_BULK\driver\”目录下installer_x64
隨意的風
·
2023-12-17 14:30
DSP)
单片机
stm32
嵌入式硬件
Linux系统中部署
minio
服务、开启反向代理、二级域名SSL加固
链接:B站1小时-配置指导视频:一、创建
minio
文件目录(/project/
minio
)二、下载
Minio
wgethttps://dl.min.io/server/
minio
/release/linux-amd64
Code攻城狮
·
2023-12-17 12:01
linux
ssl
运维
【docker】部署
minio
对象存储并用rclone同步
docker部署
minio
对象存储并用rclone同步本文首发于❄️慕雪的寒舍1.什么是
minio
?
minio
是一个开源的对象存储服务器,兼容S3协议。
慕雪华年
·
2023-12-17 12:04
Docker
&
Nas
docker
容器
运维
高效存储大规模数据的方法与实现
分布式文件系统
分布式文件系统
是一种常见的大数据存储解决方案。它将数据划分为多个块,并将这些块存储在不同的机器上。这种方式可以提高数据的可靠性和可扩展性。
静谧星光c
·
2023-12-17 11:47
大数据
2018-06-14
hadoop.apache.org/2.Hadoop的狭义和褒义认识:狭义:软件(HDFS、MapReduce、Yarn)褒义:以Hadoop为主的生态圈3.Hadoop版本Hadoop1.x:HDFS:
分布式文件系统
hoose
·
2023-12-17 09:26
PDF转为图片
起初是用
分布式文件系统
,将pdf以流的形式直接传递给前端,前端使用canvas将dpf转为图片,再用jQuery、turn.js进行3
老攀呀
·
2023-12-17 04:56
Java
pdf
NFS远程文件共享系统!
NFS(NetworkFileSystem,网络文件系统)是一种
分布式文件系统
,允许用户通过网络访问远程主机上的文件。
M乔木
·
2023-12-16 23:31
日常分享
开发语言
鸿蒙系统
linux
在centos在部署分布式文件存储系统
Minio
:https://pan.baidu.com/s/14NhCk1SQZEHqzMubpUD0eQ提取码:xyxy0.应用场景电商网站:海量商品图片视频网站:海量视频文件网盘:海量文件社交网站:海量图片
Minio
努力努力ing!
·
2023-12-16 11:11
Linux
centos
分布式
分布式文件存储系统
Minio
使用总结
分布式文件存储系统
Minio
使用总结1.
分布式文件系统
应用:1.1、Minlo介绍:Minlo是一个基于ApacheLicensev2.0开源协议的对象存储服务。
北执南念
·
2023-12-16 11:40
微服务
分布式
分布式文件系统
及
Minio
配置及测试
Minio
支持大量视频,文件类存储。小项目,不是特别重要的,可以选择云计算厂家,但是类似私密文件,用户的私密信息不适合放在云计算厂家里。收费的!存储和访问都要花钱!因此采用
minio
。
happystudy_neu
·
2023-12-16 11:04
微服务
分布式
java
分布式文件存储系统
minio
了解下
什么是
minio
minio
是一个基于ApacheLicensev2.0开源协议的对象存储服务。
我是三叔
·
2023-12-16 11:01
中间件
分布式
文件存储
minio
中间件
java
springboot
数据库
Springboot
Minio
最新版大文件下载
上节我们说了
Minio
怎么大文件上传,我们是进行了分段上传,然后合并处理,感兴趣的可以去这篇文章,Springboot
Minio
最新版大文件上传-CSDN博客那么今天的主题就是大文件下载,再大文件就需要分段下载
渣渣洒泪成长记
·
2023-12-16 06:55
spring
boot
后端
java
MinIO
快速入门
1.创建springboot项目对应pom文件如下heima-leadnews-testcom.heima1.0-SNAPSHOT4.0.0
minio
-demo88io.
minio
minio
7.1.0org.springframework.bootspring-boot-starter-weborg.springframework.bootspring-boot-starter-test2
上官阿坤
·
2023-12-16 00:43
java
vue项目,使用js+
Minio
实现文件的上传和下载
1什么是
MinIO
MinlO是一个基于ApacheLicensev2.0开源协议的对象存储服务。它兼容亚马逊S3云存储服务接口,非常适合于存储大容量非结构化的数据。
it_czh
·
2023-12-16 00:07
vue.js
前端
javascript
大数据学习(一)-------- HDFS
2、hadoophadoop有三个核心组件:hdfs:
分布式文件系统
mapreduce:分布式运算编程框架yarn:分布式资源调度平台3
大数据流动
·
2023-12-15 21:01
Linux Centos8 安装
Minio
开机启动并Nginx代理访问
查看官方文档(
MinIO
)进行操作安装
minio
#下载wgethttps://dl.min.io/server/
minio
/release/linux-amd64/
minio
#创建目录sudomkdir
搬砖的工人
·
2023-12-15 20:12
linux
linux
centos
服务器
上一页
6
7
8
9
10
11
12
13
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他