分布式文件系统MinIO

基于VuePress搭建知识库

准备环境Nginx1.19.0VuePress1.xMinioRELEASE.2022-02-16T00-35-27Zvuepress-theme-vdoing主题安装VuePress根据官网步骤即可#
枫叶梨花·2023-08-25 06:37

linux搭建minIO对象存储服务,springBoot整合

minIO服务搭建1.创建安装目录mkdir-p/usr/local/minio2.进入安装目录cd/usr/local/minio3.下载安装包(wget如果下载太慢,可以手动下载并上传安装包)wgethttps
夏七丿·2023-08-25 06:02

分布式系统与微服务的区别是什么？

典型的分布式系统包括数据库集群、分布式文件系统、分布式计算等。微服务：微服务是一种软件
众乐乐_2016·2023-08-25 06:59

Minio集成工具类

填好aksk，endpoint后运行importio.minio.*;importio.minio.errors.
Anakki·2023-08-25 02:30

Quickstart: MinIO for Linux

单节点部署教程1.安装Minio服务端//wget下载二进制文件wgethttps://dl.min.io/server/minio/release/linux-amd64/minio//赋予权限chmod
Anakki·2023-08-25 02:59

docker安装minio

下载指定版本minio镜像dockerpullminio/minio:RELEASE.2023-03-24T21-41-23Z创建挂载文件夹mkdir-p/opt/minio/datamkdir-p/opt
筠··2023-08-24 20:47

SpringBoot集成MinIO

今天我这里主要讲解SpringBoot如何集成MinIO。
路在何方い·2023-08-24 10:34

数据湖是什么

2.架构灵活可扩展数据湖采用扁平化的分布式文件系统存储数据,这种架构具有很强的扩展性。3.多种数据格式数据湖能够存储多种格式的数据,包括日志、CSV、JSON、视频等不同格式。
diannao720·2023-08-24 09:09

minio更换端口启动

先cd到minio安装目录nohup.
香精煎鱼香翅捞饭·2023-08-23 22:43

minio 图片存储服务器的部署和使用

一、下载安装官网地址:https://minio.io/可以根据系统下载需要的版本，我这边下载的是windows安装程序https://dl.min.io/server/minio/release/windows-amd64
天空的极限·2023-08-23 22:28

【数据治理】WKC+Minio+Airflow --20230821（链接）

https://blog.csdn.net/m0_46629123/article/details/132413616
i see the future·2023-08-23 20:15

最详细的大数据之Hadoop分布式系统架构解析！没有之一！

通过对Hadoop分布式计算平台最核心的分布式文件系统HDFS、MapReduce处理过程，以及数据仓库工具Hive和分布式数据库H
大数据学习01·2023-08-23 18:22

iOS如何将闪退日志符号化

Minion这篇文章会介绍定位闪退的几种方法，由易到难进行介绍。当你手里关于闪退的信息越多，解决就越简单，反之，就会更难。
码工人生·2023-08-23 16:52

腾讯大佬三年大制作，大数据Hadoop和Spark的大集合

本书围绕Hadoop和Spark这两个主流技术进行讲解，主要内容包括Hadoop环境配置、分布式文件系统HDFS、分布式计算框架MapReduce、资源调度框架YARN与Hadoop新特性、大数据数据仓库
金光闪闪耶·2023-08-23 15:47

Springboot整合minio组件-分布式文件存储

一、快速开始Minlo说明：Minio是Apcche旗下的一款开源的轻量级文件服务器，基于对象存储，协议是基于ApacheLicensev2.0，开源可用于商务。
青春不散场·2023-08-23 14:08

minio+thumbor

minio安装wgethttps://dl.min.io/server/minio/release/linux-amd64/miniochmod+xminioMINIO_ROOT_USER=adminMINIO_ROOT_PASSWORD
昱凯·2023-08-23 11:26

头条移动端项目Day02—— app端文章查看、静态化freemarker、分布式文件系统minIO

❤作者主页：欢迎来到我的技术博客❀个人介绍：大家好，本人热衷于Java后端开发，欢迎来交流学习哦！(￣▽￣)~*如果文章对您有帮助，记得关注、点赞、收藏、评论⭐️⭐️⭐️您的支持将是我创作的动力，让我们一起加油进步吧！！！文章目录1、文章列表加载1.1需求分析1.2表结构分析1.3导入文章数据库1.3.1导入数据库1.3.2导入对应的实体类1.4实现思路1.5接口定义1.6功能实现1.6.1导入h
Java技术一点通·2023-08-22 22:21

minio对象存储服务实践

MinIO作为文件服务器挺好用，还能进行权限控制，支持匿名下载挺很好用，简单好配置部署也支持docker部署，不过docker部署在进行二次设置(比如设置某个目录匿名下载)时会麻烦些，推荐采用二进制方式安装
李白唱着歌去镇上·2023-08-22 20:22

Last Week in Milvus

#26342#26365#26341#25154持续优化报错信息，对解析表达式、查询失败、grpc报错、minio调用报错做了整理。#26407在
·2023-08-22 17:27

MinIO线上扩容实战

硬件投入肯定是随着业务的增长而增长，这就要求中间件平台必须提供水平伸缩机制，MinIO对象存储服务也不例外，本文就详细介绍MinIO的扩容。
虚无火星车·2023-08-22 16:13

minio部署

minio部署限制-硬盘数量至少为4，保证纠删码工作需求。
传说中的健·2023-08-22 08:05

velero和minio实现k8s数据的备份和恢复

一、概述:Velero（以前称为HeptioArk）为您提供了备份和恢复Kubernetes集群资源和持久卷的工具，可以安全的备份、恢复和迁移Kubernetes集群资源和持久卷。Velero主要提供以下能力备份群集并在丢失时进行还原。将群集资源迁移到其他群集。将生产群集复制到开发和测试群集。Velero支持备份存储AzureBloB存储GoogleCloud存储AWSS3及兼容S3的存储（比如：
大虾别跑·2023-08-22 07:25

k8s之nodes

概念：Node是Kubernetes中的工作节点，最开始被称为minion。一个Node可以是VM或物理机。
Lamb!·2023-08-22 06:29

CVE-2023-28432-MinIO集群模式信息泄露漏洞流量分析

简介MinIO是一个开源对象存储系统。
12306Br0·2023-08-22 02:32

docker安装minio

docker安装miniodockerrun-p9010:9000-p9011:9090--net=host--nameminio234-d--restart=always-e"MINIO_ACCESS_KEY
默金……·2023-08-21 16:46

第7章 高性能门户首页构建

mini商城第7章高性能门户首页构建一、课题高性能门户建设二、回顾1、了解文件存储系统的概念2、了解常用文件服务器的区别3、掌握Minio的应用三、目标1、OpenResty百万并发站点架构OpenResty
Eclipse_2019·2023-08-21 15:14

minio分布式搭建出现的问题

第一个问题Unabletoread‘format.json’fromhttp://110.110.110.30:9000/mnt/data2:clienttime2020-07-0700:39:35+0000UTCistooapartwithservertime2020-07-0610:52:19.617966442+0000UTCUnabletoread‘format.json’fromhttp
乐享极致·2023-08-20 22:26

hdfs 中chunk_HDFS写文件过程分析

引自：http://shiyanjun.cn/archives/942.htmlHDFS是一个分布式文件系统，在HDFS上写文件的过程与我们平时使用的单机文件系统非常不同，从宏观上来看，在HDFS文件系统上创建并写一个文件
不喝酒的阿蓝·2023-08-20 21:10

HDFS源码解析

Hadoop分布式文件系统（HDFS）是Hadoop生态系统的核心组件之一，它是一个可扩展的分布式文件系统，用于存储大量数据。本文将对HDFS的源代码进行解析，以便更好地理解其工作原理。
Al leng·2023-08-20 21:39

听阿里P7工程师只分七步讲解HDFS搭建

——分布式文件系统（GFS），可用于处理海量网页的存储——分布式计算框架MAPREDUC
Python大数据工程师·2023-08-20 20:12

第6章 分布式文件存储

mini商城第6章分布式文件存储一、课题分布式文件存储二、回顾1、理解Oauth2.0的功能作模式2、实现mini商城项目的权限登录三、目标1、了解文件存储系统的概念2、了解常用文件服务器的区别3、掌握Minio
Eclipse_2019·2023-08-20 18:17

对象存储服务MinIO

MinIO基于ApacheLicensev2.0开源协议的对象存储服务，可以做为云存储的解决方案用来保存海量的图片，视频，文档。
零维展开智子·2023-08-20 18:46

6.824分布式系统[2]-GFS案例学习

准备工作阅读：GFS论文背景GFS是Google在2003年发出的经典论文，其作为分布式文件系统,实际应用在Google的MapReduce框架实现中,作为原始数据和最终结果存储的基础服务。
唯识相链2·2023-08-20 11:49

腾讯云下一代CDN -- EdgeOne加速MinIO对象存储

省流使用MinIO作为EdgeOne的源站。
野草arthas·2023-08-20 10:30

通过docker安装单机版minio简单测试br通过s3存储备份恢复数据

作者：tidb菜鸟一只原文来源：https://tidb.net/blog/61d4adc0一、首先通过docker安装minio以下是最新版，有坑，建议装2021版1.拉取docker镜像dockerpullminio
TiDB 社区干货传送门·2023-08-20 09:10

C++ 网络编程项目fastDFS分布式文件系统（四）-fastCGI项目相关技术以及linux搜狗输入法相关问题。

目录1.Nginx作为web服务器处理请求2.http协议复习Get方式提交数据Post方式提交数据3.fastCGI3.1CGI3.2fastCGI3.3fastCGI和spawn-fcgi安装1.安装fastCGI2.安装spawn-fcgi3.4nginx&&fastcgi4其他知识点1.fastCGI环境变量-fastcgi.conf2.客户端使用Post提交数据常用方式3.strtol函
cat_fish_rain·2023-08-20 06:14

C++ 网络编程项目fastDFS分布式文件系统（三）-Nginx部分

目录1.一些基本概念1.1Nginx初步认识1.2正向/反向代理1.3域名和IP2.Nginx安装和配置2.1安装2.2配置3.Nginx的使用3.1部署静态网页3.2反向代理和负载均衡4课外知识导读1.URL和URI编辑2.DNS解析过程1.一些基本概念1.1Nginx初步认识1.Nginx介绍enginex俄罗斯开源的框架c语言Tengine-淘宝基于nginx修改的2.Nginx能干什么?作
cat_fish_rain·2023-08-20 06:44

C++ 网络编程项目fastDFS分布式文件系统（五)--nginx+fastdfs

目录1.文件上传下载流程2.Nginx和fastDFS的整合3.数据库表3.1数据库操3.2数据库建表1.文件上传下载流程fileID需要是一个哈希来判定。2.文件下载流程3.优化优化思路:直接让客户端连接fastDFS的存储节点,实现文件下载举例,访问一个url直接下载:http://192.168.247.147/group1/M00/00/00/wKj3k1tMBKuARhwBAAvea_O
cat_fish_rain·2023-08-20 06:13

HDFS的小文件影响及解决办法

HadoopDistributedFileSystem(HDFS)是用于存储和处理大规模数据的分布式文件系统。然而，HDFS中的小文件可能会对系统性能和资源利用产生一些影响。
贾斯汀玛尔斯·2023-08-20 04:33

扫盲：Hadoop分布式文件系统（HDFS）基础概念讲解！

本文将讨论Hadoop分布式文件系统（HDFS）的基本概念以及管理HDFS的十大HadoopShell命令。HDFS是ApacheHadoop框架的底层文件系统，是一个分布式存储框架，跨越数千种商用
金乐笑·2023-08-20 02:09

Nanopore：使用albacore进行basecalling

使用NanoporeMinION进行单分子DNA测序，产出的结果是fast5文件，我拿到的结果中有400多个数字编号的件夹，每个文件夹里面4000个fast5文件，即一共160万条reads，现在要做basecalling
bioinfx·2023-08-20 01:16

实现fluentd采集docker的日志输出到minio

需求实现采集日志到mino以容器的id或者name为文件夹进行分别存储参考的网站https://my.oschina.net/xiaominmin/blog/1796742https://docs.fluentd.org/buffer/file#parameters用到的插件编写fluent.conf，使其支持不同容器文件写到不同的文件夹https://github.com/tagomoris/f
sunshine2853·2023-08-20 00:09

FastDFS文件管理知识点+案例分析

一介绍FastDFS原理FastDFS开源分布式文件系统由C语言编写实现,可以通过专有API访问，目前提供了C、Java和PHPAPI。
天雨编程·2023-08-19 17:36

Hadoop之HDFS

HDFS全称HadoopDistributedFileSystem-Hadoop分布式文件系统，是Hadoop项目的核心子项目，对海量数据进行进行存储与管理HDFS存储块为128M现在HDFS的block
lurenjia·2023-08-19 12:34

大数据及软件教学与实验专业实训室建设方案

2.数据存储和管理技术：介绍常见的数据存储和管理技术，如关系型数据库（如MySQL、Oracle）、分布式文件系统
武汉唯众智创·2023-08-19 09:56

Minio入门教学

Minio文件存储系统以往的项目，用的比较多的OSS服务是腾讯云和阿里云的存储服务，最近的几个项目，普遍要使用Minio,所以我在开发服务器和测试服务器上都装上了minio.一、首先minio的安装采用
闪耀太阳a·2023-08-19 05:10

大数据存储技术选型

大数据存储技术包括以下几种主要技术：分布式文件系统（DistributedFileSystems）：代表技术：HadoopDistributedFileSystem(HDFS)、GoogleFileSystem
冷酷无情小帅哥·2023-08-19 03:41

hadoop fs、hadoop dfs、hdfs fs、hdfs dfs区别

(1)fs是一个通用的文件系统可以指向任何的文件系统如local，HDFS等，而dfs是分布式文件系统，是针对hdfs的（经博主验证，hdfsdfs也能用于操作local）。
Code_LT·2023-08-18 22:04

Golang使用MinIO

最近在使用Golang做了一个网盘项目（学习），文件存储一直保存在本地（各厂商提供的oss贵），所以就在思考怎么来处理这些文件，类似的方案很对hdfs、fastdfs，但这其中MinIO是最近几年比较火热的一个项目
HumbleSwage·2023-08-18 19:51

最简单的文件上传-spring-file-storage

SpringFileStorage工具几乎整合了市面上所有的OSS对象存储平台，包括本地、FTP、SFTP、WebDAV、阿里云OSS、华为云OBS、七牛云Kodo、腾讯云COS、百度云BOS、又拍云USS、MinIO
天雨编程·2023-08-18 14:59
上一页 26 27 28 29 30 31 32 33 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他