分布式文件系统MinIO

Ceph入门到精通-ceph二次开发开源协议考虑

Ceph是一个开源的分布式存储系统，它由多个组件组成，包括分布式对象存储（RADOS）、分布式块存储（RBD）和分布式文件系统（CephFS）等。
瓦哥架构实战·2023-12-15 07:40

【Hadoop】

组件配置文件启动进程备注HadoopHDFS需修改需启动NameNode(NN)作为主节点DataNode(DN)作为从节点SecondaryNameNode(SNN)主节点辅助分布式文件系统HadoopYARN
想当运维的程序猿·2023-12-15 07:43

MySQL和Minio数据备份

文章目录一、MySQL数据备份1.MySQL客户端2.数据增量备份3.数据增量还原4.数据全量备份5.数据全量还原二、Minio数据备份1.Minio客户端2.数据备份3.数据还原三、其他参考1.设置定时备份
yancqitcode·2023-12-15 05:14

持续集成交付CICD：CentOS 7 安装SaltStack

目录一、理论1.SaltStack二、实验1.主机一安装master2.主机二安装第一台minion3.主机三安装第二台minion4.测试SaltStack三、问题1.CentOS8如何安装SaltStack
cronaldo91·2023-12-15 05:16

德迅云眼,政企系统安全护航!!!!

直到德迅云安全截止2023年11月数据统计，平均每日防御拦截数十亿次攻击，其中拦截利用热门漏洞金蝶Apusic应用服务器目录遍历、MinIO敏感信息泄露（CVE-2023-28432）、泛微e-cologyXmlRpcServlet
德迅云安全--陈琦琦·2023-12-14 21:47

HarmonyOS分布式文件系统开发指导

分布式文件系统概述分布式文件系统（hmdfs，HarmonyOSDistributedFileSystem）提供跨设备的文件访问能力，适用于如下场景：●两台设备组网，用户可以利用一台设备上的编辑软件编辑另外一台设备上的文档
Android小贾·2023-12-14 15:02

minio的k8s的单机部署

minio的k8s的单机部署apiVersion:apps/v1kind:Deploymentmetadata:name:minionamespace:itsharespec:replicas:1selector
简单点了·2023-12-07 01:03

3.3 SaltStack 的部署和自动化配置

介绍如何设置SaltMinion，即客户端节点，以连接到主控节点。SaltSt
(～￣▽￣)～凤凰涅槃·2023-12-06 21:58

图说HDFS基本原理

英文原版作者：ManeeshVarshney,[email protected]是现在最受欢迎和被人们说熟知的分布式文件系统。
数据萌新·2023-12-06 18:40

大数据Hadoop分布式文件系统HDFS的两类节点NameNode和DataNode

HDFS集群有两类节点，并以管理者-工作者模式运行，即一个NameNode(管理者)和多个DataNode(工作者)。HDFS官方架构图一、NameNode（NN）——基于内存存储：不会和磁盘发生交换·只存在内存中·持久化——NameNode主要功能·接受客户端的读写服务·收集DataNode汇报的Block列表信息——NameNode保存metadata信息包括·文件owership和permi
A尚学堂Nancy老师·2023-12-06 15:56

3.3 SaltStack 的部署和自动化配置

介绍如何设置SaltMinion，即客户端节点，以连接到主控节点。SaltSt
(～￣▽￣)～凤凰涅槃·2023-12-06 09:44

中间件(9) : docker安装minio

参考:Docker安装MinIO详细步骤_怪咖@的博客-CSDN博客_docker安装minio1.下载minio镜像dockerpullminio2.创建文件夹mkdir-p/home/minio/datamkdir-p
Lxinccode·2023-12-06 08:37

比较 Apache Hive 和 Spark

Hive是一个运行在Hadoop分布式文件系统上
vvoennvv·2023-12-06 06:50

【读书笔记】《大数据技术体系详解：原理、架构与实践》03.分布式文件系统

这些文件形式的数据具有价值高、数据大、流式产生等特点，需要一个分布式文件系统存储它们，该文件系统应具有良好的容错性、扩展性和易用的API，而HDFS（HadoopDistributedFileSystem
粥一样温柔·2023-12-06 05:40

SpringBoot+MinIO实现minio部署和使用

Minio是一个go编写基于ApacheLicensev2.0开源协议的对象存储系统,是为海量数据存储、人工智能、大数据分析而设计，它完全兼容AmazonS3接口，十分符合存储大容量的非结构化数据从几十
程序小增·2023-12-06 04:34

分布式文件存储系统Minio，tuling，fox

MinIO|高性能，对Kubernetes友好的对象存储MinIOHighPerformanceObjectStorage—MinIOObjectStorageforLinux一分布式文件系统应用场景fastDFS
aiwokache·2023-12-06 01:28

基于minio，上传sql文件后，使用通用查询接口查询并返回

基于minio，上传sql文件后，使用通用查询接口查询并返回controller/***通用查询*/@ApiOperation(value="通用查询",notes="通用查询")@PostMapping
佬涛·2023-12-06 01:56

Linux搭建minio及mc客户端使用

Linux搭建minio一、minio下载二、minio配置三、minio启动四、mc客户端安装一、minio下载mkdir-p/usr/local/soft/minio/{run,config,data
这货，不靠谱·2023-12-05 15:37

k8s部署单机模式的minio

k8s部署单机模式的minio一、说明二、yaml内容三、步骤3.1创建资源3.2查看启动日志3.2查看svc并访问控制台一、说明项目使用minio，准备在k8s环境部署一套minio试用。
qq_44209563·2023-12-05 13:15

即时通讯源码

环境nginx+mysql5.7+php7.3+redis+jdk1.8+etcd、kafka、minio、ssdb数据库imweb、enterprise、datab
小九网创·2023-12-05 11:36

【go语言开发】Minio基本使用，包括环境搭建，接口封装和代码测试

本文主要介绍go语言使用Minio对象存储，首先介绍搭建minio，创建bucket等，然后讲解封装minio客户端接口，包括但不限于：上传文件，下载，获取对象url，最后测试开发的接口文章目录前言Miniodocker
猫哥说·2023-12-05 06:40

Hadoop

Hadoop的基本架构包括以下几个核心组件：HDFS（HadoopDistributedFileSystem）：它是一个高度容错性的分布式文件系统，能提供高吞吐量的数据访问，非常适合大规模数据集
编织幻境的妖·2023-12-05 06:31

Hadoop的介绍与安装

HDFS是一个分布式文件系统：引入存放文件元数据信息的服务器Namenode和实际存放数据的服务器Datanode，对数据进行分布式储存和读取。MapReduce是一个分布式
憨憨小白·2023-12-05 06:30

IPFS将颠覆HTTP在互联网的霸主地位？

IPFS是一个点对点的分布式文件系统（比特币是一种点对点的电子现金系统），作为文件系统嘛，当然可以用来存储文件，这个文件包括文本、图片、视频等等。
仁正·2023-12-05 02:55

【SpringBoot】Minio——文件上传与下载

目录结构下载和启动MinioSpringBoot测试文件上传总结扩展下载和启动Miniominio下载地址下载安装新建一个文件夹，把下载的文件拖过来，并新建一个data目录进入cmd运行下面命令出现下面的情况就是配置好了
无技术，不人生·2023-12-05 01:10

大数据的技术栈-逐步完善

目录1.hadoopa.HDFS分布式文件系统b.Yarn集群资源管理器c.MapReducesql引擎d.Impalasql引擎e.工具概观2.数据仓库知识a.Hive数据库1)HiveSql2)数据库结构
刘文钊1·2023-12-04 20:12

大数据生态圈及分布式文件系统HDFS实践-part1

Hadoop入门第一章大数据概述1.1大数据概念“人类正在从IT时代走向DT时代”。大数据（BigData）：指的是传统数据处理应用软件不足以处理（存储和计算）它们的大而复杂的数据集。主要解决，海量数据的存储和海量数据的运算问题。1.2大数据特征容量大，种类多，速度快，价值高1、容量（Volume）：数据的大小决定所考虑的数据的价值和潜在的信息微博，5亿用户，每天上亿条微博朋友圈，10亿用户，每天
落叶飘雪2014·2023-12-04 15:40

Java操作Hdfs(分布式文件系统)完成文件上传、下载和删除

Java操作Hdfs(分布式文件系统)文件上传实现创建Maven项目，项目命名Hadoop_hdfs导入pom.xml依赖4.0.0hadoophadoop0.0.1-SNAPSHOThadoop_learnorg.apache.hadoophadoop-client3.2.0
菜鸟小党·2023-12-04 15:39

HDFS和MapReduce综合实训：构建大数据处理应用

摘要：本文将介绍如何使用Hadoop分布式文件系统（HDFS）和MapReduce框架来构建大数据处理应用。
IbtnLisp·2023-12-04 15:09

【头歌实训】分布式文件系统 HDFS

文章目录第1关：HDFS的基本操作任务描述相关知识HDFS的设计分布式文件系统NameNode与DataNodeHDFS的常用命令编程要求测试说明答案代码第2关：HDFS-JAVA接口之读取文件任务描述相关知识
撕得失败的标签·2023-12-04 15:08

minio client配置

基本请求流程:1.获取授权web->服务端->ceph服务端=》授权的url 2.上传文件web->授权的url执行PUT请求一：java代码minio客户端版本:dependencies{ implementationio.minio
SongJingzhou·2023-12-04 12:07

大数据技术合集（持续更新）

0.大数据技术演变史（来自通信院）1.起源：Google的三驾马车1.1GFS1.2BigTable1.3MapReduce2.开源大数据文件、对象、块存储2.1分布式文件系统：HDFS、Ceph、GlusterFS
amuseme_lu·2023-12-04 05:39

CentOS7安装MiniO

目录1、简介2、安装2.1、Binary2.2、RPM（RHEL）就是红帽，CentOS就用这个2.3、DEB（Ubuntu/Debian）2.4、创建指定的目录并且将下载的安装包上传上去3、启动MiniO
爱上口袋的天空·2023-12-04 04:07

windows安装minio并使用脚本方式来启动minio服务

windows安装minio并使用脚本方式来启动minio服务需要以下步骤：首先，下载适用于Windows的minio二进制文件。
じ、Matrix·2023-12-04 00:40

用Java写一个王者荣耀游戏

目录sxt包BackgroundBulletChampionChampionDajiGameFrameGameObjectMinionMinionBlueMinionRedTurretTurretBlueTurretRedbeast
鹿其97·2023-12-03 21:22

大数据开发：HDFS Erasure Coding机制

Hadoop的分布式文件系统HDFS，其冗余备份机制，确保了数据存储的容错，但是同时也增加了冗余存储成本。今天的大数据开发分享，我们就来讲讲HDFSErasureCoding机制。
成都加米谷大数据·2023-12-03 14:29

【开源存储】glusterfs分布式文件系统部署实践

文章目录一、前言1、介绍说明2、术语说明3、冗余模式3.1、复制卷（Replication）3.2、纠删卷（ErasureCode）二、部署说明1、软件安装2、集群部署2.1、前置准备2.2、部署过程a、添加节点b、配置存储c、创建glusterfs卷d、客户端挂载3、常用操作3.1、扩展卷（add-brick）3.2、收缩卷（remove-brick）三、Q&A1、volumecreate:re
Luxf0·2023-12-03 05:25

【开源存储】minio对象存储部署实践

文章目录一、前言1、介绍说明2、部署方式3、冗余模式4、约束限制4.1、规格参数4.2、API支持a、minio不支持的AmazonS3BucketAPIb、minio不支持的AmazonS3ObjectAPI
Luxf0·2023-12-03 05:52

php前端如何输出图片流,后端返回数据图片流，前端解析展示

RequestMapping(value="/baseinfo")publicvoidinfoHe(HttpServletResponseresponse){InputStreamin=null;try{//从minio
陈舟医生·2023-12-02 21:05

minio安装及使用

文章目录前言minio安装下载并赋予读写权限执行新建文件目录启动查看日志minio使用（java+springboot使用）pom配置文件config类controller类前言前几天弄一个报告文件生成和下载的功能
qq_36532060·2023-12-02 19:19

主要分布式文件系统架构对比分析：GFS vs. Tectonic vs. JuiceFS

为了满足不断增长的存储需求，分布式文件系统作为动态且可扩展的解决方案应运而生。
沃趣数据库管理平台·2023-12-02 00:34

IPFS：下一代分布式文件系统(filenet)

一概述星际文件系统是一种点对点的分布式文件系统，旨在连接所有有相同的文件系统的计算机设备。
壹五叁说IPFS·2023-12-01 19:24

Hadoop运行模式及目录结构

文章目录Hadoop运行模式本地模式伪分布式模式完全分布式模式Hadoop目录结构配置文件说明默认配置文件：自定义配置文件：Hadoop运行模式本地模式这种模式在一台单机上运行，没有分布式文件系统，而是直接读写本地操作系统的文件系统
撕得失败的标签·2023-12-01 12:23

分布式文件系统FastDFS

FastDFS是什么FastDFS是一款开源的轻量级分布式文件系统：纯C实现，支持Linux、FreeBSD等UNIX系统类googleFS，不是通用的文件系统，只能通过专有API访问，目前提供了C、Java
会踢球的程序源·2023-12-01 12:00

SpringCloud微服务实战——搭建企业级开发框架（二十九）：集成对象存储服务MinIO+七牛云+阿里云+腾讯云

目前，很多云服务商提供了存储的云服务，比如阿里云OSS、腾讯云COS、七牛云对象存储Kodo、百度云对象存储BOS等等、还有开源对象存储服务器，比如FastDFS、MinIO等。  
全栈程序猿·2023-12-01 11:55

[Ubuntu 18.04] RK3399搭建NFS服务实现共享目录

NFS（NetworkFileSystem）是一种分布式文件系统协议，允许远程计算机通过网络访问存储在另一台计算机上的文件。
嵌入式逍遥·2023-12-01 07:15

2019-02-01

大数据技术的产生以及发展谷歌的三篇论文分布式文件系统GFS大数据分布式计算框架mapreduceNoSQL数据库系统BigTable大数据计算离线计算——批处理计算（MapReduce、Spark）实时计算
奔跑的风2019·2023-12-01 04:34

FastDFS实现本地文件服务器

FastDFS是一个开源的轻量级分布式文件系统，它对文件进行管理，功能包括：文件存储、文件同步、文件访问（文件上传、文件下载）等，解决了大容量存储和负载均衡的问题。
user__kk·2023-12-01 03:02

一篇文章，掌握所有开源数据库的现状

本次分享聚焦于数据库既结构化数据存储OLTP及NoSQL领域，不会涉及OLAP、对象存储、分布式文件系统。1开源RDBMS与互联网的崛起很长时间以来，关系型数据库一直是大公司的专利，市场被
M偶遇在沙漠·2023-12-01 01:00

HDFS简介

统一管理分布在集群上的文件系统称为分布式文件系统。而一旦在系统中，引入网络，就不可避免地引入了所有网络编程的复杂性，例如挑战之一是如果保证在节点不可用的时候数据不丢失。  
武汉小旭旭·2023-11-30 20:40
上一页 7 8 9 10 11 12 13 14 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他