分布式文件存储服务

架构 - 理解架构的演进

架构-理解架构的演进架构演进初始阶段的网站架构应用服务和数据服务分离使用缓存改善网站性能使用应用服务器集群改善网站的并发处理能力数据库读写分离使用反向代理和CDN加上网站相应使用分布式文件系统和分布式数据库使用
小小兔在普陀山走神啊·2023-12-31 00:30

K8s部署Minio使用NFS持久化存储

一、介绍Minio是一款高性能的对象存储服务器，它兼容AmazonS3API。它的设计目的是为了提供云存储服务的性能和可扩展性，同时还保持着本地存储的简单性和易用性。
睡不醒的猪儿·2023-12-31 00:36

我用 Dubbo 传输文件，差点被开除

公司之前有一个Dubbo服务，其内部封装了腾讯云的对象存储服务SDK，目的是统一管理这种三方服务的SDK，其他系统直接调用这个对象存储的Dubbo服务。
Java码农·2023-12-30 15:31

Redis为何如此快速？

Redis的单线程主要是指Redis的网络IO和键值对读写是由一个线程来完成的，这也是Redis对外提供键值存储服务的主要流程。但Redis的其他功能，比如持久化、异步删除、集群数据同步等，其实是
Memory_2020·2023-12-30 15:34

华为云OBS文件上传和下载

华为云Obs文件上传和下载使用的技术前端是Vue框架，element-ui后端是Springboot项目服务器是华为云文件上传下载地方是华为云Obs对象存储服务1、前端上传代码el-upload组件：选择文件上传到服务器服务器容量有限
huaiqiongying·2023-12-30 11:17

Linux|minio对象存储服务的部署和初步使用总结

前言：minio是一个非常轻量化的对象存储服务，是可以算到云原生领域的。
晚风_END·2023-12-30 09:30

云原生|对象存储|minio分布式集群的搭建和初步使用（可用于生产）

前言：minio作为轻量级的对象存储服务安装还是比较简单的，但分布式集群可以大大提高存储的安全性，可靠性。
晚风_END·2023-12-30 09:28

Hbase详解

HDFS为Hbase提供可靠的底层数据存储服务，MapReduce为Hbase提供高性能的计算能力，Zookeeper为Hbase提供稳定服务和Failover机制，因此我们说Hbase是一个通过大量廉价的机器解决海量数据的高速存储和读取的分布式数据库解决方案
武昌库里写JAVA·2023-12-30 05:41

GFS分布式文件系统（详解与配置）

存储存储是计算机系统中用于保留数据、程序和信息的过程和设备。它包括了数据的永久性保存，以便在需要时可以检索、读取和操作。存储可以分为多种类型，包括：存储类型主存储(RAM-RandomAccessMemory)用于存储正在运行的程序、操作系统和当前需要的数据。是临时性的，失去电源时数据会丢失。辅助存储硬盘驱动器(HDD)：常见的机械式存储设备，以磁盘存储数据。固态驱动器(SSD)：使用闪存技术，速
木合杉·2023-12-30 01:32

开源轻量级分布式文件系统FastDFS本地部署并实现远程访问服务器

文章目录前言1.本地搭建FastDFS文件系统1.1环境安装1.2安装libfastcommon1.3安装FastDFS1.4配置Tracker1.5配置Storage1.6测试上传下载1.7与Nginx整合1.8安装Nginx1.9配置Nginx2.局域网测试访问FastDFS3.安装cpolar内网穿透4.配置公网访问地址5.固定公网地址5.1保留二级子域名5.2配置二级子域名6.测试访问固定
一棵西兰花·2023-12-29 23:38

分布式存储考点梳理 + 高频面试题

面试中如何考察分布式存储广义的分布式存储根据不同的应用领域，划分为以下的类别：分布式协同系统分布式文件系统分布式任务调度框架分布式NoSQL存储分布式关系数据库各种消息队列MQ流式计算框架当然，这只是一种划分方式
小小哭包·2023-12-29 21:15

阿里终面：10亿数据如何快速插入MySQL？

假设和面试官明确后，有如下约束10亿条数据，每条数据1Kb数据内容是非结构化的用户访问日志，需要解析后写入到数据库数据存放在Hdfs或S3分布式文件存储里10亿条数据并不是1个大文件，而是被近似切分为100
Young丶·2023-12-29 17:45

人类文明的记载将在IPFS网络生态中得以永恒

IPFS是一个分布式文件存储系统，可以让企业以安全、高效、可靠地存储和传输文件，最重要的是，它的存储成本和带宽成本低。
小汐之社·2023-12-29 15:12

如何在 Ubuntu 16.04 上使用 Minio 设置对象存储服务器

而且，凭借其占用空间小、界面简单以及与多种云存储服务的兼容性，Minio对象存储服务器具有强大的功能。Minio是一款开源对象存储服务器，它将照片、视频、虚拟机映像、容器和日志文件等非结
timi先生·2023-12-29 14:18

华为云-对象存储服务(OBS)

对象存储服务对象存储服务简介对象存储服务（ObjectStorageService，OBS）是一个基于对象的海量存储服务，为客户提供海量、安全、高可靠、低成本的数据存储能力。
单某人是猪·2023-12-29 07:02

【Minio】上传报错：The difference between the request time and the server‘s time is too large.

原因：应用服务器与存储服务器时间对应不上导致的查看：解决：1.手动修改系统时间date-s"2023122710:28:00"2.时间同步hwclock--systohc
皮卡丘-ysh·2023-12-28 21:53

使用Python连接mongoDB

Python操作MongoDB看这一篇就够了MongoDB是由C++语言编写的非关系型数据库，是一个基于分布式文件存储的开源数据库系统，其内容存储形式类似JSON对象，它的字段值可以包含其他文档、数组及文档数组
火舞凤凰·2023-12-28 21:13

百度网盘SVIP会员双11怎么买便宜，2023年双十一有活动吗？

作为一款备受欢迎的云存储服务，百度网盘SVIP会员提供了许多实用的功能，例如：在线解
小小编007·2023-12-28 21:59

springboot整合minio做文件存储

一,minio介绍MinIO是一个基于ApacheLicensev2.0开源协议的对象存储服务。
豆豆的java之旅·2023-12-28 17:38

大数据处理各组件概念及作用

文件传输工具；1.3Kafka集群：消息队列，未避免消息堵塞而将消息由Kafka统一管理，进行消息的接收和发布；1.4爬虫服务器：依据需求定时定向抓取页面数据；二、数据存储：2.1HDFS集群：（1）概念：分布式文件存储系统
p1i2n3g4·2023-12-28 17:11

百度沧海文件存储CFS推出新一代Namespace架构

随着移动互联网、物联网、AI计算等技术和市场的迅速发展，数据规模指数级膨胀，对于分布式文件系统作为大规模数据场景的存储底座提出了更高的要求。
大隐隐于野·2023-12-28 15:48

开源minio-AWS-S3存储的部署及go操作详细

介绍MinIO是一个开源的分布式对象存储服务，它允许用户在私有云或公有云环境中构建自己的对象存储基础设施。
liuyunshengsir·2023-12-28 12:49

Hadoop之HDFS 详细教程

首要的基础功能就是文件系统，在Hadoop中使用FileSystem这个抽象类来表示我们的文件系统，这个抽象类下面有很多子实现类，究竟使用哪一种，需要看我们具体的实现类，在我们实际工作中，用到的最多的就是HDFS(分布式文件系统
白鸽呀·2023-12-28 11:29

阿里云分布式文件系统OSS实现文件上传、删除与下载

介绍OSS：阿里云分布式文件系统网址：OSS控制台作用如果在应用程序所在服务器上做文件上传与下载会给服务器造成很大压力，所以项目会使用独立的文件系统。
龙域、白泽·2023-12-28 07:46

SpringBoot集成阿里云OSS存储服务（普通上传、服务端签名上传）

创建Bucket、配置用户权限以及允许跨域）1.2、起步demo：GetStartedSample（上传、删除案例）二、实战系列2.1、上传文件-简单上传2.2、集成OSS的SDK包及封装阿里云OSS存储服务
长路 ㅤ   ·2023-12-28 07:17

MongoDB

MongoDB是一个基于分布式文件存储的数据库。由C++语言编写。旨在为WEB应用提供可扩展的高性能数据存储解决方案。
小小橘子皮·2023-12-28 04:25

Impala 基于hive的交互式实时分析工具(一) 概念及原理介绍

谷歌旧三篇论文（GFS-分布式文件存储，Bigtable-分布式数据库，Mapreduce-分布式计算）设计目的为了
章云邰·2023-12-27 19:59

PathManager功能

在很多深度学习框架和工具中，PathManager被用作一个文件路径的管理器，它可以自动适应不同的文件系统，包括本地文件系统和分布式文件系统。以下是一些PathManager类可能提供的基本功能
何处不逢君·2023-12-27 15:45

Spark与Hadoop的关系和区别

它包括两个核心组件：Hadoop分布式文件系统（HDFS）：用于存储大规模数据的分布式文件系统。H
晓之以理的喵~~·2023-12-27 12:13

VR全景、3D漫游到底有什么区别？如何选择？

国内主要有720云、众去、如是等平台提供了VR全景的编辑、展示、存储服务；广泛的应用于旅游、房地产、教育、医疗等多个领域。
720云·2023-12-27 09:46

Minio文件服务器（上传文件）

官网：https://www.minio.org.cn/开源的分布式对象存储服务器Window安装用户名和密码相同创建bucket，并且将策略改成public一、添加依赖二、代码publicclassFileUploadTest
A尘埃·2023-12-27 09:05

米哈游大数据云原生实践

以Spark为例，在云上运行Spark可以充分享有公共云的弹性资源、运维管控和存储服务等，并且业界也涌现了不少SparkonKubernetes的优秀实践。
阿里云云原生·2023-12-27 06:31

[spark] DataFrame 的 checkpoint

在ApacheSpark中，DataFrame的checkpoint方法用于强制执行一个物理计划并将结果缓存到分布式文件系统，以防止在计算过程中临时数据丢失。
言之。·2023-12-27 06:29

NVMe协议基础系列教程

NVMe是一种基于PCIe的应用层协议，NVMe应用非常广泛，可用于计算机硬盘、固态硬盘、存储服务器、虚拟存储系统等。它可以大大提高存储设备的性能，有助于提升系统的性能。
百里杨·2023-12-27 02:16

MongoDB | 基于分布式文件存储的数据库

MongoDB简介MongoDB是一个基于分布式文件存储的数据库。由C++语言编写。旨在为WEB应用提供可扩展的高性能数据存储解决方案。
M林夕W·2023-12-26 23:26

NA公链优势 未来可期

NANirvana全托管模式可以做到无缝连接，开发者不需要去考虑DNS租赁、云存储服务、数据库或支付接口等中间件，甚至在链上就可以一站式解决。
NA中文社区·2023-12-26 22:24

Hadoop大数据实战系列文章之HDFS文件系统

Hadoop附带了一个名为HDFS(Hadoop分布式文件系统)的分布式文件系统，专门存储超大数据文件，为整个Hadoop生态圈提供了基础的存储服务。
测试帮日记·2023-12-26 21:39

关于redis单线程和IO多路复用的理解

我们常说的Redis是单线程，主要是指Redis在网络IO和键值对读写是采用一个线程来完成的，这也是Redis对外提供键值存储服务的核心流程。
jsl小时光·2023-12-26 15:33

修改nfs服务的依赖服务rpcbind的111端口

NFS和rpcbind的关系NFS（NetworkFileSystem）是一种分布式文件系统，它允许在不同的计算机之间共享文件。在进行NFS共享之前，需要先启动RPCbind服务。
花蹦蹦精他哥·2023-12-26 13:32

FRP 内网穿透指南：简单上手，快速入门

最近受朋友启发，突然萌生了一个想法，那就是如何将家里闲置五六年的台式机给利用起来，本来打算组装一个NAS存储服务器，但是硬盘实在是有点小贵，所以决定先买了一块799元的4T机械硬盘，然后做的frp内网穿透
远见阁·2023-12-26 09:06

如何准备系统设计面试？

2：设计一个框架比如RPC框架、消息队列、缓存框架、分布式文件系统等等。3：设计某某系统中的一个功能比如哔哩哔哩的点赞功能。
_River_·2023-12-26 04:16

大数据技术——处理架构Hadoop

软件基金会旗下的一个开源分布式计算平台，为用户提供了系统底层细节透明的分布式基础架构•Hadoop是基于Java语言开发的，具有很好的跨平台特性，并且可以部署在廉价的计算机集群中•Hadoop的核心是分布式文件系统
Imrea·2023-12-26 01:55

MongoDB数据库本地部署并结合内网穿透实现navicat公网访问

2.2创建隧道映射2.3测试随机公网地址远程连接3.配置固定TCP端口地址3.1保留一个固定的公网TCP端口地址3.2配置固定公网TCP端口地址3.3测试固定地址公网远程访问前言MongoDB是一个基于分布式文件存储的数据库
小沈YO.·2023-12-25 23:05

架构设计内容分享(七十六)：分布式存储架构分析

目录一、集中存储结构二、分布式存储三、分布式理论浅析四、分布式文件系统五、分布式键值系统一、集中存储结构说到分布式存储，我们先来看一下传统的存储是怎么个样子。
之乎者也··2023-12-25 20:01

vue前端上传图片到阿里云OSS，超详细上传图片与视频教程

1.简介与日常使用阿里云OSS是一款由阿里巴巴云计算有限公司开发的基于云端的对象存储服务。它为企业和个人存储海量数据提供了完美的解决方案。
欧阳呀·2023-12-25 02:32

【Hadoop】HDFS shell操作与管理工具

HDFSshell操作HDFS管理工具dfsadminfsck均衡器HDFSshell操作HDFS是存取数据的分布式文件系统，对HDFS的操作就是文件系统的基本操作，如文件的创建、修改、删除、修改权限，
不怕娜·2023-12-24 18:41

【Hadoop】HDFS简介——是什么/优缺点/适用场景

HDFS不适用场景HDFS是什么源自Google的GFS论文Google于2003年10月发表HDFS是GFS的一个克隆版HDFS(HadoopDistributedFileSystem)是易于扩展的分布式文件系统
不怕娜·2023-12-24 18:11

文章分享-1周-怎么理解分布式、高并发、多线程？

涉及领域非常多，例如分布式文件系统（例如fast
庄泽锐·2023-12-24 16:07

计算机基础：数据库-MongoDb

MongoDB是由C++语言编写的，是一个基于分布式文件存储的开源数据库系统。MongoDB将数据存储为一个文档，数据结构由
joyyi9·2023-12-24 12:13

kubernetes集群 应用实践 zookeeper部署

kubernetes集群应用实践zookeeper部署零、环境说明一、zookeeper持久存储准备zookeeper属于有状态应用，需要为zookeeper部署后端存储服务。
师范大学通信大怨总·2023-12-24 11:00
上一页 6 7 8 9 10 11 12 13 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他