分布式文件第12页

hadoop和hive、spark、presto、tez是什么关系

它由许多组件组成，包括HDFS(分布式文件系统)和MapReduce(分布式计算引擎)。Hive是一个基于Hadoop的数据仓库系统，它允许用户使用SQL语言来查询和分析大型数据集。

草履虫稽亚娜·2023-10-19 02:55

一文搞懂NoSQL与MongoDB

一、什么是MongoDB1.1定义MongoDB是由C++语言编写的，是一个基于分布式文件存储的开源数据库系统。在高负载的情况下，添加更多的节点，可以保证服务器性能。

夏之七·2023-10-18 23:22

Spring集成MongoDB实战

Spring集成MongoDB简介MongoDB是一个基于分布式文件存储的数据库。由C++语言编写。旨在为WEB应用提供可扩展的高性能数据存储解决方案。

Amx Just Run·2023-10-18 22:36

原创：Spring Boot + MongoDB 实战指南 - 从安装mongodb到java spring boot编码运行完整笔记

MongoDB简介MongoDB数据库是一种基于分布式文件存储的NoSQL数据库。

云寻觅·2023-10-18 22:34

Spring Boot中使用MongoDB数据库实战

一MongoDB简介MongoDB是一个基于分布式文件存储的数据库，它是一个介于关系数据库和非关系数据库之间的产品，其主要目标是在键/值存储方式（提供了高性能和高度伸缩性）和传统的RDBMS系统（具有丰富的功能

chengqiuming·2023-10-18 22:56

MongoDB深度学习

MongoDB是一个基于分布式文件存储的数据库，由C++语言编写。

秃狼·2023-10-18 14:05

常见的八种分布式文件系统介绍

常见的分布式文件系统有，GFS、HDFS、Lustre、Ceph、GridFS、mogileFS、TFS、FastDFS等。各自适用于不同的领域。

小小哭包·2023-10-18 13:32

hadoop详解

HDFS:1.HDFS文件系统:HDFS是大数据开源框架hadoop的组件之一，全称（HadoopDistributedFileSystem），它是一个分布式文件系统，由多台服务器联合起来实现文件存储功能

不吃饭的猪·2023-10-18 10:49

hadoop分布式文件系统(HDFS)

1.HDFS系统介绍Hadoop分布式文件系统HDFS(HadoopDistributedFileSystem)是一个能够兼容普通硬件环境的分布式文件系统，和现有的分布式文件系统不同的地方是，Hadoop

旺仔Lhh·2023-10-17 20:03

Hadoop分布式文件系统-HDFS

1.介绍HDFS（HadoopDistributedFileSystem）是Hadoop下的分布式文件系统，具有高容错、高吞吐量等特性，可以部署在低成本的硬件上。

shangjg3·2023-10-17 19:53

Python+Pickle/Parquet/HDF5...不同文件格式存储模式下的量化因子计算性能对比

为了应对这一挑战，一部分用户选择了分布式文件系统，并使用Pickle、Feather、Npz、Hdf5、以及Parquet等格式来存储数据，并结合Python进行量化金融计算。

DolphinDB智臾科技·2023-10-17 16:26

Hadoop原理及部署初探

Hadoop实现了一个分布式文件系统（HadoopDistributedFileSystem），简称HDFS。

weixin_34010949·2023-10-17 15:21

Hadoop原理及部署初探(转)

Hadoop实现了一个分布式文件系统（HadoopDistributedFileSystem），简称HDFS。

wbj0110·2023-10-17 15:51

2.3 初探Hadoop世界

Google处理大数据三大技术2、Hadoop如何诞生3、Hadoop主要发展历程（二）Hadoop的优势1、扩容能力强2、成本低3、高效率4、可靠性5、高容错性（三）Hadoop的生态体系1、HDFS分布式文件系统

howard2005·2023-10-17 14:15

Spring Boot中MongoDB的使用和实战

创作不易觉得有帮助请点赞关注收藏~~~MongoDB是一个基于分布式文件存储的NoSQL数据库，由C++语言编写，旨在为Web应用提供可扩展的高性能数据存储解决方案。

showswoller·2023-10-17 14:37

GFS分布式文件系统&实验

GFS概念Gluster是一个开源的分布式文件系统它是一个C/S架构由存储服务器、客户端以及NFS/Samba存储网关组成没有元数据服务器组件，这有助于提升整个系统的性能，可靠性和稳定性文件系统定义负责实现数据存储方式

五彩斑斓的黑@·2023-10-17 10:14

ceph 代码分析读_Ceph代码分析

Ceph分布式文件系统的代码分析的文章网上是比较少的，本团队成员对ceph做过详细的代码阅读，包括mds、osd、client等模块，但是缺少条理清晰的文档总结。

一只快乐的小柠檬·2023-10-17 07:54

分布式文件系统元数据服务方式总结(HDFS、CephFS、CurveFS)

上一篇文章https://blog.csdn.net/qq_58034031/article/details/129518612分享了一篇20222论文，讲述在大型分布式文件系统中高效元数据服务，以此为启发总结了目前主流分布式文件系统它们是如何管理元数据的

兜兜不是豆·2023-10-17 07:22

一、什么是ceph以及ceph的应用

什么是ceph以及ceph的应用一、Ceph是一种为优秀的性能、可靠性和可扩展性而设计的统一的、分布式文件系统。

Hello world9212·2023-10-15 12:24

大数据技术Hive详解

说明：Hive处理的数据存储在HDFS；Hive分析数据底层的实现是MapReduce；执行程序运行在Yarn上；1.分布式文件系统HDFS存储架构与

wespten·2023-10-15 12:04

Hadoop Hive sql 语法详解

Hive是基于Hadoop构建的一套数据仓库分析系统，它提供了丰富的SQL查询方式来分析存储在Hadoop分布式文件系统中的数据，可以将结构化的数据文件映射为一张数据库表，并提供完整的SQL查询功能，可以将

hong2511·2023-10-15 12:30

走进HBase

什么是Hbase建立在Hadoop之上HDFS分布式文件系统，面向列的存储系统列式数据库是针对行数据库而言的，行式数据库是以一行数据作为一个存储单元，而列式数据库是以一列数据为一个存储单元，针对HBase

、小H·2023-10-15 09:41

MongoDB安装和术语操作

2、关系型数据库和菲关系型数据库的区别：3、非关系型在网站架构中的地位二、MongoDB安装和配置MongoDB简介：MongoDB是由C++语言编写的，是一个基于分布式文件存储的开源数据库系统，在高负载的情况下

木白^0^端墨·2023-10-14 22:01

云LIS系统源码 B/S架构，SaaS模式，可扩展性强

采用.NetCore新的技术框架、DEV报表、前端js封装、分布式文件存储、分布式缓存等，支持IIS独立部署，Docker部署等多种方式。

源码技术栈·2023-10-14 16:00

TFS文件系统

TFS（TaobaoFileSystem）是一个高可扩展、高可用、高性能、面向互联网服务的分布式文件系统，其设计目标是支持海量的非结构化数据的存储；TFS使用C++语言开发，需要运行在64bitLinuxOS

梦里花又落·2023-10-14 13:00

Hadoop生态圈：Hadoop的发展及其模块架构解析

Hadoop的设计目标是将存储和计算分离，并通过高容错性的分布式文件系统HDFS(HadoopDistributedFileSyst

禅与计算机程序设计艺术·2023-10-14 09:24

【大数据】HDFS概述（学习笔记）

一、文件系统、分布式文件系统1、传统文件系统文件系统是一种存储和组织数据的方法，实现了数据的存储、分级组织、访问和获取等操作。文件系统使用树形目录的抽象逻辑概念代替了硬盘等物理设备使用数据块的概念。

rexhao_wmh·2023-10-14 08:45

【大数据】HDFS的使用与集群角色（学习笔记）

Hadoop提供了文件系统的shell命令行客户端hadoopfs[genericoptions]2、文件系统协议HDFSShellCLI支持操作多种文件系统，包括本地文件系统（file:///）、分布式文件系统

rexhao_wmh·2023-10-14 08:45

软泡芙·2023-10-14 07:35

大数据Hadoop集群搭建-04安装配置HDFS

Hadoop集群搭建-03编译安装hadoopHadoop集群搭建-02安装配置ZookeeperHadoop集群搭建-01前期准备HDFS是配合Hadoop使用的分布式文件系统，分为namenode:

叫我懒猫·2023-10-14 04:32

Hadoop3教程（二）：HDFS的定义及概述

但是像这样做跨服务器的数据管理和维护是很难的，所以就迫切需要一种方式，来协调管理多台机器上的文件，这就是分布式文件管理系

经年藏殊·2023-10-14 01:01

Ceph初步了解和ceph集群搭建测试

Ceph初步了解和ceph集群搭建测试常用分布式文件系统HadoopFastDFSCephGlusterFSLustre(太老了)Ceph概述Ceph是一个分布式文件系统具有高扩展、高可用(默认3副本存储数据一个挂了还有两个

icnvd·2023-10-13 22:32

解读Genaro黄皮书之存储网络：分布式存储，让搜索更精准节能

他们通过集群应用、网络技术或分布式文件系统等功能，将网络中大量各种不同类型的存储设备通过应用软件集合起来协同工作，共同对外提供数据存储和业务访问功能。在互联网时期，这些功能给大家带来了很多便利。

rainy_he·2023-10-13 21:14

基于QKFile的闪电盘应用

QKFile的中文翻译为“夸克分布式文件系统”,是一种全新的超媒体分发协议，通过内容和标识来寻址，并支持创建完全分布式应用程序，旨在使全球网络更快，更安全，更开放。

少年已不年少201901·2023-10-13 20:27

MongoDB学习

特性：特性1基于分布式文件存储的开源数据系统2可为web应用提供可扩展高性能的数据存储方案3将数据存储为一个文档，文档类似与jason格式MongoDB结构：MongoDB关系型数据库

Jayss_987·2023-10-13 18:48

Minio分布式文件系统学习笔记

docker单机安装服务端dockerrun-p9000:9000-p50000:50000--nameminio\-d--restart=always\-e"MINIO_ROOT_USER=admin"\-e"MINIO_ROOT_PASSWORD=xie@1234"\-v/opt/software/minio/data:/data\-v/opt/software/config:/root/.m

Gene兵·2023-10-13 13:25

【学习笔记】minIO分布式文件服务系统

MinIO一、概述1.1minIO是什么？MinIO是专门为海量数据存储、人工智能、大数据分析而设计的对象存储系统。（早前流行的还有FastDFS）据官方介绍，单个对象最大可存储5T，非常适合存储海量图片、视频、日志文件、备份数据和容器、虚拟镜像等。采用golang语言编译客户端和用户端交互采用http和https用户协议1.2为什么选择minIO？安装部署简单自带UI界面，操作简单，开箱即用性能

Xcong_Zhu·2023-10-13 13:14

短时间上手MongoDB

什么是MongoDBMongoDB是由C++语言编写的，是一个基于分布式文件存储的开源数据库系统。在高负载的情况下，添加更多的节点，可以保证服务器性能。

weixin_34187822·2023-10-13 07:26

RDD（python

RDD创建从文件系统加载.textFile()支持本地文件系统分布式文件系统HDFS云端文件>>lines=sc.textFile("file:///usr/local/spark/mycode/rdd

KwokWyman·2023-10-12 21:01

Mongo

MongoDB是一个基于分布式文件存储的开源NoSQL数据库系统，由C++编写的。

努力学习，努力爱你！·2023-10-12 18:21

分布式文件服务器——Windows环境MinIO的三种部署模式

上节简单聊到MinIO：分布式文件存储服务——初识MinIO-CSDN博客，但没具化，本节开始展开在Windows环境下MinIO的三种部署模式：单机单节点、单机纠删码、集群模式。

流沙QS·2023-10-12 01:48

分布式文件服务器——初识MinIO

开篇MinIO——开源优秀的分布式对象存储系统。适用于AI的高性能分布式云存储MinIO提供高性能、与S3兼容的对象存储系统，让你自己能够构建自己的私有云储存服务。MinIO原生支持Kubernetes，它可用于每个独立的公共云、每个Kubernetes发行版、私有云和边缘的对象存储套件。MinIO是软件定义的，不需要购买其他任何硬件，在GNUAGPLv3下是100%开源的。如官网所说，MinIO

流沙QS·2023-10-12 01:14

4-17（NFS深入学习）

NFS（networkfilesystem）主要用于不同网络之间用作数据共享的文件系统@@@@@NFS一般应用于中小型企业，大型企业一般使用更加复杂的分布式文件系统，如：MoosefsFlusterFSFastDFS

轨_迹·2023-10-12 00:32

zookeeper节点数据类型介绍及集群搭建

一、zookeeper介绍zookeeper官网：ApacheZooKeeperzookeeper是一个分布式协调框架，保证的是CP，即一致性和分区容错性；zookeeper是一个分布式文件存储系统，文件节点可以存储数据

高如风·2023-10-11 23:27

spark原理和实践

数据生成后，需要存储元数据信息，选择合适的存储格式，像Parquet、ORC是两种高性能的列式存储，Hudi数据存储的中间件，优化存储的读写，也可以存储到分布式文件存储系统HDFS，分布式消息系统kafka

头顶假发·2023-10-11 04:13

阿里云——云数据库RDS

基于阿里云分布式文件系统和SSD盘高性能存储，RDS支持MySQL、SQLServer、PostgreSQL和MariaDBTX引擎，并且提供了容灾、备份、恢复、监控、迁移等方面的全套解决方案，帮助您解决数据库运维的烦恼

aliyunduoduo·2023-10-11 02:30

林子雨慕课答案2021新版

CSDN博客第二章大数据技术原理与应用—第2讲大数据处理架构Hadoop（林子雨老师）课后习题_努力搬砖头的博客-CSDN博客_hadoop大数据技术原理与应用课后答案第三章大数据技术原理与应用—第3讲分布式文件系统

S_h_a_·2023-10-10 23:40

检验检疫系统（LIS）源码：C# + MVC + SQLserver + Redis

LIS系统源码技术特点：采用.NetCore新的技术框架、DEV报表、前端js封装、分布式文件存储、分布式缓存等，支持LIS独立部署，Docker部署等多种方式。

淘源码d·2023-10-10 18:37

go-fastdfs安装

go-fastdfs最简单、可靠、高效的分布式文件系统官方文档installdockergo-fastdfs安装#search命查找镜像dockersearchgo-fastdfs#pull镜像dockerpullgo-fasdfs

GUIN蚂蚁·2023-10-09 14:28

分布式文件系统HDFS(林子雨慕课课程)

文章目录3.分布式文件系统HDFS3.1分布式文件系统HDFS简介3.2HDFS相关概念3.3HDFS的体系结构3.4HDFS的存储原理3.5HDFS数据读写3.5.1HDFS的读数据过程3.5.2HDFS

几窗花鸢·2023-10-09 00:47

推荐频道

分布式文件