分布式文件系统(FastDFS

大数据之数据迁移sqoop的安装

Sqoop具有命令行界面，可用于从关系型数据库中导入数据到Hadoop分布式文件系统（HDFS）中，或从HDFS导出数据到关系型数据库中。
bigdata从入门到放弃·2023-11-19 03:09

linux中hadoop伪分布搭建

主要有以下三个组件：Hadoop分布式文件系统（HDFS）：这是一种可扩展的、容错的文件系统，专门设计用于在大规模集群中存储和访问数据。
bigdata从入门到放弃·2023-11-19 03:38

GFS分布式文件系统

GFS分布式文件系统：gfdglusterFS开源的分布式的文件系统存储服务器客户端以及网络（NFS/samba）网关传统的老的分布式系统源服务器，原服务器保存了存储节点的目录树信息，一旦源服务器故障，
wutong0708·2023-11-19 02:30

GFS分布式文件系统

1.GFS分布式文件系统gfdglusterFS开源的分布式的文件系统存储服务器客户端以及网络（NFS/samba）网关传统式老的分布式元服务器，元服务器保存存储节点的目录树信息。
小郭902·2023-11-19 01:53

GFS分布式文件系统

前言文件系统：用于存储和管理文件的相关系统。分布式存储优点：增加存储容量加快读写效率保证文件高可用GFS介绍GFS：glusterFS开源的分布式的文件系统存储服务器，客户端，网络（用NFS/samba组成网关）传统式老的分布式系统元服务器，元服务器保存存储节点的目录树信息。一旦元服务器故障，所有的存储节点全部失效GFS自身的机制根据定制策略，把数据存储进去。现在GFS取消了元服务器机制，数据横向
aaa.com·2023-11-19 01:19

GFS分布式文件系统

GFS分布式文件系统gfdglusterFS：开源的分布式的文件系统gfdglusterFS组件架构：存储服务器、客户端、以及网络（既可以使用NFS共享模式/samba）网关。
俊俏美男子章鱼哥·2023-11-17 16:30

GFS分布式文件系统

GFS分布式文件系统：gfdglusterFS开源的分布式的文件系统。存储服务器,客户端以及网络（NFS/samba)网关。传统式老的分布式系统元服务器，元服务器保存存储节点的目录树信息。
相遇蟹堡王，尽享蟹黄堡·2023-11-17 12:14

大数据分布式集群搭建（5）

HADOOP1.HADOOP是apache旗下的一套开源软件平台2.HADOOP提供的功能：利用服务器集群，根据用户的自定义业务逻辑，对海量数据进行分布式处理3.HADOOP的核心组件有A.HDFS（分布式文件系统
KongX_B·2023-11-17 03:25

3. hdfs概述与高可用原理

简述HDFS（HadoopDistributedFileSystem）是一种Hadoop分布式文件系统，具备高度容错特性，支持高吞吐量数据访问，可以在处理海量数据（TB或PB级别以上）的同时最大可能的降低成本
shura1014·2023-11-16 20:35

在Docker上部署Nacos+Redis+Yapi+MongoDB+Rabbitmq+Fastdfs,用Docker Compose管理容器 --快速上手,超详细

一.在linux上安装docker1.前提条件：操作系统CentOs7目前，CentOS仅发行版本中的内核支持Docker。Docker运行在CentOS7上，要求系统为64位、系统内核版本为3.10以上。Docker运行在CentOS-6.5或更高的版本的CentOS上，要求系统为64位、系统内核版本为2.6.32-431或者更高版本。使用yum安装（CentOS7下）Docker要求CentO
刘同学plus·2023-11-15 21:57

在docker上部署Nacos，Redis，Yapi，MongoDB,RabbitMQ,Fastdfs，用docker-compose管理容器-详细步骤

如果出现如下界面就是安装成功了二，在docker上安装Nacosdockerpullnacos/nacos-server上图表示拉取成功了三，拉去Redis，MongoDB,Yapi，RabbitMQ，Fastdfs
ApachHua·2023-11-15 21:18

从0开始学大数据14-BigTable的开源实现：HBase

我们前面已经讲过了GFS对应的Hadoop分布式文件系统HDFS，以及MapReduce对应的Hadoop分布式计算框架MapReduce，今天我们就来领略一下BigTable对应的NoSQL系统
源码头·2023-11-15 15:48

HarmonyOS分布式文件系统开发指导

分布式文件系统概述分布式文件系统（hmdfs，HarmonyOSDistributedFileSystem）提供跨设备的文件访问能力，适用于如下场景：两台设备组网，用户可以利用一台设备上的编辑软件编辑另外一台设备上的文档
HarmonyOS开发者·2023-11-15 09:14

Hadoop伪分布式搭建

伪分布式搭建目的准备支持的平台需要的软件下载伪分布式配置设置SSH免密登录启动hadoop验证文件分块查看上传后的文件目的本文档介绍如何设置和配置单节点Hadoop安装，以便您可以使用HadoopMapReduce和Hadoop分布式文件系统
best program·2023-11-15 05:13

Java主流分布式解决方案多场景设计与实战

分布式文件系统：在Java的分布式系统中，文件系统也是非常重要的一部
SpringJa·2023-11-15 04:38

保姆级教程-分布式文件系统FastDFS（高效存储，有效解决大量资源上传下载）

官方网站：https://github.com/happyfish100/配置文档：https://github.com/happyfish100/fastdfs/wiki/参考资料：https://www.oschina.net
m0_67402564·2023-11-14 22:06

报错fatal error:fdfs_define.h: 没有那个文件或目录

错误详情ngnix集成fastdfs编译nginx时遇到报错"fatalerror:fdfs_define.h:没有那个文件或目录"解决方法步骤一：确认/usr/include/目录下是否存在一下两个文件夹
雪影红双·2023-11-13 13:50

云数据库RDS知识点

云数据库RDS是一种稳定可靠、可弹性伸缩的在线数据库服务，基于阿里云分布式文件系统和SSD盘高性能存储，支持MySQL、SQLServer、PostgreSQL、PPAS（PostgrePlusAdvancedServer
编织幻境的妖·2023-11-13 11:57

FastDFS上传文件失败, item “tracker_server“ in ***/fast_client.conf not found

上传测试时报了一个这样的错Exceptioninthread"main"net.dopan.fastdfs.client.common.MyException:item"tracker_server"in
来自喵星·2023-11-13 08:09

FastDFS分布式文件系统

什么是FastDFS:FastDFS是一个C语言实现的开源轻量级分布式文件系统,作者余庆(happyfish100),支持Linux、FreeBSD、AID等Unix系统,解决了大数据存储和读写负载均衡等问题
小甄笔记·2023-11-13 08:54

Windows下安装FastDFS

FastDFS是没有Windows版本的，所以采取了Docker去安装,不同Windows系统，Docker安装不尽相同。
DAIHAO丶·2023-11-13 02:38

CentOS7下搭建Ceph分布式存储架构

(1).Ceph概述Ceph是为了优秀的性能、可靠性和可扩展性而设计的统一的、分布式文件系统，并且还是一个开源的分布式文件系统。
假面生·2023-11-12 12:52

深入浅出分布式存储的设计与优化之道

分布式文件系统和分布式块存储作为云存储中重要的技术，成为奠定云存储发展的重要基石。对于大多数专注于云计算本身的IT技术人员来说，对分布式文件系统和分布式块存储未
UCloud_TShare·2023-11-12 05:43

Spring Boot总结（六）：Spring Boot SSO

SpringBoot界面设计SpringBoot总结（四）：提高数据库访问性能SpringBoot总结（五）：安全设计SpringBoot总结（六）：SpringBootSSOSpringBoot总结（七）：使用分布式文件系统
「已注销」·2023-11-11 19:05

hadoop、jboss未授权访问漏洞复现与未授权访问漏洞学习（内含服务器与中间件的区别）

，由于服务器直接在开放了Hadoop机器HDFS的50070web端口及部分默认服务端口，黑客可以通过命令行操作多个目录下的数据，如进行删除，下载，目录浏览甚至命令执行等操作主要HDFS（Hadoop分布式文件系统
不想当脚本小子的脚本小子·2023-11-11 17:28

2023.11-9 hive数据仓库,概念,架构

）优点2）缺点四.Hive和数据库比较1）查询语言2）数据更新3）执行延迟4）数据规模五.hive架构流程六.MetaStore元数据管理三种模式一.HDFS、HBase、Hive的区别1、HDFS（分布式文件系统
白白的wj·2023-11-11 01:36

分布式软件开发的相关技术

分布式存储系统：了解分布式存储的概念和常见的分布式存储系统，如分布式文件系统、分布式数据库、NoSQL数据库等。分布式数据处理：熟悉大数据处理和分布式数据处理框架，如ApacheHa
假装得大佬·2023-11-10 06:05

windows系统部署minio,以及添加到系统服务器

最近想配置一款可以存储文件的服务器，如果使用阿里云OSS、七牛云、腾讯云需要收取比较高的费用，为了节约成本，考虑使用免费开源的软件进行部署，然后对fastDFS和MiniO进行了对比：一：安装部署(运维
小蓝波·2023-11-10 04:24

银河麒麟高级服务器部署glusterfs

前言GFS是一个可扩展的分布式文件系统，用于大型的、分布式的、对大量数据进行访问的应用。它运行于廉价的普通硬件上，并提供容错功能。它可以给大量的用户提供总体性能较高的服务。
yuchen008·2023-11-09 10:25

java将一个url链接或者文字生成二维码并且转成base64

三个问题（前提：没有用统一的图片服务器如：fastdfs。）（1）：把url链接转成图片保存。这样只需要提供图片的地址就行。（2）：但是有的时候，需要提供base64图片流。
ZeroMaster·2023-11-09 09:30

SpringBoot 整合 Minio 上传文件

Minio上传文件如果不使用云服务的话,需要本地搭建,一般选择FastDFS但是FastDFS安装比较复杂,今天了解一款安装使用更简单的存储系统MinIOMinIO是一款高性能、分布式的对象存储系统.它是一款软件产品
java小姜在线冲·2023-11-09 03:21

版本控制工具之TFS的使用

TFS是微软下面得一款版本控制工具，百度百科说其优点是高可扩展、高可用、高性能、面向互联网服务的分布式文件系统。(然鹅我并不懂)现在记录一下怎么使用吧。
C#ToJava·2023-11-08 22:50

fastDFS+fastDFS-nginx-module安装部署在线预览

目录文章目录目录一、部署的环境准备1.1机器准备1.2系统环境二、fastdfs安装及配置2.0安装软件及版本2.1安装依赖包2.2安装libfastcommon2.3安装fastdfs主程序2.4fastdfs
zrx林夕·2023-11-08 12:15

java笔记:分布式文件系统+FastDFS+Nginx

java笔记:分布式文件系统+FastDFS+Nginx分布式文件系统概述什么是文件系统?
m0_49234730·2023-11-08 12:05

nginx访问其它FASTDFS服务器上的文件

当你的FASTDFS文件服务和NGINX前端服务器不是同一台的时候，如果要把FASTDFS文件搞能够对外提供访问的外链地址，只能通过跳转的方式，需要如下设置：前端服务器的NGINX配置#fastdfs图片和
代码为生的烨天星·2023-11-08 12:32

SpringBoot集成FastDFS+Nginx整合基于Token的防盗链

为什么要用SpringBoot?SpringBoot是由Pivotal团队提供的全新框架，其设计目的是用来简化新Spring应用的初始搭建以及开发过程。该框架使用了特定的方式来进行配置，从而使开发人员不再需要定义样板化的配置。通过这种方式，SpringBoot致力于在蓬勃发展的快速应用开发领域(rapidapplicationdevelopment)成为领导者。创建独立的Spring应用程序嵌入的
许少年的读书笔记·2023-11-08 12:02

（集群）FastDFS集群 + Nginx负载 安装部署流程

FastDFS简介FastDFS是一个开源的轻量级分布式文件系统，它对文件进行管理，功能包括：文件存储、文件同步、文件访问（文件上传、文件下载）等，解决了大容量存储和负载均衡的问题。
IT界的一颗新星·2023-11-08 12:01

FastDFS+Nginx搭建本地服务器并实现远程访问

文章目录前言1.本地搭建FastDFS文件系统1.1环境安装1.2安装libfastcommon1.3安装FastDFS1.4配置Tracker1.5配置Storage1.6测试上传下载1.7与Nginx
這～悸ベ雨落憂殇·2023-11-08 12:51

Haddop,HDFS和MapDeduce简单理论

HadoopHadoop1Hadoop2HDFS3.MapDeduceHadoop1Hadoop开源的分布式存储+分布式计算平台核心组件：HDFS：分布式文件系统，存储海量数据。
杰KaMi·2023-11-07 06:25

Spark基础知识点

分布式文件系统（HadoopDistributedFileSystem）当数据集达到一定规模，单机无法处理把数据分布到各个独立的机器上（多机器共同协作）网络HDFS优缺点优点：构建在廉价的机器上使用大数据处理高容错硬件错误流式数据访问大规模数据集简单的一致性模型
蛋炒双黄蛋·2023-11-07 05:04

大数据组件 in K8S

大数据的发展历史大数据技术起源于Google在2004年前后发表的三篇论文，分布式文件系统GFS、分布式计算框架MapReduce和NoSQL数据库系统BigTable，俗称"三驾马车"。
无精疯·2023-11-06 23:22

【数据开发】大数据平台架构，Hive / THive介绍

其中，Hive是一种基于Hadoop的数据仓库工具，可以将结构化的数据映射到Hadoop的分布式文件系统上，并提供类SQL查询功能。
小哈里·2023-11-06 23:12

FastDFS的Nginx访问启动与测试

FastDFS的Nginx访问启动与测试启动带有Fastdfs模块的Nginx重启或启动FastDFS服务进程fdfs_trackerd/etc/fdfs/tracker.confrestartfdfs_storaged
林间6·2023-11-06 18:45

安装Nginx并且添加fastDFS模块

安装Nginx并且添加fastDFS模块因为这个模块必须在Nginx的安装的过程中才能添加，所有我们需要重新安装一个nginx，为了和原来已安装的Nginx进行区分，我们把新安装的Nginx取名为nginx_fdfs
林间6·2023-11-06 18:45

FastDFS测试

FastDFS测试FastDFS安装完成之后，可以使用fdfs_test脚本测试文件上传测试之前，需要修改client.conf配置文件，修改两个配置base_path=/opt/fastdfs/clienttracker_server
林间6·2023-11-06 18:15

【大数据处理框架】Hadoop大数据处理框架，包括其底层原理、架构、编程模型、生态圈

文章目录底层原理架构编程模型生态圈Hadoop是一个开源的大数据处理框架，它包含了底层的分布式文件系统和分布式计算资源管理系统，以及高级的数据处理编程接口。
我是廖志伟·2023-11-06 15:41

Hadoopo-MapReduce（数据处理）

以Hadoop分布式文件系统（HadoopDistrributedFileSystem,HDFS）和MapReduce（GoogleMapReduce的开源实现）为核心的Hadoop，为用户提供了系统底层细节透明的分布式基
qq_42601983·2023-11-06 05:53

【基础篇】大数据学习笔记（4）相关名词解释

GFS：GoogleFileSystemGoogle文件系统HDFS：HadoopDsitributedFileSystemHadoop分布式文件系统Zookeeper：分布式应用程序协调服务，是Hadoop
风也醉·2023-11-06 02:54

fastdfs 报 response status !=22

以前看到28的异常，主要是下载或上传过程中，中断了现在加了一个storage，无法同步，报22的异常有大佬说是同步的时候，版本不对，加了一个storage的时候，两边需要一样的版本但是我这边，都是一个包解压出来的。不存在版本不对的问题新加的storge的日志就说22错误，看不出啥情况，但是老的storage日志就明确说了，notsame端口2个端口参数，都必须一致记录一下，备忘
dzl84394·2023-11-06 01:04

大数据技术中的数据存储

分布式文件系统（DistributedFileSystem）分布式文件系统是大数据存储的基础。它能够将数据分布在不同的节点上，实现数据的分布式存储和访问。Hadoop分布式文件系统（HadoopDi
幻想世界中的绚丽色彩·2023-11-05 22:58
上一页 6 7 8 9 10 11 12 13 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他