fastDFS分布式文件系统

大数据入门(三) - HDFS 伪分布式环境搭建

1HDFS概述及设计目标1.1什么是HDFS：Hadoop实现的一个分布式文件系统（HadoopDistributedFileSystem），简称HDFS源自于Google的GFS论文论文发表于2003
JavaEdge·2021-04-22 02:23

05、分布式存储

同时对外提供一个整体的存储服务特性高性能可扩展性低成本易用性技术挑战数据和状态信息的持久化数据的自动迁移系统的自动容错并发读写的数据一致性…分布式存储分类结构化数据非结构化数据：包括文本、图片、图像、音频和视频信息等半结构化数据分布式存储系统分类分布式文件系统
用户昵称已存在[太难了]·2021-04-21 09:53

IPFS&Filecoin的价值与愿景

IPFS是一个分布式文件系统，它的目标是将所有计算设备连接到同一个文件系统，从而成为一个全球统一的储存系统。Filecoin是IPFS的激励层。
SLF068·2021-04-20 19:33

fdfs 配合nginx 环境配置

环境准备使用的系统软件名称说明centos7.xlibfastcommonFastDFS分离出的一些公用函数包FastDFSFastDFS本体fastdfs-nginx-moduleFastDFS和nginx
不听话的丘比特·2021-04-19 16:04

Spark大数据处理

第1章spark简介spark相比于hadoop，spark是计算框架，hadoop包含计算框架mapreduce，分布式文件系统hdfs，还包括Hbase，Hivespark优势：中间结果输出(spark
MichelleZm·2021-04-19 02:04

在centos7上搭建fastDFS文件服务器

环境准备centos7.XlibfatscommonFastDFS分离出的一些公用函数包FastDFSFastDFS本体fastdfs-nginx-moduleFastDFS和nginx的关联模块nginxnginx1.15.4
lghCode·2021-04-18 20:48

Java框架Spring进阶详解注解使用大全 更高效开发的模式

于是spring提供了一种早期的分布式文件系统思想,我们将所有bean标签单独移动到一个xml中,然后在applicationConetxt.xml引入这个x
dunlunjinfen·2021-04-18 07:20

hadoop学习笔记——基础知识及安装

1.核心HDFS分布式文件系统主从结构，一个namenoe和多个datanode，分别对应独立的物理机器1)NameNode是主服务器，管理文件系统的命名空间和客户端对文件的访问操作。
紫豆包·2021-04-18 02:15

服务器搭建fastdfs

所有安装源码，从源码搭建https://github.com/happyfish100github上下载源码fastdfs，libfastcommon,fastdfs-nginx-moduleLinux
除了学习什么都不gan·2021-04-17 22:34

华南农业大学Linux课程实验四——搭建⼀个FastDFS服务器

文章目录环境开始前先创建个快照步骤1、环境准备2、准备libfastcommon、fastdfs、nginx-1.15.4、fastdfs-nginx-module的包3、安装libfastcommon4
夜中听雪·2021-04-17 20:31

Hadoop技术之HDFS

HDFS的相关概述2.HDFS的相关概念3.HDFS的体系结构4.HDFS的存储原理5.HDFS的数据读写6.HDFS常用的Shell命令操作7.HDFS常用的JavaAPI操作1.HDFS的相关概述分布式文件系统把文件分布存储到多个计算机节点上
ProChick·2021-04-17 14:25

IPFS/Filecoin是什么？新元科技公司是否在布局分布式储存？

在IPFS网络中的节点将构成一个分布式文件系统。它是一个开放源代码项目，自2014年开始由ProtocolLabs在开源社区的帮助下发展。其最初由JuanBenet设计。
huobihuoban·2021-04-14 19:36

django天天生鲜项目部署总结

项目架构图：部署环境：谷歌云vps/Ubuntu18.04.5/宝塔面板额外用到的生产环境：miniconda/django3.1/python3.6/celery/redis/mysql/fastdfs
Steven的撸码时间·2021-04-14 16:01

Hadoop HDFS 读写流程 | 图文详解

HDFS是Hadoop的分布式文件系统，负责海量数据的存取HDFS系列文章请参考：一、HDFS概述|优缺点|组成架构|文件块大小二、HDFS常用Shell命令|图文详解三、HDFS搭建客户端API环境|
lesileqin·2021-04-14 16:17

Linux下FastDFS单机安装

编译环境安装：命令：yuminstallgitgccgcc-c++makeautomakevimwgetlibevent-y2、安装libfastcommon基础库：2.1：创建目录mkdir/root/fastdfs2.2
cc_南柯一梦·2021-04-14 16:03

初识Hadoop（一）

简介起源于Nutch（全网搜索引擎），是apache开源框架，广义上来说，是一个更广泛的概念（Hadoop生态圈），主要作用是利用集群，根据用户自定义业务逻辑，对海量数据进行分布式处理，核心组件包括HDFS（分布式文件系统
RalapHao·2021-04-14 09:10

centos7 无法启动，停留在开机页面，报错 A start job is running for /etc/rc.d/rc.local compatibility 解决办法

问题描述centos7部署的服务因服务器IP更换，出现报错"Astartjobisrunningfor/etc/rc.d/rc.localcompatibility"，因IP地址更换，在fastdfs服务中设置开机自启动
句号管·2021-04-13 19:52

Linux：Centos7安装jdk、mysql、redis、nginx、fastdfs记录

本篇文章是从本人为知笔记上誊抄过来的，文章内容最初是当作笔记进行整理的，没有组织语言结构，各位看官自行查阅取舍一、安装jdk（/usr/local/java）官网下载jdk8：jdk-8u231-linux-x64.tar.gz在/usr/local下创建java目录：mkdirjava，上传gz包到此目录下解压：tar-zxvfjdk-8u231-linux-x64.tar.gz（-z：调用gz
東辰·2021-04-13 16:23

FastDFS服务搭建 记录安装与配置过程 Linux 版

Tracker服务器和storage服务器一样，都需要安装FastDFS组件，同时也都需要安装FastDFS的nginx组件，不同的地方就是Tracker服务
句号管·2021-04-13 06:06

Linux搭建FastDFS文件服务器并实现springboot上传文件到FastDFS服务器

www.myblogs.cn/fastDFS二，搭建FastDFS文件服务器1，首先需要安装需要的依赖yum-yinstallgcc-c++yum-yinstalllibevent2，然后使用xftp把需要的压缩包上传到
本少爷来了·2021-04-12 23:30

FIL挖矿的收益你知道几种？

Filecoin星际文件系统（IPFS）是一种点对点的分布式文件系统，旨在连接所有具有相同文件系统的计算机设备。
IPFS-星云·2021-04-10 09:13

Hadoop HDFS API 操作图文详解及参数解读

HDFS是Hadoop的分布式文件系统，负责海量数据的存取HDFS系列文章请参考：一、HDFS概述|优缺点|组成架构|文件块大小二、HDFS常用Shell命令|图文详解三、HDFS搭建客户端API环境|
lesileqin·2021-04-08 15:30

Hadoop HDFS 搭建客户端 API 环境 | 图文详解 | 提供依赖下载连接

HDFS是Hadoop的分布式文件系统，负责海量数据的存取HDFS系列文章请参考：一、HDFS概述|优缺点|组成架构|文件块大小二、HDFS常用Shell命令|图文详解三、HDFS搭建客户端API环境|
lesileqin·2021-04-07 15:06

Hadoop HDFS 常用Shell命令 | 图文详解

HDFS是Hadoop的分布式文件系统，负责海量数据的存取HDFS系列文章请参考：一、HDFS概述|优缺点|组成架构|文件块大小二、HDFS常用Shell命令|图文详解三、HDFS搭建客户端API环境|
lesileqin·2021-04-05 17:24

2021年 全网最细大数据学习笔记（一）：初识 Hadoop

大数据的特点3、大数据行业应用4、Hadoop与大数据5、其他大数据处理平台6、大数据人才二、什么是Hadoop1、Hadoop简介2、Hadoop的发展历史3、Hadoop的特点三、Hadoop核心1、分布式文件系统
Amo Xiang·2021-04-04 21:58

docker 安装minio及实现文件上传、删除、下载

docker安装minio及实现文件上传、删除、下载要搭建一个分布式文件存储系统，听说fastDFS能实现，于是我搜了一下fastDFS，结果半路杀出一个minio考虑到拓展性、开发api文档完善度、部署效率等原因我选择了
宏辉·2021-04-02 23:26

GlusterFs-1-分布式存储文件系统

参考glusterfs分布式文件系统详细原理参考glusterfs架构和原理参考GlusterFS安装及配置1分布式存储系统分布式存储，如谷歌的分布式文件系统GFS、分布式表格系统googleBigtable
皮皮冰燃·2021-04-02 14:46

跟我学丨如何用鲲鹏服务器搭建Hadoop全分布式集群

使用本地文件系统，而不是分布式文件系统
·2021-03-31 15:58

跟我学丨如何用鲲鹏服务器搭建Hadoop全分布式集群

使用本地文件系统，而不是分布式文件系统
·2021-03-31 15:58

hadoop大数据平台搭建（一）

适用于大数据的技术，包括大规模并行处理（MPP）数据库、数据挖掘、分布式文件系统、分布式数据库、云计算平台、互联网和可扩展的存储系
卫魔王·2021-03-28 15:33

FastDFS

theme:hydrogenhighlight:agate头图来自：https://www.zcool.com.cn/u/14...FastDFS一、FastDFS基本了解1、FastDFS概念FastDFS
·2021-03-23 01:15

FastDFS

theme:hydrogenhighlight:agate头图来自：https://www.zcool.com.cn/u/14...FastDFS一、FastDFS基本了解1、FastDFS概念FastDFS
·2021-03-23 01:30

龙芯3A2000移植Hadoop指南

龙芯3A2000上运行Hadoophadoop实现了一个分布式文件系统（hadoopDistributedFileSystem），简称HDFS。
·2021-03-22 14:58

新年上班第一天生产环境分布式文件系统崩了！！

写在前面说来也怪，早不崩晚不崩，偏偏在上班第一天的时候，生产环境分布式文件系统崩了。
·2021-03-21 11:07

云服务器Ubuntu系统安装搭建FastDFS

百度云盘下载：链接：https://pan.baidu.com/s/1LCBukP5BbdRvZyFnTmjJPw提取码：7gxy2、创建好tracker和storage文件夹mkdir-p/home/mm/fastdfs
安易学车·2021-03-20 09:36

Centos7.x 搭建FastDFS并通过Nginx配置http或https访问

FastDFS及其架构的简介：FastDFS：是一个开源的分布式文件系统，用C语言实现，它对文件进行管理，功能包括：文件存储、文件同步、文件访问（文件上传、文件下载）等，解决了大容量存储和负载均衡的问题
dev_winner·2021-03-19 22:33

大数据学习总结（2021版）---Hadoop（入门）

这里写目录标题第1章Hadoop概述1.1大数据部门业务流程分析、部门组织结构（重点）1.2Hadoop组成（面试重点）1.2.1HDFS架构：分布式文件系统1.2.2YARN：Hadoop的资源管理器
亿钱君·2021-03-19 15:52

Hadoop ,Mapreduce,Spark的区别

Hadoop,Mapreduce,Spark的区别1.Hadoop是一种用于处理和存储海量数据的分布式系统开源软件，核心部分为：HDFS，YARN，MapreduceHDFS是分布式文件系统，HDFS通过数据备份
高级cv算法设计师·2021-03-12 00:35

GFS分布式文件系统、集群

GFS分布式文件系统、集群一、GlusterFS简介二、GlusterFS特点三、GlusterFS术语四、GlusterFS构成五、GFS支持的卷六、GFS部署1、环境准备2、更改节点名称3、节点磁盘挂载
17_yyang·2021-03-11 15:54

Hadoop的学习路线图

第一类，是我已经掌握的第二类，是TODO准备继续学习的一句话产品介绍:Apache Hadoop:是Apache开源组织的一个分布式计算开源框架，提供了一个分布式文件系统子项目(HDFS)和支
栀子花_ef39·2021-03-11 09:49

NewSQL分布式数据库，例如TIDB用K/V的底层逻辑

内容参考对分布式对定义参考这篇文章：微服务都想用，先把分布式和微服务之间的关系说清楚对分布式架构中心或无中心对比参考这篇文章：分布式存储单主、多主和无中心架构的特征与趋势对HDFS对内部机制参考这篇文章：Hadoop分布式文件系统
·2021-03-11 08:48

微服务想用好，先把分布式和微服务之间的关系搞清楚

一、分布式和微服务架构的定义分布式应用场景涵盖的面非常广，我理解的部分：不同进程之间的互相通信，不同主机的分布式对象之间调用，用于大数据存储的分布式文件系统，用于网络之间相互识别的命名服务，集群中计算或存储的无中心对等模型
·2021-03-11 08:42

分布式存储单主、多主和无中心架构的特征与趋势

分布式对象存储和分布式文件系统具有很强烈的对比性分布式对象存储是key/value的存储模式，以restful访问方式为主，几乎处于扁平化的存储形式，通过地址作为主键，访问、更新的文件对象作为值。
·2021-03-11 08:36

NewSQL分布式数据库，例如TIDB用K/V的底层逻辑

内容参考对分布式对定义参考这篇文章：微服务都想用，先把分布式和微服务之间的关系说清楚对分布式架构中心或无中心对比参考这篇文章：分布式存储单主、多主和无中心架构的特征与趋势对HDFS对内部机制参考这篇文章：Hadoop分布式文件系统
·2021-03-11 08:30

ubantu16.x上搭建hadoop分布式环境

一、vm虚拟机的安装二、vm虚拟机上安装ubuntuserver三、ubuntuserver上搭建hadoop集群四、hadoop生态系统1.hdfs分布式文件系统2.MapReduce分布式计算3.Hbase
A_Zhong20·2021-03-10 22:22

UCache灾备云功能

云备份是通过集群应用、网格技术或分布式文件系统等功能，将网络中大量各种不同类型的存储设备通过应用软件集合起来协同工作，共同对外提供数据存储备份和业务访问的功能服务。
北京数据中心机房·2021-03-10 12:24

微服务想用好，先把分布式和微服务之间的关系搞清楚

一、分布式和微服务架构的定义分布式应用场景涵盖的面非常广，我理解的部分：不同进程之间的互相通信，不同主机的分布式对象之间调用，用于大数据存储的分布式文件系统，用于网络之间相互识别的命名服务，集群中计算或存储的无中心对等模型
·2021-03-09 22:31

分布式存储单主、多主和无中心架构的特征与趋势

分布式对象存储和分布式文件系统具有很强烈的对比性分布式对象存储是key/value的存储模式，以restful访问方式为主，几乎处于扁平化的存储形式，通过地址作为主键，访问、更新的文件对象作为值。
·2021-03-09 22:28

Docker安装FastDFS的方法步骤

拉取镜像dockerpullseason/fastdfs:1.2启动Trackerdockerrun-ti-d--nametrakcer-v/opt/fastdfs/tracker_data:/fastdfs
·2021-03-09 21:39

springboot上传图片后访问图片的几种方式

springboot上传图片后访问图片的几种方式图片存储在本地磁盘，实现WebMvcConfigurer接口添加本地静态资源访问过滤图片存储在本地磁盘，nginx动静分离分布式文件系统minio(对象存储
qq_250056868·2021-03-08 22:45
上一页 40 41 42 43 44 45 46 47 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他