fastDFS分布式文件系统

IPFS系列01-IPFS 前世今生

关于IPFS的理解，网上众说纷纭，很多人说它是区块链项目，也有人说它是分布式文件系统，还有人说它是矿机...这里我们先抛开那些概念，首先我们看看IPFS官网(https://ipfs.io)对它的描述
Rock_Yang·2022-02-16 00:00

FastDFS高可用集群架构配置搭建及使用

一，概述FastDFS是一个开源的高性能分布式文件系统（DFS）。它的主要功能包括：文件存储，文件同步和文件访问，以及高容量和负载平衡。
就叫小木木呀·2022-02-15 19:36

2019-02-11

阿里开源分布式事务解决方案FescarfastdfsFreeMyBatisplugin五大最流行的配置管理工具「Linux中国」2018微信文章排行榜
baitu·2022-02-15 16:16

分布式文件系统调研

数据存储方式文件、块和对象是三种以不同的方式来保存、整理和呈现数据的存储格式。这些格式各有各的功能和限制。文件存储会以文件和文件夹的层次结构来整理和呈现数据；块存储会将数据拆分到任意划分且大小相同的卷中;对象存储会管理数据并将其链接至关联的元数据。三者的本质差别是使用数据的“用户”不同：文件存储的用户是自然人块存储的用户是可以读写块设备的软件系统，例如传统的文件系统、数据库对象存储的用户则是其它计
Minority·2022-02-14 13:43

minIO高可用

1.概述1.1.介绍minIO是目前一个比较轻量级的分布式文件系统，遵循apache2.0开源协议。
黑科技王子·2022-02-14 09:04

Spring Boot+Vue 文件上传，如何携带令牌信息？

@[toc]关于文件上传这块，松哥之前也写了好几篇文章了，甚至还有视频：SpringBoot+Vue+FastDFS实现前后端分离文件上传但是，之前和小伙伴们提到的方案，是基于session来做认证的，
_江南一点雨·2022-02-14 05:38

好玩的大数据之8：Hadoop安装（hadoop-3.2.1，伪分布式部署方式）

Hadoop实现了一个分布式文件系统（HadoopDistributedFileSystem），简称HDFS。
张文斌_2020·2022-02-13 20:44

400ToJava:133-分布式文件系统FastDFS-安装配置

一、FastDFS简介技术论坛：http://bbs.chinaunix.net/forum-240-1.html资源地址：https://sourceforge.net/projects/fastdfs
加菲猫DY·2022-02-12 09:35

CentOS 7.2搭建FastDFS 分布式文件系统，实现高可用集群

分布式集群搭建结构双Tracker2组Group轮询存储策略Keepalived+Nginx高可用Nginx缓存4个存储节点一、集群规划清单1.安装清单软件名称版本百度云盘存放名称FastDFS5.11fastdfs
溯水心生·2022-02-11 11:44

springboot+FastDFS上传图片

1.pom配置FastDFS依赖org.csourcefastdfs-client-java1.29-SNAPSHOTcommons-iocommons-io2.4由于fastdfs-client-javajar
lzm_CX330·2022-02-11 03:45

FastDFS搭建单机图片服务器（一）

根据分布式文件系统-FastDFS在CentOS下配置安装部署和分布式文件系统-FastDFS配置Nginx模块及上传测试一步一步搭建的，但还是碰到了版本太低，导致安装报错的问题。
氨基钠·2022-02-11 02:47

构建dubbo分布式平台-maven构建根项目

JenkinsSOA服务：Dubbo、zookeeper、RestfulSSO单点登录：Redis、JWT、Restful分布式缓存：Redis分布式消息中间件：zookeeper+kafka分布式文件：FastDFS
IT小跑兵·2022-02-10 16:57

几个集群的总结（一）solrCloud

总结下常用的几个集群，大概会涉及SolrCloud、Redis、FastDFS、Dubbo、消息中间件（ActiveMq，RocketMq）。
吹雪007·2022-02-09 22:21

JuiceFS 即将发布 1.0 并调整开源许可

开源一周年JuiceFS开始于2017年，是一款云原生分布式文件系统，旨在帮助企业解决多云、跨云、混合云环境下所面临的诸多挑战：数据安全和保护、大数据架构升级、海量小文件访问、Kubernetes标准存储等
JuiceFS·2022-02-09 16:43

Hadoop学习笔记

参考：http://www.cnblogs.com/heavenwang/p/3988033.html1.基本概念Hadoop是Apache基金会下一个开源的分布式计算平台，它以分布式文件系统HDFS和
yz_wang·2022-02-09 16:30

051-上传下载文件

前面学习了springboot整合FastDFS服务进行文件上传和管理，这是推荐的方式，本文介绍Java原生的文件上传下载功能。
郭艺宾·2022-02-09 02:20

Java实现图片上传至FastDFS入门教程

当然是借助于ajax了,但是ajax又不能提交表单,这里我们还要借助一个插件:jquery.form.js剩下的一个是FastDFS,那么什么是FastDFS呢?
·2022-02-08 11:02

从零搭建Spring Boot脚手架（7）：整合OSS作为文件服务器

最早我搞过FTP，然后又用过FastDFS，接私活的时候我用MongoDB也凑合凑合。现如今时代不同了，开始流行起了OSS。
码农小胖哥·2022-02-07 16:20

centos 7.2安装分布式存储FastDFS

centos7.2安装分布式存储FastDFS图片发自App1、编译和安装所需的依赖包:#yuminstallmakecmakegccgcc-c++perlunzip2、安装libfastcommon（
howdyli·2022-02-07 13:01

fastdfs 03 初步测试-使用自带的Client测试

测试时需要设置客户端的配置文件，编辑/etc/fdfs目录下的client.conf文件，打开文件后依次做以下修改：base_path=/opt/fastdfs_tracker#tracker服务器文件路径
Silently9527·2022-02-07 06:20

JEESZ架构、分布式服务：Dubbo+Zookeeper+Proxy+Restful

分布式分布式服务：Dubbo+Zookeeper+Proxy+Restful分布式消息中间件：KafKa+Flume+Zookeeper分布式缓存：Redis分布式文件：FastDFS负载均衡：Keepalived
IT小跑兵·2022-02-07 03:52

FastDFS环境搭建

说两句搭建FastDFS踩了些坑，搞了快2天才搞定，记录操作步骤和踩过的坑。FastDFS是一个开源的分布式文件系统。
扑棱扑棱的小菜鸟·2022-02-06 08:17

Hadoop并行计算原理与分布式并发编程

我们通常说的分布式系统其实是分布式软件系统，即支持分布式处理的软件系统，它是在通信网络互联的多处理机体系结构上执行任务的，包括分布式操作系统、分布式程序设计语言及其编译(解释)系统、分布式文件系统和分布式数据库系统等
漫天雪_昆仑巅·2022-02-05 07:37

网络爬虫抓取图片并上传到fastdfs图片不完整问题解决

注意：如果直接使用uri的连接将图片上传到fastdfs会导致图片上传不完整，所以需要将图片先保存下来，上传完成后再删除ImagedownloadpublicstaticStringfastdfsdownload
piziyang12138·2022-02-05 01:04

HDFS(分布式文件系统)

Block(数据块)：HDFS上面基本默认的基本存储单位，大小一般为128M一个大的文件会被拆分成一个个的数据块，然后存储在不同的机器。若小于block的大小，则实际占用的空间为其文件的大小基本的读写单位，每次读的都是一个块，每个块都会被复制到多台机器HDFS采用的是master/slave架构。一个HDFS集群是由一个NameNode和多个DataNode构成。NameNode(元数据节点)和D
GakkiLove·2022-02-04 23:58

Hadoop RPC机制详解

远程过程调用(RPC)是一种常用的分布式网络通信协议，他允许运行于一台计算机的程序调用另一台计算机的子程序，同时将网络的通信细节隐藏起来，使得用户无需额外地为这个交互作用编程，大大的简化了分布式程序开发作为一个分布式文件系统
SmallBird_·2022-02-03 04:08

SpringBoot+Minio搭建不再爆肝秃头的分布式文件服务器

前言1）、有人一定会问，为什么不用FastDFS？
福隆苑居士·2022-02-01 15:00

国人的骄傲：FastCFS -- 支持云原生的高性能通用分布式存储系统

FastCFS项目背景介绍FastCFS项目在gitee和github上同时开源，地址分别为：-https://gitee.com/fastdfs100/FastCFShttps://github.com
jerry的技术与思维·2022-01-26 19:09

1安装fastdfs

需要的包：下载#1、使用wget命令下载压缩包，如果没有wget命令使用yum命令安装yuminstallwget#2、下载fastdfswget-c"https://github.com/happyfish100
你家门口的两朵云·2022-01-20 15:51

Hadoop

Hadoop与三遍论文密不可分：①2003年，谷歌发布的分布式文件系统GFS的论文，可以用于解决海量数据存储的问题。②2004年，谷歌发布了MapReduce的论文，可以用于解决海量数据计算的问题。
一任平生cq·2022-01-18 15:35

Flink使用Pod Template将状态快照(Checkpoint、Savepoint)存储在NFS

HDFS作为状态快照（Checkpoint、Savepoint）的存储地址，但是由于仅使用了其HDFS作为状态快照存储地址，且Hadoop框架较重，在k8s集群中占用大量资源，现考虑将其替换为更轻量级的分布式文件系统
另存為·2022-01-16 14:47

Flink使用Pod Template将状态快照(Checkpoint、Savepoint)存储在NFS

HDFS作为状态快照（Checkpoint、Savepoint）的存储地址，但是由于仅使用了其HDFS作为状态快照存储地址，且Hadoop框架较重，在k8s集群中占用大量资源，现考虑将其替换为更轻量级的分布式文件系统
·2022-01-16 14:11

JuiceFS 即将发布 1.0 并调整开源许可

开源一周年JuiceFS开始于2017年，是一款云原生分布式文件系统，旨在帮助企业解决多云、跨云、混合云环境下所面临的诸多挑战：数据安全和保护、大数据架构升级、海量小文件访问、Kubernetes标准存储等
·2022-01-11 16:21

新能力让数据多端协同更便捷，数据跨端迁移更高效！

作者：yijian，终端OS分布式文件系统专家；gongashi，终端OS分布式数据管理专家HarmonyOS作为分布式操作系统，其分布式数据管理能力非常重要。
·2022-01-11 11:28

SpringBoot项目中Fastdfs配置及使用2

相关链接：FastDFS安装教程1（安装、配置、部署、防盗链、nginx、图片压缩）1、下载gitclonehttps://gitee.com/xiaxia_01/fastdfs-spring-boot-starter.gitcdfastdfs-spring-boot-starter2
Youth丶夏夏·2022-01-07 15:37

Java实战之实现文件资料上传并生成缩略图

需求分析时遇到的问题编码过程中遇到的问题三：流程图与UML图四：上传文件资料生成缩略图1.上传图片生成缩略图--FastDFS2.上传视频生成缩略图--javacv3.上传PDF生成缩略图--pdfbox4
·2022-01-02 17:49

linux下FastDFS搭建图片服务器

目录服务器规划一、安装系统组件二、安装fastdfs三、配置图片服务器文件总结服务器规划服务器名称IP地址和端口备注fastdfs-tracker*:22122跟踪服务器/调度服务器fastdfs-storage
·2021-12-24 16:18

巧用符号链接迁移 HDFS 数据，业务完全无感知！

问题JuiceFS是一个基于对象存储的分布式文件系统，在之前跟对象存储比较的文章中已经介绍了JuiceFS能够保证数据的强一致性和极高的读写性能，因此完全可以用来替代HDFS。
·2021-12-21 16:18

SpringBoot整合腾讯云COS对象存储实现文件上传的示例代码

Controller测试上传接口：8、PostMan接口调用9、浏览器预览效果企业级项目开发中都会有文件、图片、视频等文件上传并能够访问的场景，对于初学者Demo可能会直接存储在应用服务器上；对于传统项目可能会单独搭建FastDFS
·2021-12-21 10:41

IPFS是什么？IPFS原理、IPFS存储

以下内容调研截止到2021/11/5日IPFS简介IPFS是一种内容可寻址、点对点、分布式文件系统。IPFS采用内容-地址寻址技术，即通过文件内容进行检索而不是通过文件的网络地址。
k_kK·2021-12-07 14:00

星环科技分布式文件系统TDFS大揭秘（上）

星环科技是一家致力于打造企业级大数据基础软件，围绕数据全生命周期为企业提供基础软件及支持的厂商。在这个数据驱动的数字化世界中，来自社交媒体、金融科技等不同领域的数据正在大幅度增长，例如大量商业报告、网页、图像和音视频等。如今，接近80%的数据都是非结构化的。不同于结构化半结构化数据的良好结构，存储和处理如此庞大的非结构化数据集正在成为传统计算技术的挑战。本文将着重介绍星环科技新推出的一款致力于打造
·2021-12-06 18:19

Hdfs学习（一）

HDFS1、HDFS概述1.1简介HDFS(HadoopDistributedFileSystem)，Hadoop分布式文件系统，用来解决海量数据的存储问题。
·2021-12-01 17:27

Linux下Hadoop 2.7.3 安装搭建过程

LinuxHadoop2.7.3安装搭建Hadoop实现了一个分布式文件系统（HadoopDistributedFileSystem），简称HDFS。
·2021-11-30 14:37

Fastdfs单机 安装

前言：在单个服务器下安装Fastdfs安装gcc（编译时需要）FastDFS是C语言开发，安装FastDFS需要先将官网下载的源码进行编译，编译依赖gcc环境，如果没有gcc环境，需要安装gccyuminstall-ygccgcc-c
细水长流永不粹·2021-11-29 19:05

Fastdfs 卸载

ps-ef|grepfdfskill25225kill261193.查看并删除storaged配置的根目录位置cat/etc/fdfs/storage.conf|grepbase_pathrm-rf/opt/fastdfs
细水长流永不粹·2021-11-29 12:45

大数据的中流砥柱——HDFS hdfs及其特点 hdfs的重要功能 hdfs机制

没有hdfs，大数据就是空话——me（开个玩笑哈哈哈）1、hdfs入门、hdfs介绍HDFS（HadoopDistributedFileSystem），也叫分布式文件系统。
'一生所爱·2021-11-28 17:55

大数据高级开发工程师——Hadoop学习笔记（2）

文章目录Hadoop进阶篇HDFS：Hadoop分布式文件系统分布式文件系统的理解HDFS架构详细剖析1.分块存储2.3副本存储3.
yangwei_sir·2021-11-26 20:41

如何利用 JuiceFS 的性能工具做文件系统分析和调优

作为一个云上的分布式文件系统，任何存入JuiceFS的数据都会按照一定规则拆分成数据块存入对象存储（如AmazonS3），相对应的元数据则持久化在独立的数据库中。
·2021-11-25 16:00

如何利用 JuiceFS 的性能工具做文件系统分析和调优

作为一个云上的分布式文件系统，任何存入JuiceFS的数据都会按照一定规则拆分成数据块存入对象存储（如AmazonS3），相对应的元数据则持久化在独立的数据库中。
JuiceFS·2021-11-25 15:00

centos7安装FastDFS整合Nginx

前言此安装部署方式为公司项目的部署文档，也是由本人编写经多次安装检验，只要环境正常，理论上是决定没问题的。目前在官方镜像CentOS-7-x86_64-Everything-2009.iso制作的系统、华为鲲鹏云centos7上多次实践，均可以正常访问，希望大家安装前确定安装环境。由于鲲鹏云的CPU架构为armv8而centos7之前安装在amd上，所以个人认为应该与CPU没什么关系，可以放心安装
一米阳光zw·2021-11-24 16:47
上一页 34 35 36 37 38 39 40 41 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他