E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
FastDFS分布式文件系统
Windows下安装
FastDFS
FastDFS
是没有Windows版本的,所以采取了Docker去安装,不同Windows系统,Docker安装不尽相同。
DAIHAO丶
·
2023-11-13 02:38
FastDFS
windows
docker
容器
CentOS7下搭建Ceph分布式存储架构
(1).Ceph概述Ceph是为了优秀的性能、可靠性和可扩展性而设计的统一的、
分布式文件系统
,并且还是一个开源的
分布式文件系统
。
假面生
·
2023-11-12 12:52
Centos7服务搭建
linux
深入浅出分布式存储的设计与优化之道
分布式文件系统
和分布式块存储作为云存储中重要的技术,成为奠定云存储发展的重要基石。对于大多数专注于云计算本身的IT技术人员来说,对
分布式文件系统
和分布式块存储未
UCloud_TShare
·
2023-11-12 05:43
技术分享
分布式存储
优化
Spring Boot总结(六):Spring Boot SSO
SpringBoot界面设计SpringBoot总结(四):提高数据库访问性能SpringBoot总结(五):安全设计SpringBoot总结(六):SpringBootSSOSpringBoot总结(七):使用
分布式文件系统
「已注销」
·
2023-11-11 19:05
java
java
后端
hadoop、jboss未授权访问漏洞复现与未授权访问漏洞学习(内含服务器与中间件的区别)
,由于服务器直接在开放了Hadoop机器HDFS的50070web端口及部分默认服务端口,黑客可以通过命令行操作多个目录下的数据,如进行删除,下载,目录浏览甚至命令执行等操作主要HDFS(Hadoop
分布式文件系统
不想当脚本小子的脚本小子
·
2023-11-11 17:28
中间件漏洞复现
安全原理
中间件
安全漏洞
2023.11-9 hive数据仓库,概念,架构
)优点2)缺点四.Hive和数据库比较1)查询语言2)数据更新3)执行延迟4)数据规模五.hive架构流程六.MetaStore元数据管理三种模式一.HDFS、HBase、Hive的区别1、HDFS(
分布式文件系统
白白的wj
·
2023-11-11 01:36
数据仓库
hive
hadoop
分布式软件开发的相关技术
分布式存储系统:了解分布式存储的概念和常见的分布式存储系统,如
分布式文件系统
、分布式数据库、NoSQL数据库等。分布式数据处理:熟悉大数据处理和分布式数据处理框架,如ApacheHa
假装得大佬
·
2023-11-10 06:05
分布式
windows系统部署minio,以及添加到系统服务器
最近想配置一款可以存储文件的服务器,如果使用阿里云OSS、七牛云、腾讯云需要收取比较高的费用,为了节约成本,考虑使用免费开源的软件进行部署,然后对
fastDFS
和MiniO进行了对比:一:安装部署(运维
小蓝波
·
2023-11-10 04:24
Linux
阿里云
云计算
银河麒麟高级服务器部署glusterfs
前言GFS是一个可扩展的
分布式文件系统
,用于大型的、分布式的、对大量数据进行访问的应用。它运行于廉价的普通硬件上,并提供容错功能。它可以给大量的用户提供总体性能较高的服务。
yuchen008
·
2023-11-09 10:25
linux
运维
服务器
kylin
分布式
java将一个url链接或者文字生成二维码并且转成base64
三个问题(前提:没有用统一的图片服务器如:
fastdfs
。)(1):把url链接转成图片保存。这样只需要提供图片的地址就行。(2):但是有的时候,需要提供base64图片流。
ZeroMaster
·
2023-11-09 09:30
spring
springBoot
Java基础
java
base64
SpringBoot 整合 Minio 上传文件
Minio上传文件如果不使用云服务的话,需要本地搭建,一般选择
FastDFS
但是
FastDFS
安装比较复杂,今天了解一款安装使用更简单的存储系统MinIOMinIO是一款高性能、分布式的对象存储系统.它是一款软件产品
java小姜在线冲
·
2023-11-09 03:21
docker
java
容器
版本控制工具之TFS的使用
TFS是微软下面得一款版本控制工具,百度百科说其优点是高可扩展、高可用、高性能、面向互联网服务的
分布式文件系统
。(然鹅我并不懂)现在记录一下怎么使用吧。
C#ToJava
·
2023-11-08 22:50
版本控制
TFS
git
fastDFS
+
fastDFS
-nginx-module安装部署在线预览
目录文章目录目录一、部署的环境准备1.1机器准备1.2系统环境二、
fastdfs
安装及配置2.0安装软件及版本2.1安装依赖包2.2安装libfastcommon2.3安装
fastdfs
主程序2.4
fastdfs
zrx林夕
·
2023-11-08 12:15
fastDFS
nginx
nginx
运维
java笔记:
分布式文件系统
+
FastDFS
+Nginx
java笔记:
分布式文件系统
+
FastDFS
+Nginx
分布式文件系统
概述什么是文件系统?
m0_49234730
·
2023-11-08 12:05
java学习笔记
java
分布式系统
分布式
分布式设计
nginx访问其它
FASTDFS
服务器上的文件
当你的
FASTDFS
文件服务和NGINX前端服务器不是同一台的时候,如果要把
FASTDFS
文件搞能够对外提供访问的外链地址,只能通过跳转的方式,需要如下设置:前端服务器的NGINX配置#
fastdfs
图片和
代码为生的烨天星
·
2023-11-08 12:32
java
nginx
服务器
前端
fastdfs
java
SpringBoot集成
FastDFS
+Nginx整合基于Token的防盗链
为什么要用SpringBoot?SpringBoot是由Pivotal团队提供的全新框架,其设计目的是用来简化新Spring应用的初始搭建以及开发过程。该框架使用了特定的方式来进行配置,从而使开发人员不再需要定义样板化的配置。通过这种方式,SpringBoot致力于在蓬勃发展的快速应用开发领域(rapidapplicationdevelopment)成为领导者。创建独立的Spring应用程序嵌入的
许少年的读书笔记
·
2023-11-08 12:02
(集群)
FastDFS
集群 + Nginx负载 安装部署流程
FastDFS
简介
FastDFS
是一个开源的轻量级
分布式文件系统
,它对文件进行管理,功能包括:文件存储、文件同步、文件访问(文件上传、文件下载)等,解决了大容量存储和负载均衡的问题。
IT界的一颗新星
·
2023-11-08 12:01
Linux
linux
centos
nginx
FastDFS
+Nginx搭建本地服务器并实现远程访问
文章目录前言1.本地搭建
FastDFS
文件系统1.1环境安装1.2安装libfastcommon1.3安装
FastDFS
1.4配置Tracker1.5配置Storage1.6测试上传下载1.7与Nginx
這~悸ベ雨落憂殇
·
2023-11-08 12:51
nginx
服务器
运维
linux
windows
Haddop,HDFS和MapDeduce简单理论
HadoopHadoop1Hadoop2HDFS3.MapDeduceHadoop1Hadoop开源的分布式存储+分布式计算平台核心组件:HDFS:
分布式文件系统
,存储海量数据。
杰KaMi
·
2023-11-07 06:25
linux
hadoop
大数据
Spark基础知识点
分布式文件系统
(HadoopDistributedFileSystem)当数据集达到一定规模,单机无法处理把数据分布到各个独立的机器上(多机器共同协作)网络HDFS优缺点优点:构建在廉价的机器上使用大数据处理高容错硬件错误流式数据访问大规模数据集简单的一致性模型
蛋炒双黄蛋
·
2023-11-07 05:04
Spark
数据库
大数据组件 in K8S
大数据的发展历史大数据技术起源于Google在2004年前后发表的三篇论文,
分布式文件系统
GFS、分布式计算框架MapReduce和NoSQL数据库系统BigTable,俗称"三驾马车"。
无精疯
·
2023-11-06 23:22
【数据开发】大数据平台架构,Hive / THive介绍
其中,Hive是一种基于Hadoop的数据仓库工具,可以将结构化的数据映射到Hadoop的
分布式文件系统
上,并提供类SQL查询功能。
小哈里
·
2023-11-06 23:12
#
后端开发
大数据
架构
hive
FastDFS
的Nginx访问启动与测试
FastDFS
的Nginx访问启动与测试启动带有
Fastdfs
模块的Nginx重启或启动
FastDFS
服务进程fdfs_trackerd/etc/fdfs/tracker.confrestartfdfs_storaged
林间6
·
2023-11-06 18:45
部署
服务器
linux
数据库
安装Nginx并且添加
fastDFS
模块
安装Nginx并且添加
fastDFS
模块因为这个模块必须在Nginx的安装的过程中才能添加,所有我们需要重新安装一个nginx,为了和原来已安装的Nginx进行区分,我们把新安装的Nginx取名为nginx_fdfs
林间6
·
2023-11-06 18:45
部署
linux
运维
服务器
FastDFS
测试
FastDFS
测试
FastDFS
安装完成之后,可以使用fdfs_test脚本测试文件上传测试之前,需要修改client.conf配置文件,修改两个配置base_path=/opt/
fastdfs
/clienttracker_server
林间6
·
2023-11-06 18:15
部署
java
服务器
linux
【大数据处理框架】Hadoop大数据处理框架,包括其底层原理、架构、编程模型、生态圈
文章目录底层原理架构编程模型生态圈Hadoop是一个开源的大数据处理框架,它包含了底层的
分布式文件系统
和分布式计算资源管理系统,以及高级的数据处理编程接口。
我是廖志伟
·
2023-11-06 15:41
#
大数据开发
hadoop
架构
大数据
Hadoopo-MapReduce(数据处理)
以Hadoop
分布式文件系统
(HadoopDistrributedFileSystem,HDFS)和MapReduce(GoogleMapReduce的开源实现)为核心的Hadoop,为用户提供了系统底层细节透明的分布式基
qq_42601983
·
2023-11-06 05:53
【基础篇】大数据学习笔记(4)相关名词解释
GFS:GoogleFileSystemGoogle文件系统HDFS:HadoopDsitributedFileSystemHadoop
分布式文件系统
Zookeeper:分布式应用程序协调服务,是Hadoop
风也醉
·
2023-11-06 02:54
fastdfs
报 response status !=22
以前看到28的异常,主要是下载或上传过程中,中断了现在加了一个storage,无法同步,报22的异常有大佬说是同步的时候,版本不对,加了一个storage的时候,两边需要一样的版本但是我这边,都是一个包解压出来的。不存在版本不对的问题新加的storge的日志就说22错误,看不出啥情况,但是老的storage日志就明确说了,notsame端口2个端口参数,都必须一致记录一下,备忘
dzl84394
·
2023-11-06 01:04
java
dfs
大数据技术中的数据存储
分布式文件系统
(DistributedFileSystem)
分布式文件系统
是大数据存储的基础。它能够将数据分布在不同的节点上,实现数据的分布式存储和访问。Hadoop
分布式文件系统
(HadoopDi
幻想世界中的绚丽色彩
·
2023-11-05 22:58
大数据
linux kvm集群 漂移,KVM虚拟化集群技术概述
笔者在生产环境使用的集群有两种存储方式,基于商业存储和基于开源
分布式文件系统
weixin_39587822
·
2023-11-05 17:07
linux
kvm集群
漂移
大数据入门:Hadoop HDFS存储原理
HDFS即Hadoopdistributedfilesystem(hadoop
分布式文件系统
),在Hadoop当中负责分布式存储阶段的任务,它是一个分布式的文件
成都加米谷大数据
·
2023-11-05 16:35
FastFS OSS MinIO 区别
FastFS是一个
分布式文件系统
,它提供了高性能、高可靠性的文件存储和访问服务。它主要用于大规模数据存储和处理,适用于需要频繁读写大文件的场景。
李昊哲小课
·
2023-11-05 02:54
Java
java
linux
大数据中的
分布式文件系统
MapReduce的选择题
一.选择题一.单选题(共9题,49.5分)(单选题)下列传统并行计算框架,说法错误的是哪一项?A.刀片服务器、高速网、SAN,价格贵,扩展性差上B.共享式(共享内存/共享存储),容错性好C.编程难度高D.实时、细粒度计算、计算密集型正确答案:B:共享式(共享内存/共享存储),容错性好;5.5分(单选题)下列关于MapReduce模型的描述,错误的是哪一项?A.MapReduce采用“分而治之”策略
不想做程序猿的员
·
2023-11-04 22:39
大数据
mapreduce
Fastdfs
安装使用
Fastdfs
安装版本信息CentOS7.3
Fastdfs
V6.01libfastcommonV1.0.41安装libfastcommonlibfastcommon是从
FastDFS
和FastDHT中提取出来的公共函数库直接安装即可
编码语言Codelang
·
2023-11-04 20:07
docker安装软件
docker安装软件0.docker和nvidia-docker1.docker安装
fastdfs
搜索
fastdfs
拉取镜像创建本地目录,并启动容器修改配置文件进入tracker容器,执行命令配置nginxpython
GeekPlusA
·
2023-11-04 06:46
中间件
utils
docker
linux
ubuntu
用CentOS搭建hadoop
其中HDFS
分布式文件系统
中存储是大数据技术的基础;MapReduce编程模型中分布式计算是大数据应用的解决方案。
我一定要研究生毕业.
·
2023-11-03 15:09
hadoop
centos
hdfs
mapreduce
centos安装配置hadoop超详细过程(含故障排除)
以Hadoop
分布式文件系统
(HDFS,HadoopDistributedFilesystem)和MapReduce(GoogleMapReduce的开源实现)为核心的Hadoop为用户提供了系统底层细节透明的分布式基础架构
格格巫 MMQ!!
·
2023-11-03 15:09
liunx
centos
FastDFS
整合nginx
从您提供的步骤来看,
FastDFS
整合nginx的过程包括准备工作、安装
FastDFS
的nginx模块、配置nginx以及启动nginx服务。
ascarl2010
·
2023-11-03 05:54
FastDFS
nginx
运维
IPFS:下一代
分布式文件系统
一概述星际文件系统是一种点对点的
分布式文件系统
,旨在连接所有有相同的文件系统的计算机设备。
壹五叁说IPFS
·
2023-11-03 05:17
docker部署minio并使用springboot连接
需求:工作中,在微信小程序播放时,返回文件流并不能有效的使用,前端需要一个可以访问的地址,springboot默认是有资源拦截器的,但是不适合生产环境的使用可以提供使用的有例如
fastdfs
或者minio
[奸笑]这个不是斜眼笑[奸笑]
·
2023-11-03 00:40
springboot
docker
docker
spring
boot
容器
HashData与HDFS的高效数据交换
背景与挑战在对象存储技术出现和普及之前,HDFS(Hadoop
分布式文件系统
)是市场上为数不多的开源、免费、高性价比(相对于昂贵的SAN系统)PB级存储系统,大量用于企业数据归档场景。
HashData酷克数据
·
2023-11-02 16:06
产品动态
数据仓库
docker-compose服务编排(mysql、redis、mongo、nacos、rabbitmq、kafka、
fastdfs
、minio、es、seata、yapi、jenkins)
centos安装JDK(√)安装jdk去http://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html中下载jdk的安装文件。由于我的Linux是64位的,因此我下载jdk-8u311-linux-x64.tar.gz文件。新建/data/java文件夹,将jdk-8u311-linux-x64
农村小白i
·
2023-11-02 15:17
docker
docker
HRM项目总结
项目原型前端:elementui+div+css后端:使用微服务(springCloud)+SSM,mybatis-plus2.项目架构分析(重点)使用技术分析:MySQL:用于存储数据redis:用于存放缓存
FastDFS
qq_40360083
·
2023-11-02 15:43
HRM项目总结
java
Hadoop HDFS(
分布式文件系统
)
一、HadoopHDFS(
分布式文件系统
)为什么要分布式存储数据假设一个文件有100tb,我们就把文件划分为多个部分,放入到多个服务器靠数量取胜,多台服务器组合,才能Hold住数据量太大,单机存储能力有上限
syst1m'
·
2023-11-02 10:06
大数据
hadoop
hdfs
大数据
SeaweedFS介绍安装集群部署总结
什么是SeaweedFSSeaweedFS是一种简单的、高度可扩展的
分布式文件系统
。SeaweedFS是一个非常优秀的由go语言开发的分布式存储开源项目。
五霸哥
·
2023-11-02 09:31
分布式文件存储
后端
java
go语言
分布式存储
分布式文件存储MinIO实战
1.
分布式文件系统
应用场景互联网海量非结构化数据的存储需求电商网站:海量商品图片视频网站:海量视频文件网盘:海量文件社交网站:海量图片1.1Minio介绍MinIO是一个基于ApacheLicensev2.0
程序猿二鍋頭
·
2023-11-02 07:41
分布式-微服务核心技术
java
分布式存储
elementUI el-upload自定义上传文件,不用action属性
elementUIel-upload自定义上传文件,不用action属性需求描述:如图所示,点击选择文件后,只是选择文件,在点击上传的时候调后台接口而不是上传到
fastDFS
服务器,并且要限制该文件只能上传一个
大雄不是大熊
·
2023-11-02 06:32
vue
elementui
javascript
vue.js
CH7-HarmonyOS数据持久化
关系型数据库基本概念数据库的增删改查数据库谓词的使用查询结果集的使用开发步骤4.对象关系数据库基本概念运作机制ORM开发过程数据服务端开发步骤访问数据库-客户端5.偏好文件开发示例6.分布式数据服务分布式数据库ACID特性运作机制操作步骤7.
分布式文件系统
服务运
一条大蟒蛇6666
·
2023-11-02 05:54
HarmonyOS移动开发
harmonyos
华为
java
数据持久化
数据库
Hive面试题
hive是基于Hadoop构建的一套数据仓库分析系统,它提供了丰富的SQL查询方式来分析存储在Hadoop
分布式文件系统
中的数据:可以将结构化的数据文件映射为一张数据库表,并提供完整的SQL查询功能;可以将
布小昕
·
2023-11-01 20:58
面试
Hive面试
上一页
5
6
7
8
9
10
11
12
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他