E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
fastdfs分布式存储
SpringCloud微服务实战——搭建企业级开发框架(三十六):使用Spring Cloud Stream实现可灵活配置消息中间件的功能
在进行框架设计的时候,我们考虑是否能够和之前实现的短信发送、
分布式存储
等功能一样,抽象统一消息接口,屏蔽底层实现,在用到消息队列时,使用统一的接口代码,然后在根
全栈程序猿
·
2023-10-09 03:01
java
SpringCloud
微服务
spring
cloud
java
分布式文件系统HDFS(林子雨慕课课程)
3.4HDFS的存储原理3.5HDFS数据读写3.5.1HDFS的读数据过程3.5.2HDFS的写数据过程3.6HDFS编程实战3.分布式文件系统HDFS3.1分布式文件系统HDFS简介HDFS就是解决海量数据的
分布式存储
问题为什么会出现分布式文件系统
几窗花鸢
·
2023-10-09 00:47
大数据应用
hadoop
hdfs
hadoop
大数据
个人:大数据复习清单
大数据技术两大核心技术:
分布式存储
,分布式处理。大数据计算模式:批处理计算、流计算、图计算、查询分析计算。云计算处理了两大核心问题:海量数据的
分布式存储
和分布式
imyLove7
·
2023-10-09 00:40
大数据
Hadoop(林子雨慕课课程)
Hadoop2.1Hadoop简介Hadoop可以支持多种编程语言:c,c++,java,pythonHadoop用java语言开发,具有跨平台特性Hadoop两大核心:HDFS+MapReduce分别解决了海量数据的
分布式存储
和分布式处理问题
几窗花鸢
·
2023-10-09 00:05
大数据应用
hadoop
hadoop
大数据
分布式
Windows电脑上的多开器与
分布式存储
系统的关系
Windows电脑上的多开器和
分布式存储
系统是两个不同的概念,二者之间没有直接的关系。多开器是一种软件,它可以在Windows电脑上让用户同时运行多个同一应用程序的实例。
kaixingba
·
2023-10-08 19:25
分布式
Hbase 概念扫盲
首先,它大部分的时候,依赖于Hadoop的
分布式存储
方案HDFS,HDFS的设计初衷就是为了方便水平扩展。Hbase依赖于它,将物理数据落户HDFS。
送过快递的码农
·
2023-10-08 19:01
干货 | 分布式系统的数据分片难题
下面请看具体内容~分布式系统,尤其是
分布式存储
系统,需要解决的两个最主要的问题即数据分片和数据冗余,下图形象生动地解释了其概念和区别:图1来源于:http://book.mixu.net/dis
running_elephant
·
2023-10-08 15:39
大数据
分布式
hash
数据分析
数据库
大数据Hadoop原理:大数据Hadoop技术原理简介
关于Hadoop,大家都知道这是目前市面上主流的大数据都在用的框架,通过
分布式存储
和分布式计算来解决海量数据处理的问题。目前Hadoop已经更
加米谷大数据张老师
·
2023-10-08 06:05
大数据
大数据
hadoop
分布式
SpringBoot vue云办公系统
:工资账套管理添加编辑删除工资账套员工账套设置系统管理:基础信息设置部门管理职位管理职称管理权限组管理操作员管理开发环境和技术开发语言:Java使用框架:springboot+mybatisplus+
fastdfs
beyond阿亮
·
2023-10-08 05:14
springboot_vue
spring
boot
vue.js
java
FastDFS
--多tracker
今天要讲的是添加多个tracker,因为一个tracker肯定会存在单点风险。tracker安装过程不难,请参考胡哥之前的文章,这里不在累述。主要配置各storage里的配置文件和tracker的client.conf配置文件。这样就配置完毕了,我们在各tracker里上传文件试试既然已经多个tracker是正常的,那么假设我其中一台坏了,是否能继续上传文件呢?还是可以上传的。继续,我们换成62这
Linux菜鸟
·
2023-10-08 04:47
MySQL Cluster
分布式存储
:NDB存储引擎支持将数据分布在多
恋喵大鲤鱼
·
2023-10-07 22:16
MySQL
mysql
mysql
cluster
fastFDS概述和使用
SpringBoot-fastFDS是一个集成了
FastDFS
分布式文件系统的框架,可以方便地实现文件上传和下载。
wenyqing
·
2023-10-07 20:08
后端
java
开发语言
spring
Redis持久化、Redis删除策略、Redis淘汰策略、Redis主从复制架构、Redissentinel架构、Redis
分布式存储
架构、Redis实现多级缓存
基于c语言开发高性能key-value存储非关系形数据库数据库。一基础知识1.1五种类型操作1.1.1String1.脚本操作:#添加setkeyvalue#获取getkey#删除数据delkey#添加或者修改多个数据msetkey1value1key2value2#获取多个数据mgetkey1key21.1.2hash每一个key对应的value,类似HashMap集合存储数据的结构。底层使用哈
想回家种地的程序员
·
2023-10-07 16:37
转载:Nginx 架构及核心流程及模块介绍
转载:Nginx架构及核心流程及模块介绍来源:公众号
分布式存储
缓存高性能作者:李航1.Nginx简介以及特点Nginx简介:Nginx(enginex)是一个高性能的Web服务器和反向代理服务器,也是一个
meng_philip123
·
2023-10-07 14:10
大数据学习,涉及哪些技术?
分布式存储
系统:如HadoopHDFS、AmazonS3、GoogleCloudStorage等。数据仓库:如AmazonRedshift
金木讲编程
·
2023-10-07 08:14
大数据
学习
Python数据攻略-Hadoop集群中PySpark数据处理
Hadoop是一个开源的
分布式存储
和计算框架。它让我们可以在多台机器上存储大量的数据,并且进行高效的数据处理。
Mr数据杨
·
2023-10-07 08:33
Python
数据攻略
python
hadoop
开发语言
大规模
分布式存储
系统:原理解析与架构实战 (大数据技术丛书) - 电子书下载 -(百度网盘 高清版PDF格式)...
大规模
分布式存储
系统:原理解析与架构实战(大数据技术丛书)-杨传辉在线阅读百度网盘下载(89hy)书名:大规模
分布式存储
系统:原理解析与架构实战(大数据技术丛书)作者:杨传辉格式:EPUB,HTMLZ,
xiaohuanglv
·
2023-10-06 20:22
Minio
分布式存储
系统
Minio
分布式存储
系统Minio简介分布式系统高可用设计分布式设计数据保护高可用限制一致性安全Minio纠删码Minio如何使用纠删码Minio优点位衰减bitrot保护应用场景Minio简介Minio
m0_67403073
·
2023-10-06 17:50
面试
阿里巴巴
android
前端
后端
minio 分布式对象存储
视频讲解:MinIO很强-让我放弃
FastDFS
拥抱MinIO的8大理由_哔哩哔哩_bilibili参考文档:(87条消息)springboot整合minio全网最详细的教程_java后端指南的博客-CSDN
Tryli
·
2023-10-06 17:49
minio
Keepalived高可用 、 部署Ceph
分布式存储
案例链接Keepalived高可用1.1问题部署两台代理服务器,实现如下效果:利用keepalived实现两台代理服务器的高可用配置VIP为192.168.4.80修改对应的域名解析记录1.2方案实验拓扑如图-1所示,做具体实验前请先配置好环境。image图-1备注:实际操作中DNS服务代理服务器部署在同一台主机上(节约虚拟机资源)。主机配置如表-1所示。表-1image1.3步骤实现此案例需要按
秋天丢了李姑娘
·
2023-10-06 17:13
Redis缓存简述
Redis用缓存:提前把数据取出来保存好(通常保存到读写更快的介质,比如内存),就可以更快地读写缓存分类分布式缓存Redis(分布式缓存)memcached(分布式)Etcd(云原生架构的一个
分布式存储
踏遍三十六岸
·
2023-10-06 09:42
Redis从入门到入土
缓存
redis
分布式
Kafka核心原理
通过分片,将一个大的容器分解为多个小的容器,分布在不同的节点上,从而实现
分布式存储
。分片的数量没有限制,与节点数量没有关系,分片数量不会超过总节点数量的三倍。
我的棉裤丢了
·
2023-10-05 21:37
kafka
kafka
分布式
分布式存储
的前世今生:Filenet未来发展势不可挡!
Filenet致力于存储和分发有价值的内容。用区块链完成价值交换和价值传递,未来将成为区块链3.0时代内容经济的新风向。从最开始的286计算机,硬盘20M,软盘1M,到后来开始出现了光盘,存储空间700M。再到后来用调制解调器拨号上网,开始有了第一个电子邮箱。设定邮箱的时候有服务器参数填写,这时候大家开始有了服务器概念。邮箱的文件传送是通过服务器来进行的,服务器给用户提供文件的存储,还有为各种论坛
壹五叁说IPFS
·
2023-10-05 20:24
单机高并发模型设计
背景在微服务架构下,我们习惯使用多机器、
分布式存储
、缓存去支持一个高并发的请求模型,而忽略了单机高并发模型是如何工作的。
知食份子.
·
2023-10-05 19:15
java
后端
高并发
AI如何实施本地化
Java应用开发中的Maven是对实体本地jar包的一种互联网
分布式存储
实现。Maven对项目的构建分为清除clean,编译compile,package打包,insta
程序员是干活的
·
2023-10-05 09:36
解决方案
开发语言
java
算法
后端
分布式
1.HDFS基础知识
具备哪些特性(功能、优点、作用)(参考视频-「为什么中国网盘这么难」)分布式
分布式存储
能-无限扩展-支持海量数据存储分块存储针
敲代码的羊
·
2023-10-05 05:41
hdfs
hadoop
big
data
【es】通过API操作es集群
2.可扩展性强:天然支持
分布式存储
,可简单实现上千台服务器的分布式横向火绒。3.高可用,容灾性能好:通过主备节点及故障自动检测与恢复,实现高可用。一、关于ES和MySQL的概
Bogon
·
2023-10-04 16:18
【译】Apache Hadoop 系列之三(用户指南)
概述HDFS是使用Hadoop程序来实现的
分布式存储
系统。一个HDFS集群主要包含管理文件系统命名空间的Namenode以及存储实际数据的Datanode
Kooola大数据
·
2023-10-04 16:02
喜讯!滨合云智实力获Filecoin创始人高度认可!亲自为高标准矿场点赞!
2019年,滨合云智研发团队持之以恒专注
分布式存储
技术以及ipfs/filecoin相关技术研发,积极提交相关代码,积极参与filecoin测试网等各个阶段并帮助File
滨合云智
·
2023-10-04 10:05
为什么比特币不怕被盗?|区块链专题(7)
比特币的去中心化是用非对称加密技术和
分布式存储
实现的。这一节我们继续讲比特币的第2个特性(即不可篡改特性)及其技术实现的来源。
黄金小哥
·
2023-10-04 02:15
Hadoop介绍——HDFS
•Hadoop简介:hadoop官网–
分布式存储
系统HDFS(HadoopDistributedFileSystem)POSIX•
分布式存储
系统•提供了高可靠性、高扩展性和高吞吐率的数据存储服务–分布式计算框架
南宫萧言
·
2023-10-04 01:15
转载:如何提升磁盘IO性能
FastDFS
是一个开源且高效的分布式文件系统。它的初始实现,文件以散列模式随机分布到多个目录,后来又添加了顺序存储实践。通
微微笑_198111
·
2023-10-03 15:34
配置
FastDFS
Java 客户端
学习完整课程请移步互联网Java全栈工程师本节视频【视频】Dubbo实现微服务架构-分布式文件系统-
FastDFS
Java客户端创建项目创建一个名为myshop-service-upload的服务提供者项目安装
撸帝
·
2023-10-03 02:31
一览IPFS技术与应用 探寻Filecoin激励逻辑
本篇研报将从
分布式存储
的发展沿革、技术的第一性角度出发阐述IPFS的技术与应用,并延展至建立在IPFS上的Filecoin激励逻辑,展现围绕IPFS展开的生态图景。
17722458029
·
2023-10-02 22:51
猛犸大陆——区块链核心技术
猛犸大陆显卡矿机;QQ群+770528986跟传统的
分布式存储
有所不同,区块链的
分布式存储
的独特性主要体现在两个方面:一是区块链每个节点都按照块链式结构存储完整的数据,传统
分布式存储
一般是将数据按照一定的规则分成多份进行存储
d719f6b05f08
·
2023-10-02 16:15
编程随笔-ElasticSearch知识导图(2):分布式架构
带着图1中的问题我们来探究一下ES集群,ES集群是一个典型的主从结构,从某种意义上来说,符合现今大多数主流
分布式存储
、分布式计算系统的审美要求。下面我们逐步来了解集群中的这些东东。
weixin_34186950
·
2023-10-02 13:40
大数据
数据库
数据结构与算法
Linux下Socket编程——epoll的使用
需要c/c++Linux服务器高阶知识视频资料的朋友可以点击链接加入群聊【linux后台服务架构交流】知识点有C/C++,Linux,golang技术,Nginx,ZeroMQ,MySQL,Redis,
fastdfs
Linux高级开发
·
2023-10-02 13:00
epoll
Linux
架构师
C/
C++
组件分享之后端组件——一个简单且高度可扩展的分布式文件系统seaweedfs
组件基本信息组件:seaweedfs开源协议:Apache-2.0License内容本节我们分享一个
分布式存储
系统seaweedfs,它是一个用于bl
cn華少
·
2023-10-02 04:55
“去中心化”真的去了中心吗?
去中心化:不需要中心机构来验证交易,而是使用非对称加密技术和
分布式存储
,依靠所有节点来验证交易真伪。图片:https://images-cdn.shimo.im/RYE
fengtasy
·
2023-10-02 01:46
FastDFS
公网不能连接客户端的困扰解决方案
公司的
FastDFS
配置在阿里云ESC的服务器上,忽然发现一个很严重的问题就是tracker_server=公网ip:22122竟然启动失败寻找啦很久才找到的解决方案,所以记录一下1.首先先修改tracker.conf
theBookofChange
·
2023-10-02 00:03
在腾讯云服务器上搭建
fastdfs
分布式文件存储服务器
文章目录一.下载所需压缩包二.安装安装tracker(
FastDFS
跟踪器)安装storage存储服务测试图片上传安装nginx浏览器访问图片附:Tracker和Storage的配置文件说明在腾讯云服务器上搭建
西楚子羽
·
2023-10-01 12:16
linux
fastdfs
nginx
linux
Hadoop3.x组件HDFS入门
HDFS,全称HadoopDistributedFileSystem,即Hadoop分布式文件存储系统,是Hadoop核心组件之一,是大数据生态最底层的
分布式存储
服务。
文景大大
·
2023-09-30 21:06
分布式算法相关,使用Redis落地解决1-2亿条数据缓存
面试题:1~2亿数据需要缓存,请问如何设计个存储案例回答:单机单台100%不可能,肯定是
分布式存储
,用redis如何落地?
fiveym
·
2023-09-29 19:44
#
docker
缓存
分布式
算法
virtio 虚拟化系列之一:从 virtio 论文开始(文末有福利~)
SmartX是中国领先的超融合产品与企业云解决方案提供商,拥有国内最顶尖的
分布式存储
和超融合架构研发团队,在
分布式存储
、虚拟化计算、微服务、容器、前端开发、自动化测试等领域都做着行业最前沿的实践。
Linux阅码场
·
2023-09-29 18:12
FastDFS
部署
FastDFS
部署主要牵扯3个组件。Tracker,Storage,nginx(
fastdfs
-nginx-module)一个Tracker下可以挂在多个Storage,从而实现
分布式存储
。
b哈利路亚d
·
2023-09-29 16:16
k8s运维及开发
服务器运维
运维
读懂Filecoin
@[toc]Filecoin项目介绍Filecoin项目:Filecoin是运行在IPFS上的一个激励层,是一个基于区块链的
分布式存储
网络,它把云存储变为一个算法市场,通证(FIL)在这里起到了很重要的作用
夏洛的克
·
2023-09-29 16:03
单机高并发模型设计
背景在微服务架构下,我们习惯使用多机器、
分布式存储
、缓存去支持一个高并发的请求模型,而忽略了单机高并发模型是如何工作的。
StongFang
·
2023-09-29 06:00
后端存储实战课笔记
比如说,如何从单机的存储系统逐步演进为
分布式存储
系统;如何在线平滑的扩容我们的存储系统。在海量数据篇,我们重点解决高
三角形代表重生
·
2023-09-29 06:29
极客时间学习笔记
java
介绍大数据处理架构Hadoop以及其生态系统
Hadoop的特点1.高可靠性采用冗余数据存储方式,Hadoop采用
分布式存储
方式,即使一个
转身丶即天涯
·
2023-09-29 04:40
FastDFS
详解
FastDFS
是一个开源的高性能分布式文件系统(DFS),主要解决海量数据存储问题,特别适合中小文件(建议范围:400K~500M)为载体的在线服务。
hadoop_a9bb
·
2023-09-28 21:35
上一页
12
13
14
15
16
17
18
19
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他