分布式文件存储系统

怎么用ETL工具实现MQ消息同步

而在一些特定场景下，需要将MQ中的消息同步到数据仓库或其他存储系统中，以便进行更深入的数据分析和挖掘。这时候，ETL工具可以成为实现MQ消息同步的利器。
·2024-02-19 10:43

浅谈高性能缓存架构

单纯依靠存储系统的性能提升不够的，典型的场景有：需要经过复杂运算后得出的数据，存储系统无能为力例如，一个论坛需要在首页展示当前有多少用户同时在线，如果使用MySQL来存储当前用户状态，则每次获取这个总数都要
风清扬鍀师傅·2024-02-15 08:07

【制作100个unity游戏之25】3D背包、库存、制作、快捷栏、存储系统、砍伐树木获取资源、随机战利品宝箱3（附带项目源码）

在这第25篇中，我们将探索如何用unity制作一个3D背包、库存、制作、快捷栏、存储系统、砍伐树木获取资源、随机战利品宝箱等功能，我会附带项目源码，以便你更好理解它。
向宇it·2024-02-15 07:31

分布式文件系统 SpringBoot+FastDFS+Vue.js

分布式文件系统SpringBoot+FastDFS+Vue.js一、分布式文件系统1.1.文件系统1.2.什么是分布式文件系统1.3.分布式文件系统的出现1.3.主流的分布式文件系统1.4.分布式文件服务提供商
良辰美景好时光·2024-02-15 05:20

计算机组成原理：存储系统【二】

个人主页：godspeed_lucip系列专栏：计算机组成与原理基础️1Cache概述️1.1局部性原理1.1.1空间局部性1.1.2时间局部性️1.2性能指标1.2.1解释1.2.2例题1.2.3待解决的问题️1.3知识总结️2Cache与主存的映射2.1知识总览2.2全相联映射（随便放）2.2.1要点2.2.2CPU访问主存2.3直接映射（只可以放在固定位置）2.3.1要点2.3.2改进2.3
godspeed_lucip·2024-02-14 22:41

计算机组成原理：存储系统【一】

个人主页：godspeed_lucip系列专栏：计算机组成与原理基础1主存的模型、寻址1.1总览1.2存储器的层次化结构1.3存储器的分类1.3.1按层次1.3.2按照介质1.3.3按照访问方式1.3.4按照信息的可更改性1.3.5按照信息的可保存性1.4存储器的性能指标1.5总结2主存储器的基本构成2.1总览2.2基本的半导体元件2.2.1构成2.2.2读出数据2.2.3写入数据2.2.4示例2
godspeed_lucip·2024-02-14 22:09

学习总结 - swift适配器 为 Hadoop 的存储层增加对 OpenStack Swift 的支持

本文将探讨通过使用其他的存储系统，例如OpenStackSwift对
天地不仁以万物为刍狗·2024-02-14 07:37

计算机组成原理 1 概论

主要内容：◼数值表示与运算方法◼运算器的功能、组成和基本运行原理◼存储器及层次存储系统◼指令系统◼CPU功能、组成和运行原理◼流水线◼系统总线◼输入输出系前置知识C语言程序设计数值逻辑：组合电路、同步电路概念
Sanchez·J·2024-02-14 06:14

论文阅读-Pegasus：通过网络内一致性目录容忍分布式存储中的偏斜工作负载

论文名称：Pegasus:ToleratingSkewedWorkloadsinDistributedStoragewithIn-NetworkCoherenceDirectories摘要高性能分布式存储系统面临着由于偏斜和动态工作负载引起的负载不平衡的挑战
向来痴_·2024-02-14 06:10

Redis集中管理Session和系统初始化参数详解

Redis是一个开源的、基于内存的键值存储系统，通常用作数据库、缓存或消息传递系统。在Web应用程序中，Redis常用于集中管理Session数据和系统初始化参数。
人生万事须自为，跬步江山即寥廓。·2024-02-14 01:22

大数据量处理以及结果导出技术方案

异步处理结果以excel等文件形式存储于oss等文件存储系统中，并以接口返回的key作为redis的key，oss下载地址作为值将下载地址存储于redis中，设置一定的过期时间。
Ability Liao·2024-02-13 13:54

MongoDB：开启你的NoSQL之旅（一）

一、MongoDB是什么MongoDB简介MongoDB是一个基于分布式文件存储的数据库，由C++语言编写，旨在为Web应用提供可扩展
地瓜伯伯·2024-02-13 13:44

云原生之基石-Docker Compose

假如我们有一个小应用系统，有前端应用程序webapp、后台API服务程序、存储系统、缓
鬓戈·2024-02-13 12:00

缓存预热！真香

缓存预热的目的是尽可能地避免缓存击穿和缓存雪崩，还可以减轻后端存储系统的负载，提高系统的响应速度和吞吐量。预热的必要性缓存预热的好处有很多，如：减少冷启动影响：当系统重启或新启动时，缓存是空的，这被
ღ᭄陽先生꧔ꦿ᭄·2024-02-13 06:45

nodejs学习计划--（八）MongoDB数据库

MongoDB1.简介1.Mongodb是什么MongoDB是一个基于分布式文件存储的数据库，官方地址https://www.mongodb.com/2.数据库是什么数据库（DataBase）是按照数据结构来组织
化作繁星·2024-02-13 06:06

关于SQL注入及防御

关系型数据库数据管理系统主要用于存放结构化数据可高效操作大量数据方便处理数据之间的关联关系常见关系型数据库access:微软出品，小型数据库，使用文件存储，容量不能太大x.mdbsqlite:可移植，文件型存储系统
Wang's Blog·2024-02-13 06:04

GFS分布式文件系统

目录引言一、文件系统的作用1.1、文件系统的挂载使用二、GlusterFS简介三、GlusterFS特点3.1、扩展性和高性能3.2、高可用性3.3、全局同一命名空间3.4、弹性卷管理3.5、基于标准协议四、GlusterFS术语五、GlusterFS构成六、GlusterFS的工作流程理解：七、弹性HASH算法弹性HASH算法优点八、GFS支持七种卷8.1、分布式卷（Distributevolu
IT.cat·2024-02-12 14:56

GFS 分布式文件系统

一、GlusterFS概述1．GlusterFS简介GlusterFS是一个开源的分布式文件系统。由存储服务器、客户端以及NFS/Samba存储网关（可选，根据需要选择使用）组成。
「已注销」·2024-02-12 14:56

详解 GFS分布式文件系统 （条带卷/复制卷/分布式条带卷/分布式复制卷）

GFS分布式文件系统一.GlusterFS概述1.GlusterFS简介2.GlusterFS特点3.GlusterFS术语4.模块化堆栈式架构5.GlusterFS工作流程6.弹性HASH算法7.GlusterFs
W.scaler·2024-02-12 14:55

如何搭建glusterfs分布式存储系统

目录前言什么是分布式存储分布式存储的优点本章重点glusterfs相关术语glusterfs的逻辑卷类型准备6台测试服务器storage服务器安装glusterfs软件并启动分布式集群的结构配置可信池pool创建复制卷--replicatedvolumeclient客户端挂载复制卷卷的删除创建条带卷--stripedvolumeclient客户端挂载条带卷创建分布式卷--replicatedvol
MssGuo·2024-02-12 14:55

畅购商城(十二)：接入微信扫码支付

好好学习，天天向上本文已收录至我的Github仓库DayDayUP：github.com/RobodLee/DayDayUP，欢迎Star畅购商城(一)：环境搭建畅购商城(二)：分布式文件系统FastDFS
Robod·2024-02-12 07:05

缓存穿透问题与解决方案

1.缓存穿透的原因缓存穿透通常发生在恶意攻击或者用户查询不存在的数据时，导致大量请求穿过缓存直接访问后端存储系统。主要原因包括：1.1不存在的数据请求用户或攻击者发送请
张万森的救赎·2024-02-12 07:11

Ceph入门到精通-sysctl参数优化

Ceph是一种开源的、高度可扩展的分布式存储系统，它可以在商业硬件上提供对象、块和文件系统的存储。
·2024-02-11 18:09

极限挑战：使用 Go 打造百亿级文件系统的实践之旅

JuiceFS企业版是一款为云环境设计的分布式文件系统，单命名空间内可稳定管理高达百亿级数量的文件。构建这个大规模、高性能的文件系统面临众多复杂性挑战，其中最为关键的环节之一就是元数据引擎的设计。
·2024-02-11 18:49

Ceph入门到精通-sysctl参数优化

Ceph是一种开源的、高度可扩展的分布式存储系统，它可以在商业硬件上提供对象、块和文件系统的存储。
·2024-02-11 17:41

【制作100个unity游戏之25】3D背包、库存、制作、快捷栏、存储系统、砍伐树木获取资源、随机战利品宝箱1（附带项目源码）

在这第25篇中，我们将探索如何用unity制作一个3D背包、库存、制作、快捷栏、存储系统、砍伐树木获取资源、随机战利品宝箱等功能，我会附带项目源码，以便你更好理解它。人物和视角
向宇it·2024-02-11 15:38

【5G NR】【一文读懂系列】移动通讯中使用的信道编解码技术-Viterbi译码原理

2.3路径度量与状态转移三、Viterbi译码算法工作原理详解3.1算法流程3.2关键步骤3.3译码算法举例3.4性能特点四、Viterbi译码的应用场景4.1移动通信系统4.2卫星通信系统4.3磁盘存储系统五
瑶光守护者·2024-02-11 09:48

Redis-基础知识

Redis-狂神、慕课定义:内存中的数据结构可持久化的存储系统,用作数据库、缓存、消息中间件。
向上的小张·2024-02-11 07:11

分布式存储系统学习笔记(三)—分布式键值系统(1)—Amazon Dynamo

1.概述Dynamo以很简单的键值方式存储数据，不支持复杂的查询。Dynamo中存储的是数据值的原始形式，不解析数据的具体内容。Dynamo主要用于Amazon购物车和S3云存储服务。Dynamo通过组合P2P的各种技术打造了线上可运行的分布式键值系统，下表列出了Dynamo设计时面临的问题及最终采取的解决方案：2.数据分布Dynamo采用一致性哈希将数据分布到多个存储节点中(博文：一天不学习我浑
不会算命的赵半仙·2024-02-11 02:34

Amazon Dynamo学习总结

AmazonDynamo主要技术概要三、数据划分算法四、数据复制五、版本控制六、故障处理七、成员和故障检测一、AmazonDynamo的问世AmazonDynamo是由亚马逊在2007年开发的一种高度可扩展和分布式的键值存储系统
张彦峰ZYF·2024-02-11 02:33

MFS 分布式存储

MFS分布式存储MooseFS是一个具备冗余容错功能的分布式网络文件系统，它将数据分别存放在多个物理服务器或单独磁盘或分区上，确保一份数据有多个副本，然而对于访问MFS的客户端或者用户来说，整个分布式文件系统集群看起来就像一个资源一样
中门对狙·2024-02-11 01:30

2022-01-14 HDC2021技术分论坛：新能力让数据多端协同更便捷，数据跨端迁移更高效！

作者：yijian，终端OS分布式文件系统专家；gongashi，终端OS分布式数据管理专家HarmonyOS作为分布式操作系统，其分布式数据管理能力非常重要。
麻酱不会打麻将·2024-02-11 01:59

C#系列-C#访问hadoop API（9）

在C#中访问Hadoop通常涉及到与Hadoop分布式文件系统（HDFS）进行交互，以及可能执行MapReduce作业或其他Hadoop生态系统组件（如HBase或Hive）。
管理大亨·2024-02-10 22:27

Redis介绍

介绍Redis是一个开源（BSD许可）的，内存中的数据结构存储系统，它可以用作数据库、缓存和消息中间件。
Love皮·2024-02-10 17:37

redis介绍

二、Redis的数据类型Redis是一种高级的key-value的存储系统，其中key值是二进制安全的，这意味着可以用任何二进制序列作为key值，从形如”foo
xmh-sxh-1314·2024-02-10 17:36

【NodeJS】005- MongoDB数据库

1.简介1.1Mongodb是什么MongoDB是一个基于分布式文件存储的数据库，官方地址https://www.mongodb.com/1.2数据库是什么数据库（DataBase）是按照数据结构来组织
℡古壹·2024-02-10 13:48

ftp+nginx实现文件服务器

如果文件需求量大点的，建议用分布式文件服务器，它对横向扩展的支持比较好。1.环境准备CentOS搭建ftp服务nginx环境搭建2.开始整合2.1修改nginx.conf我们需要再nginx.co
FantJ·2024-02-10 05:59

非关系型数据库（NoSql）--MongoDB

MongoDB数据库是除了redis之外的另外一个使用比较广泛的非关系数据库，他是基于分布式文件存储的开源数据库系统，旨在为web应用提供可扩展的高性能数据存储解决方案，将数据存储为一个文档，文档类似与
昆仑草莽·2024-02-10 01:23

etcd 非关系数据库 简介

1.什么是etcd服务etcd是一个采用HTTP协议的健/值对存储系统，它是一个分布式和功能层次配置系统，可用于构建服务发现系统。
宇晨棒棒的·2024-02-09 21:47

编程随笔-ElasticSearch知识导图(1)：全景

但我最初了解ES却是从NoSQL数据库开始，在使用、研究了ES一段时间后，我发现这是一个优秀的分布式部署软件，不仅是一个全文搜索引擎、还是一个分布式存储系统、一个分布式数据库。  
weixin_33868027·2024-02-09 18:58

Redis部署简单步骤及主从搭建

一·单机版部署Redis1·Redis的介绍Redis是一个开源的内存数据结构存储系统，它支持多种数据结构，包括字符串、哈希表、列表、集合、有序集合等，可以用于缓存、消息队列、排行榜、计数器、分布式锁等多种场景
喜欢慢生活·2024-02-09 12:28

Redis的数据结构及应用场景

Redis是一个key-value存储系统，它支持存储的value类型包括string字符串、list链表、set集合、sortedSet有序集合和hash哈希等数据类型。
Python编程社区·2024-02-09 09:52

详细分析Redis性能监控指标 附参数解释（全）

.监控命令3.实战演示前言对于Redis的相关知识推荐阅读：Redis框架从入门到学精（全）Python操作Redis从入门到精通附代码（全）Redis相关知识1.基本指标Redis是一个高性能的键值存储系统
码农研究僧·2024-02-09 08:41

Spring Boot + Vue.js + FastDFS 实现分布式图片服务器（IDEA教学)

IDEA教学笔记详细课程目录什么是文件系统什么是分布式文件系统主流分布式文件系统介绍FastDFS介绍FastDFS工作原理FastDFS安装与配置FastDFS测试-搭建环境
公众号-老炮说Java·2024-02-09 07:46

常用的文件系统、存储类型小整理

趁假期整理学习一番~名称OSSFastDFSJuiceFSCIFSCephFSEFSNFS全称ObjectStorageService(对象存储服务)FastDistributedFileSystem(快速分布式文件系统
Hehuyi_In·2024-02-09 06:16

redis是单线程的，但是为什么还那么快？

Redis（RemoteDictionaryServer）作为一种开源的内存数据存储系统，以其卓越的性能和快速的响应时间成为流行的键值存储数据库。尽管它被称为单线程的数据库，但却能够实现惊人的性能。
DecemberZero2·2024-02-09 01:46

Kafka 入门介绍

Geo-Replication）4.4.生产者（Producers）4.5.消费者（Consumers）4.6.Kafka的保证（Guarantees）4.7.Kafka作为一个消息系统4.8.Kafka作为一个存储系统
流华追梦·2024-02-09 00:43

Raft算法在Curve中的实践

110006508【嵌牛导读】：本文介绍了RAFT算法的特点和基本应用【嵌牛鼻子】：Curve实践【嵌牛模块】：RAFT算法概念、特点、应用场合【嵌牛正文】：urve作为高性能、高可用、高可靠的新一代分布式存储系统
xx_d18b·2024-02-08 19:45

3.3-媒资管理之MinIo分布式文件系统上传视频

文章目录媒资管理5上传视频5.1需求分析5.2断点续传技术5.2.1什么是断点续传5.2.2分块与合并测试5.2.3视频上传流程5.2.4minio合并文件测试5.3接口定义5.4上传分块开发5.4.1DAO开发5.4.2Service开发5.4.2.1检查文件和分块5.4.2.2上传分块5.4.2.3上传分块测试5.5合并分块开发5.5.1service开发5.4.3接口层完善5.5.2合并分块
ANnianStriver·2024-02-08 17:36

Redis篇之持久化

一、为什么要进行持久化Redis是一个基于内存的键值存储系统，但为了保证数据在服务器重启、故障等情况下不丢失。
学java的冲鸭·2024-02-08 15:15
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他