分布式文件存储系统

VIVO- AI进展--机器学习平台建设

鲁文龙表示，这种模式下的机器学习项目会出现如下问题：1、特征与样本层面，添加新特征流程较长，且不同业务间特征无法共用；特征与样本的处理和存储系统性
数据智能谷·2024-01-26 23:23

大数据开发必备工具——Hadoop及整体架构介绍

它由几个关键的组件组成，其中最核心的是Hadoop分布式文件系统（HDFS）和MapReduce计算模型。
love6a6·2024-01-26 21:03

你知道为什么要选择B+树作为数据库索引结构？谈谈你的理解

所以，现在的存储系统，都是分级组织的。最常用的数据尽可能放在更高层、更小的存储器中，只有在当前层找不到，才向更低层、更大的存储器中寻找。这也就解释
风平浪静如码·2024-01-26 17:40

【Redis】网络模型

前言Redis（RemoteDictionaryServer）是一个开源的高性能键值对存储系统，广泛用于各种网络应用中作为数据库、缓存和消息代理。
hope笔记·2024-01-26 14:25

【Redis】命令手册

Redis，作为一个开源的内存数据结构存储系统，因其高性能、易用性和丰富的数据类型而广受开发者青睐。
hope笔记·2024-01-26 14:25

一文了解Ceph原理以及常见ceph指令

Ceph是一个统一的、分布式的存储系统，设计初衷是提供较好的性能、可靠性和可扩展性。涉及初衷是成为一个可避免单点故障的分布式文件系统，提供较好的性能、可靠性和可扩展性。通过网络将数据分散存储在多台独
听说唐僧不吃肉·2024-01-26 13:08

二 Ceph存储工作原理及实现

认识Cephceph是一个能提供文件存储，快存储和对象存储的分布式存储系统。
假面生·2024-01-26 13:38

从Elasticsearch来看分布式系统架构设计

这篇文章中，重点会讨论下分布式数据系统的设计，比如分布式存储系统，分布式搜索系统，分布式分析系统等。我们先来简单看下Elasticsearch的架构。
大叶子不小·2024-01-26 10:11

Redis数据组织揭秘：全局哈希表

首先，Redis作为一个优秀开源的内存数据结构存储系统，可以用作数据库、缓存和消息中介。它支持多种数据结构，包括字符串、哈希表、列表、集合、有序集合等。当我们谈论R
地瓜伯伯·2024-01-26 02:19

mongodn简介

MongoDB是由C++语言编写的，是一个基于分布式文件存储的开源数据库系统。在高负载的情况下，添加更多的节点，可以保证服务器性能。MongoDB旨在为WEB应用提供可扩展的高性能数据存储解决方案。
杜大个·2024-01-25 16:47

一文看懂Redis 6.0多线程IO

个人博客网站：一文看懂Redis6.0多线程IORedis基础Redis是什么Redis是一个基于BSD开源的项目，是一个把结构化的数据放在内存中的一个存储系统。
「已注销」·2024-01-25 15:59

CalvinFS: Consistent WAN Replication and Scalable Metadata Management for Distributed File...——论文泛读

尽管已经开发了许多分布式文件系统以扩展到数千台计算机的集群，但由于在地理距离上提供期望的文件系统语义和工具（如线性化操作、分层访问控制、标准命令行工具等）的困难，这些
妙BOOK言·2024-01-25 14:02

hadoop集群部署

hadoop简介Hadoop是一个由Apache基金会所开发的分布式系统基础架构,是一个存储系统+计算框架的软件框架，主要解决海量数据存储与计算的问题，是大数据技术中的基石。
Cat God 007·2024-01-25 12:45

2019-08-07

MongoDB是一个基于分布式文件存储的数据库。由C++语言编写。旨在为WEB应用提供可扩展的高性能数据存储解决方案。
chengxiaoliang·2024-01-25 10:14

如何使用静态化freemarker和分布式文件系统minIO去存储静态文件 增强访问效率

有的时候把网页文章根据id查询出来可能更快一些但是如果作为静态化处理的话效率可能更好一点目录一、freemarker1.freemarker介绍2、环境搭建&&快速入门2.1pom文件2.2配置文件2.3创建模型类2.4创建模板2.5创建controller2.6测试3.freemarker基础3.1)基础语法种类3.2)集合指令（List和Map）3.3)if指令3.4)运算符3.5)空值处理3
学习中的程序媛~·2024-01-25 10:31

Hudi学习笔记(一)

大数据发展背景Hudi用于管理分布式文件系统上大型分析数据集存储，支持Spark和Flink整合。它能够是DFS数据集在分钟级时延内支持变更，也支持下游系统对这个数据集的增量处理。
一一|一一一亅·2024-01-25 09:37

centos安装api-six以及可视化工具(apisix-dashboard)最新教程

etcd：Key/Value存储系统。APISIX通过插件机制，提供了动态负载平衡、身份验证、限流限速等等功能，当然我们也可以自己开发插件进行拓展。安装教程1安装api-six下载
xc_jim_sun·2024-01-25 09:41

Hadoop HDFS 实现原理图文详解

一、HDFS体系结构1.1HDFS简介Hadoop分布式文件系统(HDFS)是运行在通用硬件(commodityhardware)上的分布式文件系统（DistributedFileSystem）。
禅与计算机程序设计艺术·2024-01-25 07:49

kafka（一）快速入门

kafka是一个分布式、支持分区、多副本，基于zookeeper协调的分布式消息系统；二、应用场景日志收集：一个公司可以用Kafka收集各种服务的log，通过kafka推送到各种存储系统；消息系统：解耦和生产者和消费者
匠道·2024-01-25 05:19

Redis的五种常用数据类型详解及相关面试问题

散列表常用命令使用场景List链表常用命令应用场景Set(集合)常用命令应用场景SortedSet(有序集合)zset常用命令介绍应用场景面试题常问的数据类型简述Redis是一个开源（BSD许可）的，内存中的数据结构存储系统
fpl1116·2024-01-24 20:55

设计数据库原则

本文档明确数据库设计原则和规范，规范数据库对象命名方式，见名知意，强化分工，保证数据库高效稳定运行1数据库设计原则充分考虑业务逻辑和数据分离，数据库只作为一个保证ACID特性的关系数据的持久化存储系统，
FourAu·2024-01-24 17:36

基于大模型(LLM)的数据仓库

一、数据仓库概述数据仓库是一个大型、集中式的存储系统，用于存储和管理企业的结构化数据。数据仓库通过对数据进行整合、清洗、转换和加载等操作，
百度_开发者中心·2024-01-24 16:14

开发「定位线上问题」小工具总结

.写在最前面1.1背景同事给处理各种线上问题以及处理紧急要交付的需求版本的我，紧急插入了一个线上的问题：问题说明：发现从2023.12.25号开始，XX产品上传的计费文件，偶现有超过12小时才进入计费存储系统
phantom_111·2024-01-24 15:58

车联网平台如何提升安全性能浅谈

车联网平台可以通过以下几种方式提升安全性能：加强网络安全管理：车联网服务平台运营企业需要采取必要的安全技术措施，加强智能网联汽车、路侧设备等平台接入安全，主机、数据存储系统等平台设施安全，以及资源管理、
MarkHD·2024-01-24 15:21

redis安装配置及springboot集成

redis是一种高级的key:value存储系统，其中value支持五种数据类型：1.字符串（strings）2.字符串列表（lists
这个名字还中·2024-01-24 13:57

OSS文件上传、MinIO分布式文件存储系统

阿里云OSS上传图片实现步骤：1.定义OSS相关配置application-dev.ymlsky:alioss:endpoint:oss-cn-hangzhou.aliyuncs.comaccess-key-id:LTAI5tPeFLzsPPT8gG3LPW64access-key-secret:U6k1brOZ8gaOIXv3nXbulGTUzy6Pd7bucket-name:sky-take-
miss_you1213·2024-01-24 11:18

Redis 常规操作

Redis是一个高性能、内存型的键值存储系统，不仅作为数据库和缓存使用，还可作为消息中间件。
月与篝火·2024-01-24 10:11

《互联网项目实战》课件

（1）讲师介绍知一老师主讲项目实战课高级架构师擅长微服务系统基础架构RPC注册中心MQ分布式文件存储分布式K-V存储擅长互联网业务系统架构电商系统IM系统直播答题（2）初识电商项目淘宝核心流程首页taobao.com
琛哥的程序·2024-01-24 09:08

架构篇17：高性能缓存架构

文章目录缓存穿透缓存雪崩缓存热点实现方式小结虽然我们可以通过各种手段来提升存储系统的性能，但在某些复杂的业务场景下，单纯依靠存储系统的性能提升不够的，典型的场景有：需要经过复杂运算后得出的数据，存储系统无能为力例如
星猿杂谈·2024-01-24 09:33

hbase 总结

HBase什么是HBasehbase是一个基于java、开源、NoSql、非关系型、面向列的、构建与hadoop分布式文件系统（HDFS）上的、仿照谷歌的BigTable的论文开发的分布式数据库。
l靠近一点点l·2024-01-24 08:24

Hbase原理、基本概念、基本架构

概述HBase是一个构建在HDFS上的分布式列存储系统；HBase是基于GoogleBigTable模型开发的，典型的key/value系统；HBase是ApacheHadoop生态系统中的重要一员，主要用于海量结构化数据存储
wyl9527·2024-01-24 08:24

Hadoop集群（第12期)_HBase简介及安装

可以直接使用本地文件系统也可使用Hadoop的HDFS文件存储系统。为了提高数据
weixin_30451709·2024-01-24 08:23

HBase学习

可以直接使用本地文件系统也可使用Hadoop的HDFS文件存储系统。为了提高数据
mm_bit·2024-01-24 08:20

HBase简易安装和简介

可以直接使用本地文件系统也可使用Hadoop的HDFS文件存储系统。为了提高数据
滑过的板砖·2024-01-24 08:49

分布式文件系统代码详解

全局设置Dataserver定义proto远程调用函数serviceDataServer{//创建文件，对应touch命令rpcCreateFile(CreateFileRequest)returns(BaseResponse){}//创建文件夹，对应mkdir命令rpcCreateDirectory(CreateDirectoryRequest)returns(BaseResponse){}//
误伤这又何妨·2024-01-24 07:24

【Redis】Redis如何实现key的过期删除

Redis作为一款内存存储系统，以其卓越的性能和灵活的数据结构，成为众多开发者和企业构建实时应用的首选。
还在路上的秃头·2024-01-23 23:08

【Redis】redis为什么快

Redis以其卓越的性能、简洁而强大的设计原则，成为众多开发者和企业首选的内存存储系统。
还在路上的秃头·2024-01-23 23:38

【架构】分布式系统及相关技术栈初了解

1.3分布式系统的功能解耦分布式系统按层次划分：2）分布式架构的演变1、初始阶段架构2、应用服务和数据服务分离3、使用缓存改善性能4、使用应用服务器集群5、数据库读写分离6、反向代理和CDN加速7、分布式文件系统和分布式数据库
黑黑白白君·2024-01-23 15:14

论文阅读笔记整理（持续更新）

作者提出提出了ROLEX，一种可扩展的面向RDMA的有序键值存储，使用分解存储系统的学习索引
妙BOOK言·2024-01-23 11:56

FastDFS分布式文件存储

为什么会有分布式文件系统？分布式文件系统是面对互联网的需求而产生。因为互联网时代要对海量数据进行存储。很显然靠简单的增加硬盘个数已经满足不了我们的要求。
愚人钊呀·2024-01-23 09:12

云风网（www.niech.cn）个人网站搭建（三）mongodb本地安装

node开发接口优先进行本地开发，调试完成后进行部署MongoDB是前端开发人员普遍使用的数据库，因为MongoDB不需要图形界面，是一个基于分布式文件存储的开源数据库系统。
niech_cn·2024-01-23 09:24

CentOS 7部署 Ceph分布式存储架构

Ceph是一种为优秀的性能、可靠性和可扩展性而设计的统一的、分布式文件系统。
大帅同学·2024-01-23 09:48

springboot+mongodb,spring整合mongodb

一.mongodb介绍MongoDB是一个基于分布式文件存储[1]的数据库。由C++语言编写。旨在为WEB应用提供可扩展的高性能数据存储解决方案。
java干几年，回到解放前·2024-01-23 05:19

ElasticSearch-搜索(基本的工具)

ElasticSearch作为一个简单的NoSQL风格的分布式文件存储器——我们可以将一个JSON文档扔给Elasticsearch，也可以根据ID检索它们。
liyq007·2024-01-23 05:55

Hadoop -- HDFS

1.什么是Hadoophadoop中有3个核心组件：分布式文件系统：HDFS——实现将文件分布式存储在很多的服务器上分布式运算编程框架：MAPREDUCE——实现在很多机器上分布式并行运算分布式资源调度平台
Cool_Pepsi·2024-01-23 02:42

MongoDB

MongoDB简介基于分布式文件存储的开源数据库系统。旨在为WEB应用提供可扩展的高性能数据存储解决方案。将数据存储
Python野路子·2024-01-22 21:05

Python语言基础之——文件操作

1.文件操作1.计算机数据的存储计算机的存储系统分为运行内存和硬盘两种运行内存：用来保存程序运行过程中产生的数据，程序运行结束后会自动销毁硬盘：用来保存文件，保存在文件中的数据就是保存在硬盘中的，除非手动删除
D低调en·2024-01-22 19:01

架构师的36项修炼-09架构实战案例分析

2.分析一个分布式存储的架构案例，看如何去设计一个分布式存储系统，底层存储系统的架构是如何设计的。3.分析一个反应式编程框架的架构案例，看开发框架的架构是如何设计的。这三类系统架
机智阳·2024-01-22 18:07

Hadooop和Hbase是什么关系

HBase通过Hadoop的HDFS(Hadoop分布式文件系统)和MapReduce实现了水平扩展和处理分布式数据。本文将详细介绍hbase和hadoop有什么关系。
wwwyx12138·2024-01-22 17:50

1.使用分布式文件系统Minio管理文件

分布式文件系统DFS分类文件系统文件系统是操作系统用于组织管理存储设备(磁盘)或分区上文件信息的方法和数据结构,负责对文件存储设备空间进行组织和分配,并对存入文件进行保护和检索文件系统是负责管理和存储文件的系统软件
echo 云清·2024-01-22 15:39
上一页 3 4 5 6 7 8 9 10 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他