GridFS分布式存储

大数据技术主要包含哪些技术

需要消耗巨大的存储空间，云计算的主要目标是在集中管理下使用巨大的计算和存储资源，用微粒度计算能力提供大数据应用，云计算的发展为大数据的存储和处理提供了解决方案，大数据的出现也加速了云计算的发展，基于云计算的分布式存储技术可以有效地管理大数据
梯度科技·2022-08-08 16:00

微服务整合minio分布式存储（docker部署使用minio）

微服务整合minio分布式存储（docker部署使用minio）前言：MinIO是一个基于ApacheLicensev2.0开源协议的对象存储服务。
夕夕夕兮·2022-08-08 12:02

OpenRaft 在交易撮合引擎中的应用

Openraft是一个Raft的改进版(包括优化选举冲突,解决网络抖动对leadership的影响),它在Databend中为db,table等元数据提供分布式存储和强一致读写
·2022-08-03 11:48

Hadoop原理之——HDFS原理

Hadoop3个核心组件：分布式文件系统：Hdfs——实现将文件分布式存储在很多的服务器上（hdfs是一个基于Linux本地文件系统上的文件系统）分布式运算编程框架：Mapreduce——实现在很多机器上分布式并行运算分布式资源调度平台
三级骑士·2022-08-02 09:33

大数据入门：Hadoop HDFS存储原理

HDFS即Hadoopdistributedfilesystem（hadoop分布式文件系统），在Hadoop当中负责分布式存储阶段的任务，它是一个分布式的文件
加米谷大数据张老师·2022-08-02 09:32

Kylin基本介绍

Kylin1、kylin基本介绍ApacheKylin是一个开源的分布式存储引擎，最初由eBay开发贡献至开源社区。
TUJC·2022-08-01 08:37

大数据(4)：MapReduce

上一篇《大数据(3)：HDFS》分析了Hadoop的分布式存储框架HDFS，这一篇将分析Hadoop的分布式并行计算框架——MapReduce。〇、起源MapReduce源于Google一篇论文。
小道萧兮·2022-07-31 21:12

Hadoop基础入门

Hadoop简介什么是HadoopHadoop是一个适合大数据的分布式存储和计算平台。狭义上来说Hadoop就是一个框架平台，广义上讲Hadoop代表大数据的一个技术生态圈，包括很多其他软件框架。
女友在高考·2022-07-30 08:00

一文参透分布式存储系统Ceph的架构设计、集群搭建（手把手）

1.Ceph概述1.1背景Ceph是一个去中心化的分布式存储系统，提供较好的性能、可靠性和可扩展性。
·2022-07-29 14:54

浅谈DNS、ICMP、NAT

域名服务器是遍布全世界的，采用分布式存储，分摊访问压力、容灾处理。域名服务器的划分：根域名服务器、顶级域名服务器、二级域名服务器、三级域名服务
一杆梅子酒丶·2022-07-29 07:12

DNS域名解析流程及ICMP、NAT技术。

域名解析服务器：采用分布式存储，域名解析服务器遍布世界各地并且进行了层级划分，增加了容灾能力，提高了性能。
ice_玖闻于世丶·2022-07-29 07:41

云计算和大数据区别和联系

1.概述云计算和大数据最重要的都是分布式存储和分布式计算，但二者有所区别。
小胡今天有变强吗·2022-07-28 07:39

docker高级篇-初入分布式云原生-运维开发工程师

文章目录前言一.容器数据卷二.docker安装常用软件2.1tomcat安装2.2mysql安装2.2.2mysql主从复制2.3redis安装三.分布式哈希算法3.1分布式存储之哈希取余算法3.2一致性哈希算法
呆萌小新@渊洁·2022-07-27 10:20

GIAC专访丨DolphinDB研发总监周信静：实时计算，连接时序数据库和核心业务

时序场景不同于传统OLTP，其写入吞吐要求极高，同时数据量也远大于OLTP场景，必须要进行多机分布式存储；同时事务又是一个很好的特性，许多工业控制IoT场景和金融场景需要事务，而现有时序数据库产品鲜有事务的支持
DolphinDB智臾科技·2022-07-26 13:48

SpringBoot MongoDB与MongoDB GridFS基本使用

目录MongoDB的基本使用添加依赖配置application.yml配置启动类配置日志创建User文档对象创建UserRepository执行测试GridFS的基本使用GridFS概述存放文件读取文件删除文件
·2022-07-25 18:08

分布式存储遇上企业云盘

你有没有遇到过这样的场面？当我急于使用某个文件时，发现它很麻烦，我必须在手机，计算机或USB闪存盘上考虑它吗？手机空间中是否所有视频和照片？很难在手机上找到文件，因此，在出差时，您还必须获得单独的USB闪存盘吗？在我国，城市化，网络和智能设备的飞速发展使更多的数据流失了，而越少的失控则依赖于IT建设。为人民服务的系统逐渐与数据集成在一起。智慧和安全涉及我们生活的方方面面。一方面，我们享受大数据带来
zshuping·2022-07-25 11:23

当OLTP数据库遇上分布式存储，我选择走一条难而正确的路

分布式存储可扩展性强、灵活度高，如果能做到集中式存储的低时延，必定会成为主流的存储技术路线。——黄岩黄岩是云和恩墨分布式存储总架构师。
-云和恩墨-·2022-07-25 11:23

大数据之Kafka：Kafka基础架构和核心概念

Kafka基础架构注意：1）一个Topic可以分布式存储在多个broker2）一个Topic的多个分区分布式存储在多个broker3）每个分区都有一台server作为“leader”，零台或者多台server
浊酒南街·2022-07-25 11:04

微服务[学成在线] day04：页面静态化

本章节为【学成在线】项目的day04的内容页面静态化的基本概念Freemarker框架基础入门使用MongoDB提供的GridFS来实现页面数据的分布式储存使用freemarker框架实现页面静态化以及发布目录内容会比较多
cory_lin·2022-07-21 07:12

消息队列 RabbitMQ 遇上可观测 - 业务链路可视化

消息队列RabbitMQ简介阿里云消息队列RabbitMQ版是一款基于高可用分布式存储架构实现的AMQP0-9-1协议的消息产品，兼容开源RabbitMQ客户端，解决开源各种稳定性痛点（例如消息堆积、脑裂等问题
阿里云云栖号·2022-07-20 07:13

智能分层、满足更高工作负载，亚马逊云科技加速云端存储服务创新

编辑|宋慧出品|CSDN云计算分布式存储AmazonS3、弹性计算AmazonEC2，都是亚马逊云科技的当家产品。
CSDN云计算·2022-07-19 07:22

Windows下搭建mongodb分片集群

Windows下搭建mongodb分片集群mongodb版本为3.6.21mongodb分片分片是分布式存储的体现，数据存储于不同的复制集，可以处理更加庞大的数据。
CaptainCats·2022-07-18 21:35

大数据—Hadoop生态圈

生态圈数据存储：HDFSHDFS，它是Hadoop技术体系中的核心基石，负责分布式存储数据，你可以把它理解为一个分布式的文件系统。
活到老&学到老·2022-07-18 13:38

Hadoop生态圈介绍

hadoop生态：1、hadoop的核心组件：（hdfs）分布式存储、（mapReduce）分布式计算、（Yarn）资源调度与任务管理、Common2、Lucene：索引检索工具包3、Nutch：开源的搜索引擎
月疯·2022-07-18 13:07

Redis-Cluster集群、Redis持久化、Redis作MySQL的缓存服务器、配置gearman实现Redis和MySQL数据同步

集群简介Redis的哨兵模式基本已经可以实现高可用，读写分离，但是在这种模式下每台Redis服务器都存储相同的数据，很浪费内存，所以在redis3.0上加入了Cluster集群模式，实现了Redis的分布式存储
lpf_linux·2022-07-18 07:16

MatrixCube揭秘102——300行实现的完整分布式存储系统MatrixKV

今天我们将通过一个简单的分布式存储demo实验来完整的体验下MatrixCube的功能。
·2022-07-17 17:03

国产开源存储之光：Curve 通过信创认证

Curve是一款高性能、易运维、云原生的分布式存储系统，由网易数帆存储团队发起开源，现为CNCF沙箱项目。
·2022-07-15 17:15

消息队列 RabbitMQ 遇上可观测--业务链路可视化

消息队列RabbitMQ简介阿里云消息队列RabbitMQ版是一款基于高可用分布式存储架构实现的AMQP0-9
·2022-07-15 11:37

Hadoop原理之——HDFS原理

Hadoop原理之——HDFS原理Hadoop3个核心组件：分布式文件系统：Hdfs——实现将文件分布式存储在很多的服务器上（hdfs是一个基于Linux本地文件系统上的文件系统）分布式运算编程框架：Mapreduce
zhangbijun1230·2022-07-14 15:48

hadoop核心组件——HDFS系列讲解之HDFS基本介绍

是Hadoop核心组件之一，作为最底层的分布式存储服务而存在。分布式文件
LeeBoolean·2022-07-14 15:13

数据湖概念以及数据湖产生的背景和价值

是构建在低成本分布式存储之上，提供更好事物和性能支持的统一数据存储系统。典型分层如下图所示：最底层为存储层：一般依赖HDFS或者公有云存储（比如S3）保存数据；数据格
TRX1024·2022-07-13 08:57

单机高并发模型设计

在微服务架构下，我们习惯使用多机器、分布式存储、缓存去支持一个高并发的请求模型，而忽略了单机高并发模型是如何工作的。
stoneFang·2022-07-09 08:00

Hive、HDFS和hadoop关系

MapReduce任务，在Hadoop中执行（有些查询没有MR任务，如：select*fromtable）Hadoop和Hive都是用UTF-8编码的Hadoop三大组件：分布式文件系统：HDFS——实现将文件分布式存储在很多的服务器上分布式运算编程框架
怕不是个弱智·2022-07-05 16:22

k8s集群搭建EFK日志平台：ElasticSearch + Fluentd + Kibana

k8s集群kubectlgetnodeEFK简介ElasticSearch：分布式存储检索引擎，用来搜索、存储日志Fluentd：日志采集Kibana：读取es中数据进行可视化web界面展示下载https
全栈测试笔记·2022-07-03 20:19

新书推荐 |《云原生分布式存储基石：etcd深入解析》

新书推荐《云原生分布式存储基石：etcd深入解析》长按二维码了解及购买深度解析Kubernetes的后端存储etcd关键特性的设计与实现原理。
hzbooks·2022-07-02 07:10

4年用户数破亿，孙哥带领波场再创新高

相比之下，在孙宇晨的带领下，波场已经在DeFi、NFT、DApp、稳定币、分布式存储等诸多热门领域中
科技新观察·2022-07-01 10:36

elasticsearch版本介绍

关键词：近实时（NearRealTime）高可用、水平扩展分布式存储、搜索、分析引擎官网：https://www.elastic.co/cn/官网文档：https://www.elastic.co/guide
赶路人儿·2022-06-29 23:05

消息队列 RabbitMQ 遇上可观测--业务链路可视化

消息队列RabbitMQ简介阿里云消息队列RabbitMQ版是一款基于高可用分布式存储架构实现的AMQP0-9-1协议的消息产品，兼容开源RabbitMQ客户端，解决开源各种稳定性痛点（例如消息堆积、脑裂等问题
·2022-06-29 16:17

腾讯云 TStor 统一存储通过信通院首批文件存储基础能力评测

2022年6月16日，中国信息通信研究院（以下简称“中国信通院”）第十四批大数据产品能力评测第二场评审会圆满结束，腾讯云的分布式存储产品"TStor统一存储"顺利通过了文件存储基础能力评测，是国内首批通过该评测的厂商之一
·2022-06-29 15:58

分布式存储与一致性哈希

文章目录背景分布式存储一致性哈希背景许多应用的数据比如聊天内容其实也保存在服务端，而当用户基数庞大的时候，一台服务器肯定是存不下数据的。
小菜鸡加油·2022-06-27 23:28

Kubernetes 跨 StorageClass 迁移 Persistent Volumes 完全指南

我的K8s集群中有两个存储类（StorageClass），一个是OpenEBS提供的本地存储，另一个是QingCloudCSI提供的分布式存储，而且默认的StorageCla
·2022-06-21 12:56

Hadoop系列之HDFS 简介(8)

HDFS简介本节我们开始介绍Hadoop生态里面的其中一个组件——HDFS，包括HDFS架构，数据是怎么在HDFS存储的，HDFS的特性，比如分布式存储、容错性，高可用，可靠性以及块概念等。
不二人生·2022-06-20 12:05

hadoop入门简介

概述：Hadoop是一个适合海量数据的分布式存储和分布式计算的平台。背景：作者DougCutting受Google三篇论文的启发，开发了hadoop。
北慕辰·2022-06-20 12:31

【Hadoop】Hadoop组件 -之 HDFS组件

一、概述Hadoop作为分布式存储，分布式计算的大数据生态系统，涵盖了从数据源到数据采集，数据存储，数据计算，数据分析，数据应用的各个场景，学习大数据的架构，了解各个组件对地工作原理和运行机制非常关键。
Echo_Jiang220417·2022-06-20 12:57

Curve 进入 CNCF Sandbox，完善统一云原生开源存储拼图

2022年6月15日，云原生计算基金会(CNCF)宣布，分布式存储系统Curve被正式接纳为CNCF沙箱（Sandbox）项目。
·2022-06-20 00:46

基于容器云技术的典型遥感智能解译算法集成

张正1,唐娉11中国科学院空天信息创新研究院2中国科学院大学资源与环境学院摘要：针对当前航天遥感信息处理向云计算发展的趋势，将容器云技术应用于遥感数据的智能处理，通过在计算集群中部署遥感解译算法镜像与分布式存储服务
唐名威·2022-06-19 07:11

redis底层数据结构

1、概述相信使用过Redis的各位同学都很清楚，Redis是一个基于键值对（key-value）的分布式存储系统，与Memcached类似，却优于Memcached的一个高性能的key-value数据库
JAVA_日月·2022-06-18 18:55

【Redis】底层数据结构

转：http://www.cnblogs.com/jaycekon/p/6227442.html1、概述相信使用过Redis的各位同学都很清楚，Redis是一个基于键值对（key-value）的分布式存储系统
Dandy1awcoder·2022-06-18 18:55

深入浅出Redis-redis底层数据结构

本文转载自深入浅出Redis-redis底层数据结构1、概述相信使用过Redis的各位同学都很清楚，Redis是一个基于键值对（key-value）的分布式存储系统，与Memcached类似，却优于Memcached
Dorothy_dr·2022-06-18 18:22

Redis-redis底层数据结构

1、概述相信使用过Redis的各位同学都很清楚，Redis是一个基于键值对（key-value）的分布式存储系统，与Memcached类似，却优于Memcached的一个高性能的key-value数据库
思齐小朋友·2022-06-18 18:52
上一页 30 31 32 33 34 35 36 37 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他