GridFS分布式存储

Spark基础入门之深入理解RDD

它代表一个不可变、可分区、里面的元素可并行计算的集合）-**R(Resilient)**:表示弹性，rdd内部的元素可以存在磁盘也可存在内存中-**D(Distributed)**:它内部的元素进行了分布式存储
我家浪猫初长成·2023-06-20 11:59

分布式数据保护策略——多副本和纠删码怎么选？

在之前的《一文读懂分布式存储》文章中，我们介绍了什么是分布式存储。但谈到存储，安全就是一个绕不开的话题。没有数据安全的存储毫无意义。所以数据保护技术对于分布式存储来说非常重要。▉为什么需要数据保护？
了不起的云计算V·2023-06-20 08:22

Vue中如何进行分布式存储与对象存储

Vue中如何进行分布式存储与对象存储随着云计算和大数据时代的到来，分布式存储和对象存储越来越受到关注。在Vue中，我们可以使用不同的分布式存储和对象存储技术来存储和管理数据。
程序媛-徐师姐·2023-06-20 08:06

分布式入门

分布式入门前言分布式概述分布式节点通信技术分布式存储MapReduceSpark前言小白一枚，首先感谢本校大三时期李老师开的分布式计算课程。
长门yuki·2023-06-19 15:59

TBB 开源库及并发 Hashmap 的使用

康俊老师在Raft一致性协议优化、分布式存储与调度、高可用双活容灾、多Region地理分区等分布式处理模块研发领域具备丰富经验，现负责KaiwuDB基础数据结构研发与设计。
·2023-06-19 12:27

系统架构设计师笔记第18期：NoSQL数据库

可扩展性：NoSQL数据库通常采用分布式存储和并行处理技
Evaporator Core·2023-06-19 12:34

关于ceph笔记

ceph笔记：一，ceph介绍ceph:就是一个能提供的文件存储,块存储和对象存储的分布式存储系统,它提供了一个可无限伸缩的Ceph存储集群.RADOS:Ceph的高可靠,高可拓展,高性能,高自动化都是由这一层来提供的
Noah_徐·2023-06-19 01:55

CentOS7 搭建ceph集群

CentOS7搭建ceph集群前言：本来准备的是Ubuntu20，搞了半天上头了把我笔记本正在用的Ubuntu操作系统直接搞崩了，hhhhhh，所以换了CentOS1分布式文件存储系统CephCeph是一个统一的分布式存储系统
weixin_46051525·2023-06-19 01:55

python分布式存储系统_分布式存储系统Ceph : 简介

1Ceph简介及使用场景介绍1.1Ceph简介定义：Ceph是一个统一的分布式存储系统。特点：高性能、高可靠性、高可扩展性。三种存储接口：块存储、文件存储、对象存储。
weixin_39640687·2023-06-19 01:25

Ceph分布式存储笔记

文章目录ceph分布式存储存储分类分布式存储分类HadoopHDFS(大数据分布式文件系统)OpenStack的对象存储Swift公有云对象存储GlusterFSGPFS和HDFS的区别Cephcephg
Salute_Lch·2023-06-19 01:54

进阶知识体系之你不能不知道的CDN

依靠部署在各个地方的边缘服务器，通过分布式存储、负载均衡、网络请求的重定向和内容管理等功能模块，以就近性和服务器负载的判断，确保内容以一种极为高效的方式为用户请求提供所需要的资源。
IT沐华·2023-06-18 23:38

Java Spark 操作 Apache Kudu

一、ApacheKuduApacheKudu是一种列式分布式存储引擎，它的设计目标是支持快速分析和高吞吐量的数据访问，同时也能够支持低延迟、实时查询和更新操作。
小毕超·2023-06-18 18:03

nfs-ganesha将rgw导出为nfs文件接口

概述我们知道ceph是统一的分布式存储系统，其可以提供给应用三种访问数据的接口：对象(RGW)、块(RBD)和文件(CEPHFS)接口。我们在使用对象接口的时候通常都是基于HTTP协议来存取数据。
ypdai·2023-06-18 16:22

什么是AI计算平台？

AI计算平台通常包括多个处理器、专用加速器和高速互联网络，可以快速地进行大量并行计算，同时利用分布式存储和内存层次结构提供高效的数据管理功能。
文慧的科技江湖·2023-06-18 14:08

分布式存储与并行处理环境配置：Hadoop、HBase和Spark等

本文介绍Linux系统中配置Hadoop、HBase和Spark环境，包括安装Java运行环境、下载安装包、进行配置和测试。通过这种方式，可以搭建一个强大的分布式计算环境，用于处理大规模数据集。为了成功配置Hadoop、HBase和Spark环境，需要理解它们之间的关系和各自的组件。配置虚拟机测试环境使用vmwareworkstationpro软件在Windows系统中创建一个虚拟机（后续构建多节
runepic·2023-06-18 08:50

Ceph分布式存储知识总结

Ceph一.deploy-ceph部署投入使用ceph前，要知道一个很现实得问题，ceph对低版本内核得客户端使用非常不友好，低内核是指小于等于3.10.0-862，默认的centos7.5及以下的系统都是小于此类内核，无法正常使用ceph的文件存储（cephFS）块存储（RBD）。ceph部署一定要考虑好版本问题，经测试如果想使用ceph16版本，那你的客户端操作系统内核小于3.10.0-862
张现伟的成长之路·2023-06-18 07:07

分布式常见面试题详解

1.2说一说你对高并发的理解1.3如何实现分布式存储？1.4说一说你对分布式事务的了解1.5分布式系统如何保证最终一致性？1.6谈谈你对分布式的单点问题的了解1.7HTTP和RPC有什么区别？
Redemption&·2023-06-18 06:18

区块链名词图文详解

数字货币就是用区块链技术建立的，区块链技术的匿名性、不可复制性、分布式存储计算等特点是传统互联网技术所不具备的特性。从今天开始，就来给大家普及一下区块链中的一些名词，供大家饭后谈资。
解析区块链·2023-06-18 03:39

k8s 集群部署尝试

部署简单方便且高效二进制源码包的部署方式使用二进制源码包的方式部署会比较麻烦，大概分为如下几步：获取源码包部署在master节点和worker节点上启动相应节点的关键服务master节点上api-server，分布式存储例如
阿兵云原生·2023-06-18 01:28

Spark 2：Spark Core RDD算子

Distributed：RDD中的数据是分布式存储的，可用于分布式计算。Dataset：一个数据集合，用于存放数据的。RDD的五大特性RDD数据结构内部有五个
ZhaoXiangmoStu·2023-06-18 01:27

009、体系架构之HTAP

HTAPHTAP技术传统的HTAP解决方案HATP的要求TiDB的HTAP架构TiDB的HTAP特性使用场景MPPHTAP技术传统的HTAP解决方案HATP的要求可扩展性分布式事务分布式存储同时支持OLTP
数哥·2023-06-17 17:38

G5冲锋G6接应，浪潮存储步步为营

存储平台2.产品平台化演进意义深远3.G6平台打通任督二脉浪潮信息发布G6存储平台10月21日，北京，在IDTC2021浪潮存储数据科技峰会上，浪潮信息重磅发布新一代G6存储平台，全面升级集中式存储、分布式存储系列产品
大话存储·2023-06-17 16:07

磕技术、筑平台，浪潮存储如何持续破局？

今年上半年，浪潮存储更是交出一份靓丽的成绩单：其高端全闪存、分布式存储就在SPC-1测试中接连夺魁，上半年整体出货量位居全球前五，分布式存储更是杀进第二存储市场全球前三，中国存储市场份额第二……所以，浪潮信息总裁彭震敢于在
大数据在线·2023-06-17 16:07

服务器之后加码存储，浪潮信息重磅发布新一代 G6 存储平台

据国际分析机构Gartner报告显示，2021年第一季度，浪潮存储在全闪存存储、分布式存储两个领域分别取得了60%和100%的高速增长，晋阶全球前五。
CSDN云计算·2023-06-17 16:37

k8s 集群部署尝试

部署简单方便且高效二进制源码包的部署方式使用二进制源码包的方式部署会比较麻烦，大概分为如下几步：获取源码包部署在master节点和worker节点上启动相应节点的关键服务master节点上api-server，分布式存储例如
·2023-06-17 13:37

关于屏蔽旧客户端的方案总结

分布式存储中，我们常常需要处理这样的场景：客户端A接入存储，并且开始读写。客户端A网络断开。客户端B接入存储，并且开始读写。
Jiafu·2023-06-17 07:11

DAY 74 ELK企业级日志分析系统

ElasticSearch、Logstash和Kiabana三个开源工具配合使用，完成更强大的用户对日志的查询、排序、统计需求ELK各组件介绍ElasticSearch：是基于Lucene（一个全文检索引擎的架构）开发的分布式存储检索引擎
坤坤爱CTRL music·2023-06-17 00:31

无损网络理论和实践

随着高性能计算、大数据分析、人工智能以及物联网等技术的飞速发展，集中式存储、分布式存储以及云数据库的普及等原因，业务应用有越来越多的数据需要从网络中获取，这对数据中心网络的交换速度和性能要求越来越高。
咸鱼.m·2023-06-16 23:22

大数据相关技术

而处理大数据的技术主要有：分布式存储：多台服务器并行计算（分布式计算）分布式的处理方式又分为批处理和流处理。所谓批处理，就是先攒一段时间的数据，等到又需求的时候
彼得潘多·2023-06-16 19:00

【CDS技术揭秘系列 总篇】阿里云的云定义存储来了

简介：全新发布的云定义存储CDS和传统的存储阵列、分布式存储、软件定义存储的区别在哪里？阿里云存储团队如何看待将来存储的发展趋势？
·2023-06-16 18:45

企业打开云HBase的正确方式，来自阿里云云数据库团队的解读

摘要：一、HBase的历史由来HBase是一个开源的非关系型分布式数据库（NoSQL）,基于谷歌的BigTable建模，是一个高可靠性、高性能、高伸缩的分布式存储系统，使用HBase技术可在廉价PCServer
·2023-06-16 18:38

联想超融合加入龙蜥社区，多产品完成与 Anolis OS 适配

联想超融合产品是利用分布式存储和计算虚拟化技术整合服务器集群、对外提供计算、存储和网络等资源的IT基础架构。联想超融合简化客户的IT基
·2023-06-16 17:58

4EVERLAND 的 IPFS Pinning 服务：4EVER Pin

您可能已经知道星际文件系统或IPFS是一个分布式存储网络，来自世界各地的计算机组成节点共享数据。通常，在IPFS中获取一条数据时，IPFS节点会在本地缓存一份数据，这无疑会占用该节点的空间。
·2023-06-16 17:56

Pharmaceuticals Safety Chain (PSC)是全球第一条进驻药品防伪领域的垂直公有链

充分利用加密网络使用诸如区块链的共识机制来维持和更新状态，并在先期使用成熟的以太坊加密网络创建一个分布式应用，使用分布式储存与算力，整个网络节点的权利与义务相同，系统中数据本质为全网节点共同维护，从而不再依靠于中央处理节点，实现数据的分布式存储
痞子馬·2023-06-16 11:10

ceph分布式存储实战

ceph分布式存储实战分布式存储系统简介性能与优势对比虚拟机安装ceph集群ceph存储系统简介分布式存储概述ceph基础高可用ceph分布式存储系统部署部署ceph集群节点管理ceph使用基础及数据存储案例
theo.wu·2023-06-16 06:21

Spark架构与作业执行流程简介(scala版)

Resilient：弹性的，它表示的是数据可以保存在磁盘，也可以保存在内存中Distributed：它的数据分布式存储，并且可以做分布式的计算D
weixin_30586085·2023-06-16 06:14

华为认证 | HCIE-云计算 考试大纲

设计内容包含不限于如下模块：服务器虚拟化概述、云计算概述、服务器虚拟化部署与运营运维、分布式存储部署与运营运维、传统存储
HCIE考证研究所·2023-06-16 02:32

护航应用的“全科医生”，神州云科亮相四川卫生健康信息技术交流大会

2023年3月23日，神州云科参加2023年四川卫生健康信息技术交流大会，携神州云科应用交付控制器两大系列产品和分布式存储高可用、应用运维可视化和多院区灾备中心建设等医疗行业整体解决方案亮相本次大会。
·2023-06-15 16:11

Ceph分布式存储详解

一、Ceph概述1、存储发展史企业中使用存储按照其功能，使用场景，一直在持续发展和迭代，大体上可以分为四个阶段：DAS：DirectAttachedStorage，即直连存储，第一代存储系统，通过SCSI总线扩展至一个外部的存储，磁带整列，作为服务器扩展的一部分；NAS：NetworkAttachedStorage，即网络附加存储，通过网络协议如NFS远程获取后端文件服务器共享的存储空间，将文件存
wespten·2023-06-15 14:13

大数据遇到区块链

而区块链就是一个超级帐本，它可以记录数据产生的整个过程，且不可篡改，分布式存储。在去
起平·2023-06-15 13:54

HBase集群部署

  HBase是一个面向列的分布式存储数据库。
想你依然心痛·2023-06-14 23:17

数据运营平台-基础架构

目录一、数据存储二、数据计算三、作业调度四、架构安全五、运维管理六、数据权限七、数据查询八、应用层框架一、数据存储底层为统一分布式存储HDFS，HDFS默认采用三份副本策略保证数据的安全性以及可靠性。
戰士·2023-06-14 23:24

大数据学习归纳

Hadoop：Hadoop是一个分布式存储和计算框架，具有高可靠,高扩展,高容错的特点（数据副本和集群）；由底层HDFS分布式文件系
猫腻余腥·2023-06-14 18:52

【MongoDB】--文件存储案例

无论文件多大，利用GridFsTemplate的store方法进行存储，mongodb会自动去分段存储这个文件，一个chunks存储的文件大
DreamBoy_W.W.Y·2023-06-14 08:27

ceph-16.2.10P版分布式存储部署以及块存储、文件存储、对象存储的具体使用方式介绍

1.部署ceph集群部署ceph16即Pacific版本官网地址：https://docs.ceph.com/en/latest/releases/pacific/支持的操作系统：1.1部署方式cephadm:https://docs.ceph.com/en/latest/cephadm/#ceph官方在ceph15版本加入的ceph部署工具ceph-deploy：https://github.c
zhangjwnx·2023-06-14 04:52

一文看懂分布式存储 Ceph 架构原理

【摘要】本文带你层层深入Ceph的架构原理、读写原理，从而理解Ceph的特性及其应用场景。1.什么是Ceph？首先，我们从Ceph的官方网站上，可以看到：“Cephisaunified,distributedstoragesystemdesignedforexcellentperformance,reliabilityandscalability.”从它的定义上我们可以明确它是一种存储系统，而且可
linux大本营·2023-06-14 03:53

云计算——云计算关键技术

座右铭：低头赶路，敬事如仪个人主页：网络豆的主页目录前言一.云计算关键技术1.虚拟化技术2.分布式数据存储技术（1）云计算的分布式存储与传统的存储是不同的。
网络豆·2023-06-14 01:14

Hadoop集群搭建

Hadoop集群搭建Hadoop集群简介Hadoop集群：HDFS集群，YARN集群两个集群逻辑上分离，通常物理在一起两个集群都是标准主从集群HDFS分布式存储主角色NameNode从角色DataNode
Rkun18·2023-06-14 00:00

Python与大数据：Hadoop、Spark和Pyspark的应用和数据处理技巧

章节二：Hadoop和PythonHadoop是一个开源的分布式存储和处理大规模数据的框
小正太浩二·2023-06-13 21:07

如何借助分布式存储 JuiceFS 加速 AI 模型训练

传统的机器学习模型，数据集比较小，模型的算法也比较简单，使用单机存储，或者本地硬盘就足够了，像JuiceFS这样的分布式存储并不是必需品。
·2023-06-13 18:25
上一页 17 18 19 20 21 22 23 24 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他