分布式存储

对话ChatGPT：AIGC时代下，分布式存储的应用与前景

随着科技的飞速发展，我们正步入一个被称为AIGC时代的全新阶段，人工智能、物联网、大数据、云计算成为这个信息爆炸时代的主要特征。自2022年11月以来，ChatGPT的知名度迅速攀升，引发了全球科技爱好者的极大关注，其高超的编程、撰写文章、解决问题等能力使得文本生成型AI成为热门话题。赞同者着重强调了其在各种环境中展现出的优势，许多科技领域的巨头纷纷表示赞赏。批评者则指出可能带来的各种负面影响，他
浪潮圈·2023-09-20 22:52

使用 4EVERLAND IPFS 固定服务 API

您可能已经知道星际文件系统或IPFS是一个分布式存储网络，来自世界各地的计算机形成节点来共享数据。为了充分受益于在IPFS网络上存储数据，固定文件和文件夹以确保它们在网络上的长期存储至关重要。
·2023-09-20 18:35

基于 ACK Fluid 的混合云优化数据访问（三）：加速第三方存储的读访问，降本增效并行

的混合云优化数据访问（二）：搭建弹性计算实例与第三方存储的桥梁》在前一篇文章《基于ACKFluid的混合云优化数据访问（二）：搭建弹性计算实例与第三方存储的桥梁》中，介绍如何通过ACKFluid接入第三方分布式存储
·2023-09-20 18:03

星辰天合受邀参加太平金科首届开发者大会

星辰天合金融行业解决方案总监雷俊作了《XSKY分布式存储技术和应用》的主题演讲，重点分享了星辰天合的对象存储在金融行业的最佳应用实践。星辰天合金融行业解决方案总监雷俊做分享太平
XSKY星辰天合·2023-09-20 15:35

工欲善其事，必先利其器。——记IPFS挖矿机箱

首先，IPFS网络中的文件会被赋予一个独一无二的哈希值，不可随意更改；其次，IPFS网络是分布式存储，一个文件可被分散
c7e902dbde4b·2023-09-20 11:27

对话ChatGPT：AIGC时代下，分布式存储的应用与前景

随着科技的飞速发展，我们正步入一个被称为AIGC时代的全新阶段，人工智能、物联网、大数据、云计算成为这个信息爆炸时代的主要特征。自2022年11月以来，ChatGPT的知名度迅速攀升，引发了全球科技爱好者的极大关注，其高超的编程、撰写文章、解决问题等能力使得文本生成型AI成为热门话题。赞同者着重强调了其在各种环境中展现出的优势，许多科技领域的巨头纷纷表示赞赏。批评者则指出可能带来的各种负面影响，他
YoungerChina·2023-09-20 07:06

科技云报道：分布式存储红海中，看天翼云HBlock如何突围？

正因如此，分布式存储凭借高安全性、可靠性、可用性、易于扩展等特性，在敏态业务中得到了快速发展。短短几年内，国内分布式存储增长率节节攀升，市场规模不断扩大。中国信通院调查数
科技云报道·2023-09-20 06:18

Ceph数据保护（多副本和纠删码）

文章目录一、什么是分布式存储？二、什么是多副本和纠删码技术？三、多副本和纠删码对存储节点有什么要求？四、什么是M+N:1纠删码？五、多副本和纠删码哪个好，应该如何选择？
gengduc·2023-09-20 05:27

集中式存储和分布式存储

文章目录集中式存储DAS（DirectAttachedStorage，直接连接存储)NAS（NetworkAttachedStorage，网络附加存储）SAN（StorageAreaNetwork，存储区域网络）分布式存储集中式存储和分布式存储的区别存储环境存储方式其他方面存储的未来参考集中式存储集中式存储是指将数据存储在由一台或者多台主机组成的中心节点上
gengduc·2023-09-20 05:57

开源分布式存储系统（HDFS、Ceph）架构分析

文章目录中间控制节点架构-HDFSNameNode节点分析DataNode节点分析SecondNameNode节点分析Client分析完全无中心架构-CephCephMonitor分析CephOSD分析CephManager分析CephClients分析小结HDFS优点缺点Ceph优点缺点参考中间控制节点架构-HDFS以HDFS（HadoopDistributionFileSystem）为代表的架
gengduc·2023-09-20 05:25

Hadoop的YARN高可用

一、YARN简介Hadoop2.0即第二代Hadoop，由分布式存储系统HDFS、并行计算框架MapReduce和分布式资源管理系统YARN三个系统组成，其中YARN是一个资源管理系统，负责集群资源管理和调度
万里长江横渡·2023-09-19 20:23

实时云渲染：元宇宙技术开发核心之一

元宇宙6个核心技术区块链技术：区块链技术是分布式存储、点对点
·2023-09-19 15:33

巨杉与润和软件完成产品兼容认证

巨杉数据库SequoiaDB作为一款金融级分布式关系型数据库，其自研的原生分布式存储引擎支持完整ACID，具备弹性扩展、高并发和高可用特性。基于自研专利
巨杉数据库SequoiaDB·2023-09-19 08:23

开箱即⽤！HashData 云数仓上线华为蓝鲸应⽤商城

近⽇，经过华为对企业技术、产品和服务能⼒的综合评估，酷克数据企业级云原⽣数据仓库HashData通过与华为OceanStorPacific分布式存储的适配与优化，形成⼀体化解决⽅案，成功上线华为蓝鲸应⽤
·2023-09-18 16:34

分布式存储分层：构建高效可靠的数据存储体系

分布式存储分层：构建高效可靠的数据存储体系随着大数据时代的到来，数据已经成为企业和社会最重要的资产之一。如何有效地存储、管理和维护这些数据，成为了一个亟待解决的问题。
a谷雨c·2023-09-17 19:27

系统架构常用的工具

HBaseHBase是一个分布式的、面向列的开源数据库，该技术来源于FayChang所撰写的Google论文“Bigtable：一个结构化数据的分布式存储系统”。
星火撩猿·2023-09-16 21:25

ELK企业级日志分析系统

ElasticSearch、Logstash和Kiabana三个开源工具配合使用，完成更强大的用户对日志的查询、排序、统计需求ElasticSearch是基于Lucene（一个全文检索引擎的架构）开发的分布式存储检索引擎
@LSW·2023-09-16 09:56

ELK 企业级日志分析系统

ElasticSearch：是基于Lucene（一个全文检索引擎的架构）开发的分布式存储检索引擎，用来存储各类日志。
Z在学习·2023-09-16 09:20

ELK 企业级日志分析系统

●ElasticSearch：是基于Lucene（一个全文检索引擎的架构）开发的分布式存储检索引擎，用来存储各类日志。Elasticsearch是用Java开发的，可通过RESTfulWeb接口，让用
M上去学习·2023-09-16 09:49

手动创建k8s local-pv

分布式存储系统，如分布式数据库Cassandr
myonlyzzy·2023-09-15 22:15

开箱即⽤！HashData 云数仓上线华为蓝鲸应⽤商城

近⽇，经过华为对企业技术、产品和服务能⼒的综合评估，酷克数据企业级云原⽣数据仓库HashData通过与华为OceanStorPacific分布式存储的适配与优化，形成⼀体化解决⽅案，成功上线华为蓝鲸应⽤
HashData酷克数据·2023-09-15 08:47

分布式存储泛型应用：Spanner

分布式存储泛型应用：Spanner前言摘要Spanner是谷歌公司研发的全球分布式、同步复制数据库。
星辰的野望·2023-09-14 23:04

Filecoin作为分布式储存的新星潜力巨大！

Filecoin是什么Filecoin是一个分布式存储项目，其官网为Filecoin.io。IPFS网络有巨大的数据存储需求，
6c24d81ff862·2023-09-14 19:53

IPFS之路，第三篇，Web3.0四川峰会，IPFS聚焦Web3.0助力数据东数西算

日，在成都举行，由四川成都市经济和信息化部、成都市人民政府、重庆市经济和信息化委员会联合主办，由加拿大FILWORLD基金会提供支持，会议名称为《Web3.0中国峰会中国大数据应用大会暨IPFS区块链分布式存储行业大会
Edwin_红狼·2023-09-14 17:40

Hbase记录第二篇

而面向列存储，只读取需要的那个列的值，就更适合海量数据的读取统计分析hbase高可靠，高性能，面向列，可伸缩的分布式存储系统介绍按照列簇存储，一个列簇包含很多列。
我爱肉肉·2023-09-14 15:19

分布式理论 - CAP

分布式理论-CAPCAP理论是分布式系统、特别是分布式存储领域中被讨论的最多的理论。
励志成为大牛的小牛·2023-09-14 14:45

【Hbase实战系列】hbase 如何批量删除数据

今天主要来说一下Hbase怎么批量删除数据,我们都知道Hbase是一个Nosql的分布式存储数据引擎,它可以支持千万级别的QPS写入,但是有时候我们需要批量的删除他的数据,今天就来介绍两种方法:1.首先我们想到的就是
JasonLee实时计算·2023-09-14 10:07

Linux下Minio分布式存储安装配置(图文详细)

文章目录Linux下Minio分布式存储安装配置(图文详细)1资源准备1.1创建存储目录1.2获取MinioServer资源1.3获取MinioClient资源2MinioServer安装配置2.1切换目录
战·后风!!·2023-09-14 07:20

什么是Ulord的分布式存储？

这篇文章，我们来了解什么是Ulord的分布式存储。在白皮书中，提到分布式存储服务时是这样阐述的：Ulord使用P2P的超媒体协议，可以让网络更快、更安全、更开放。
yinyuanlin·2023-09-14 04:43

Java中的分布式计算框架有哪些?

ApacheHadoop：一个用于分布式存储和并行处理大数据集的开源框架。它包括Hadoop分布式文件系统（HDFS）和MapReduce计算模型。
玥沐春风·2023-09-13 23:54

GFS分布式存储

glusterFS简介GFS是一个分布式文件系统，只在扩展存储容量，提高性能，并且通过多个互联网络的存储节点的数据进行冗余，以确保数据的可用性和一致性GFS由三个部分组成：存储服务器客户端以及FNS/Samba存储网关组成无元数据服务器：就是保存数据的地方glusterFS特点扩展性和高性能：分布式的特性高可用性：冗余和备灾的能力全局统一命名空间：弹性卷管理：raid0、1、5、6、10基于标准协
dkvhr·2023-09-13 13:55

数字经济时代，IPFS&Filecoin分布式存储将带来哪些便利？

据国际数据中心IDC报告显示：2018年，美国产生了约6.9ZB字节的数据，同年，中国产生了7.6ZB字节的数据。（1ZB≈1万亿GB）2025年，美国预计将产生30.6ZB的数据，而中国约为48.6ZB。届时，时间数据的总和将从2018年的33ZB增长到2025年的175ZB，复合年增长率率先达到61%。挡不住的数据增长无处不在的数据，正在引发一场超乎想象的聚变反应。随着互联网的高速发展，各行各
IPFS星际荧光·2023-09-12 17:42

K8S部署MinIo

一、集群方式：分布式存储方案MinIO的离线k8s容器化部署，超简单!!!
zhangjunli·2023-09-12 15:45

Kubernetes（K8s）上使用分布式存储（Distributed Storage）

摘要在Kubernetes（K8s）上使用分布式存储（DistributedStorage）是一种常见的方案，它可以为集群中的应用程序提供持久性和可扩展性。
卢延吉·2023-09-12 08:58

K8S集群中部署NFS之四：使用StorageClass创建PV

而持久化存储，NFS(NetworkFileSystem）是一个使用比较常用的分布式存储技术，在本系列中，我将详细演进如
乱七八糟谈技术·2023-09-12 05:07

[译] [论文] Bigtable: A Distributed Storage System for Structured Data

译者序本文翻译自2006年Google的分布式存储经典论文：Bigtable:ADistributedStorageSystemforStructuredData(PDF)。
东京的雨不会淋湿首尔·2023-09-10 17:20

大数据导论 笔记

一、大数据方向1、技术发展计算机网络云计算大数据时代人工智能（本科：使用，研究生：推导，博士：创新）2023年大数据模型人工智能元年2、基础课程hadoop大数据基础三大件：HDFS分布式存储、MapReduce
暗托涅瓦·2023-09-10 02:12

ceph分布式存储-增加/删除 Monitor

1.介绍一个集群可以只有一个monitor，我们推荐生产环境至少部署3个。Ceph使用Paxos算法的一个变种对各种map、以及其它对集群来说至关重要的信息达成共识。建议（但不是强制）部署奇数个monitor。Ceph需要mon中的大多数在运行并能够互相通信，比如单个mon，或2个中的2个，3个中的2个，4个中的3个等。初始部署时，建议部署3个monitor。后续如果要增加，请一次增加2个。2.增
lihanglucien·2023-09-10 01:02

一致性hash

问题分布式存储的系统设计中，有一个问题一直困扰着我：方式1.集群中所有的机器，都存储完整的数据，然后所有的机器都可以提供完整服务；方式2.集群中的所有机器，都只存储数据的一部分，然后根据实际情况选择合适的机器进行服务
空即是色即是色即是空·2023-09-09 23:21

es的数据存储结构；近实时查询原因

概述es存储中大体可以看成index(表)+document（行记录）组成es支持分布式存储，一个index会产生多个分片，保存在不同的实例上。其中分为若干个主分片和副分片。
好大的月亮·2023-09-09 15:52

直播 | SDS 容灾方案，让制品数据更安全

近日，腾讯CODINGWePack制品管理系统V1以及腾讯CODINGDevOps研发效能管理平台V7与XSKY星辰天合的统一数据平台XEDP及天合翔宇分布式存储系统完成互相兼容认证，在数据层面满足了共同客户敏捷开发的高可用建设合规要求
·2023-09-09 09:15

k8s安装elasticsearch集群

StatefulSet控制器创建的Pod适合用于分布式存储系统，它最大的特点是各个Pod的数据不一样，各个Pod无法使用同一个存储卷。
MasonYyp·2023-09-09 05:25

Hadoop集群搭建

Hadoop集群搭建Hadoop集群简介Hadoop集群包括两个集群：HDFS集群、YARN集群两个集群逻辑上分离、通常物理上在一起两个集群都是标准的主从架构集群HDFS集群（分布式存储）主角色：NameNode
藤藤菜丶·2023-09-09 05:45

大数据技术之Hadoop：MapReduce与Yarn概述（六）

目录一、分布式计算二、分布式资源调度2.1什么是分布式资源调度2.2yarn的架构2.2.1核心架构2.2.2辅助架构前面我们提到了Hadoop的三大核心功能：分布式存储、分布式计算和资源调度，分别由Hadoop
何苏三月·2023-09-09 04:17

什么是对象存储

这些对象被存储在分布式存储系统中，通常由多个物理设备或服务器组成，以提供高可用性、冗余和可伸缩性。以下是对象存储的一些关键特点和优点：弹性扩展性：对象存储系统可以
贾斯汀玛尔斯·2023-09-08 13:19

【软考】系统架构设计师-历年论文题目（2013-2022）

2013-2022年系统架构设计师历年论文题目如下：时间题目20131.论软件架构建模技术与应用；2.论企业应用系统的分层架构风格；3.论软件可靠性设计技术的应用；4.论分布式存储系统架构设计20141
Jackilina_Stone·2023-09-08 01:32

FastDFS 原理篇

分布式存储选型这里主要说下按需求选取和使用在这之前使用过glusterfs分布式存储,使用过程中部署比较简单,也容易上手.但是存在如下几个问题:使用glusterfs主要走的是网络带宽,内网使用率问题.
凯撒公猿·2023-09-07 23:58

Docker之自动化性能监控系统Prometheus&Grafana附实例（三）

成为继kubernetes之后的第二个托管项目，官方网站Prometheus特点多维数据模型：由度量名称和键值对标识的时间序列数据PromSQL:—种灵活的查询语言，可以利用多维数据完成复杂的查询不依赖分布式存储
30岁老阿姨·2023-09-07 10:48

自动化监控系统Prometheus&Grafana

，数据采集→数据处理→数据存储→数据展示→告警Prometheus特点展开目录多维数据模型：由度量名称和键值对标识的时间序列数据PromSQL:—种灵活的查询语言，可以利用多维数据完成复杂的查询不依赖分布式存储
渔阳节度使·2023-09-07 10:11

Ceph：一个 Linux PB 级分布式文件系统

本文探讨了Ceph文件系统及其独有的功能，这些功能让它成为可扩展分布式存储的最有吸引力
天狐云通讯八度·2023-09-07 08:50
上一页 10 11 12 13 14 15 16 17 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他