分布式存储集群服务第14页

省心签加入亦来云生态

No.1最高法承认区块链电子证据的合法性No.2区块链技术的可溯源、不可篡改特性No.3分布式存储，数据永不丢失更安全《最高人民法院关于互联网法院审理案件若干问题的规定》第十一条近日，省心签和亦来云(Elastos

豆神CC·2023-10-18 20:34

基于hive的日志数据统计实战

我们可以把hive中海量结构化数据看成一个个的表，而实际上这些数据是分布式存储在HDFS中的。Hive经过对语句进行解

ych0108·2023-10-18 20:56

hive读取mysql日志_基于hive的日志分析系统

我们可以把hive中海量结构化数据看成一个个的表，而实际上这些数据是分布式存储在HDFS中的。Hive经过对语句进行解析和转换，最终生成一系列基于had

Aviationbamboo·2023-10-18 20:25

Hive简介

我们可以把Hive中海量结构化数据看成一个个的表，而实际上这些数据是分布式存储在HDFS中的。Hive经过对语句进行解析和转换，最终生成一系列基于h

needle2·2023-10-18 20:51

基于 hive 的日志数据统计实战

我们可以把hive中海量结构化数据看成一个个的表，而实际上这些数据是分布式存储在HDFS中的。Hive经过对语句进行解

jiangkai_nju·2023-10-18 20:20

虹科产品丨HK-TrueNAS SCALE可使用公共云存储

提供NAS软件的虹科iXsystems公司正在与StorJ合作，利用StorJ的分散式云存储提供全球分布式存储（GDS）服务，作为主要公共云的低成本替代品。

虹科网络基础设施·2023-10-18 19:04

SpringCloud 完整版--（Spring Cloud Netflix 体系）

目录SpringCloudSpringCloudNetflix体系分布式概念：分析图单体应用分布式架构集群微服务分布式+微服务+集群服务注册与发现Eureka作用：为什么使用Eureka？

JH&&HANDSOME·2023-10-18 12:57

基于 ceph-deploy 部署 Ceph 集群

基于ceph-deploy部署Ceph集群1、存储基础1.1单机存储设备1.2单机存储的问题1.3单机存储问题的解决方案1.3.1商业存储解决方案1.3.2分布式存储（软件定义的存储SDS）2、分布式存储

小冯同学。·2023-10-18 08:50

第2章　区块链基础

区块链技术通过建立一个共同维护且不可被篡改的数据库来记录过去的所有交易记录和历史数据，所有的数据都是分布式存储且公开透明的。

xiaohuanglv·2023-10-18 03:19

【重磅】IPFS交易所系统挖矿是什么？？FPS是不是骗局？

IPFS交易系统是首家分布式存储数字资产交易系统，是基于IPFS互联网底层传输协议进行开发应用的项目。

HKC合伙人·2023-10-17 20:43

HBase 入门

HBase是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统，利用HBase技术可在廉价PCServer上搭建起大规模结构化存储集群。

djm猿·2023-10-17 12:20

FastDFS

对于存储而言，小视频的存储量以及容量都是非常巨大的所以我们选择自己搭建分布式存储系统FastDFS进行存储对于推荐算法，我们将采用多种权重的计算方式进行计算对于加

鼠爷ねずみ·2023-10-17 11:21

筑梦数字中国

通过权属的陕西广电网络产业基地数据中心及其网络资源独立开展IDC资源运营业务并基于中国联通西安数据中心、中国电信西部数据中心、天合云创云计算（陕西）基地标准机房和网络资源开展IDC协同运营业务，致力于面向大数据、云计算、物联网、区块链、人工智能、分布式存储

高永智·2023-10-17 10:45

ceph基础知识

1，ceph介绍ceph是一个可靠的，自动重均衡，自动恢复的分布式存储系统。根据场景可以分为三大块：对象存储，块设备存储和文件服务系统。

每天读点书学堂·2023-10-17 07:25

ceph存储

ceph分布式存储普通存储方案DASIDE/SATA/SAS/SCSI等块NASNFS、CIFS、SAMBA等文件系统SANFibreChannel,iSCSI,FoE存储网络块),Openfiler、

weixin_41973331·2023-10-17 07:24

Ceph 相关知识总结整理 | 资料

一、Ceph的原理和架构1.Ceph架构简介及使用场景介绍1.1Ceph简介Ceph是一个统一的分布式存储系统，设计初衷是提供较好的性能、可靠性和可扩展性。

更上一层楼！·2023-10-17 07:23

MinIO （一）安装并生成windows服务

一个程序员_zhangzhen·2023-10-17 06:27

金融用户实践｜分布式存储支持数据仓库业务系统性能验证

作者：深耕行业的SmartX金融团队闫海涛估值是指对资产或负债的价值进行评估的过程，这对于投资决策具有重要意义。每个金融公司资管业务人员都期望能够实现实时的业务估值，快速获取最新的数据和指标，从而做出更明智的投资决策。为了更好地实现实时估值，某金融客户使用SmartX分布式块存储产品SMTXZBS进行系统性能优化探索，并与本地硬盘环境进行了对比测试。本文将重点分享客户在估值业务系统效率提升方向上所

志凌海纳SmartX·2023-10-17 01:22

如何设计神经网络结构,如何设计一个神经网络

然而，直观性的思维是将分布式存储的信息综合起来，结果是忽然间产生想法或解决问题的办法。这种思维方式

神经网络技术宅·2023-10-16 22:55

Ceph分布式存储：资源池Pool的管理与MDS、RBD、RGW接口的部署

文章目录1.Pool（Ceph资源池）1.1Ceph存储池的基本概念1.2资源池Pool的简介1.3资源池的原理1.4如何判断一个Pool资源池应该包含多少PG数？1.5Ceph存储池常用相关管理命令1.5.1创建资源池1.5.2查看资源池1.5.3修改资源池1.5.4删除资源池2.CephFS文件系统----MDS接口2.1简介2.2CephFS文件系统MDS接口的创建2.2.1服务端配置2.2

想当大佬的一天·2023-10-16 21:30

Ceph分布式存储的简单介绍与Ceph集群的部署搭建

文章目录1.存储的概述1.1单机存储设备1.1.1DAS（直接附加存储）1.1.2NAS（网络附加存储）1.1.3SAN（存储区域网络）1.2单机存储的缺陷1.3分布式存储（软件定义的存储SDS）1.4

想当大佬的一天·2023-10-16 21:58

Mapreduce运行异常Container exited with a non-zero exit code 1

文章目录Hadoop版本3.3.1问题描述解决方案Hadoop版本3.3.1问题描述用idea编写mapreduce读写hbase，并打包jar放到集群服务器上运行时出现下面错误：解决方案hadoopclasspath

寅月十八·2023-10-16 07:50

智安网络|边缘计算与分布式存储：数字化时代的新趋势

分布式存储系统应运而生，成为应对数据存储和处理挑战的解决方案。然而，技术的发展不会止步于此，随着时间的推移，分布式存储系统也将迎来新的趋势和变革。

智安网络·2023-10-16 04:59

SparkCore之RDD详解

Distributed：RDD中的数据是分布式存储的，可用于分布式计算。Resilie

LBJ_小松鼠·2023-10-15 19:08

线上线程堆积导致的oom排查思路

背景一个项目文件存储服务选型seaweedfs,一个go实现的分布式存储系统，项目使用Java作为开发语言，一个场景是客户通过http上传文件到fileService服务，fileService收到文件之后

hamish-wu·2023-10-15 17:50

分布式存储系统Ceph应用详解

Ceph的应用一、Ceph存储池(Pool)1.1Ceph存储池的基本概念1.2原理1.3一个Pool资源池应该包含多少PG数？1.4Ceph存储池相关管理命令1.4.1创建1.4.2查看1.4.3修改1.4.4删除二、CephFS文件系统MDS接口三、创建CephFS文件系统MDS接口3.1服务端操作Step1在管理节点创建mds服务Step2查看各个节点的mds服务Step3创建存储池，启用c

白幽幽白·2023-10-15 16:46

Kafka进阶问题

一个大的Topic可以分布式存储在多个Kafkabroker中。Topic可以类比数据库中

热情散尽·2023-10-15 12:55

Ceph分布式存储实践应用之概述

1.背景Ceph是一个去中心化的分布式存储系统，提供较好的性能、可靠性和可扩展性。

麦神-mirson·2023-10-15 12:48

HBase基础

数据量越大，优势越明显；数据量小，比较消耗内存，耗资源；数据量大的时候，可以做到几十亿条数据秒级查询；HBase是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统，利用HBASE技术可在廉价PCS

ziyue7575·2023-10-15 03:31

A Survey on the Security of Stateful SDN Data Planes

带状态数据平面带来的安全隐患引出带状态数据平面的安全隐患问题（比如：有针对的服务否定攻击和状态耗尽攻击以及数据平面攻击等等），要求系统开发人员或者是应用开发人员遵循以下特征：在交换机内部存储每一条流的信息，即状态，包括状态的分布式存储

diwu3940·2023-10-14 23:06

国产KylinV10版使用ceph-deploy部署ceph集群

CEPH安装和配置官⽅⽂档是最好的https://ceph.io/install/此文档的ceph版本是nautilus也就是14的版本Ceph:开源的分布式存储系统。

wsl12105·2023-10-14 13:18

Ceph分布式存储-运维操作笔记

一、Ceph简单介绍1）OSDs:Ceph的OSD守护进程（OSD）存储数据，处理数据复制，恢复，回填，重新调整，并通过检查其它CephOSD守护程序作为一个心跳向Ceph的监视器报告一些检测信息。Ceph的存储集群需要至少2个OSD守护进程来保持一个active+clean状态.（Ceph默认制作2个备份，但可以调整它）2）Monitors:Ceph的监控保持集群状态映射，包括OSD(守护进程)

weixin_30867015·2023-10-14 13:47

（转）Ceph分布式存储-运维操作笔记

一、Ceph简单介绍1）OSDs:Ceph的OSD守护进程（OSD）存储数据，处理数据复制，恢复，回填，重新调整，并通过检查其它CephOSD守护程序作为一个心跳向Ceph的监视器报告一些检测信息。Ceph的存储集群需要至少2个OSD守护进程来保持一个active+clean状态.（Ceph默认制作2个备份，但可以调整它）2）Monitors:Ceph的监控保持集群状态映射，包括OSD(守护进程)

Just do it·2023-10-14 13:46

官方工具Ceph-deploy部署chenlc

前言Ceph是优秀的分布式存储集群，可以为云计算提供可靠的存储服务，本次作者示范部署ceph存储集群，使用的系统ubuntu18.04.2，部署的ceph版本为Luminous，即Ceph12.x。

睿江云计算·2023-10-14 13:10

Ceph 中的写入放大

新钛云服已累计为您分享769篇技术干货介绍Ceph是一个开源的分布式存储系统，设计初衷是提供较好的性能、可靠性和可扩展性。Ceph独一无二地在一个统一的系统中同时提供了对象、块、和文件存储功能。

新钛云服·2023-10-14 13:40

ceph-deploy部署ceph-nautilus

ceph-deploy部署ceph-nautilus借鉴：https://www.e-learn.cn/topic/3678897Ceph介绍Ceph基础Ceph是一个可靠地、自动重均衡、自动恢复的分布式存储系统

潇洒哥cyx·2023-10-14 13:40

Ceph介绍与部署

Ceph介绍与部署一、存储基础1.1、单机存储设备1.1.1、单机存储的问题1.2、商业存储解决方案1.3、分布式存储（软件定义的存储SDS）1.3.1、分布式存储的类型二、Ceph简介三、Ceph优势四

达米安利拉德·2023-10-14 13:39

【大数据】hadoop安装部署（学习笔记）

一、集群组成概述Hadoop集群包括两个集群：HDFS集群、YARN集群两个集群逻辑上分离、通常物理上在一起两个集群都是标准的主从架构集群HDFS集群（分布式存储）：主角色：NameNode从角色：DataNode

rexhao_wmh·2023-10-14 08:44

系统架构师备考倒计时23天(每日知识点)Redis篇

Redis篇1.Redis与Memcache能力对比工作MemCacheRedis数据类型简单key/value结构丰富的数据结构持久性不支持支持分布式存储客户端哈希分片/一致性哈希多种方式，主从、Sentinel

Elaine猿·2023-10-14 05:56

大数据面试题Hbase篇

6.hbase中分布式存储的最小单元？7.简述HBase中compact用途是什么，什么时候触发，分为哪两种，有什么区别，有哪些相关配置参数？8.Region如何预建分区？

后季暖·2023-10-13 23:23

HBase分布式数据库（NoSQL）

ApacheHBase介绍HBase是一个分布式的、面向列的开源数据库，该技术来源于FayChang所撰写的Google论文“Bigtable：一个结构化数据的分布式存储系统”。

敲代码的彭于晏·2023-10-13 23:21

Ubuntu22.04搭建ceph 集群

Ceph是一个开源的、提供软件定义的、统一的分布式存储系统，设计初衷是提供较好的性能、可靠性和可扩展性。

高龄码农创业·2023-10-13 22:03

分布式存储之Ceph集群介绍搭建

块存储：典型设备；磁盘阵列，硬盘作用：主要是将裸磁盘空间映射给主机使用，磁盘阵列（内含多块硬盘）做RAID操作或者LVM操作，逻辑划分出N块Logic盘并映射给主机使用，操作系统会识别到N块硬盘，但是无法感知到底是逻辑盘还是物理盘，所以还是会对其进行分区和格式化（无法共享数据）。每块逻辑盘实际上是由多块硬盘共同组成，在读写数据的时候，几块物理硬盘可以并行寻址和操作，大大提高了IO效率。优点：对块磁

运维-大白同学·2023-10-13 22:03

Ceph初步了解和ceph集群搭建测试

集群搭建测试常用分布式文件系统HadoopFastDFSCephGlusterFSLustre(太老了)Ceph概述Ceph是一个分布式文件系统具有高扩展、高可用(默认3副本存储数据一个挂了还有两个)、高性能(分布式存储数据并发存储和读取

icnvd·2023-10-13 22:32

解读Genaro黄皮书之存储网络：分布式存储，让搜索更精准节能

云端、云计算、云存储……都听说过吧？或者，你也一直在运用中。他们通过集群应用、网络技术或分布式文件系统等功能，将网络中大量各种不同类型的存储设备通过应用软件集合起来协同工作，共同对外提供数据存储和业务访问功能。在互联网时期，这些功能给大家带来了很多便利。然而，随着时代的发展，人们发现这种架构，不仅使网络变得脆弱、破坏隐私、允许存储保持虚高的价格，还制造了阻止数据创新用途的瓶颈。比如，“中央集权式”

rainy_he·2023-10-13 21:14

分布式存储——GlusterFS

原文链接：分布式存储—GlusterFS_西风未眠的技术博客_51CTO博客文章目录GlusterFS简介GlusterFS集群搭建1.gfs集群安装前提2.测试服务器规划3.四台gfs集群节点安装gfs

西风未眠·2023-10-13 13:19

前端轻量级数据库mongodb

数据库的分布式存储分为前端的分布式和后端服务的分布式数据存储。Javaweb的开发领域中使用后端的数据分布式和集群数据微服务处理模式。

程序员是干活的·2023-10-13 11:34

ELK 企业级日志分析系统

●ElasticSearch：是基于Lucene（一个全文检索引擎的架构）开发的分布式存储检索引擎，用来存储各类日志。Elasticsearch是用Java开发的，可通过RESTfulWeb接口，

BryantLSY·2023-10-13 08:33

Kubernetes-2018干货盘点

2018年，我跟随着Kubernetes社区，将其升级到了1.13.2版本，推动将GIS服务器第一次迁移到Kubernetes集群化云原生架构，构建了超过400TB的分布式存储系统，实现了在Kubernetes

weixin_34090562·2023-10-13 04:23

ceph分布式存储环境的搭建

（一）规划设计软件：VMWareworkstation硬件：PC机一台节点名称IP地址系统版本部署进程数据盘Ceph1192.168.150.11Centos-7-x86_64MON+mgr+OSD/dev/sdbCeph2192.168.150.12Centos-7-x86_64MON+mgr+OSD/dev/sdbCeph3192.168.150.13Centos-7-x86_64MON+mg

zhao鑫森·2023-10-13 01:46

推荐频道

分布式存储集群服务