E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
分布式存储CEPH
hadoop 伪分布式模式学习笔记
我采用的是hadoop-2.8.0,它主要包含3大块:hdfs:
分布式存储
系统HDFS(HadoopDistributedFileSystem)
分布式存储
层map
金曜软件工程师
·
2023-10-24 16:44
大数据
大数据
大数据学习
hadoop
人工智能
Effective C++ 第二版
mailgithubzhihuweiboQQSEHoverwritealgorithmbrowserchromechrome-sandboxcppcpp-primercpp-templatesdllhookingexploitglibcglibc-heaplinuxlinux-kernelmmapnovi
ceph
ppool
cxrot
·
2023-10-24 14:07
K8S:以sotrageclass方式部署
ceph
fs为集群后端存储
kubectlgetnodesNAMESTATUSROLESAGEVERSIONk8s01Ready10dv1.16.6k8s02Ready10dv1.16.6k8s03Ready10dv1.16.6②、
ceph
石头-豆豆
·
2023-10-24 12:12
k8s
K8S集群部署kube-Prometheus监控
Ceph
(版本octopus)集群、并实现告警。
K8S集群部署kube-Prometheus监控
Ceph
(版本octopus)集群、并实现告警。
石头-豆豆
·
2023-10-24 12:12
k8s
ceph集群监控
prometheus监控
k8s1.20集群安装rook-
ceph
分布式存储
方案
官网地址:
Ceph
.io—HomeRook是一个开源云原生存储编排器,为各种存储解决方案提供平台、框架和支持,以便与云原生环境原生集成。Rook将存储软件转变为自我管理、自我扩展和自我修复的存储服务。
努力的祥子
·
2023-10-24 12:09
Ceph
kubernetes
ceph
分布式
k8s对接多个external
ceph
集群
背景线上都是一个k8s对接一个
ceph
集群,为了将云盘和系统盘分开到两个物理隔离域中,我们将搭建两个独立的
ceph
集群,这样可以让两个集群完全独立,不会产生任何的干扰。
xql-86
·
2023-10-24 12:39
运维
kubernetes
docker
容器
K8S集群实践之九:
Ceph
Rookisanopensourcecloud-nativestorageorchestrator,providingtheplatform,framework,andsupportfor
Ceph
storagetonativelyintegratewithcloud-nativeenvironments
bennybi
·
2023-10-24 12:38
K8s
kubernetes
ceph
容器
ceph
笔记
01简述
Ceph
的优势及其特点?
Ceph
是一个开源的
分布式存储
系统,具有以下优势和特点:可扩展性:
Ceph
可以轻松地扩展到大规模的存储集群,支持数百或数千个节点,并能够处理PB级别的数据。
The Straggling Crow
·
2023-10-24 04:17
storage
ceph
笔记
大数据学习-Hadoop
大数据学习-Hadoop1.大数据概念现状分析:实时计算原因分析:离线计算预测分析:机器学习(对未来趋势进行预测)2.分布式与集群分布式:多台机器,不同组件
分布式存储
,分布式集群,多台机器集群:多台机器
小七fighting
·
2023-10-24 01:30
大数据
hadoop
大数据
hdfs
一文读懂 HBase 核心原理与应用场景
HBase是大数据NoSQL领域里非常重要的分布式KV数据库,是一个高可靠、高性能、高伸缩的
分布式存储
系统,目前国内知名公司都有在大规模使用,社区也非常活跃。
create17
·
2023-10-24 01:27
分布式
大数据
数据库
java
hadoop
神经网络算法是用来干什么的数学建模
然而,直观性的思维是将
分布式存储
的信息综合起来,结果是忽然间产生的想法或解决问题的办法。这种思维方式的根本之点在于以下两点:1、信息是通过神经元上的兴奋模式分布储在网络上
aifans_bert
·
2023-10-23 21:29
神经网络
人工智能
小发猫神经网络
分布式存储
系统——
ceph
目录一、
分布式存储
类型1、块存储2、文件存储3、对象存储二、
ceph
概述1、
ceph
简介2、
ceph
的优势3、
ceph
架构1)RADOS基础存储系统(Reliab1e,Autonomic,Distributedobjectstore2
hei-tui
·
2023-10-23 14:27
分布式
ceph
11 | NoSQL:在高并发场景下,数据库和NoSQL如何做到互补?
之前介绍了如何将传统的关系型数据库改造成
分布式存储
服务,以抵抗高并发和大流量冲击。
浥羽醉悠扬
·
2023-10-23 12:23
popper 使用_使用popper在skyhookdm
ceph
上可重现的实验和基准
popper使用TL;DR.Inthisarticle,Iwillbetakingyouthroughhowyoucanquicklystartexperimentingwith
Ceph
,frombuildinganddeploying
Ceph
torunningexperimentsandbenchmarksinareproduciblemannerleveragingthePopperworkf
weixin_26739079
·
2023-10-23 08:47
Hadoop HDFS分布式文件系统(介绍以及基础操作命令)
目录一、为什么需要
分布式存储
?
菜鸟一千零八十六号
·
2023-10-23 05:25
大数据
hadoop
hdfs
大数据
Web3.0时代——我们会面对怎样的
分布式存储
网络
关注微博:@IPFS宗师风清扬Web1.0到Web3.0,IPFS为什么能成为引领者Web1.0时代的时候,我们上网都是通过拨号上网的,那时候众多的门户网站就是所有的流量入口,我们与网络的交流是单方面的被动接受。那时候能上网的人很少,网页的打开速度也很慢。之后理所当然的我们进入了web2.0时代,这个时候页面交互开始兴起,各种社交应用应运而生,所有的用户开始通过互联网进行交流,各种平台借此获得大量
IPFS宗师风清扬
·
2023-10-23 04:19
kubernetes常见故障
CNI不可用,其它节点无法连接到故障节点的Pod2.Subpath方式挂载的Configmap,特定条件下出现Pod无限重启的问题3.集群DNS服务器无法通过上游DNS解析外部名称4.节点假死,但是持有的
Ceph
RBD
wangol
·
2023-10-23 03:24
2018-10-22
比特币谈论区块链的人越来越多了,区块链算法本身是一种
分布式存储
模型,专门用于解决记账问题的算法。因为其去中心化,还有不改特性。可以做到通过数学和密码学解决现实生活中的信任问题。
cvmars
·
2023-10-23 00:26
常用分布式文件系统(对象存储)对比-SeaweedFS、Minio
常用分布式文件系统,相对比较热门的有Minio,SeaweedFS,FastDFS,
ceph
。主要对比一下Minio,SeaweedFS。什么是SeaweedFS?
振宅的博客
·
2023-10-22 21:20
分布式文件系统
dfs
CDN加速与DDoS攻击防护:保障网站稳定与用户体验
CDN加速网站内容分发与缓存CDN的核心功能之一是在全球范围内
分布式存储
网站的静态和动态内容。这意味着网站的图像、视频、CS
剑盾云安全专家
·
2023-10-22 17:11
ddos
ux
web安全
服务器
网络安全
网络
ceph
之动态pvc
ceph
采用pv的方式创建pvc相对简单,但是每次创建新的pvc都需要手工创建image,再创建pv,相对麻烦,不利用自动化管理,本文介绍
ceph
动态创建pvc。
xiao_b4b1
·
2023-10-22 15:03
在Bcache上启动OSD报unable to read osd superblock错误
环境信息环境具体信息架构LoongArch处理器Loongson-3C5000内核版本4.19操作系统版本lns8
Ceph
版本Nautilus14.2.22
Ceph
Cluster单机最小集群,一个Monitor
gengduc
·
2023-10-22 13:17
分布式存储Ceph
linux
运维
服务器
bcache
ceph
04
Ceph
集群部署
kubernetes集群对接
Ceph
存储文章目录kubernetes集群对接
Ceph
存储一、
Ceph
集群部署环境准备1.1配置
ceph
的yum源1.2安装
ceph
-deploy1.3安装
ceph
包1.4
victoruu
·
2023-10-22 11:20
K8S
一、 区块链的意义
一、区块链的意义从技术的角度来说,区块链是一种利用不对称加密、点对点传输,
分布式存储
的记账系统。实质上这些技术都没有划时代意义的突破,并且很早就存在,区块链只是将它们进行了巧妙的结合。
Vlice
·
2023-10-22 07:12
简历上的基础
RAID0和RAID1的区别RAID0是
分布式存储
阵列,RAID1是共享存储阵列DNS服务器的配置过程首先定义DNS服务的视图,可以定义该视图只为某些网段服务,然后定义zone的文件位置zone文件里面主要包括了每个域名的具体的
不告诉你_af15
·
2023-10-22 01:27
HBase:大数据中的NoSQL
HBase概述Hbase是一个高可靠性、高性能、面向列、可伸缩的
分布式存储
系统,用于存储海量的结构化或者半结构化,非结构化的数据,底层上的数据是以二进制流的形式存储在HDFS上的数据块中的HBase应用场景写密集型应用
CoLiuRs
·
2023-10-21 19:54
Golang
大数据
大数据
hbase
nosql
王思聪也被耍的“抽奖黑幕“ 或许区块链技术才是唯一解药
从
分布式存储
的新角度,区块链是一种存储和移动数据的新方式,信息不再集中在一个地方——相反,信息被打散、分布在网络中的上千个节点中,通过巧妙的加密技术环环相扣。
好嗨游戏
·
2023-10-21 06:56
KuPlay
DatenLord前沿技术分享 No.20
喷泉码具有极高的纠错能力,且具有低延迟、地复杂度、高效率等优点,使其在冷存储、
分布式存储
、无线通信等领域得到广泛应用。
达坦科技DatenLord
·
2023-10-21 03:01
前沿技术分享
编码
纠错码
存储
数据
数据存储
Hadoop 概览
HadoopHadoop是一个提供
分布式存储
和分布式计算的框架,为大量数据的存储和计算提供了一个可靠的平台支持。现在Hadoop和其它相关的衍生产品构成了大数据生态系统。
越过山丘xyz
·
2023-10-21 00:18
hadoop基础结构
1.hadoop几个点HADOOP免费CDH收费HDP收费后2者合并成为CDP2.结构图HDFS就是
分布式存储
,包含NameNode(nn)、DataNode(dn)、SecondaryNameNode
阿里纳斯_0097
·
2023-10-20 20:09
企业打开云HBase的正确方式,来自阿里云云数据库团队的解读
摘要:一、HBase的历史由来HBase是一个开源的非关系型分布式数据库(NoSQL),基于谷歌的BigTable建模,是一个高可靠性、高性能、高伸缩的
分布式存储
系统,使用HBase技术可在廉价PCServer
猫耳呀
·
2023-10-20 19:54
QEMU/KVM +
Ceph
Librbd 性能测试以及深度优化
虽然,过去很多人都在测试或者使用
Ceph
过程中进行调优设置以获取最佳性能,但到目前而言,还没有一个最优的最新数据。
新钛云服
·
2023-10-20 19:54
linux
java
python
大数据
缓存
Web3.0时代,如何更深层次地挖掘个人数据价值以及知识图谱作为未来语义网络的重要基础设施建设如何发挥作用
此次宣讲内容围绕“Web3.0时代,如何更深层次地挖掘个人数据价值以及知识图谱作为未来语义网络的重要基础设施建设如何发挥作用”展开,其中ThomasinaReilly、ThomasEmmerich重点宣讲了同为
分布式存储
项目
EpikProtocol
·
2023-10-20 17:03
【python零基础入门学习】python进阶篇之OOP - 面向对象的程序设计
python运维脚本》:python运维脚本实践《shell》:shell学习《terraform》持续更新中:terraform_Aws学习零基础入门到最佳实战《k8》暂未更新《docker学习》暂未更新《
ceph
向往风的男子
·
2023-10-20 15:27
python零基础入门
学习
python
运维
【运维日常】ubuntu系统默认没有ssh服务,需要手动安装-并加上自己手动添加sudo用户
python运维脚本》:python运维脚本实践《shell》:shell学习《terraform》持续更新中:terraform_Aws学习零基础入门到最佳实战《k8》暂未更新《docker学习》暂未更新《
ceph
向往风的男子
·
2023-10-20 15:27
运维日常
运维
ubuntu
ssh
【运维日常】mac刻录ubuntu系统进U盘,插入服务器安装系统
python运维脚本》:python运维脚本实践《shell》:shell学习《terraform》持续更新中:terraform_Aws学习零基础入门到最佳实战《k8》暂未更新《docker学习》暂未更新《
ceph
向往风的男子
·
2023-10-20 15:21
运维日常
运维
ubuntu
linux
分布式存储
vs. 全闪集中式存储:金融数据仓库场景下的性能对比
作者:深耕行业的SmartX金融团队张德敏近年来随着金融行业的高速发展,经营决策者及监管机构对信息时效性的要求越来越高,科技部门面临诸多挑战。例如,不少金融机构使用数仓业务系统,为公司高层提供日常经营报表,同时支持监管报送等应用。该业务系统通常是I/O密集型应用,对IT基础架构的性能有极高的要求。在《Oracle数据仓库在超融合架构下的跑批性能验证》文章中,我们分享了金融机构利用SmartX超融合
志凌海纳SmartX
·
2023-10-20 14:34
分布式
金融
数据仓库
数字化转型迈出关键步伐,枣庄银行启动
分布式存储
实践
金融机构的存储基础设施,从集中式存储向
分布式存储
过渡,已经是一种必然趋势。 作为地方性商业银行,枣庄银行正在努力构建基于自身实际的数字化转型能力。
XSKY星辰天合
·
2023-10-20 11:20
软件定义存储
合作伙伴
云计算
Ceph
RBD 的实现原理与常规操作
RBDRBD:
Ceph
’sRADOSBlockDevices,
Ceph
blockdevicesarethin-provisioned,resizableandstoredatastripedovermultipleOSDsina
Ceph
cluster.
Ceph
RBD
大隐隐于野
·
2023-10-20 09:34
#
Ceph专栏
ceph
ceph
源码阅读 erasure-code
1、
ceph
纠删码纠删码(ErasureCode)是比较流行的数据冗余的存储方法,将原始数据分成k个数据块(datachunk),通过k个数据块计算出m个校验块(codingchunk)。
大隐隐于野
·
2023-10-20 09:34
#
Ceph专栏
ceph
ceph
分布式存储
系统
目录一、存储基础二、单机存储的问题三、
分布式存储
的类型四、
Ceph
简介五、
Ceph
优势六、
Ceph
架构七、
Ceph
核心组件八、OSD存储后端九、
ceph
部署一、存储基础单机存储设备DAS(直接附加存储,
Besteady
·
2023-10-20 09:22
ceph
Ceph
存储
数据存储类型块存储存储设备与客户端主机是一对一的关系,块存储设备只能被一个主机挂载使用,数据以块为单位进行存储的,典型代表:硬盘文件存储一对多,能被多个主机同时挂载/传输使用,数据以文件的形式存储的,其中文件的元信息和实际数据是分开存储的,并且有目录的层级关系,典型代表:NFS、FTP对象存储一对多,能被多个主机/应用程序通过API接口访问使用,数据以文件的形式存储的,一个文件即是一个对象(obj
akk_dian
·
2023-10-20 09:49
ceph
智牛股项目--04
交易平台-Day4学习目标目标1:Nacos背景与基本原理目标2:Nacos的使用目标3:
Ceph
分布式存储
原理目标4:
Ceph
部署与使用目标5:Netty通讯机制第1章Nacos的介绍与使用1.目标了解
程序员DD
·
2023-10-20 07:04
Java
java
spring
cloud
分布式
Hadoop
分布式存储
和计算MapReduce的使用以及Hive数据仓库等内容精讲
一,zookeeper环境搭建ZooKeeper致力于为分布式应用提供一个高性能、高可用,且具有严格顺序访问控制能力的分布式协调服务服务器IP主机名myid的值192.168.186.133vmone1192.168.186.134vmtwo2192.168.186.135vmthree3myid的值越高,被选举的几率越大!先把这三台机器分别重置主机名为vmone,vmtwo,vmthree,具体
刻苦的樊同学
·
2023-10-20 07:32
大数据
hadoop
数据仓库
MapReduce
centos7 怎么封装自己的镜像_基于Centos7定制自己的系统镜像
/comps.xmlvicomps.xml...g
ceph
CEPH
CEPH
节点falsefal
weixin_39765796
·
2023-10-20 05:52
centos7
怎么封装自己的镜像
区块链有哪些应用场景?
这里的分布式不仅体现为数据的
分布式存储
,也体现为数据的分布式记录,即由系统的参与者共同维护。区块链能够让参与方在技术层面建
倚楼睇风雨
·
2023-10-20 01:18
金融级湖仓一体架构——SequoiaDB巨杉数据库初探
核心开发团队成员来自前IBMDB2的北美研发团队、华为
分布式存储
团队,可谓实力雄厚。
protectione055
·
2023-10-19 17:35
金融
架构
sequoiadb
【原创】精读白皮书-Ulord的
分布式存储
本文由“币嗨BIHI内容合伙人计划”赞助0任何看似横空出世的牛逼技术,当你细细追溯总是有迹可循的。区块链技术看似高深玄机,其实是少数极客在解决问题时,让看起来没有必然关联的现存技术一次次相遇,从而找到突破口。各种尝试和钻研后的灵光闪现的往前一步,也许就会带来一场颠覆性的变革。1分布式数据存储之于区块链百度百科说:区块链是分布式数据存储、点对点传输、共识机制、加密算法等计算机技术的新型应用模式。所以
Wendy木子
·
2023-10-19 16:10
网易视频云:构建一站式视频云点播平台的关键技术
背景概述近两年视频服务已经融入人们生活的方方面面,针对互联网视频点播类需求,基于云计算的
分布式存储
集群、分布式转码集群、大规模分
vcloud_163
·
2023-10-19 06:21
云计算
视频云
网易视频云
技术开发
技术
Spark大数据分与实践笔记(第三章 Spark RDD 弹性分布式数据集-01)
RDD是Spark提供的最重要的抽象概念,我们可以将RDD理解为一个
分布式存储
在集群中的大型数据集合,不同RDD之间可以通过转换操作形成依赖关系实现管道化,从而避免了
妉妉师姐
·
2023-10-19 04:56
大数据-linux-spark
大数据
spark
分布式
上一页
15
16
17
18
19
20
21
22
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他