E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
ceph集群部署
9.云原生存储之
ceph
在k8s中应用及问题处理
文章目录
ceph
应用场景
ceph
应用在k8s集群外使用块设备
ceph
客户端配置创建块挂载使用删除pool在k8s集群内使用块设备创建块池和StorageClass使用存储块存储映射问题处理问题现象事件分析
野心与梦
·
2024-01-12 07:31
私有云搭建实战
云原生
ceph
kubernetes
向量数据库:Milvus
由Go(63.4%),Python(17.0%),C++(16.6%),Shell(1.3%)等语言开发开发,支持python,go,java接口(C++,Rust,c#等语言还在开发中),支持单机、
集群部署
FakeOccupational
·
2024-01-12 00:56
数据分析
数据库
milvus
eureka
Kafka
集群部署
(KRaft模式集群)
KRaft模式是Kafka在3.0版本中引入的新模式。KRaft模式使用了Raft共识算法来管理Kafka集群元数据。Raft算法是一种分布式共识算法,具有高可用性、可扩展性和安全性等优势。在KRaft模式下,Kafka集群中的每个Broker都具有和Zookeeper类似的角色。每个Broker都参与管理Kafka集群元数据,包括分区分配、副本分配、元数据快照等。Zookeeper模式和KRaf
野猪佩挤
·
2024-01-11 17:02
Kubernetes
存储
k8s
kafka
分布式
k8s(存储)数据卷与数据持久卷
容器内文件会丢失问题2:一个Pod中运行多个容器并需要共享文件kubenetes卷(Volume)这一抽象概念能够解决这两个问题常用的数据卷•节点本地(hostPath,emptyDir)•网络(NFS,
Ceph
黑马金牌编程
·
2024-01-11 12:11
docker/K8S/KVM
linux
运维
k8s
数据卷与持久卷
kubernetes
Springboot对接
ceph
集群以及java利用s3对象网关接口与
ceph
集群交互
springboot中引入相关依赖software.amazon.awssdkregions2.22.13software.amazon.awssdkeksauth2.22.13software.amazon.awssdks32.22.12testsoftware.amazon.awssdks32.22.12compile然后java代码,一些相关注意的事项都在代码里有标出。importjava.
忆林520
·
2024-01-11 11:37
java
spring
boot
ceph
Ceph
集群状态监控细化
需求在做
Ceph
的监控报警系统时,对于
Ceph
集群监控状态的监控,最初只是简单的OK、WARN、ERROR,按照
Ceph
的status输出来判断的,仔细想想,感觉这些还不够,因为WARN、ERROR状态中
Joncc
·
2024-01-11 10:30
基于ubuntu2204使用kubeadm部署k8s集群
部署k8s集群基础环境配置安装container安装runc安装CNI插件部署1.24版本k8s集群(flannel)安装crictl使用kubeadm部署集群节点加入
集群部署
flannel网络配置dashboard
huhy~
·
2024-01-11 10:54
容器云
kubernetes
网络
linux
spring cloud之集成sentinel
你可能会说,
集群部署
不就可以了,但事实并非这么简单,假定一个不那么靠谱的开发,写了一个不那么靠谱的sql语句,上线之后,DB资源很快耗尽,那么所有需要查询DB的服务都无法处理请求,进而导致这些服务挂掉,
一户董
·
2024-01-11 09:07
springcloud
spring
cloud
sentinel
服务雪崩
降级熔断
GBASE南大通用 GBase 8a产品
集群部署
架构
GBase南大通用GBase8a产品支持多种部署形式:部署形式技术功能特点适用场景单VC部署架构虚拟集群一个物理集群内有且仅有一个VC,可以根据需要扩展新的VC,以及导入其他物理集群已存在的VC。适用于当前只有一个业务信息管理需求,但是后续会有扩展业务信息管理的需求多VC部署架构虚拟集群物理集群的GClusterCluster统一管理下属所有VC。VC与VC之间资源物理隔离,VC之间不存在资源争抢
GBASE数据库
·
2024-01-11 07:40
数据库
GBASE南大通用
GBASE
ceph
对接nfs-ganesha 安装配置手顺
概要nfs-ganesha开始支持
ceph
,对接
ceph
fs,rgw.服务端安装和配置配置yum源[nfs-ganesha]name=nfs-ganeshabaseurl=http://us-west.
ceph
.com
zdlinux
·
2024-01-11 05:01
ceph
ceph
cephfs
nfs-ganesha
Ceph
异常断电osd无法启动修复 failed to load OSD map for epoch
问题现象:日志错误,一般出现在节点异常掉电或者其他异常/crc...skipping2020-03-2309:40:54.3347f6b38bffb80-1bluestore(/var/lib/
ceph
zdlinux
·
2024-01-11 05:01
ceph
ceph
warning mute 静音
root@test:~#
ceph
-scluster:id:9ef94365-5d9e-4c3a-a844-f198e0fa48cbhealth:HEALTH_WARNTherearedaemonsrunninganolderversionof
ceph
石兴稳
·
2024-01-10 22:17
ceph
【Redis】Redis分布式锁
但我们的项目往往是
集群部署
,把同一份代码部署再多台服务器上。如下图所示:如果是这样的话,那么我们加锁
Lemon Aourase
·
2024-01-10 18:20
中间件
redis
分布式
数据库
Docker环境下的前后端分离项目部署与运维
从零开始部署一个前后端分离的开源项目,利用docker虚拟机的容器技术,采用分布式
集群部署
,将项目转换成为高性能、高负载、高可用的部署方案。
PHP技术社区
·
2024-01-10 17:09
IT教程
docker
通用机V8R6
集群部署
_1主1备1见证_图形化_Centos7
KingbaseES提供基于图形化和命令行操作的
集群部署
方式,本文档主要用于指导不支持GUI的服务器上的KingbaseES
集群部署
工作。
福娃筱欢
·
2024-01-10 15:28
人大金仓集群
Flink 1.15本地
集群部署
Standalone模式(独立集群模式)
一.环境准备1、集群规划,CentOS7环境192.168.11.10411.104(DB测试)centf11104192.168.11.10511.105(DB测试)centf11105192.168.11.10611.106(DB测试)centf11106jdk安装参考:linux环境javajdk12.0.2部署_天一道长--玄彬的博客-CSDN博客2、jdk12安装》配置免密登入》三个节点
天一道长--玄彬
·
2024-01-10 12:04
大数据
flink
java
大数据
Flink standalone
集群部署
配置
文章目录简介软件依赖部署方案二、安装1.下载并解压2.ssh免密登录3.修改配置文件3.启动集群4.访问WebUI简介Flink独立模式(Standalone)是部署Flink最基本也是最简单的方式:所需要的所有Flink组件,都只是操作系统上运行的一个JVM进程。独立模式是独立运行的,不依赖任何外部的资源管理平台;当然独立也是有代价的:如果资源不足,或者出现故障,没有自动扩展或重分配资源的保证,
shandongwill
·
2024-01-10 12:27
大数据
Flink
flink
大数据
给VMWARE虚拟机分区扩容
创建物理卷4、扩展LVM卷组,给LVM卷组添加新的物理卷5、给home分区扩容6、自动扩展XFS文件系统到最大的可用大小7、查看扩容结果背景:本人使用vmware搭建了一个centos7.6的环境准备编译
ceph
牛跃2214
·
2024-01-10 11:55
linux
vmware
centos
lvm
日志系统一(elasticsearch+filebeat+logstash+kibana)
目录一、es
集群部署
安装java环境部署es集群安装IK分词器插件二、filebeat安装(docker方式)三、logstash部署四、kibana部署背景:因业务需求需要将nginx、java、ingress
`Liar`
·
2024-01-10 11:25
elasticsearch
大数据
搜索引擎
Ceph
源码分析-s->req_id = store->svc()->zone_utils->unique_id(req->id)
s->req_id=store->svc()->zone_utils->unique_id(req->id);涉及到指针和对象方法的调用。我会逐步为你解释这行代码的含义。s->req_id=...;s是一个指针,它指向一个结构或类。req_id是该结构或类的一个成员变量。这行代码的意思是:将req_id的值设置为后面的表达式的返回值。store->svc()store也是一个指针,它指向一个结构或
瓦哥架构实战
·
2024-01-10 07:03
Ceph源码分析
ceph
Ceph
学习 -- (3)
Ceph
接口与存储引擎
ceph
分布式-》无需查表,算算就好-》算出的结果clustermapclustermapmonmaposdmappgmapcrushmaprados集群:1、mon集群负责:1、监控全局状态-》clustermap1
肥海学习日志
·
2024-01-10 07:02
大数据
ceph
linux
【
ceph
】
ceph
学习:浅析开源项目之
Ceph
--研读
目录1
Ceph
概述2核心组件3IO流程4IO顺序性5PG一致性协议5.1StateMachine5.2FailoverOverview5.3PGPeering5.4Recovery/Backfill6引擎概述
bdview
·
2024-01-10 07:31
学习
运维
java
大数据
数据库
云原生专栏
云原生之kubesphere基础服务搭建5.云原生安全之kubesphere应用网关配置域名TLS证书6.云原生之DevOps和CICD7.云原生之jenkins集成SonarQube8.云原生存储之
Ceph
野心与梦
·
2024-01-10 07:31
私有云搭建实战
云原生
k8s部署rook-
ceph
记录
目录1.部署前准备1.1环境信息1.1.1系统环境版本1.1.2rook-
ceph
版本1.2版本对照确认1.2.1os与
ceph
版本1.2.2rook与
ceph
版本1.2.3
ceph
与kubenetes
quadimodo
·
2024-01-10 07:00
kubernetes
ceph
容器
8.云原生存储之
Ceph
集群
云原生之kubesphere基础服务搭建5.云原生安全之kubesphere应用网关配置域名TLS证书6.云原生之DevOps和CICD7.云原生之jenkins集成SonarQube8.云原生存储之
Ceph
野心与梦
·
2024-01-10 07:52
私有云搭建实战
云原生
ceph
ceph
之rados设计原理与实现第五章:高效的本地对象存储引擎Bluestore
由于FileStore底层仍然通过操作系统自带的本地文件系统管理磁盘,所以为了能够使用本地文件系统,所有针对RADOS的操作都需要转换成POSIX语义。所以引入了BlueStore直接管理文件。1.设计原理文件系统提供的核心操作就是读和写,BlueStore也是。对于文件系统,读操作除非缓存命中,否则都是从磁盘读出数据;而对于写操作,一般都是写入内存即可应答,再由文件系统合适组织写入磁盘,以此达到
mxy990811
·
2024-01-10 07:22
Ceph
ceph
rgw里面用户、bucket、用户数据之间关系
概览本篇文章介绍了
ceph
rgw组件里面,用户、bucket和用户数据对象之间的关系,以及它们和底层rados对象之间的关系,我们希望达到以下目的:理解一个用户的信息是如何保存在底层rados中的理解一个
ypdai
·
2024-01-10 07:27
04-Nacos微服务注册中心--
集群部署
和配置中心
一、配置中心Nacos不仅可以作为注册中心,也可以作为配置中心1.1为什么需要配置中心在没有配置中心之前,传统应用配置的存在以下痛点:1、采用本地静态配置,无法保证实时性:修改配置不灵活且需要经过较长的测试发布周期,无法尽快通知到客户端,还有些配置对实时性要求很高,比方说主备切换配置或者碰上故障需要修改配置,这时通过传统的静态配置或者重新发布的方式去配置,那么响应速度是非常慢的,业务风险非常大2、
浑水摸鱼程序猿
·
2024-01-10 07:07
微服务
微服务
java
spring
boot
搭建镜像仓库harbor-安装及使用教程
Harbor是由VMware公司开源的企业级的DockerRegistry管理项目,相比docker官方拥有更丰富的权限权利和完善的架构设计,适用大规模docker
集群部署
提供仓库服务。
南烟ღ
·
2024-01-10 06:50
docker
容器
数据仓库
Arthas,你真是Java程序员的大力丸
python爬虫入门进阶❤️4.
Ceph
实战,从原理到实战应有尽有。
Ceph
实战
码农飞哥
·
2024-01-10 05:09
Java
Arthas
java
Arthas
DataGear专业版 1.0.0 发布,数据可视化分析平台
DataGear专业版基于开源版开发,新增了诸多企业级特性,包括:MySQL、PostgreSQL、Oracle、SQLServer以及更多兼容部署数据库支持OAuth2.0/CAS/LDAP统一登录集成支持
集群部署
支持系统备份与还原支持更细粒度的权限控制支持前后端敏感信息加密传输支持等等
DataGear
·
2024-01-10 02:17
BI
数据可视化
数据可视化
数据分析
echarts
javascript
html
开源大数据
集群部署
(三)集群mysql数据库部署
开源大数据
集群部署
(一)集群实施规划开源大数据
集群部署
(二)集群基础环境实施准备作者:櫰木本文将介绍mysql部署,其中在hd1.dtstack.com主机root权限下安装配置1解压文件解压名为mysql
云掣YUNCHE
·
2024-01-09 21:12
开源大数据集群部署
数据库
开源
大数据
MongDB
集群部署
和升级方案
******
集群部署
部分******主机信息mongodb集群192.168.1.46192.168.1.47192.168.1.48192.168.1.49192.168.1.50192.168.1.51
Running Sun丶
·
2024-01-09 19:22
MongDB搭建集群和升级
mongodb
数据库
Etcd
集群部署
ETCD简介etcd是CoreOS团队于2013年6月发起的开源项目,它的目标是构建一个高可用的分布式键值(key-value)数据库。etcd内部采用raft协议作为一致性算法,etcd基于Go语言实现。ETCD的特点简单:安装配置简单,而且提供了HTTPAPI进行交互,使用也很简单安全:支持SSL证书验证快速:根据官方提供的benchmark数据,单实例支持每秒2k+读操作可靠:采用raft算
Frank_弗兰克
·
2024-01-09 12:56
02. Eureka、Nacos注册中心及负载均衡原理
01小节中订单服务远程调用用户服务案例实现了跨服务请求,在微服务中一个服务可能是
集群部署
的,也就是一个服务有多个实例,但是我们在调用服务时需要指定具体的服务实例才能调用该服务,在集群模式下,服务地址应该写哪个
清梦压星河_Ciao
·
2024-01-09 10:36
SpringCloud
eureka
负载均衡
云原生
Ceph
源码分析-在C++中,符号“&“和“*“有不同的用法。
在C++中,符号"&"和"*"有不同的用法。"&"符号:在变量声明时,"&"用于定义引用类型。例如:inta=10;int&ref=a;这里的"ref"是一个引用,它引用了变量"a",对"ref"的修改会影响到"a"的值。在函数参数中,"&"用于传递参数的引用。例如:voidfoo(int&num){...}这里的"num"是一个引用类型的参数,函数内部对"num"的修改会影响到传递进来的变量。"
瓦哥架构实战
·
2024-01-09 08:46
Ceph
ceph
Kafka
集群部署
文章目录一、实例配置二、zookeeper集群安装三、kafka集群安装四、验证没有提示,所有机器都执行在kafka集群中引入zookeeper,主要是为了管理kafka集群的broker。负责管理集群的元数据信息,确保Kafka集群的高可用性、高性能和高可靠性。一、实例配置IP用途192.168.0.217kafka、zk192.168.0.218kafka、zk192.168.0.219kaf
real向往
·
2024-01-09 08:55
Kafka
kafka
集群
集群部署
时的分布式 session 如何实现?
面试题
集群部署
时的分布式session如何实现?
kevin0016
·
2024-01-08 20:47
一、二进制方式 安装部署K8S
配置文件:ca-config.json②创建CA证书签名请求文件:ca-csr.json③生成CA证书和私钥④创建证书签名请求文件:etcd-csr.json⑤为etcd生成证书和私钥3、Etcd数据库
集群部署
繁华依在
·
2024-01-08 18:28
k8s
kubernetes
容器
云原生
开源大数据
集群部署
(二)集群基础环境实施准备
作者:櫰木环境准备本次使用到的二进制软件包目录为:系统初始化前提是操作系统已完成安装、各个主机之间网络互通,系统常用命令已安装,本默认这些前提条件已具备,不在阐述。1主机环境初始化安装centos系统完成后需要对主机进行初始化配置和验证工作,在所有主机上(hd1.dtstack.com-hd3)均要进行操作,并按照对应hosts修改主机名:(主机名必须为xxx.xxx.com匹配freeipa安装
云掣YUNCHE
·
2024-01-08 15:09
开源大数据集群部署
开源
大数据
运维
MegaRAID管理磁盘
CentOS7MegaRAID管理磁盘云计算AddcommentsMay312017对于OpenStack来说,存储基本都是
Ceph
,那么磁盘一般都会做成raid0或者使用直通模式。
shengyyyyyy
·
2024-01-08 08:14
总结
raid
linux
《
Ceph
源码分析》——第1章,第5节RADOS
本节书摘来自华章出版社《
Ceph
源码分析》一书中的第1章,第1.5节RADOS,作者常涛,更多章节内容可以访问云栖社区“华章计算机”公众号查看1.5RADOSRADOS是
Ceph
存储系统的基石,是一个可扩展的
weixin_34413103
·
2024-01-08 04:54
swift
了解
Ceph
分布式存储
内容概括1、存储发展史随着OpenStack的快速发展,给Caph的发展注入了强心剂,越来越多的人使用
Ceph
作为OpenStack的底层共享存储,
Ceph
在中国的社区也蓬勃发展起来。
小老虎追玉兔
·
2024-01-08 04:24
ceph
分布式
网络
ceph
之rados设计原理与实现第四章:存储的基石OSD
OSD本质上是凌驾于操作系统之上的进程,拥有cpu、内存、网络带宽等资源,用于实现对象存储,并兼容各种类型的文件系统。OSD之间利用集群网络互相监督,出现故障及时上报Monitor,由Monitor修改OSDMap后,再由OSD之间互相点对点传播最新OSDMap。1.集群管理OSD需要和Monitor定期通讯,报告自身情况,来更新最新的OSDMap,向Monitor报告自身容量使用情况,密钥密钥等
mxy990811
·
2024-01-08 04:54
ceph
网络
multipath 内核接口及框架介绍
流程2multipath介绍1云主机使用网络存储io流程对于一个云服务环境,大致会有网络节点,存储节点,计算节点,控制节点,其中虚拟云主机在计算节点工作,而虚拟云主机(qemu虚机)使用的存储一般通过
ceph
内核新视界
·
2024-01-07 20:49
linux
linux
云主机
存储
multipath
Minio
集群部署
(docker版本)
先在/etc/hosts中添加虚拟域名{ip}minio1{ip}minio2执行docker命令dockerrun-it-d--nameminio-01--restart=always--net=host\-e"MINIO_ROOT_USER={用户名}"\-e"MINIO_ROOT_PASSWORD={密码}"\-v/data/docker/minio/update:/data1#磁盘挂载1\
IT.cat
·
2024-01-07 11:17
docker
容器
运维
minio
分布式存储
云原生
k8s
集群部署
Harbor镜像仓库
部署k8s集群参考https://blog.csdn.net/m0_59933574/article/details/134936188?spm=1001.2014.3001.5502https://blog.csdn.net/m0_59933574/article/details/134936188?spm=1001.2014.3001.5502安装Harbor准备一台干净服务器,关闭防火墙与s
997*
·
2024-01-07 09:24
kubernetes
java
linux
harbor
K8S
集群部署
解决工作节点couldn‘t get current server API group list问题
最近在自己电脑上装了VMWarePlayer,在上面装了两个Ubuntu虚拟机,为了方便学习云原生技术,决定在上面装一个2个节点(一个控制面,一个工作节点)的K8S集群。参考这篇文章:Ubuntu22.04搭建K8s集群-腾讯云开发者社区-腾讯云搭建了集群,前面都很顺利。但是最后在node1节点执行kubectlgetpods命令时,报了如下错误:网上查了很多资料,大部分是针对控制面的问题,给出了
dbqb007
·
2024-01-07 08:30
kubernetes
kubelet
docker
云原生
脑电情绪识别:从数据采集到实验分析的完整流程
在情绪识别领域,脑电信号(Electroen
ceph
alography,简称EEG)被广泛应用于研究人类情绪状态的测量和分析。
数据科学探险导航
·
2024-01-07 05:07
人工智能
机器学习-深度学习
Proxmox VE 超融合集群销毁
Ceph
Pool
作者:田逸(formyz)销毁
Ceph
Pool的目的一套五节点的ProxmoxVE超融合集群,当初为有效利用资源,配备了Nvme高性能磁盘和大容量的SATA机械磁盘(如图所示),高性能Nvme磁盘用于虚拟机的系统盘
4/5$全真龙门
·
2024-01-06 22:39
linux
运维
Proxmox
VE
超融合集群
上一页
4
5
6
7
8
9
10
11
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他