E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
集群数据导入
etcd
集群
恢复、单节点恢复操作手册
一、
集群
备份备份方式:Jenkins触发每小时的定时任务,通过调取ansible的playbook进行etcd
集群
的数据备份和上传,默认只备份
集群
中的非leader成员,避免leader成员压力过大。
*老工具人了*
·
2024-08-25 15:21
数据库
Kubernetes
etcd
数据库
Kubernetes Master节点 灾备恢复操作指南
KubernetesMaster节点灾备恢复操作指南目录一,Etcd数据备份及恢复...1A,单节点etcd数据备份和恢复...2B,etcd
集群
数据的备份和恢复...2二,Master节点控制组件的备份及恢复
weixin_34384915
·
2024-08-25 15:51
运维
kubernetes
集群
ETCD备份与恢复
一、通过kubeadm方式备份安装etcdctl命令行yuminstall-yetcd备份ETCDCTL_API=3etcdctl\snapshotsavesnap.db\#此处默认是当前路径,可自定义存储路径--endpoints=https://127.0.0.1:2379\--cacert=/etc/kubernetes/pki/etcd/ca.crt\--cert=/etc/kuberne
冷漠程序员小哥哥
·
2024-08-25 15:19
kubernetes
kubernetes
k8s
etcd
etcd
etcd主目录/配置配置在/etc/etcd.conf.yml主目录/数据/var/lib/etcd主目录/日志动态库或插件install:1,安装脚本:(安装脚本可与2配置文件一起使用,做自动化静态
集群
部署
mmgithub123
·
2024-08-25 15:49
docker
linux
centos
java
mysql
etcd
集群
部署实战
文章目录前言安装
集群
环境添加配置文件启动etcd查看
集群
状态前言本文使用v3.5.4版本的etcd进行搭建
集群
演示,仅适用于学习etcd的基本使用。
tree先生
·
2024-08-25 15:18
etcd
etcd
linux
数据库
Kubernetes 中如何对 etcd 进行备份和还原
etcd是Kubernetes的关键组件,用于存储
集群
的所有配置数据和状态信息。由于etcd永久性存储了
集群
的整个状态,因此对其进行定期备份非常重要。
乌南竹
·
2024-08-25 15:18
kubernetes
etcd
在Kubernetes中etcd作为存储
集群
在Kubernetes中,etcd作为存储
集群
所有关键数据的分布式键值存储系统,其数据的备份与还原对于确保
集群
的可靠性和数据完整性至关重要。
hai40587
·
2024-08-25 15:17
kubernetes
etcd
容器
Kubernetes 中如何对 etcd 进行备份和还原
etcd是Kubernetes
集群
的重要组件,存储了
集群
的所有数据,如配置文件、状态信息、以及服务发现数据。
william.zhang(张)
·
2024-08-25 14:16
后端
容器
大数据
etcd
大数据面试-Zookeeper
ZooKeeper的选举机制是基于Paxos算法的一种分布式选举算法,用于在ZooKeeper
集群
中选择一个节点作为Leader,负责处理客户端的写请求和协调其他节点。
文文鑫
·
2024-08-25 12:04
#
大数据面试-Zookeeper
大数据
面试
zookeeper
欺诈文本分类微调(六):Lora单卡训练
2.数据准备2.1加载
数据导入
要使用的基础包。impor
沉下心来学鲁班
·
2024-08-25 11:27
微调
分类
人工智能
机器学习
语言模型
微调
rocketmq: broker
集群
之间的brokerName命名是否可以一致。
今天回顾了下broker与nameserver之间建立连接之后30S一次的心跳测试源码和创建topic过程中broker主动推送topicConfig到Nameserver的源码(实际上心跳测试调用的方法和推送创建topic过程中broker主动推送topicConfig调用的方法是一样的,最终都是调用doRegisterBrokerAll())。心里有两个疑惑产生:1.我们知道创建一个新的top
飞向天空的鱼
·
2024-08-25 10:18
rocketmq学习
HDFS的编程
HDFS是一个分布式文件系统,以流式数据访问模式存储超大文件,将数据分块存储到一个商业硬件
集群
内的不同机器上
卍king卐然
·
2024-08-25 07:02
hdfs
hadoop
大数据安全
web安全
经验分享
Kubernetes中如何对etcd进行备份和还原
在Kubernetes中,etcd作为存储
集群
所有关键数据的分布式键值存储系统,其数据的备份与还原对于确保
集群
的可靠性和数据完整性至关重要。
jun778895
·
2024-08-25 06:28
kubernetes
etcd
容器
Hadoop入门基础(二):Hadoop
集群
安装与部署详解(超详细教程)
一、环境准备1.
集群
规划首先,需要为
集群
中的每台机器设置角色和网络配置。
william.zhang(张)
·
2024-08-25 06:57
hadoop
大数据
分布式
基于k8s搭建gitlab
前言一、安装kubernetes
集群
可以参考这篇博客,写的挺好的:搭建k8s环境二、安装helm在github上下载helm的二进制文件,在系统中解压,并将可执行文件移动到/usr/bin/目录下三helm
爱哭的猫!
·
2024-08-25 05:18
云原生
kubernetes
gitlab
运维
基于calico部署k8s
集群
k8s-1.23.6
1、资源清单主机名IP地址系统版本CPU内存mn01192.168.242.130redhat7.92C4GBln0192.168.242.131redhat7.92C4GBcn01192.168.242.129redhat7.92C4GB2、系统配置(所有节点都要进行)1、安装所需软件yuminstallvimnet-toolswgetlsofipsetipvsadmiproute-tc-y2、
只是想成为一名程序员
·
2024-08-25 05:17
kubernetes
容器
云原生
k8s-daemonSet控制器
当有节点加入
集群
时,也会为他们新增一个Pod。当有节点从
集群
移除时,这些Pod也会被回收。删除DaemonSet将会删除它创建的所有Pod。
垃圾宝宝
·
2024-08-25 05:47
kubernetes
容器
云原生
微服务中不同的容错模式
以下是每种模式的详细解释和应用场景:1.FailoverCluster(失败自动切换)描述:当服务调用失败时,系统会自动切换到
集群
中的其他机器进行重试。
Wade_Crab
·
2024-08-25 00:20
微服务
java
运维
java将数据库百万数据量导出到EXCEL
背景今天接到一个需求,需要将数据库中数据导出下载成EXCEL,初看是个比较简单的功能,采用POI中自带的EXCEL导出即可,细想之下隐约记起EXCEL是有数量限制的,同时表中的数据量是在不短叠加的,真实
数据导入
后突破百万
一名小爪哇
·
2024-08-24 23:42
java
excel
poi
多线程
数据库
从零开始搭建Aliyun ESC高可用
集群
(HaVip+KeepAlived)
从零开始搭建AliyunESC高可用
集群
(HaVip+KeepAlived)架构架构本设计方案采用两台阿里云ECS服务器搭建Keepalived结合LVS的高可用
集群
。
cloud_ether
·
2024-08-24 21:33
云原生运维
lvs
高性能集群
keepalived
lvs
高可用集群
高性能集群
云原生
从零开始搭建 LVS 高性能
集群
(DR模式)
从零开始搭建LVS高性能
集群
(DR模式)架构本设计方案采用三台服务器构建
集群
,使用LinuxVirtualServer(LVS)作为负载均衡器,运行在直接路由(DR)模式下。
cloud_ether
·
2024-08-24 21:03
云原生运维
lvs
高性能集群
lvs
docker
云原生
集群搭建
LVS+Keepalived
集群
在一个LVS服务
集群
中通常有主服务器(Master)和备份服务器(Backup)两种服务器,但是对外表现为一个虚拟IP,主服务器会广播VRRP报文给备份服
史努比.
·
2024-08-24 21:01
lvs
Redis
集群
搭建
1.环境:centos6.7、redis-6.2.62.模式:5主+20丛+5备丛(即:1主-4从-1备丛)3.服务器环境检查及安装查看服务器是否安装了gccrpm-qgcc若没有安装,则进行gcc安装yuminstall-ygcc4.redis下载前往redis官网下载https://redis.io/downloadredis-6.2.6.tar.gz5.将redis-6.2.6.tar.gz
丿似锦
·
2024-08-24 21:00
数据库
redis
bootstrap
前端
PolarDB for PostgreSQL 内核解读 :HTAP架构介绍
存储计算分离的架构基础上我们研发了基于共享存储的MPP架构步具备了HTAP的能力,对一套TP的数据支持两套执行引擎:单机执行引擎用于处理高并发的OLTP;MPP跨机分布式执行引擎用于复杂的OLAP查询,发挥
集群
多个
阿里云云栖号
·
2024-08-24 20:56
云栖号技术分享
postgresql
架构
数据库
GO-REDIS的一些高级用法
其中redigo不支持对
集群
的访问。本文想聊聊go-redis2个高级用法。
羊城程序猿
·
2024-08-24 19:22
golang
Redis
golang
redis
高佣联盟是怎么赚钱的?是真的吗?
淘客红利期的时候,无论做培训、工具、采
集群
和接单、自营粉丝群都创造出了不少个千万富翁的屌丝逆袭案例,对比拼多多的平台模式加之绝大部分商
高省APP
·
2024-08-24 18:09
zookeeper
集群
安装
zookeeper
集群
安装文档linux安装java-centos安装java-linux配置java环境变量zookeeper单机安装说明版本选择:apache-zookeeper-3.5.7-bin.tar.gz
shuair
·
2024-08-24 18:13
zookeeper
zookeeper
Ubuntu下部署Hadoop
集群
+Hive(一)
准备环境:3台Ubuntu服务器(版本20.04),自建的虚拟机也可以;推荐内存:8GB以上;部署也支持Ubuntu20.04以上版本,或是Centos也可以。配置主机Host在三台服务器上添加主机名与IP的映射,以方便在局域网内进行主机间的快速访问和后续的文件配置;配置方法:vi/etc/hosts为方便配置:我的三台主机取名为HadoopMaster、HadoopSlave01、HadoopS
岩屿
·
2024-08-24 17:41
hadoop
ubuntu
hive
大数据
Kubernetes中的守护者与管家:ReplicaSet与Deployment的协同工作
引言在Kubernetes
集群
中,ReplicaSet和Deployment是两种至关重要的资源对象,它们共同维护着应用程序的稳定性和可用性。
哎呦没
·
2024-08-24 16:29
kubernetes
java
容器
10W
数据导入
该如何与库中数据去重?
使用的是PostgreSQL在做大数据量(十万级)导入时,某些字段和数据库表里数据(千万级)重复的需要排除掉,把表数据查询出来用程序的方式判断去重效率很低,于是考虑用临时表。先把新数据插入到临时表里,临时表结构和原始表一致。用SQL的方式把不重复的数据DataA查询出来。把DataA插入到原始表里。因为不重复的数据我还要做一些其他的处理,所以查出来DataA,若不需做特殊处理可直接使用insert
工业甲酰苯胺
·
2024-08-24 13:42
数据库
数据分析
《Apache Kafka 实战》笔记 - 7.5.2 分区重分配
准备环境搭建一个3个节点的
集群
,然后创建两个测试topic:foo1、foo2,它们都是3个分区,副本因子都是2:bin/kafka-topics.sh--create--zookeeperlocalhost
SlowGO
·
2024-08-24 12:11
向量数据库 Milvus:智能检索新时代
文章目录Milvus核心技术Milvus基本特点索引策略相似度计算图像检索演示Milvus基础维护环境搭建建立向量索引
数据导入
数据更新数据删除用户权限管理Milvus评估与调优性能评估调优技巧Milvus
三余知行
·
2024-08-24 11:31
「数智通识」
「机器学习」
数据库
milvus
智能检索
高维数据检索
AIGC
维护
Eureka原理实践
EurekaServer通常采用
集群
部署以保证高可用性和容错能力。EurekaClient(服务提供者客户端和服务消费者客户端):嵌入到每个微服务
丁爸
·
2024-08-24 07:01
大数据
eureka
Linux下ETCD安装、配置、命令
ETCD的诞生背景是为了解决
集群
管理系统中操作系统升级时的分布式并发控制、配置文件的存储与分发等问题。它设计为提供高可用、强一致性的小型kv数据存储服务,项目当前隶属于CNCF基金会
丁爸
·
2024-08-24 07:01
大数据
etcd
从部署 httpd 入手,理清 k8s 配置中的 containerPort、port、nodePort、targetPort
背景在上一篇文章自己搭建一个k8s环境中,我们一顿操作猛如虎,搭建出了由1个master和1个worker节点组成的k8s
集群
,大概是这样的效果:为了验证我们搭建的环境是否好使,本篇文章就借搭建httpd
dotNET跨平台
·
2024-08-24 06:58
kubernetes
java
docker
linux
python
一文讲明白
集群
与负载均衡
集群
概念与优势定义:计算机
集群
是协同工作的计算机组,通常被视为单一系统。服务节点:部署了应用程序的服务器。
集群
优势:提高性能:通过增加服务节点实现并行处理,提升整体处理能力。
modelsetget
·
2024-08-24 04:43
服务器搭建
负载均衡
运维
集群
云原生周刊:Score 成为 CNCF 沙箱项目|2024.08.12
开源项目推荐KubeOneKubermaticKubeOne自动化管理您所有云环境、本地环境、边缘计算和物联网环境中的
集群
操作。KubeOne可以安装高可用(HA)的主
集群
,也可以安装单主
集群
。
KubeSphere 云原生
·
2024-08-24 04:12
k8s
容器平台
kubesphere
云计算
云原生周刊:Kubernetes Grafana 看板更新 | 2024.5.13
ClusterpediaClusterpedia是一个多
集群
的百科全书,用于同步、搜索和简单控制多
集群
资源。
KubeSphere 云原生
·
2024-08-24 04:41
k8s
容器平台
kubesphere
云计算
云原生周刊:Kubernetes v1.31 发布
开源项目推荐KardinalKardinal是一个用于在共享Kubernetes
集群
中创建超轻量级临时开发环境的框架。
KubeSphere 云原生
·
2024-08-24 03:36
k8s
容器平台
kubesphere
云计算
K8S
集群
中驱逐节点
K8S
集群
中驱逐node节点下面以驱逐节点上的GPU节点为例:1.驱逐节点上的资源使用以下命令从节点上驱逐GPU资源:kubectldrain--delete-local-data--force--ignore-daemonsets
听说唐僧不吃肉
·
2024-08-24 02:32
K8S
kubernetes
容器
云原生
mysql mongodb
集群
_MySQL与MongoDB
MySQL与MongoDB声明:MySQL与MongoDB都是开源的常用数据库,但是MySQL是传统的关系型数据库,MongoDB则是非关系型数据库,也叫文档型数据库,是一种NoSQL的数据库。它们各有各的优点,关键是看用在什么地方。所以我们所熟知的那些SQL语句就不适用于MongoDB了,因为SQL语句是关系型数据库的标准语言。一、关系型数据库-MySQL1、在不同的引擎上有不同的存储方式。2、
何钦尧
·
2024-08-24 02:02
mysql
mongodb
集群
Kafka-之控制器(Controller选举、leader选举)
Kafka-之控制器(控制器选举,leader选举)1控制器是什么,如何选举kafka控制器管理着整个
集群
中分区以及副本的状态,控制器的选举需要依赖于Zookeeper,在kafka
集群
启动的时候,会在
稳哥的哥
·
2024-08-24 02:31
Kafka
postgresql
集群
文档
https://www.cnblogs.com/Alicebat/p/14148933.html[命令]Pacemaker命令pcscluster(管理节点)–EternalCenterPostgreSQL实战之物理复制和逻辑复制(五)_postgresql流复制和物理复制-CSDN博客https://jingyan.baidu.com/article/a378c9606f059df3292830
st780206
·
2024-08-23 23:44
postgresql
postgresql
数据库
K8S
集群
层面监控
KubeStateMetrics简介kube-state-metrics是一个Kubernetes组件,它通过查询Kubernetes的API服务器,收集关于Kubernetes中各种资源(如节点、pod、服务等)的状态信息,并将这些信息转换成Prometheus可以使用的指标kube-state-metrics主要功能:节点状态信息,如节点CPU和内存的使用情况、节点状态、节点标签等Pod的状态
云纷纷
·
2024-08-23 22:40
kubernetes
容器
云原生
K8S 无状态应用&有状态应用
无状态应用(StatelessApplications)和有状态应用(StatefulApplications)是描述应用行为和架构的两个重要概念,它们对于如何设计、部署和管理应用程序在Kubernetes
集群
中的行为至关重要
王小工
·
2024-08-23 22:39
云原生
kubernetes
容器
云原生
RabbitMQ的高可用
1.Rabbit
集群
采用
集群
模式保护消息的完整。1.1普通
集群
在普通
集群
模式下,各个节点之间有相同的元数据,即队列结构,而消息不会冗余(不同节点的消息不同)。
CocoaAndYy
·
2024-08-23 22:39
rabbitmq
分布式
4.Redis单线程和多线程
但Redis的其他功能,比如持久化RDB、AOF、异步删除、
集群
数据同步等等,其实是由额外的线程执行
CocoaAndYy
·
2024-08-23 22:06
redis
数据库
缓存
K8S Watch
watch机制是一种非常重要的功能,它允许客户端实时获取Kubernetes
集群
中资源对象的状态变更通知。
王小工
·
2024-08-23 22:36
云原生
kubernetes
容器
云原生
阿里云服务器内存型r7、r8a、r8y实例区别及最新活动价格参考
属于内存型实例规格的云服务器有内存型r7、内存型r8a、内存型r8y这几个实例规格,相比于活动内的经济型e和通用算力型u1等实例规格来说,这些实例规格等性能更强,适用于数据分析与挖掘,Hadoop、Spark
集群
阿里云最新优惠和活动汇总
·
2024-08-23 22:23
【架构-25】K8S
Kubernetes具有以下主要特点和优势:一、容器编排自动化部署:可以自动将容器化的应用程序部署到
集群
中的各个节点上,无需手动操作。
W Y
·
2024-08-23 22:33
架构
kubernetes
容器
上一页
5
6
7
8
9
10
11
12
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他