集群分布式技术第30页

ElasticSearch-添加索引

分片是Elasticsearch在集群中分发数据的关键。把分

liyq007·2024-02-03 03:39

思腾合力受邀参加2023超聚变合作伙伴大会并作主题演讲

思腾合力作为人工智能基础架构解决方案商，面对大规模集群系统的算力需求挑战，推出统一管理的分布式集群基础架

STGPU·2024-02-03 03:12

slurm集群管理系统的学习笔记

刚刚接触到slurm集群管理系统，有几点心得想写出来与大家一起分享，后续可能也会有更新，所以先写一下基本的常用命令。

柴本·2024-02-03 01:02

【Tomcat源码级别掌握】

.Tomcat架构2.1连接器2.2容器--catalina2.3tomcat启动流程3.Jasper4.Tomcat服务器配置5.Web应用配置6.Tomcat管理配置7.JVM配置8.Tomcat集群

代码哲学·2024-02-03 00:55

基于华为云的私有Kubernetes高可用性集群解决方案

目标实现了一个高可用，低成本的私有Kubernetes私有集群，拥有Kubernetes基本功能特性，适用于开发测试环境。

汤泉居士·2024-02-03 00:23

kafka-zookeeper集群架构可视化监控，Kafka-Eagle安装部署

1、简介在kafka-zookeeper集群架构下，zookeeper管理kafka的元数据信息，如何监控这些信息，并且能够直观查看和管理kafka一些具体主题、分区等参数信息，是非常便于开发的，因此Kafka-Eagle

知其_所以然·2024-02-03 00:06

ES客户端接入方式

这两种客户端都可用于与Elasticsearch集群进行通信和执行操作，但它们在连接方式和使用方法上有一些区别。

大叶子不小·2024-02-03 00:36

keepalived配置RGW高可用

配置说明搭建集群的步骤这里不再赘述，这里我们假设你已经搭建好了ceph集群。

Joncc·2024-02-02 23:32

你不知道的Redis：RedisCluster与JedisCluster

RedisCluster是Redis官方提供的集群解决方案。由于业务的飞速增长，单机模式总会遇到内存、性能等各种瓶颈，这个时候我们总会喊，上集群啊。就跟我家热得快炸了，你总喊开空调呀一样。

java菜·2024-02-02 21:35

docker-compose快速搭建etcd集群

搭建docker-compose.ymlversion:'3'networks:etcd-net:services:etcd1:image:quay.io/coreos/etcdcontainer_name:etcd1command:etcd-nameetcd1-advertise-client-urlshttp://0.0.0.0:2379-listen-client-urlshttp://0.

ligan0404·2024-02-02 21:32

ElasticSearch 集群状态漂黄分片未分配

1、查看未分别的分片GET/_cat/shards?index=*&s=node,store:desc2、查看某一个分片分配失败的原因GET_cluster/allocation/explain{"index":"indexname","shard":0,"primary":true}3、设置全局配置PUT_cluster/settings{"persistent":{"indices":{"br

一把青龙湾月刀·2024-02-02 21:58

springboot集成rocketmq-spring-boot-starter的坑（避坑指南）

.坑rocketmq-spring-boot-starter的版本一开始，使用的是2.2.0版本，一直出现一个问题，那就是调用syncSend方法和asyncSend方法的时候，rocketmq控制台集群那里

猿小飞·2024-02-02 21:23

Redis简介和数据类型

Redis具有内置复制、Lua脚本、LRU逐出、事务和不同级别的磁盘持久性，并通过RedisSentinel和Redis集群的自动分区提供高可用性。Red

内向仓鼠·2024-02-02 21:38

docker swarm + nginx服务离线部署

简述本文为离线部署，仅供参考swarm概述（摘抄）Raft：一致性算法，在保证大多数管理节点存活的情况下，集群才能使用，所以就要求如果集群的话，manager节点必须>3台，如果是两个台，其中一台宕机，

浴火成诗·2024-02-02 20:52

k8s部署一个带有mysql应用_k8s部署springboot容器连接mysql容器

前提准备：安装好Docker和Kubernetes，初学者的话可以部署单节点集群，即DockerforMac/Windows，上一篇文章我已经写过如何搭建单节点集群。

weixin_39742471·2024-02-02 20:47

SpringCloud(35)——Nacos持久化

https://nacos.io/zh-cn/docs/cluster-mode-quick-start.html1.为什么要使用集群和持久化集群是为了解决单点故障而持久化是为了解决重启之后再手动输入配置的问题

CodeGao·2024-02-02 20:05

【Docker可视化工具】Portainer安装教程

一、前言Portainer是Docker的可视化管理工具，镜像、容器、日志显示等操作，Swarm集群、服务等集中管理和操作、登录用户管理和控制等功能。

zhengqingya·2024-02-02 19:36

南大通用数据库-Gbase-8a-学习-20-统一数据平台监控（GBaseGMonitor）

CentOSLinuxrelease7.9.2009(Core)内存4G逻辑核数3Gbase-8a单机版节点-IP192.168.142.11GBaseGMonitor节点-IP192.168.142.11Gbase-8a集群版节点

阳光九叶草LXGZXJ·2024-02-02 19:48

DNS 代理？Pipy：这我也可以

当然可以，而且DNS代理已经应用在跨集群流量调度中，文末经对此进行简单地介绍。

dotNET跨平台·2024-02-02 19:59

亚信安慧的AntDB数据库：稳定可靠的保障

作为一种高效可靠的数据库解决方案，AntDB引入了先进的分布式技术和优化算法，使得运营商能够拥有更稳定、更可靠的数据存储和处理能力。

亚信安慧AntDB数据库·2024-02-02 18:03

亚信安慧AntDB探索数据库更多可能

AntDB数据库架构通过引入创新的分布式体系结构，充分利用集群资源，实现数据的高效分布和快速存取。同时，它还具备强大的容错能力和灵活的扩展性，可以根据业务需求进行按需配置和动态调整。

亚信安慧AntDB数据库·2024-02-02 18:00

28图图解Raft协议，so easy~~

一个简单的介绍Raft协议是用来保证服务中各节点数据强一致性的，也就是CAP定理中的CP在Raft协议中，集群中的服务（也可以被称为节点，Peer）会有三种状态：Leader：主节点，负责处理所有的请求

快乐非自愿·2024-02-02 18:44

k8s安装配置nacos集群

1在k8s中部署的难点在k8s中部署nacos集群和在裸机器上直接部署nacos机器其实差别不大。

福海鑫森·2024-02-02 18:05

关于修改数据库服务器时间导致达梦数据库集群裂开

后面查看了达梦系统管理员手册了解了达梦集群的机制，知道数据库服务器时间需要先关闭数据库服务之后才可以修改数据库服务器时间。现在只能恢复数据库集群了。

福海鑫森·2024-02-02 18:33

TiDedup: A New Distributed Deduplication Architecture for Ceph——论文泛读

ATC2023Paper分布式元数据论文汇总问题Ceph是一个广泛部署的分布式存储系统，Ceph中的集群级去重设计，由于一些缺点难以在生产环境中使用：（1）去重唯一数据会导致过多的元数据消耗；（2）串行层次化机制对前台

妙BOOK言·2024-02-02 18:26

使用Minikube 部署 Kubernetes 集群

本文参考http://docs.kubernetes.org.cn/109.html安装VirtualBoxMac下安装下载https://mirrors.tuna.tsinghua.edu.cn/virtualbox/6.0.10/VirtualBox-6.0.10-132072-OSX.dmg双击运行CentOS下安装cat/etc/yum.repos.d/virtualbox.repo[vi

JerryAi·2024-02-02 18:19

低码大前端 - 混合云集群部署 PagePlug

前情提要老师之前布置了什么作业，完全忘了，本来觉得写作业可能也就一两个小时的事情，结果搞了半天，有一半的作业题目都没找到，mmp,之前拖延症，搞到心态都炸了，今天不管怎么说都要搞定；维护下自己的混合云集群

流雨声·2024-02-02 18:51

搭建k8s集群实战（四）k8s node 资源管理、避免系统无响应

Kubernetes的节点可以按照Capacity调度。默认情况下pod能够使用节点全部可用容量。这是个问题，因为节点自己通常运行了不少驱动OS和Kubernetes的系统守护进程。除非为这些系统守护进程留出资源，否则它们将与pod争夺资源并导致节点资源短缺问题，从而导致系统无响应。kubelet公开了一个名为‘NodeAllocatable’的特性，有助于为系统守护进程预留计算资源。Kubern

xiegwei·2024-02-02 17:11

ELK 多用户登录

先搭建ELK集群环境请移步至：Filebeat+ELK搭建日志收集平台ES开启TLS加密通信与身份认证进入ES集群任意一台安装目录，生成ca证书这里最好使用ES启动账号操作，证书生成过程中一直回车到完成

夕阳西下，断肠人在天涯·2024-02-02 17:40

【云原生技术】K8S报错 “0/1 nodes are available: 1 node(s) didn‘t match pod anti-affinity rules. preemption:

tmatchpodanti-affinityrules.preemption:0/1nodesareavailable:1Nopreemptionvictimsfoundforincomingpod.”的问题，需要对Kubernetes集群进行一些检查和可能的调整

阿寻寻·2024-02-02 17:29

2.kubeadm升级k8s

kubeadm升级k8s集群升级k8s集群必须先升级kubeadm版本到目的k8s版本，也就是说kubeadm是k8s升级的”准升证”。

哆啦A梦_ca52·2024-02-02 17:36

缓存中间件Redis Cluster集群模式

1.RedisCluster简介1.1什么是集群模式？

右耳菌·2024-02-02 16:29

新建数据库

mongo官网地址:cloud.mongodb.com第一步：创建集群image.png如果已经有了集群的界面如下image.png第二步：创建用户（注意记住帐号密码，为后边登录胡帐号密码）创建用户12

自然醒_3514·2024-02-02 14:02

Kafka集群搭建

Kafka集群是把状态保存在Zookeeper中的，首先要搭建Zookeeper集群。

莫噶·2024-02-02 14:30

Kafka 集群搭建

1、前提条件1、部署Kafka集群搭建需要服务器至少3台，奇数台2、Kafka的安装需要java环境，jdk1.83、Kafka安装包版本：kafka_2.11-0.10.0.1.tar.gz4、假设3

那小子、真烦·2024-02-02 14:30

kafka集群搭建

本文将记录使用kafka镜像，分别在两种场景下搭建3节点集群：1.在一台机器上使用容器方式安装kafka集群；2.在三台机器上使用容器方式安装kafka集群。

topswim·2024-02-02 14:30

K8S-NFS-StorageClass

工作流程K8s中部署NFS-StorageClassK8s的StorageClass提供了为集群动态创建PV的能力。

学的好秃的早·2024-02-02 14:15

ES7.17由于IP变化导致的故障及恢复

背景1.k8s升级，导致环境中的ES集群（7.17版本）重启2.集群由于在公有云环境，IP不固定（重启后IP可能发生变化），通过svc进行访问curlxxx-master-svc:9200/_cat/health3

zmc@·2024-02-02 14:15

k8s安装dashboard报错CrashLoopBackOff

报错信息使用kubectlgetpods-A查看集群，出现错误：kubernetes-dashboardkubernetes-dashboard-xxxxxxxxxx6-2qrst0/1CrashLoopBackOff615m

linrongchen·2024-02-02 14:13

K8S - Master 和 Node 组件介绍

ControllerManager(创建完成后管理)Nodekubelet(agent)kube-proxy(请求转发)containerruntime(docker/)MASTERMASTER可以在集群中任意

叁丶贰壹·2024-02-02 14:10

K8S集群kubeadm搭建(多master单node)

目录1介绍2初始化安装集群实验环境2.1修改静态ip2.2配置主机名2.3配置主机hosts文件2.4配置主机间无密码登录2.5关闭交换分区swap2.6修改机器内核参数2.7关闭防火墙2.8关闭安全增加

丰恒谷·2024-02-02 14:39

k8s多master集群在线安装

Jankin_Q·2024-02-02 14:09

CDH6.3.2安装

文章目录@[toc]一、CM简介1、ClouderaManager的概念2、ClouderaManager的功能3、ClouderaManager的架构二、准备清单1、部署步骤2、集群规划3、软件环境准备三

烟雨话浮生·2024-02-02 14:09

K8S基础之MasterNode节点和Node节点

Master节点Master节点是Kubernetes集群的控制节点,一般测试集群部署一个单节点Master,生产集群部署三个或多个节点Master注意:生产环境中不建议部署集群核心组件外的任何Pod(

小时候没少挨打·2024-02-02 14:09

k8s集群master和node添加

文章目录@[toc]一、重新添加master1）驱逐VIP2）设置为不可调度3）驱逐master4）删除master35）清理etcd集群6）卸载master节点7）配置域名解析8）master2生成join

烟雨话浮生·2024-02-02 14:36

史上最全的spark面试题

ResilientDistributedDataset）叫做分布式数据集，是spark中最基本的数据抽象，它代表一个不可变，可分区，里面的元素可以并行计算的集合Dataset：就是一个集合，用于存放数据的Destributed：分布式，可以并行在集群计算

@毛毛·2024-02-02 13:12

浅谈Spark Livy

涉及到一些角色：①客户端：browser,app终端设备②LivyServer③LivyServer获得用户的请求后，让后将job提交给spark集群去执行。REST即表述性状态传递（英文：Rep

浅汐yt·2024-02-02 13:40

专注于大数据技术栈·2024-02-02 13:39

【livy】Spark Livy深究

什么是livyLivy的特点Livycloudera开发通过REST来连接、管理spark的解决方案从任何地方提交job使用交互式的Scala、Python语言与远程的spark集群进行通信无需更改代码

小赵要加油·2024-02-02 13:07

第96讲：MySQL高可用集群MHA的核心概念以及集群搭建

文章目录1.MHA高可用数据库集群的核心概念1.1.主从复制架构的演变1.2.MHA简介以及架构1.3.MHA的软件结构1.4.MHAManager组件的启动过程1.5.MHA高可用集群的原理2.搭建MHA

Jiangxl~·2024-02-02 13:43

推荐频道

集群分布式技术