keepalived集群第66页

ceph集群扩容

1.确定要扩容的节点2.集群创建前检查检查IP，且ping一下集群中的其他节点clusternetworkIP，看是否能ping通pingmon修改主机的/etc/hosts文件,并添加所有节点信息检查防火墙是否关闭

大大金·2024-01-15 01:44

HADOOP大数据之HDFS管理与运维

一、HDFS数据迁移解决方案HDFS分布式拷贝工具DistCp数据迁移使用场景：冷热集群数据同步、分类存储集群数据整体搬迁数据的准实时同步数据迁移要素考量带宽性能是否支持增量同步4、数据迁移的同步性image.pngDistCp

奋斗的韭菜汪·2024-01-15 01:33

Kubernetes(二) - 使用Rancher部署K8S集群(搭建Rancher)

众所周知Kubernetres虽然很好但是安装部署很复杂,Rancher功能很强大,我们这里仅仅使用Rancher来搭建管理Kubernetes集群Kubernetes官方文档:https://kubernetes.io

文振熙·2024-01-15 00:41

【大数据进阶第三阶段之Hue学习笔记】Hue简介和架构介绍

通过使用Hue我们可以在浏览器端的Web控制台上与Hadoop集群进行交互来分析处理数据，例如操作HDFS上的数据、运行MapReduceJob、执行Hive的SQL语句

Allen_lixl·2024-01-15 00:56

分布式链路追踪专栏，分布式链路追踪：Skywalking集群管理设计

SkyWalking是一个开源APM系统，包括针对CloudNative体系结构中的分布式系统的监视，跟踪，诊断功能。核心功能如下：服务、服务实例、端点指标分析；根本原因分析，在运行时分析代码；服务拓扑图分析；服务，服务实例和端点依赖性分析；检测到慢速服务和端点；性能优化；分布式跟踪和上下文传播；数据库访问指标。检测慢速数据库访问语句（包括SQL语句）；报警。SkyWalking目前是Apache

架构随笔录·2024-01-14 23:26

Hadoop之mapreduce参数大全-6

节点标签是在Hadoop集群中为节点分配的用户定义的标签，可用于将Map任务限制在特定类型的节点上运行。在HadoopMapReduce配置文件中，可以通过以下方式设置mapreduce.map

OnePandas·2024-01-14 22:07

minikube搭建k8s集群体验

一、安装集群本文演示如何在windows下安装和使用minikube，需要做的工作如下：提前安装好DockerEngine；从minikube官网下载Windows的安装包进行安装；执行minikube

文景大大·2024-01-14 21:46

K8S--service

一、简介Service是将集群中的一个或一组Pod应用程序公开为网络服务的方法。

husterlichf·2024-01-14 20:34

K8S---kubectl replace

kubectlgetXXxx-oyaml>object.yaml，再在该object.yaml基础上进行修改，最后执行kubectlapply-fobject.yaml，因为在执行此命令的时候会校验文件中的某些值与当前集群中的对象的某些值是否是相等的

husterlichf·2024-01-14 20:32

分布式集群架构场景化解决方案

分布式和集群分布式和集群是不一样的,分布式一定是集群,集群不一定是分布式分布式:把一个系统拆分为多个子系统,每个子系统负责各自的那部分功能,独立部署,各司其职集群:多个实例共同工作,最简单/最常见的集群是把一个应用复制多份部署一致性的

Joeyzz7000·2024-01-14 20:11

ELK日志分析系统之（Filebeat 收集Nginx日志并写入 Kafka 缓存发送至Elasticsearch）

场景：与redis作为缓存服务器相比，虽然利用redis可以实现elasticsearch缓存功能,减轻elasticsearch的压力,但不支持的redis集群，存在单点问题，故利用kafka代替redis

zhl52306·2024-01-14 19:56

Linux --绘制地图投影出现报错：无法成功下载地图背景数据

Linux--绘制地图投影出现报错：无法成功下载地图背景数据主要原因是由于使用学院集群，该集群无法连接外网，在使用cartopy绘制地图投影时，导致无法成功加载地图背景数据解决方法也很简单，自己手动下载所需要的地形数据然后放到

简朴-ocean·2024-01-14 17:51

使用集群提交作业步骤

首先，先在terminal中创建脚本vijob.slurmvi命令：打开文件文本内容为：#!/bin/bash#sbatch-jtest#作业名为test，可以自定义#sbatch-w,--nodelist=#提交到节点1跑代码#sbatch-otest.out#屏幕上的输出文件重定向到test.out#sbatch-ntasks-per-node=4#单节点启动的进程数为1#sbatch--cp

摩卡摩卡～·2024-01-14 16:32

把k8s容器里的文件复制到本地

您可以使用以下命令列出集群中的Pod：kubectlgetpods找到包含要复制内容的适当Pod，记下Pod名称和容器名称。2.复制容器内容：通过Pod和容器名称，可以使用`kubectlcp`命

ken_coding·2024-01-14 16:25

六、K8S-DaemonSet(DS)

DaemonSet：简称DS，守护进程控制器DS的主要作用，是在kubernetes集群里，运行一个daemonpod。

繁华依在·2024-01-14 16:13

五、K8S-StatefulSet（STS有状态服务）

RC、Deployment、DaemonSet都是面向无状态的服务，它们所管理的Pod的IP、名字，启停顺序等都是随机的，而StatefulSet是管理所有有状态的服务，比如MySQL、MongoDB集群等

繁华依在·2024-01-14 16:43

Jedis路由key的算法剥离

在Redis集群中，会有很多个分片，如果此时利用Jedis来操作此Redis集群，那么他会把数据路由到不到的分片上。而且如果动态的往集群中增加分片，也不会影响Jedis的功能。究竟是怎么做到的呢？

java高并发·2024-01-14 14:01

Hadoop HDFS集群和 Yarn集群的架构

前言：Hadoop是一个用Java编写的Apache开源框架，允许使用简单的编程模型跨计算机集群分布式处理大型数据集。

听风细雨66·2024-01-14 14:15

Hadoop命令

进程命令对hadoop集群的操作start-dfs.shstop-dfs.sh打开和关闭dfsstart-yarn.shstop-yarn.sh打开和关闭yarnhadoop单进程操作旧版本命令hadoop-daemon.shstart

CJ21·2024-01-14 14:25

线上问题整理

JVM案例案例一：服务器内存不足，影响Java应用问题：收到报警，某Java应用集群中一台服务器可用内存不足，超过报警阈值。

程序猿进阶·2024-01-14 13:44

【环境搭建】RocketMQ集群搭建

前置条件及效果图条件：两台服务器，个人是两台腾讯云服务器(其中嫖的朋友一个)；版本：rocketmq-version:4.4.0rocketmq-console(mq控制台)Java：1.8maven:3.6.3集群模式选择

xbhog·2024-01-14 13:10

【elastic search】详解elastic search集群

目录1.与集群有关的一些概念2.集群搭建3.集群搭建4.kibana链接集群5.选举流程6.请求流程7.master的作用1.与集群有关的一些概念数据分片：数据分片（shard），单台服务器的存储容量是有限的

_BugMan·2024-01-14 13:24

[GN] 微服务开发框架 --- Docker的应用 (24.1.9)

Dockerfile自定义镜像镜像结构使用Dockerfile构建Java项目基于Ubuntu构建Java项目基于java8构建Java项目Docker-Compose初识DockerCompose部署微服务集群总结前言提示

GGood_Name·2024-01-14 12:51

使用Keepalived实现Nginx的自动重启及双主热备高可用

1、概述之前我们使用Keepalived实现了Nginx服务的双机主备高可用，但是有几个问题没有解决，今天一起探讨一下。

Java架构大仙·2024-01-14 12:30

多无人机集群智能flocking

matlab2020可运行GitHub-pareshbhambhani/MultiAgent-Flocking-framework:ThisispartofthecurrentresearchIamworkingon.

aspiretop·2024-01-14 10:50

Nacos和Eureka比较、统一配置管理、Nacos热更新、多环境配置共享、Nacos集群搭建步骤

提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档文章目录前言一、Nacos和eureka的对比二、统一配置管理二、Nacos热更新方式一方式二三、多环境配置共享四、Nacos集群搭建步骤

༶626·2024-01-14 09:51

error: KeeperErrorCode = NoNode for /hbase/master

错误2：搭建完集群之后，在hbaseshell中查看表，出现error:KeeperErrorCode=NoNodefor/hbase/master1.查看日志，是因为zookeeper启动后又自动关闭了

Miss_Bueno·2024-01-14 09:36

使用 spark-submit 部署应用、自定义分区器、checkpoint、共享变量

spark-submit部署应用附加的参数：spark-env.sh具体的属性配置信息配置资源分配参数调优案例分析自定义分区器检查点checkpointSpark共享变量spark-submit部署应用不论使用的是哪一种集群管理器

Geek白先生·2024-01-14 09:31

spark-submit 与 spark-shell 介绍

这个脚本负责设置spark使用的classpath和依赖，支持不同类型的集群管理器和发布模式。2、运行方式.

火成哥哥·2024-01-14 09:59

K8S 日志方案

一、统一日志管理的整体方案通过应用和系统日志可以了解Kubernetes集群内所发生的事情，对于调试问题和监视集群活动来说日志非常有用。对于大部分的应用来说，都会具有某种日志机制。

孤雅738·2024-01-14 09:58

Spark -- 累加器和广播变量

：分布式只写数据集广播变量：分布式只读数据集一.累加器累加器用来对信息进行聚合，通常在向Spark传递函数时，比如使用map()函数或者用filter()传条件时，可以使用驱动器程序中定义的变量，但是集群中运行的每个任务都会得

Keep hunger·2024-01-14 09:58

【个人记录】Ceph删除OSD

目标在ceph集群中踢出osd1操作下线OSD1cephosdout1移除集群cephosdcrushremoveosd.1删除节点数据cephauthdelosd.1cephosdrm1查看是否生效cephosdtree

三千院喵·2024-01-14 08:30

Redis Cluster

1、概念介绍官方网站：https://redis.io/topics/cluster-tutorial尽管可以使用哨兵主从集群实现可用性保证，但是这种实现方式每个节点的数据都是全量复制，数据存放量存在着局限性

HuaLuLemon·2024-01-14 08:29

记redis5.x在windows上搭建集群（六主六从）

6383127.0.0.1:63841、安装redis,文章太多不多BB2、复制六份redis文件夹出来改名3、修改每一份的配置文件redis.windows.conf修改为以下格式：#运行端口port6379#启用集群

小费的部落·2024-01-14 08:57

【金猿产品展】OceanBase 原生分布式数据库——从根本上解决海量数据管理的问题...

·改变商业一款完全自研的原生分布式关系数据库软件，在普通硬件上实现金融级高可用，首创“三地五中心”城市级故障自动无损容灾新标准，具备卓越的水平扩展能力，全球首家通过TPC-C标准测试的分布式数据库，单集群规模超过

数据猿·2024-01-14 07:46

物理机本地和集群部署Spark

一、单机本地部署1）官网地址：http://spark.apache.org/2）文档查看地址：https://spark.apache.org/docs/3.1.3/3）下载地址：https://spark.apache.org/downloads.htmlhttps://archive.apache.org/dist/spark/上传文件、解压缩、修改文件名启动Sparkspark-shell

DIY……·2024-01-14 07:43

物理机部署三节点Kafka集群

一、部署Kafka集群官方下载地址：http://kafka.apache.org/downloads.html上传安装包到102的/opt/software目录下解压安装包到/opt/module/目录下

DIY……·2024-01-14 07:43

Hbase提高读取速度Memstore＆BlockCache

BlockCache其中InMemory队列用于保存HBaseMeta表元数据信息，因此如果将数据量很大的用户表设置为InMemory的话，可能会导致Meta表缓存失效，进而对整个集群的性能产生影响。

明明德撩码·2024-01-14 07:49

阿里云服务器2核8G、4核16G、8核32G配置最新收费标准及活动价格

2核8G、8核32G、4核16G配置的云服务器处理器与内存比为1:4，这种配比的云服务器一般适用于中小型数据库系统、缓存、搜索集群和企业办公类应用等通用型场景，因此，多为企业级用户选择，目前用户购买2核

阿里云最新优惠和活动汇总·2024-01-14 07:01

k8s 部署Jenkins项目

1、基于helm部署jenkins要求：当前集群配置了storageClass，并已指定默认的storageClass，一般情况下，创建的storageClass即为默认类指定默认storageClass

孤雅738·2024-01-14 07:49

OceanBase 4.2特性解读：Show Trace全链路跟踪，助力快速问题定位与精准诊断

相对于单机数据库，分布式数据库系统涉及多个节点、多组件的协同工作，集群规模可能扩展至几十甚至上百台服务器，用户请求链路因此变得更为复杂，使得快速、高效的问题诊断与定位变得更加具有挑战性。

OceanBase数据库官方博客·2024-01-14 07:29

RocketMQ5-03RocketMQ-Dashboard和Java客户端访问示例

接上篇02快速部署RocketMQ5.x(手动和容器部署)已经完成RocketMQ5.0环境的部署，就需要对这个环境进行测试，查看集群、写入消息、读取消息等本篇教你如何使用和查看部署的服务：Docker

c_zyer·2024-01-14 07:29

api网关-kong

小乞丐程序员·2024-01-14 06:10

Sqoop与其他数据采集工具的比较分析

它提供了方便的命令行界面，支持从关系型数据库导入数据到Hadoop集群，

晓之以理的喵~~·2024-01-14 06:00

Hadoop-HA高可用

一、集群规划二、HDFS高可用官方地址在opt目录下创建一个ha文件夹，将/opt/module/下的hadoop-3.1.3拷贝到/opt/ha目录下（记得删除data和log目录）配置core-site.xmlhdfs-site.xmldfs.namenode.name.dirfile

DIY……·2024-01-14 06:28

数据库-PostgreSQL搭建PgPool-II集群

测试环境：172.16.212.61，主机名master172.16.212.62，主机名slave172.16.212.100，VIP1安装和基本配置所有主机，安装postgresql11.8yum-yinstallhttps://download.postgresql.org/pub/repos/yum/11/redhat/rhel-7-x86_64/pgdg-redhat-repo-42.0

鬼刺·2024-01-14 06:58

Hbase 的复制

HBase默认采用异步复制的方式同步数据，即客户端执行完put之后，RegionServer的后台线程不断地推送HLog的Entry到Peer集群。

晓之以理的喵~~·2024-01-14 06:45

hbase集群之间数据迁移_HBase集群数据迁移方案

2、采用Hadoopdistcp方式，将以上目录的内容，迁移到另一个集群。使用add_table.rb进行恢复。

无畏道人·2024-01-14 06:14

Hbase跨集群迁移

一、Hbase跨集群迁移方式##标题Hbase跨集群迁移的方式：copyTable、distcp、export/import、snapshot。备注：新集群Hbase版本cdh2.1.0。

喧嚣已默，往事非昨·2024-01-14 06:14

一种HBase数据备份及恢复方法

目录0.引言1.备份方法2.脚本的使用方法3获取HDFS文件到本地系统4数据恢复方法4.1将将备份文件添加到hdfs中4.2导入数据到HBase集群5.小结0.引言HBase在大数据处理中地位至关重要，

莫叫石榴姐·2024-01-14 06:42

推荐频道

keepalived集群