keepalived集群第68页

谷粒商城-缓存使用&分布式锁&SpringCache（5天）

1.1.1哪些数据适合放入缓存即时性、数据一致性要求不高的访问量大且更新频率不高的数据（读多，写少）例如：电商类应用，商品分类，商品列表等适合缓存本地缓存使用Map进行本地缓存本地缓存在分布式下的问题集群下的本地缓存不共享

没脑袋的喵·2024-01-13 14:45

开源大数据集群部署（四）Freeipa部署（kerberos+ldap）

作者：櫰木1、FreeIPA介绍Kerberos协议只是一种协议标准的框架，而MITKerberos则是实现了该协议的认证服务，是Kerberos的物理载体。将它与Hadoop服务进行集成便能够很好地解决安全性不足的问题。除了需要安装MITKerberos之外，我们还需要安装LDAP。在生产环境中Knox使用附带的LDAP服务显然是不合适的，因此需要一种更为正式的安装方式。Kerberos和LDA

云掣YUNCHE·2024-01-13 14:15

Komodor：Kubernetes 监控工具全面指南

为了方便起见，Komodor提供了一个简单的Web界面，以帮助您监控Kubernetes集群的状态。

yule.yang·2024-01-13 14:12

Hive安装部署

安装好对应版本的hadoop集群，并启动hadoop的HDFS以及YARN服务安装了MySQL服务，并启动MySQL的服务Hive的安装部署注意hive就是==一个构建数据仓库的工具==，只需要在==一台服务器上

我还不够强·2024-01-13 13:35

[书生·浦语大模型实战营]——基于 InternLM 和 LangChain 搭建你的知识库

通过单一的代码库，它支持在拥有数千个GPU的大型集群上进行预训练，并在单个GPU上进行微调，同时实现了卓越的性能优化。在1024个GPU上训练时，InternLM可以实现近90%的加速效率。

不是吧这都有重名·2024-01-13 13:00

分布式锁原理与实战

但在分布式集群工作的开发场景中，那么就需要一种更加高级的锁机制，来处理种跨JVM进程之间的数据同步问题，这就是分布式锁。公平锁和可重入锁的原理最经典的分布式锁是可重入的公平锁。什么是可重入的公平锁呢？

全能程序猿·2024-01-13 12:35

redis复习总结

我的redis1.redis集群主从集群【哨兵集群】：主从集群是指中，存在一个master节点和多个slave节点。master节点负责接收客户端的读写，slave节点负责读操作。

飞哥不鸽·2024-01-13 12:30

全网最全-超大模型+分布式训练架构和经典论文

如何利用计算中心成千上百的AI加速芯片的集群，训练参数量超过百亿的大规模模型？

ZOMI酱·2024-01-13 12:56

(11)达梦DMHS技术原理及应用介绍

在上一篇博客里，我们对达梦数据库MPP大规模并行处理集群进行了动手部署实践。本篇技术分享文章是对达梦DMHS技术原理的学习。

idmon·2024-01-13 12:09

K8S的搭建步骤

以下是搭建Kubernetes集群的详细步骤：准备环境：服务器要求：建议最小硬件配置为2核CPU、2G内存、20G硬盘。服务器最好可以访问外网，因为会有从网上拉取镜像的需求。

后山客·2024-01-13 12:07

zookeeper未授权访问漏洞修复方式

漏洞详情如下：zookeeper的权限概念在这里:https://www.cnblogs.com/linuxbug/p/5023677.html图片中的解决方式都是通过设置认证用户,但是仅仅设置用户和密码的话集群

xiexiaoming052·2024-01-13 12:39

ZooKeeper 实战(一) 超详细的单机与集群部署教程（MacOS）

文章目录ZooKeeper实战(一)超详细的单机与集群部署教程（MacOS）0.ZooKeeper简介1.单机部署1.1.ZooKeeper下载安装1.2.修改配置文件1.3.启动服务端1.4.启动客户端

QQ_AHAO·2024-01-13 12:37

Apache Zookeeper未授权访问漏洞

执行以下命令即可远程获取该服务器的环境：echoenvi|nc192.168.15.742181zookeeper有三个端口（可以修改），默认端口作用：1、2181：对cline端提供服务2、3888：选举leader使用3、2888：集群内机器通讯使用

q80880117·2024-01-13 11:35

Yarn的安装与使用详细介绍

yarnApacheHadoopYARN（YetAnotherResourceNegotiator，另一种资源协调者）是一种新的Hadoop资源管理器，它是一个通用资源管理系统，可为上层应用提供统一的资源管理和调度，它的引入为集群在利用率

知数SEO·2024-01-13 11:36

大疆御3E+RTK，是不是不需要做人工像控点，直接用重建大师建模？

重建大师是一款专为超大规模实景三维数据生产而设计的集群并行处理软件，输入倾斜照片，激光点云，POS信息及像控点，输出高精度彩色网格模型，可一键完成空三、自动建模和LOD构建。

大势智慧·2024-01-13 11:00

微服务治理：可视化 Kubernetes 集群服务依赖关系的工具

依赖关系映射工具可以帮助您在Kubernetes集群中可视化服务之间的调用和交互，从而深入了解整个架构的运行状况。

surfirst·2024-01-13 10:40

etcd基本介绍

1etcd介绍etcd是一种开源的分布式统一键值存储，用于分布式系统或计算机集群的共享配置、服务发现和的调度协调。etcd是Kubernetes的首要数据存储，也是容器编排的实际标准系统。

巴枝子·2024-01-13 10:06

微服务自动化.docker-compose

了解：kubernetes也称为k8s，也是用于自动部署和管理容器应用程序的开源系统Docker-Compose项目是Docker官方的开源项目,负责实现对Docker容器集群的快速编排通过编写docker-compose

巴枝子·2024-01-13 10:34

达梦数据库主备集群

1：服务器硬件需求按实际业务需求，选择合适的服务器，准备3台服务器，一台主库服务器，一台备库服务器，一台监视器服务器，服务器参数建议如下：硬件要求物理内存>=16GB交换区Swap空间>=物理内存/tmp大小>1000MB网络物理机器需要4个网卡，2个public网卡做band，2个private网卡做band磁盘根据实际应用系统需要挂载合适大小磁盘时间服务器按机房要求配置连接时间服务器操作系统版

zhanglei_16·2024-01-13 10:03

分布式任务调度-xxl-job

12.1.什么场景用了任务调度xxl-job解决的问题解决集群任务的重复执行问题（你用Springtask的话很容易造成任务重复执行）cron表达式定义灵活（SpringTask是把cron表达式定义在代码中的

java牛虻·2024-01-13 10:31

RabbitMQ的高可用机制

通过搭建集群保证高可用RabbitMQ的集群模式：普通集群，镜像集群（开发时用的多），仲裁集群普通集群（标准集群）会在各个节点间共享部分数据（交换机和队列元信息），但不包含队列里的消息；如果队列不在该节点

java牛虻·2024-01-13 10:01

大数据系列 | CDH6.3.2（Cloudera Distribution Hadoop）部署、原理和使用介绍

ClouderaDistributionHadoop）部署、原理和使用介绍1.大数据技术生态中Hadoop、Hive、Spark的关系介绍2.CDN（ClouderaDistributionHadoop）集群部署

降世神童·2024-01-13 10:50

Spark原理——物理执行图

物理图解决的其实就是RDD流程生成以后,如何计算和运行的问题,也就是如何把RDD放在集群中执行的问题问题二:如果要确定如何运行的问题,则需要先确定集群中有什么组件首先集群中物理元件就是一台一台的机器其次这些机器上跑的守护进程有两种

我像影子一样·2024-01-13 09:17

redis — redis cluster集群模式下如何实现批量可重入锁？

一、rediscluster集群版在Redis3.0版本以后，Redis发布了RedisCluster。

RachelHwang·2024-01-13 09:46

Redis重点总结补充

Redis重点总结1.redis分布式锁2.redission实现分布式锁注意：加锁、设置过期时间等操作都是基于lua脚本完成.redisson分布式锁，实现可重入（前提是同一个线程下3.redis主从集群实现主从复制

今天的代码敲了吗·2024-01-13 09:44

Redis集群架构--cluster原理

一、集群与分区1.分区的意义（1）性能的提升单机Redis的网络I/O能力和计算资源是有限的，将请求分散到多台机器，充分利用多台机器的计算能力可网络带宽，有助于提高Redis总体的服务能力。

jiuLives·2024-01-13 09:40

Jenkins+Docker+SpringCloud微服务持续集成之集群部署

一、集群部署流程说明环境配置#环境配置hostnamectlset-hostnameweb2-server&&susystemctlstopfirewalldsystemctldisablefirewalldvim

小波同学·2024-01-13 08:39

kubeadm安装kubernetes

基本环境配置节点分为：master，node，masterlb(keepalived虚拟Ip，不占用机器)k8s-master0116k8s-node0111315k8s-node02115进入之后直接选

漫漫行程路·2024-01-13 08:51

如何在 Ubuntu 20.04 上安装 Apache Kafka

Kafka集群具有高度可扩展性和容错性。与ActiveMQ和RabbitMQ等其他消息代理相比，它还具有更高的吞吐量。尽管它通常用作发布/订阅消息传递系统，但许多项

timi先生·2024-01-13 08:28

LVS 负载均衡集群

本章主要内容：了解群集的结构与工作模式了解LVS负载均衡群集原理学会配置NFS共享服务学会构建LVS-NAT负载均衡群集在各种互联网应用中，随着站点对硬件性能、响应速度、服务稳定性、数据可靠性等要求越来越高，单台服务器已经无法满足负载均衡及高可用的要求。除了使用价格昂贵的大型机、专用负载分流设备以外，企业还有另外一种选择来解决难题，那就是构建群集服务器——通过整合多台服务器，使用LVS来达到服务器

L罗盛·2024-01-13 08:27

@KafkaListener指定kafka集群

基于@KafkaListener注解的kafka监听代码可以手动指定要消费的kafka集群，这对于需要访问多套kafka集群的程序来说，是有效的解决方案。

Pluto_CSND·2024-01-13 08:25

Nginx负载均衡以及常用的7层协议和4层协议的介绍

二、nginx负载均衡的作用高并发：负载均衡通过算法调整负载，尽力均匀的分配应用集群中各节点的工作量，以此提高应用集群的并发处理能力（吞吐量）。

藻头男·2024-01-13 08:53

微服务基础设施怎么建设，如何选择微服务框架

【缺点】1.ServiceProxy需要通过集群来做高性能、高可用；2.维护复杂

浮生带你学Java·2024-01-13 07:05

微服务自动化.跨主机集群

我们看一下这个图：理解这个图了我们就进行下一步Flannel特点1.使集群中的不同Node主机创建的Docker容器都具有全集群唯一的虚拟IP地址。

巴枝子·2024-01-13 07:57

微服务自动化 etcd集群搭建

静态部署(前提)它需要开多个虚拟机那我们就找到你使用的那个虚拟机复制（强调两个主机都已经安装好了etcd服务并且能够正常运行）不是复制就可以使用我们需要把里面的不是vmdk和vmx的文件删了然后再回到我们的虚拟机，鼠标右键选择打开然后启动虚拟机它会提示我们是否已知虚拟机被复制选择已知复制该虚拟机就行（选第一个就会默认IP一样的）进来输入ifconfig查看IP再到外部进行连接连接之后我们在两个里面

巴枝子·2024-01-13 07:27

Sqoop性能优化：高效数据传输的技巧

高效的数据传输可以减少任务运行时间，减轻集群负载，提高整体工作效率。在本文中，将深入探讨Sqoop性能优化的关键技巧，并提供丰富的示例代码，以帮助大家更全面地理解和实施这些技术。

晓之以理的喵~~·2024-01-13 07:44

使用Sqoop将数据导入Hadoop的详细教程

准备工作在开始之前，确保已经完成以下准备工作：安装并配置好Hadoop集群。确保Sqoop已经正确安装并配置。数据源准备示例数据使用MySQL数据库中的一个简单表。首先，确保已经创建了该表

晓之以理的喵~~·2024-01-13 07:43

Hadoop分布式集群安装

上一篇大数据文章讲解了在单机上搭建Hadoop-Yarn伪分布式集群的安装方法，方便大家学习，真实环境不可能只有一台机器，肯定是多节点的集群，大单位还会建设很多Hadoop集群，比如各个大部门有自己的集群

鬓戈·2024-01-13 07:28

Linux 基于 rsync 实现集群分发脚本 xsync

一、rsync简介rsync（remotesynchronize）是Liunx/Unix下的一个远程数据同步工具。它可以通过LAN/WAN快速同步多台主机间的文件和目录，并适当利用rsync算法（差分编码）以减少数据的传输。rsync算法并不是每一次都整份传输，而是只传输两个文件的不同部分，因此其传输速度相当快。除此之外，rsync支持拷贝文件、显示目录属性等，并可以选择性的压缩以及递归拷贝。二、

快乐的小三菊·2024-01-13 06:33

20、Kubernetes核心技术 - 基于Prometheus和Grafana搭建集群监控平台

目录一、概述二、监控平台架构图编辑三、部署Prometheus3.1、Prometheus简介3.2、部署守护进程node-exporter3.3、部署rbac3.4、ConfigMap3.5、Deployment3.6、Service3.7、验证Prometheus四、部署Grafana4.1、Deployment4.2、Service4.3、Ingress4.4、验证Grafana一、概述本文

每天都要进步一点点·2024-01-13 06:22

自定义一个对象【minio】

SRE成长记·2024-01-13 06:09

redis夯实之路-哨兵（Sentinel）机制详解

sentinel的主要功能集群监控：负责监控redismaster和slave进程是否正常工作消息通知：如果某个redis实例有故障，那么哨兵负责发送消息给管理员故障转移：如果masternode挂掉了

⁢200·2024-01-13 06:07

k8s--基础架构--Mixed Version Proxy

应用场景：这在集群中存在多个运行不同Kubernetes版本的APIServer时非常有用，例如在长期部署新版本Kubernetes过程中。

IT艺术家-rookie·2024-01-13 05:47

kubernetes基础实践之网络

Kubernetes（k8s）是用来搭建服务集群的，而k8s只是搭建在有限的物理机或者虚拟机上面，服务器提供的IP是有限的，而k8s集群支持分布式服务、支持服务的弹性伸缩，这一切都利用了容器化技术，从以主机为中心的基础架构转移到以容器为中心的基础架构

jerry的技术与思维·2024-01-13 05:30

MySQL-简介及安装

1.1开发DBA***1.2运维DBA*****1.2.1初级运维安装、搭建1.2.2中级运维MySQL数据库管理员：用户权限，索引管理，存储引擎，备份恢复，主从，故障处理1.2.3高级运维性能优化，集群高可用

zwb_jianshu·2024-01-13 05:24

k8s-调度 13

调度器通过kubernetes的watch机制来发现集群中新创建且尚未被调度到Node上的Pod。调度器会将发现的每一个未调度的Pod调度到一个合适的Node上来运行。

coco--hui·2024-01-13 05:48

【docker】Docker Stack 详细使用及注意事项

它使得在Swarm集群中部署、管理和扩展一组相互关联的服务变得简单。主要用于定义和编排容器化应用的多个服务。

顽石九变·2024-01-13 04:26

【docker】Docker Swarm 核心概念及详细使用

一、什么是DockerSwarmDockerSwarm是Docker的原生集群管理工具。它的主要作用是将多个Docker主机集成到一个虚拟的Docker主机中，为Docker容器提供集群和调度功能。

顽石九变·2024-01-13 04:48

多级缓存架构(三)OpenResty Lua缓存

文章目录一、nginx服务二、OpenResty服务1.服务块定义2.配置修改3.Lua程序编写4.总结三、运行四、测试五、高可用集群1.openresty2.tomcat通过本文章，可以完成多级缓存架构中的

木子dn·2024-01-13 04:14

多级缓存架构(四)Redis缓存

文章目录一、Redis服务二、Redis缓存预热1.引入依赖2.handler类实现三、整合Redis缓存四、运行五、测试1.redis缓存预热2.redis缓存命中六、高可用集群通过本文章，可以完成多级缓存架构中的