Redis3.0集群

2024 年最新基于 Spring Cloud 的微服务架构分析

如果Eureka以集群模式部署，当集群中有分片出现故障时，那

2401_83916326·2025-01-24 17:02

如何部署 Flask 应用程序到生产环境？

部署方式适用场景说明Gunicorn+Nginx适合中小型项目轻量级，性能稳定uWSGI+Nginx高性能并发、生产环境推荐生产级别，支持异步工作Docker+Kubernetes容器化部署，微服务架构适合大规模微服务集群

Channing Lewis·2025-01-24 15:15

CDH日志清理

备注:CDH版本:6.3.1背景CDH集群运行了2个多月了，根目录磁盘使用率接近80%了，需要清理CDH日志。一.查看问题CDH的日志文件一般在如下几个目录，可以通过如下代码进行查看。

只是甲·2025-01-24 14:13

Spark运行模式及Spark on Yarn两种运行模式的区别

Spark运行模式1.Standalone模式描述：Standalone模式是Spark的独立集群模式，Spark自己管理资源和调度任务。适合小型集群或个人开发环境。特点：简单易用，适合开发和测试。

DataCrafter·2025-01-24 13:03

Kubernetes入门

Kubernetes的工作原理Kubernetes通过将应用打包到容器中，并在集群中运行这些容器来实现应用的部署和管理。容器是轻量级的、可移植的、自包含的软

I~Lucky·2025-01-24 13:01

【大数据入门核心技术-Hive】（十六）hive表加载csv格式数据或者json格式数据

一、环境准备hive安装部署参考：【大数据入门核心技术-Hive】（三）Hive3.1.2非高可用集群搭建【大数据入门核心技术-Hive】（四）Hive3.1.2高可用集群搭建二、hive加载Json格式数据

forest_long·2025-01-24 12:27

Kubernetes网络

Kubernetes网络Kubernetes网络模型相关概念链接Kubernetes网络模型Kubernetes网络模型由多个关键部分构建而成：在Kubernetes集群中，每个Pod都会被分配一个独一无二的

qichengzong_right·2025-01-24 10:43

y98.第六章微服务、服务网格及Envoy实战 -- 集群管理(九)

8.集群管理8.0本节话题集群管理器与服务发现机制主动健康状态检测与异常点探测负载均衡策略分布式负载均衡负载均衡算法：加权轮询、加权最少连接、环哈希、磁悬浮和随机等；区域感知路由全局负载均衡位置优先级位置权重均衡器子集熔断和连接池

Raymond运维·2025-01-24 08:53

TiDB架构特性

TiDBServerPDServerTiKVServerTiSparkTiDBOperatorTiDB核心特性水平扩展高可用TiDB存储和计算能力存储能力-TiKV-LSM计算能力-TiDBServer总结TiDB整体架构 TiDB集群主要包括三个核心组件

·2025-01-24 05:24

TiDB分布式数据库架构与核心原理

本文从整体架构、集群设计、

AI天才研究院·2025-01-24 04:21

大数据学习（七）Python3操作livy（使用pylivy模块）

pylivy是Livy的Python客户端，可以在Spark集群上轻松实现远程代码执行。安装$pipinstall-Ulivy请注意，pylivy需要Python3.6或更高版本。

猪笨是念来过倒·2025-01-24 04:46

Kubectl常用命令操作

kubectl命令格式：kubectlcommandtypenamecommand:表示子命令，用于操作kubernetes的集群资源对象，如：createdeletedescribegetapplytype

_Eden_·2025-01-24 03:11

Zookeeper（23）Zookeeper的选举机制是什么？

Zookeeper的选举机制是确保在集群中始终有一个唯一的Leader。Leader负责处理所有的写请求和协调事务的提交，而Follower负责处理读请求和转发写请求给Leader。

辞暮尔尔-烟火年年·2025-01-24 02:06

在K8S中，如果后端NFS存储的IP发送变化如何解决？

Dusk_橙子·2025-01-24 01:58

cascading 入门（一）

它抽象了集群拓扑结构和配置来快速开发复杂分布式的应用，而不用考虑背后的MapReduce。

zhumin726·2025-01-24 01:28

滚雪球学Redis[4.1讲]：Redis的高可用性与集群架构

RedisSentinelSentinel的工作原理Sentinel的配置与使用高可用架构下的故障转移3.RedisClusterCluster模式的架构与原理Cluster的配置与使用分片与槽位的管理集群管理中的常见问题与优化小结下期预告前言在上一期内容

bug菌¹·2025-01-23 22:34

GPU 集群和分布式计算

《GPU集群和分布式计算》关键词：GPU集群、分布式计算、CUDA、OpenACC、OpenMP、性能优化、故障处理、案例分析摘要：本文详细探讨了GPU集群和分布式计算的基本概念、架构、编程模型以及应用场景

AI天才研究院·2025-01-23 21:28

360智算中心万卡GPU集群架构分析

360智算中心：万卡GPU集群落地实践 360智算中心是一个融合了人工智能、异构计算、大数据、高性能网络、AI平台等多种技术的综合计算设施，旨在为各类复杂的AI计算任务提供高效

科技互联人生·2025-01-23 21:27

K8S中ingress详解

Ingress介绍Kubernetes集群中，服务（Service）是一种抽象，它定义了一种访问Pod的方式，无论这些Pod如何变化，服务都保持不变。

元气满满的热码式·2025-01-23 21:27

Linux 时间同步服务

时间同步:多主机协作工作时，各个主机的时间同步很重要，时间不一致会造成很多重要应用的故障，如:加密协议，日志，集群等，利用NTP(NetworkTimeProtocol)协议使网络中的各个计算机时间达到同步

不想起昵称929·2025-01-23 20:50

HAProxy集群与常见的Web集群软件调度器对比

一、Web集群调度器1.常见的Web集群调度器常用的Web集群调度器分为软件和硬件,负载均衡性能（硬件负载均衡器F5>LVS>Haproxy>Nginx）软件调度器（开源）1.LVS：性能最好，搭建复杂

EsDeath_99·2025-01-23 18:09

【YashanDB知识库】YCM数据库托管遇到的问题

templateId=171...YCM托管了集群，现在显示数据库处于故障状态，按照告警项建议检查实例的状态是正常运行的问题现象：查看dba\_users视图发现yasom用户不存在。

·2025-01-23 18:55

虚拟机VMware Workstation Pro安装集群+hadoop+spark+scala

参考资料：参考视频教程链接：大数据实验虚拟机安装Hadoop和Spark_哔哩哔哩_bilibiliup主：孤独时代的硕硕namenode安装选择镜像、路径、磁盘（最好不要c盘）、内存和处理器编辑名称与位置可点击此处自定义硬盘进行设置。选择语言、时区、软件、位置和网络

落枫兮·2025-01-23 15:16

K8s架构与组件

这些对集群做出全局决策(比如调度)，以及检测和响应集群事件的组件集合也称为控制平面。其实K8s官方并没有Master这一说，只是大多数安装工具（kube

稚辉君.MCA_P8_Java·2025-01-23 10:10

Hadoop分布式文件系统-HDFS架构

二、HDFS的特点高容错性：一个HDFS集群会包含非常多的结点，HDFS将文件分块存储，并且会保存多个副本到不同的机器节点上以保证数据的安全，而且

Fancs2024·2025-01-23 09:37

分布式系统架构：分布式缓存

分布式缓存也是面试常见的问题，通常面试官会问为什么要用缓存，以及用的Redis是哪种模式，用的过程中遇到哪些问题这些1.AP还是CPRedis集群就是典型的AP式，它具有高性能、高可用等特点，但它却并不保证强一致性

工业甲酰苯胺·2025-01-23 06:42

Flink系列-2、Flink架构体系

https://flink.apache.org/学习资料：https://flink-learning.org.cn/目录Flink中的重要角⾊Flink数据流编程模型Libraries支持Flink集群搭建

技术武器库·2025-01-23 04:55

重建大师倾斜高斯泼溅技术（OPGS）重建出来的模型是什么格式？

重建大师是一款专为超大规模实景三维数据生产设计的集群并行处理软件，支持卫星影像、航空影像、倾斜影像和激光点云多源数据输入建模，可完成超大规模数据的空三解算、自动三维建模，输出高精度彩色网格模型。

大势智慧·2025-01-23 04:19

Redis四种模式在Spring Boot框架下的配置

在SpringBoot框架下配置Redis的四种模式（单机模式、主从模式、哨兵模式、集群模式）可以通过以下方式实现：1.单机模式在application.properties或application.yml

silver687·2025-01-23 03:10

Zookeeper（22）Zookeeper的Leader、Follower和Observer角色分别是什么？

集群中的每个节点都有一个特定的角色：Leader、Follower和Observer。以下是对这些角色的详细介绍和代码示例。

辞暮尔尔-烟火年年·2025-01-23 03:40

《Kubernetes部署篇：基于麒麟V10+ARM64架构部署harbor v2.4.0镜像仓库》

东城绝神·2025-01-23 01:21

Kafka 迁移 AutoMQ 时 Flink 位点管理的挑战与解决方案

本文重点介绍了当用户需要将生产Kafka集群迁移到AutoMQ时，如何处理好Flink的位点来确保整体迁移的平滑过渡。引言在云

AutoMQ·2025-01-22 23:06

搭建k8s集群

一、准备工作（所有节点）在开始部署之前，我们需要对所有节点进行以下准备工作。1.1、关闭防火墙#关闭防火墙systemctlstopfirewalld#禁止防火墙开机自启systemctldisablefirewalld1.2、关闭SELinux#永久关闭SELinuxsed-i's/enforcing/disabled/'/etc/selinux/config#重启系统使更改生效reboot#临

zhen24·2025-01-22 20:49

深入 Kubernetes 的健康奥秘：探针（Probe）究竟有多强？

探针（Probe）的作用就像集群的“健康监护员”，负责检测和管理容器的健康状态。没有它，K8s的稳定性和高可用性可能会大打折扣。本文将从探针的原理讲起，结合实际场景深入解析它

·2025-01-22 20:40

Hadoop是什么，怎么部署安装？

HDFS提供了一个高吞吐量的数据访问接口，允许用户在集群中存储大量数据。它通过将文件分割成多个块并分布在集群的不同节点上来实现高可靠性和可

狮歌~资深攻城狮·2025-01-22 15:01

MySQL高可用性的守护者：主从复制的深度解析与实践指南

对于依赖MySQL作为核心存储引擎的企业来说，如何构建一个稳定、可靠且易于维护的数据库集群至关重要。今天，我们将深入探讨MySQL主从复制技术，它是实现高可用性架构的关键组件之一。

墨夶·2025-01-22 13:16

GPUStack使用

LLMs)https://github.com/gpustack/gpustack，ManageGPUclustersforrunningAImodelsGPUStack是一个用于运行AI模型的开源GPU集群管理器

James506·2025-01-22 12:15

Redis 单机、哨兵、集群搭建

1.Redis单机搭建（以6.0.6版本为例）安装gcc套装。yuminstallcppyuminstallbinutilsyuminstallglibcyuminstallglibc-kernheadersyuminstallglibc-commonyuminstallglibc-develyuminstallgccyuminstallmake升级gcc。yum-yinstallcentos-r

·2025-01-22 11:42

在现有 Docker Desktop 环境下安装与配置独立 Kubernetes环境

在现有DockerDesktop环境下安装与配置独立Kubernetes集群环境目标在已安装DockerDesktop自带Kubernetes的情况下，搭建一个独立Kubernetes集群环境。

自学AI的鲨鱼儿·2025-01-22 08:43

全面指南：使用JMeter进行性能压测与性能优化（中间件压测、数据库压测、分布式集群压测、调优）

目录一、性能测试的指标1、并发量2、响应时间3、错误率4、吞吐量5、资源使用率二、压测全流程三、其他注意点1、并发和吞吐量的关系2、并发和线程的关系四、调优及分布式集群压测（待仔细学习）1.线程数量超过单机承载能力时的解决方案

vip1024p·2025-01-22 07:34

k8s部署redis一主两从三哨兵(集群内访问)

一、配置清单1.基于K8s搭建部署1主2从3哨兵的Redis集群哨兵模式(集群内访问)2.持久化数据选择用storageclass，动态创建pv存储，动态存储使用longhorn创建redis配置文件#

容器云服务·2025-01-22 07:02

Nacos| Sentinel| K8S

目录NacosSentinelK8S集群NacosNacos是构建以服务为中心的现代应用架构(例如微服务范式、云原生范式)的服务基础设施。

fhzmWJ·2025-01-22 06:00

K8S中Pod控制器之DaemonSet(DS)控制器

DaemonSet(DS)控制器DaemonSet类型的控制器可以保证在集群中的每一台（或指定）节点上都运行一个副本。一般适用于日志收集、节点监控等场景。

元气满满的热码式·2025-01-22 06:27

【Es】python es操作

表因为es是集群所以es_hosts是列表fromelasticsearchimportElasticsearchES_HOSTS=["127.0.0.1:9200"]ES_HTTP_AUTH="***

小毛驴吃梨子·2025-01-22 03:03

分布式资源管理和调度架构

资源管理和调度是将计算任务分配到资源的过程，为了处理并发的计算任务，系统会通过集群的方式组织资源。集群中的资源可以按照服务器或者虚拟机的方式划分。注：本文是《分布式架构原理与实践》的

johnny233·2025-01-22 00:14

Kafka消息轨迹方案设计与实现

在处理过的几个千万级TPS的Kafka集群中，消息追踪始终是一个既重要又棘手的问题。

小马不敲代码·2025-01-22 00:06

hive电影数据分析系统 Springboot协同过滤-余弦函数推荐系统爬虫2万+数据大屏数据展示 + [手把手视频教程和开发文档]

QQ-1305637939·2025-01-21 22:28

hadoop电影数据分析系统 Springboot协同过滤-余弦函数推荐系统爬虫2万+数据大屏数据展示 + [手把手视频教程和开发文档]

Springboot协同过滤-余弦函数推荐系统爬虫2万+数据大屏数据展示【Hadoop项目】1.java爬取【豆瓣电影】网站中电影数据,保存为data.csv文件,数据量2万+2.data.csv上传到hadoop集群环境