集群限流

如何在大规模集群中优化缓存性能？

Hadoop的分布式缓存机制是一种用于在MapReduce任务中高效分发和访问文件的机制。通过分布式缓存，用户可以将小文件（如配置文件、字典文件等）分发到各个计算节点，从而提高任务的执行效率。分布式缓存的工作原理文件上传：用户将需要缓存的文件上传到HDFS（HadoopDistributedFileSystem）。文件路径可以在作业配置中指定。作业提交：在提交MapReduce作业时，用户可以通过
晚夜微雨问海棠呀·2025-02-16 11:53

红队视角出发的k8s敏感信息收集——持久化存储与数据泄露

在Kubernetes集群中，持久化存储卷如同数据的保险箱，承载着应用运行所必需的各类敏感信息。然而，从红队视角出发，这些存储卷也可能成为攻击者觊觎的目标。
周周的奇妙编程·2025-02-16 10:51

k8s集群离线安装kuberay operator

1,安装方式采用helm安装方式，首先下载对应的helmchart，这里采用v1.2.2版本，下载地址：https://github.com/ray-project/kuberay-helm/releases/tag/kuberay-operator-1.2.22,解压并修改镜像源由于是在内网环境下搭建，因此需要将对应的镜像下载下来，并导入到本地镜像仓库，并修改values.yaml的镜像仓库地址
thinkerCoder·2025-02-16 10:19

Kubernetes 使用自定义资源（CRD）扩展API

K8sCRD即KubernetesCustomResourceDefinition，是Kubernetes提供的一种扩展机制，允许用户在Kubernetes集群中定义和使用自定义的资源类型。
zhangj1125·2025-02-16 09:13

集群与分片：深入理解及应用实践

目录引言什么是集群？集群的定义集群的类型什么是分片？
一休哥助手·2025-02-16 09:07

深入理解Elasticsearch集群与分片：原理及配置方案

一、Elasticsearch集群是什么想象一下，你有海量的数据，比如一个超大型图书馆的所有书籍信息，要是把这些数据都放在一台电脑里，不仅存不下，而且查询起来会超级慢。
一勺菠萝丶·2025-02-16 08:34

java 缓存篇2

缓存的部署方式单机主从哨兵集群特性主从（Master-Slave）哨兵（Sentinel）集群（Cluster）数据分片不支持不支持支持，基于slot进行水平分片高可用性部分支持（手动故障转移）高可用性
dzl84394·2025-02-16 06:48

spark-广播变量

本地的数据传输到集群上，会发到每一个线程，每一个分区。每一个进程executor，有多个线程分区，进程内的线程数据共享因此，给每一个线程发送数据会导致数据占用，浪费资源。
哈哈哈哈q·2025-02-16 05:12

《一文讲透》第4期：KWDB 数据库运维（2） —— 集群参数

因此，KWDB的一大任务就是：简化数据库集群配置。为避免每个节点单独编写配置文件或者重启中断服务，KWDB跳出传统的配置文件方式，采用了启动参数和集群参数组合的方式来控制数据库集群。
KWDB 数据库·2025-02-16 04:29

IoTDB 集群重启某节点失败

问题现象IoTDB1.3.3.6版本部署的3C3D集群，在重启某个节点服务时失败，报错信息为节点冲突，日志部分截图如下：问题原因当前IoTDB会根据data/confignode/system路径下的confignode-system.properties
铁头乔·2025-02-16 03:24

架构师技术图谱

分布式漫谈分布式系统大数据存储微服务可落地的DDD(6)-工程结构推荐系统框架消息队列编程语言设计模式重构集群
modouwu·2025-02-16 03:24

mysql 知识点梳理以及常见问题汇总

文章四大部分基础知识、性能优化（索引、sql查询）、高并发大表、mysql集群中间件，哎.....整理不易，看完觉着有帮助给个赞和小星星。
司江龙·2025-02-15 23:25

高流量Web服务器Kubernetes架构优化

一、基础设施层优化1.节点自动扩展策略#集群自动扩缩容配置（GKE示例）apiVersion:clusterautoscaler.kubernetes.io/v1beta2kind:AutoscalingPolicymetadata
完颜振江·2025-02-15 21:08

MySQL 运维篇 -- 主从集群搭建

文章目录主从复制主从复制原理主从故障处理延时从库主从GTID复制主从GR复制*****搭建组复制观察组复制主从复制主从同步过程（1）主丛复制基于binlog来实现的（2）主库发生新的操作，都会记录binlog（3）从库取得主库的binlog进行回放（4）主从复制是异步的准备主从的初始MySQL环境（YUM安装）[root@master~]#hostnamemaster[root@master~]#
L小Ray想有腮·2025-02-15 20:35

redis的哨兵模式和集群模式

Redis的哨兵模式（SentinelMode）和集群模式（ClusterMode）是两种常见的高可用部署方式，它们各有优缺点，适用于不同的场景。
阿湯哥·2025-02-15 20:33

ELK架构基础

一个Elasticsearch集群可包含多个索引。类型（Type）在Elasticsearch6.x之前，一个索引可包含多个类型，类似数据库中的表。从7.x开始，类型被废弃，一
skyQAQLinux·2025-02-15 18:49

k8s架构与名词解释

Master：管控集群的管理面节点，提供Kubernetes核心服务和应用程序工作负载的业务流程，对集群进行调度管理。
AllanRobinLukeman·2025-02-15 10:16

K8S资源限制之resources

1资源限制介绍K8S设计资源限制的原因主要是为了确保集群的稳定运行、防止资源争用和过载，同时提高应用程序的可靠性和性能。资源限制通过Cgroups等机制控制Pod使用节点资源（CPU、内存、存储）。
是小V呀·2025-02-15 09:04

什么是Redis哨兵机制?

通过Redis哨兵机制，可以确保Redis集群在主节点故障时自动进行故障转移，提升Redis服
java1234_小锋·2025-02-15 08:00

ClickHouse创建分布式表

ClickHouse创建分布式表当数据量剧增的时候，clickhouse是采用分片的方式进行数据的存储的，类似于redis集群的实现方式。
期待着2013·2025-02-15 06:41

kubernetes 核心技术-Volume

基本概念KubernetesVolume是一种抽象层，它允许Pod访问由集群管理的
咖啡の猫·2025-02-15 06:40

ClickHouse集群搭建（CENTOS7环境）

ClickHouse集群搭建（CENTOS7环境）1.rpm包下载下载的rpm包版本-rw-r--r--1rootroot1342545月2817:07clickhouse-client-20.3.9.70
huaxia2002·2025-02-15 05:07

华为昇腾部署 DeepSeek-R1 (671B) 大模型实战指南

概述本指南详细讲解如何在华为昇腾Atlas800IA2服务器集群上部署DeepSeek-R1671B大模型，涵盖从环境准备到服务化部署的全流程。
歌刎·2025-02-15 05:35

Zookeeper（21）Zookeeper的架构组成有哪些？

服务器（Server）：Zookeeper集群中的每个节点都是一个服务器。服务器有三种角色：Leader
辞暮尔尔-烟火年年·2025-02-15 02:12

k8s1.27.7部署higress，代理非k8s集群业务

一、简介Higress是基于阿里内部的EnvoyGateway实践沉淀、以开源Istio+Envoy为核心构建的云原生API网关，实现了流量网关+微服务网关+安全网关三合一的高集成能力，深度集成Dubbo、Nacos、Sentinel等微服务技术栈，能够帮助用户极大的降低网关的部署及运维成本且能力不打折；在标准上全面支持Ingress与GatewayAPI，积极拥抱云原生下的标准API规范；同时，
石头-豆豆·2025-02-15 02:41

Dledger部署RocketMQ高可用集群（9节点集群）

文章目录博主介绍本文内容9节点集群高可用集群规划集群准备工作runserver.shrunbroker.sh设置目录归属组与用户与容器的配置一致安装jdk节点0配置（ip地址为192.168.80.101
Java程序员廖志伟·2025-02-15 02:06

【云平台监控】Prometheus 监控平台部署与应用

监控系统概述TSDB存储引擎特点核心特点生态组件工作流程局限性部署Prometheus1.PrometheusServer部署2.部署Exporters3.部署Grafana4.服务发现Kubernetes集群部署
Karoku066·2025-02-14 23:19

搭建Kubernetes集群之私有云安装指南

随着容器技术的飞速发展，越来越多的公司开始采用容器技术，基于Kubernetes构建自己的集群。而私有云市场上的Kubernetes发行版，也正在蓬勃发展。
AI天才研究院·2025-02-14 23:45

【ARMv9 DSU-120 系列 6 -- Power management】

120PowerDomainsPDTopPDClusterPDCorePDComplexPDSlicePDL3RAM0和PDL3RAM1Clusterpowermode在线模式（On）关闭模式（Off）功能保留模式（Func_Ret）集群完全保留模式
主公讲 ARM·2025-02-14 23:44

Kubernetes 访问集群 API 的方法

必须拥有一个Kubernetes的集群，同时你必须配置kubectl命令行工具与你的集群通信。建议在至少有两个不作为控制平面主机的节点的集群上运行本教程。
深度视觉机器·2025-02-14 23:43

Kubernetes Python Client 教程

gitcode.com/gh_mirrors/python1/python1.项目介绍KubernetesPythonClient是一个官方支持的库，它允许开发者在Python中与Kubernetes集群进行交互
伍妲葵·2025-02-14 22:13

Python 操作Kubernetes集群完全指南

Python操作Kubernetes集群完全指南目录基础环境准备PythonKubernetes客户端介绍连接Kubernetes集群Pod操作实战Deployment管理Service资源操作ConfigMap
IT策士·2025-02-14 22:11

1.1、Ray-关键概念Key Concepts

这些资源请求被集群调度器用来在整个集群中分配任务，以实现并行执行。参见
MaxCode-1·2025-02-14 20:23

微服务限流策略与性能优化全解析

订单服务部署于一组服务器集群，考虑到高可用性，至少配置3个节点，每个节点服务器配备8核CPU、16GB内存、500GB硬盘以及1Gbps网络带宽（内网所以大）。
power-辰南·2025-02-14 19:09

出现几率比较大的Redis面试题（含答案）

为什么这么快redis的数据类型，以及每种数据类型的使用场景，Redis内部结构redis的过期策略以及内存淘汰机制【～】Redis为什么是单线程的，优点如何解决redis的并发竞争key问题Redis集群方案应该怎么做
着火点·2025-02-14 18:09

hivemetastore 连接过多导致sql查询慢

建议值100是根据与工行规模相当集群的设置作参考，尽量大满足连接数请求的同时考虑connection占用资源(如果connection太多会占用太多的内存资源)的角度做出的一个综合评估值。
sunxunyong·2025-02-14 16:52

elastic search查找字段的方法

使用RESTful请求假设你的Elasticsearch集群运行在ht
小李飞刀李寻欢·2025-02-14 13:56

阿一网络安全学院课堂作业——ActiveMQ 反序列化漏洞 (CVE-2015-5254)

⼀、漏洞描述ApacheActiveMQ是由美国阿帕奇（Apache）软件基⾦会开发的开源消息中间件，⽀持Java消息服务、集群、Spring框架等。
网安大队长阿一·2025-02-14 12:25

从0到1带大家搭建spring cloud alibaba 微服务大型应用框架（九）文件服务篇（1）：minio 单机与集群搭建

为什么需分布式文件服务单机时代初创时期由于时间紧迫，在各种资源有限的情况下，通常就直接在项目目录下建立静态文件夹，用于用户存放项目中的文件资源。如果按不同类型再细分，可以在项目目录下再建立不同的子目录来区分。例如：resources\static\file、resources\static\image等。优点：这样做比较便利，项目直接引用就行，实现起来也简单，无需任何复杂技术，保存数据库记录和访问
峡谷电光马仔·2025-02-14 10:43

猿创征文｜ OceanBase 集群管理、测试和监控

前言OceanBase集群通常由运维人员管理，OceanBase数据库集群将多个机器资源聚合成一个大的资源池之后再分配给不同租户（也称为实例）。
呆小杰·2025-02-14 09:04

往es中写入一条数据的，请求流程

1.写入数据的请求流程1.1客户端发送请求客户端（如Kibana、Logstash或自定义应用）向Elasticsearch集群发送写入请求。
C18298182575·2025-02-14 09:01

【OceanBases系列文章】OceanBase集群架构

OceanBase核心技术能力完全自主研发：代码级可控，大规模金融场景10年可靠性验证原生分布式：全量数据校验实现数据一致性、数据不丢失、高可用、平滑扩展单机分布式一体化：一体化架构突破高性能和高可用，实现应用无限扩展和服务永远在线HTAP混合事务与实时分析处理：一份数据既能做事务处理又能实时分析，通过HTAP助力拓展更多可能Oracle/MySQL平滑迁移：平滑迁移快速、最小成本搬迁应用数据高级
学弟Craze·2025-02-14 09:30

网络工程师ICT领域常见面试题

“深入浅出”系列之数通篇：（1）边缘计算“深入浅出”系列之数通篇：（2）交换机的连接方式：级联、堆叠和集群“深入浅出”系列之数通篇：（3）负载均衡“深入浅出”系列之数通篇：（4）DHCP协议详解“深入浅出
我真不会起名字啊·2025-02-14 09:28

SRE随笔---无状态服务

高可用最重要的原则就是“消除单点故障”，对应的方法是集群部署。同一个服务部署多个节点，即便某些节点故障，业务系统依然可以对外提供服务。
·2025-02-14 05:04

为何要为Nacos配置外置Mysql数据库?

高可用性:Nacos支持集群部署，而使用MySQL作为共享的数据存储可以确保集群中各个节点之间的数据一致性。此外，MySQL自身也支持高可用性和故障转移，如使用主从复制或集群解决方案，
t04bf·2025-02-14 01:14

k8s中的service、api-server、kube-proxy有什么区别

在Kubernetes（K8s）中，Service、APIServer和kube-proxy是三个不同的组件，它们在集群中扮演着不同的角色和功能。
似水流年 光阴已逝·2025-02-13 22:57

Sealos的k8s高可用集群搭建

Sealos介绍](https://sealos.io/zh-Hans/docs/Intro)Sealos是一个Go语言开发的简单干净且轻量的Kubernetes集群部署工具，能很好的支持在生产环境中部署高可用的
da pai ge·2025-02-13 22:55

kubernetes之kube-proxy运行机制分析

在kubernetes集群的每个node都会运行一个kube-proxy服务进程，这个进程可用看作Service的透明代理兼负载均衡器。
anyangyu0343·2025-02-13 22:24

Kubernetes之kube-proxy运行机制分析

3.在K8s集群里每个Node上都会运行一个kube-proxy服务进程，这个进程可以看作ser
DawnEillen·2025-02-13 21:51

运维随笔-k8s-pod介绍

pod概念pod是k8s集群管理的最小业务承载单位。我们所有的业务都是运行在pod里的，一个k8s集群可能有成千上万个pod。pod中文翻译是豌豆荚，如下图所示。
·2025-02-13 20:45
上一页 3 4 5 6 7 8 9 10 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他