不重启kafka集群第9页

【Redis系列】Redis安装与使用

m0_74825409·2025-02-17 17:53

Flink在指定时间窗口内统计均值，超过阈值后报警

物联网设备的数据从kafka中读取，配置数据从mysql中读取，有个管理后台可以调整窗口和阈值大小。2、思路使用flink的双流join，配置数据使用广播流，设备数据使用普通流。

小的~~·2025-02-17 17:49

RPC框架Dubbo深入分析

依赖于Zookeeper的稳定性Redis支持基于客户端双写的集群方式，性能高要求服务器时间同步，用于检查心跳过期脏数据Multicast去中心化，不需要安装注册中心依赖于网络拓普和路由，跨机房有风险SimpleDogfooding

radcb55226·2025-02-17 16:17

Sentinel

目录一、Sentinel简介核心特性二、环境准备1.控制台安装2.SpringBoot集成三、核心功能实战1.流量控制2.熔断降级3.热点参数限流四、高级配置1.规则持久化（Nacos集成）2.集群流控五

华农第一蒟蒻·2025-02-17 14:24

Knox原理与代码实例讲解

ApacheKnox是一个反向代理服务器,旨在为ApacheHadoop集群提供单一入口点,增强安全性和集中化管理。它位于Hadoop集群与客户端应用程序之间,充当网关和负载均衡器的角色。

AI天才研究院·2025-02-17 14:50

Linux Docker 部署 Elasticsearch (ES) 集群详解教程

1.安装Docker首先，确保你的Linux系统上已经安装了Docker。如果尚未安装，可以通过以下命令进行安装：sudoyuminstall-yyum-utilssudoyum-config-manager--add-repohttps://download.docker.com/linux/centos/docker-ce.reposudoyuminstalldocker-cedocker-c

努力的小T·2025-02-17 12:10

记GBase8a一次简单的典型sql优化

原文地址：https://www.gbase.cn/community/post/3549某客户反映一条业务测试sql查询缓慢（3节点集群），百万级数据量用时6-8s,不满足小于1秒的业务需求！

GBase技术大咖·2025-02-17 12:40

SpringBoot整合H2并使用Flyway管理数据库版本

H2是一个嵌入式数据库引擎，采用java语言编写，不受平台的限制，同时支持网络版和嵌入式版本，有比较好的兼容性，支持相当标准的sql标准，支持集群2、提供JDBC、ODBC访问接口，提供了非常友好的基于

程序猿Ryan·2025-02-17 11:29

深入解析 Vert.x 的关键特性、架构及其在异步编程中的应用

下面将对Vert.x进行更深入的解读，从其底层架构、事件驱动模型、线程模型、集群模式、以及与现代微服务体系的深度集成等方面来进行拓展，以便全面理解Vert.x作为一个异步非阻塞框架的优势和复杂性。

不是二师兄的八戒·2025-02-17 10:21

从入门到跑路（六）k8s配置ingress-nginx

Ingress-NGINX是一个基于NGINX的KubernetesIngress控制器，旨在将外部HTTP和HTTPS流量路由到Kubernetes集群中的服务。

m0_74825678·2025-02-17 10:50

LINUX系统优化

LINUX系统优化企业生产场景中Linux系统的分区方案及内核企业生产场景中Linux系统的分区方案常规的分区方案如下：方案1：针对网站集群架构中的某个节点服务器分区，该服务器上的数据有多份（其他节点也有

敖光 SRE·2025-02-17 09:41

Etcd教程 — 第二章 Etcd集群静态发现_etcd 双节点集群

监听用于和节点之间通信的url，可监听多个，集群内部将通过这些url进行数据交互(如选举，数据同步等)–initial-advertise-peer-urls建议用于和节点之间通信的url，节点间将以该值进行通信

2401_87361150·2025-02-17 08:38

MySQL的集群配置和读写分离配置

MySQL重点概念介绍分布式集群方案主从节点复制分库分表mycat读写分离参数配置MySQL主节点MySQL从节点实例讲演分布式部署性能演示独立mysql对比主从复制+读写分离参考资料：浅谈mysql集群浅谈

lqg_zone·2025-02-17 08:29

【动态路由】系统Web URL资源整合系列（后端技术实现）【apisix实现】

反向代理功能（描述：apollo、eureka控、apisix、sentinel、普米、kibana、timetask、grafana、hbase、skywalking-ui、pinpoint、cmak界面、kafka-map

飞火流星02027·2025-02-17 07:23

k8s 中的 service 如何找到绑定的 Pod 以及如何实现 Pod 负载均衡

service是一组具有相同labelpod集合的抽象，集群内外的各个服务可以通过service进行互相通信。

「已注销」·2025-02-17 06:18

【K8S系列】Kubernetes 集群中的网络常见面试题

在Kubernetes面试中，网络是一个重要的主题。理解Kubernetes网络模型、服务发现、网络策略等概念对候选人来说至关重要。以下是一些常见的Kubernetes网络面试题及其答案，帮助你准备面试。1.Kubernetes的网络模型是什么样的？问题：Kubernetes的网络模型是怎样的？答案：Kubernetes网络模型遵循“每个Pod都有一个唯一的IP地址”的原则。每个Pod都可以直接通

颜淡慕潇·2025-02-17 06:17

ubuntu安装k8s

centos：centos：K8Sv1.28.2集群搭建-docker版-一毛丶丶-博客园centos：Kubernetes详细安装教程_kubernetes安装-CSDN博客准备工作：1、主机名解析：

qq_41369135·2025-02-17 06:15

Apache ZooKeeper 分布式协调服务

1.ZooKeeper概述1.1定义与定位核心定位：分布式系统的协调服务，提供强一致性的配置管理、命名服务、分布式锁和集群管理能力核心模型：基于树形节点（ZNode）的键值存储，支持Watcher监听机制生态地位

slovess·2025-02-17 04:33

深入理解Kafka—如何保证Exactly Once语义

作者：禅与计算机程序设计艺术1.简介Kafka是一种高吞吐量、分布式、可分区、多副本的消息系统。它在使用上非常灵活，可以作为Pulsar、RabbitMQ的替代品。

AI天才研究院·2025-02-17 03:22

【kafka系列】生产者

目录发送流程1.流程逻辑分析阶段一：主线程处理阶段二：Sender线程异步发送核心设计思想2.流程关键点总结重要参数一、核心必填参数二、可靠性相关参数三、性能优化参数四、高级配置五、安全性配置（可选）六、错误处理与监控典型配置示例关键注意事项发送流程序列化与分区：消息通过Partitioner选择目标分区（默认轮询或哈希），序列化后加入RecordAccumulator缓冲区。批次合并：Sende

漫步者TZ·2025-02-17 02:21

【kafka系列】broker

目录Broker接收生产者消息和返回消息给消费者的流程逻辑分析Broker处理生产者消息的核心流程Broker处理消费者消息的核心流程关键点总结Broker接收生产者消息和返回消息给消费者的流程逻辑分析Broker处理生产者消息的核心流程接收请求Broker的SocketServer接收来自生产者的ProduceRequest（基于Reactor网络模型）。请求解析与验证解析请求头（Topic、P

漫步者TZ·2025-02-17 02:21

【kafka系列】如何选择消息语义？

目录业务权衡如何选择消息语义？业务权衡维度At-Most-OnceAt-Least-OnceExactly-Once消息丢失风险高低无消息重复风险无高无网络开销最低（无重试）中等（可能重试）最高（事务+协调）适用场景可容忍丢失的实时数据流不允许丢失的日志采集金融交易、精准统计如何选择消息语义？At-Most-Once：优先性能与低延迟，接受数据丢失（如实时监控）。At-Least-Once：优先可

漫步者TZ·2025-02-17 02:49

Redis高级特性解析——Redis核心技术与最佳实践

但是，作为一个高性能数据库，Redis还存在一些不足之处，比如内存管理、网络模型、集群架构、客户端连接、监控、持久化、主从复制等方面。因此，作者希望通过本文分析Redis高级特性

AI天才研究院·2025-02-17 01:11

kafka动态监听主题

简单版本importorg.springframework.beans.factory.annotation.Autowired;importorg.springframework.kafka.core.ConsumerFactory

S Y H·2025-02-16 23:27

云计算——AWS Solutions Architect – Associate（saa）7.放置群组

一、集群分区分布Cluster集群-将一个可用区中靠近的实例打包在一起。通过使用该策略，工作负载可以实现所需的低延迟网络性能，以满足HPC应用程序通常使用的紧密耦合的节点到节点通信的要求。

F——·2025-02-16 23:56

15. k8s二进制集群之CoreDNS部署

服务配置文件创建coredns.yaml配置文件（参考原始配置创建）提前准备好CoreDNS镜像资源【可选】如何启动CoreDNS服务当服务异常，如解决coredns启动失败问题总结当我们搭建完k8s集群之后可以为此部署一个

沙漠绿州（IT追随者）·2025-02-16 23:24

大数据之-hdfs+hive+hbase+kudu+presto集群(6节点)

几个主要软件的下载地址：prestohttps://prestosql.io/docs/current/index.htmlkudurpm包地址https://github.com/MartinWeindel/kudu-rpm/releaseshivehttp://mirror.bit.edu.cn/apache/hive/hdfshttp://archive.apache.org/dist/ha

管哥的运维私房菜·2025-02-16 22:50

hbase快照同步到目标集群出现ERROR Multiple regions have the same startkey问题分析

问题现象源集群表split/merge过程中创建快照，该快照同步到目标集群，目标集群恢复快照后，进行hbck检查，就会出现异常报错：ERRORMultipleregionshavethesamestartkey

spring208208·2025-02-16 22:19

docker compose部署zookeeper集群

networks:net:name:netservices:zookeeper1:image:zookeeper:3.7.0restart:alwayscontainer_name:zookeeper1hostname:zookeeper1privileged:trueports:-'2181:2181'environment:ZOO_MY_ID:1ZOO_SERVERS:server.1=zoo

现实、太残忍·2025-02-16 21:07

使用Docker搭建Flink集群

目录使用Docker搭建Flink集群docker-compose一键搭建步骤附录参考资料使用Docker搭建Flink集群在学习大数据框架的时候，需要一个真实的环境。

O_1CxH·2025-02-16 20:34

【kafka系列】Exactly Once语义

目录1.Exactly-Once语义的定义2.Kafka实现Exactly-Once的机制3.端到端Exactly-Once示例场景描述3.1生产者配置与代码3.2消费者配置与代码4.异常场景与Exactly-Once

漫步者TZ·2025-02-16 19:57

Java面试八股文：Memcached面试题专场（持续更新中......）

memcached服务在企业集群架构中有哪些应用场景？一、作为数据库的前端缓存应用二、作业集群的session会话共享存储。2、Memcached服务分布式集群如何实现？

Java凤梨·2025-02-16 17:11

高可用（HA）架构

http://aokunsang.iteye.com/blog/2053719浅谈web应用的负载均衡、集群、高可用(HA)解决方案http://zhuanlan.51cto.com/art/201612

weixin_34344403·2025-02-16 17:41

基于Istio Ambient Mesh的无边车架构：实现零侵入式服务网格的云原生革命

一、传统Sidecar模式的性能天花板1.1典型服务网格开销分析（千级节点集群）资源

桂月二二·2025-02-16 17:09

以下是一篇关于使用SLURM编写作业脚本的原创技术指南

在高性能计算（HPC）领域，SLURM（SimpleLinuxUtilityforResourceManagement）作为主流的作业调度系统，承担着集群资源分配的核心职责。

这题有点难度·2025-02-16 15:57

K8s第一章搭建集群

三台虚拟机分别非192.168.110.126192.168.110.127192.168.110.128关闭防火墙和swap分区systemctlstopfirewalldsystemctldisablefirewalldvi/etc/fstab把最后一行注释掉三台虚拟机相互ping通

R R·2025-02-16 13:13

Elasticsearch-API命令行相关操作手册

系列文章目录第一章es集群搭建文章目录系列文章目录前言esApi操作总结前言通过第一章学习es集群搭建流程及es基本概念后，在本章内容中，我们主要对es的基本命令行操作进行一次基本学习,来源于工作中的整理

少儿频道·2025-02-16 12:05

Java查询es很慢怎么办_elasticsearch索引和搜索慢问题分析解决

在使用的过程中，由于各种原因可能导致集群写入或者查询缓慢，本文主要讲述集中常见的原因和解决方法。

股票期货软件开发·2025-02-16 12:35

docker+es8+kibana单机及集群安装

安装过程遇到很多坑，涉及云服务器连接、配置等，这里把过程记录一下。1.es及kibana的版本最好一致es:dockerpull docker.elastic.co/elasticsearch/elasticsearch:8.11.3kibana:dockerpull docker.elastic.co/elasticsearch/elasticsearch:8.11.32.放开防火墙9200,9

qq_33935672·2025-02-16 12:33

ES 命令行查询

如果用linux命令来查询，其实就是转换成http请求，用curl来请求#查询所有索引名称curl-XGET"http://es集群ip地址:9200/_cat/indices?

不像程序员的程序媛·2025-02-16 11:55

如何在大规模集群中优化缓存性能？

Hadoop的分布式缓存机制是一种用于在MapReduce任务中高效分发和访问文件的机制。通过分布式缓存，用户可以将小文件（如配置文件、字典文件等）分发到各个计算节点，从而提高任务的执行效率。分布式缓存的工作原理文件上传：用户将需要缓存的文件上传到HDFS（HadoopDistributedFileSystem）。文件路径可以在作业配置中指定。作业提交：在提交MapReduce作业时，用户可以通过

晚夜微雨问海棠呀·2025-02-16 11:53

红队视角出发的k8s敏感信息收集——持久化存储与数据泄露

在Kubernetes集群中，持久化存储卷如同数据的保险箱，承载着应用运行所必需的各类敏感信息。然而，从红队视角出发，这些存储卷也可能成为攻击者觊觎的目标。

周周的奇妙编程·2025-02-16 10:51

k8s集群离线安装kuberay operator

1,安装方式采用helm安装方式，首先下载对应的helmchart，这里采用v1.2.2版本，下载地址：https://github.com/ray-project/kuberay-helm/releases/tag/kuberay-operator-1.2.22,解压并修改镜像源由于是在内网环境下搭建，因此需要将对应的镜像下载下来，并导入到本地镜像仓库，并修改values.yaml的镜像仓库地址

thinkerCoder·2025-02-16 10:19

Kubernetes 使用自定义资源（CRD）扩展API

K8sCRD即KubernetesCustomResourceDefinition，是Kubernetes提供的一种扩展机制，允许用户在Kubernetes集群中定义和使用自定义的资源类型。

zhangj1125·2025-02-16 09:13

【Golang学习之旅】Go 语言微服务架构实践（gRPC、Kafka、Docker、K8s）

文章目录1.前言：为什么选择Go语言构建微服务架构1.1微服务架构的兴趣与挑战1.2为什么选择Go语言构建微服务架构2.Go语言简介2.1Go语言的特点与应用2.2Go语言的生态系统3.微服务架构中的gRPC实践3.1什么是gRPC？3.2gRPC在Go语言中的实现1.前言：为什么选择Go语言构建微服务架构1.1微服务架构的兴趣与挑战随着互联网技术的飞速发展，尤其是云计算的普及，微服务架构已经成为

程序员林北北·2025-02-16 09:40

集群与分片：深入理解及应用实践

目录引言什么是集群？集群的定义集群的类型什么是分片？

一休哥助手·2025-02-16 09:07

深入理解Elasticsearch集群与分片：原理及配置方案

一、Elasticsearch集群是什么想象一下，你有海量的数据，比如一个超大型图书馆的所有书籍信息，要是把这些数据都放在一台电脑里，不仅存不下，而且查询起来会超级慢。

一勺菠萝丶·2025-02-16 08:34

java 缓存篇2

缓存的部署方式单机主从哨兵集群特性主从（Master-Slave）哨兵（Sentinel）集群（Cluster）数据分片不支持不支持支持，基于slot进行水平分片高可用性部分支持（手动故障转移）高可用性

dzl84394·2025-02-16 06:48

zipkin备忘

server安装https://zipkin.io/pages/quickstart.html这里提供了几种安装方式当天他可以吧数据方存cassandra，kafka，es，等地方服务器直接下载curl-sSLhttps

dzl84394·2025-02-16 06:18

spark-广播变量

本地的数据传输到集群上，会发到每一个线程，每一个分区。每一个进程executor，有多个线程分区，进程内的线程数据共享因此，给每一个线程发送数据会导致数据占用，浪费资源。

哈哈哈哈q·2025-02-16 05:12

推荐频道

不重启kafka集群