kafka集群管理工具

SpringCloud之一注册中心（Eureka）

1.注册中心：服务提供者可以将服务发布到注册中心，服务消费者从注册中心获取可以进行访问的服务列表;注册中心支持集群部署，集群中的机器，数据会进行同步复制更新(replicate
sinat_31986807·2024-08-27 20:05

Centos系统配置Redis哨兵高可用架构

我们现在开始搭建Redis哨兵集群配置，一主二存+三个哨兵组成Redis哨兵集群。Redissentinel哨兵是特殊的redis服务，不提供读写服务，主要用来监控redis实例节点。
sunaq691·2024-08-27 20:01

热烈祝贺“森幕(上海)供应链”选择使用订单日记

在业务不断壮大的过程中，需要一种既能提升运营效率又能节省成本的系统管理工具，在市场上多方比较和考察后最终选择了订单日记。
雪兽软件·2024-08-27 17:45

Linux用户和组管理复习：chage、gpasswd、id、whoami 和 groups 命令

目录引言chage：管理密码过期策略基本语法：示例用法：gpasswd：组管理工具基本语法：示例用法：id：打印用户和组ID基本语法：示例用法：whoami：显示当前用户ID基本语法：示例用法：groups
pyliumy·2024-08-27 17:14

spark采坑集锦之用kafka作为DStream数据源，并行度问题

在SparkStreaming中作为数据源的Kafka怎样接收多主题发送的数据呢？
方兵兵·2024-08-27 16:41

涨姿势了 SpringBoot+Kafka将实战讲解到极致，你悟了吗？

目录一、环境准备二、生产者实践普通生产者带回调的生产者自定义分区器kafka事务提交三、消费者实践简单消费指定topic、partition、offset消费批量消费监听异常处理器消息过滤器消息转发定时启动
技术布道师·2024-08-27 16:39

Kafka命令详解：从零开始，掌握Kafka集群管理、主题操作与监控的全方位技能，理解每一条命令背后的逻辑与最佳实践

本文主要是关于Kafka的命令详解，每个命令都进行了非常详细的注释，帮助大家能更好的理解这些命令背后的含义，从底层去理解，如果大家喜欢，请多多点赞关注，欢迎评论！
长风清留扬·2024-08-27 16:37

Docker方式部署K8s集群

1.1集群创建说明Kubernetes支持多种容器运行时，包括Containerd、Docker和CRI-O。
麻辣头马头·2024-08-27 16:37

CentOS-7.9通过kubeadm搭建k8s集群（解决国内无法下载flannel镜像及yaml配置问题）

CentOS-7.9通过kubeadm搭建k8s集群（解决国内无法下载flannel镜像及yaml配置问题）环境说明虚拟机软件：VmWare16pro虚拟机系统：CentOS-7.9虚拟机配置：2核CPU
林木森森一飞冲天·2024-08-27 16:06

Kubernetes中如何对etcd进行备份和还原

获取etcd证书和密钥，如果集群使用了TLS加密。设置etcdctl环境变量，如ETCDCTL_API=3（指定使用etcdv3API）。
大白菜程序猿·2024-08-27 15:32

云原生周刊：KubeSphere 宣布开源 Thanos 的企业级发行版 Whizard

开源项目推荐AdmiraltyAdmiralty是一个Kubernetes控制器系统，可以智能地在多个集群之间调度工作负载。它使用简单，并且易于与其他工具集成。
KubeSphere 云原生·2024-08-27 14:59

Kubernetes中如何对etcd进行备份和还原

在Kubernetes集群中，etcd是一个分布式键值存储系统，用于保存集群的所有数据。如果etcd数据丢失，整个集群可能会出现严重的问题。因此，定期备份etcd数据是至关重要的。
TechCraft·2024-08-27 14:56

Kubernetes中的配置管理：Secret与ConfigMap的深入解析

引言在Kubernetes集群中，配置管理是确保应用程序正常运行的关键。Kubernetes提供了两种主要的方式来存储和管理配置数据：Secret和ConfigMap。
夜色呦·2024-08-27 14:22

Kubernetes中的Controller Manager：自动化集群管理的核心引擎

摘要KubernetesControllerManager是Kubernetes集群中负责运行集群控制器的组件，这些控制器是集群自动化的核心。
夜色呦·2024-08-27 14:22

CDH 之 hive 数据迁移

当你想切换了集群想把hive迁移至新集群，两个集群之间又互不相通，一个最简单快捷的方法，就是批量导出元数据信息，同时把数据文件下载上传至新服务器的数据文件存放目录下1.导出元数据信息#database即是数据库名称
啊 这·2024-08-27 13:18

Hive 数据迁移与备份

导出到HDFS将表和数据从HDFS导出到本地服务器将表和数据从本地服务器复制到目标服务器将表和数据从目标服务器上传到目标HDFS将表和数据从目标HDFS上传到目标Hive库如果原始HDFS和目标HDFS集群连通
linzeyu·2024-08-27 13:17

探索未来数据流处理的基石 - Pravega开源项目深度解析

项目地址:https://gitcode.com/gh_mirrors/pr/pravega在大数据和实时处理领域，一个强大的数据流管理工具
施业任Luna·2024-08-27 13:46

带你详细了解Spring Cloud微架构服务的发展史

SpringCloud是一个基于SpringBoot实现的云应用开发工具，它为基于JVM的云应用开发中的配置管理、服务注册，服务发现、断路器、智能路由、微代理、控制总线、全局锁、决策竞选、分布式会话和集群状态管理等操作提供了一种简单的开发方式
武昌库里写JAVA·2024-08-27 11:07

卸载 kubeadm 方式安装的 k8s

停止服务与容器并删除镜像和容器所有节点都执行一遍以下命令：sudosystemctlstopkubelet&&sudosystemctlstatuskubeletsudosystemctlstopetcd2.清空K8S集群设置
qq_19783793·2024-08-27 10:30

HPC&AI并行计算集群Slurm作业调度系统对通用资源（GRES）的调度

一、概述Slurm支持定义和调度任意通用RESources的功能（GRES）。为特定GRES类型启用了其他内置功能，包括图形处理单元（GPU）、CUDA多进程服务（MPS）设备，并通过可扩展的插件机制进行分片。二、配置默认情况下，群集的配置中未启用任何GRES。您必须在slurm.conf配置文件中明确指定要管理的GRES。的配置参数兴趣是GresTypes和Gres。有关详细信息，请参见slur
技术瘾君子1573·2024-08-27 09:25

HBase原理和操作

目录一、HBase在Zookeeper中的存储元数据信息集群状态信息二、HBase的操作WebConsole命令行操作三、HBase中数据的保存过程一、HBase在Zookeeper中的存储元数据信息HBase
无奈ieq·2024-08-27 08:16

Hadoop：HA模式配置与实现

写的不到位的地方，欢迎评论指出不足之处一、检查系统环境1、HostName、Hosts、JDK、SSH、网络、防火墙、数据源二、集群角色分配表注：这只是实例服务器NameNodeNameNodeZookepperFailoverControllerDataNodeZookepperJournalNodeOneyes
家道消乏·2024-08-27 08:14

redisj集群之哨兵模式

首先可以搭建主从集群，再加上使用redis的哨兵模式。2.什么是哨兵模式？哨兵（sentinel）模式：可以实现主从集群的自动故障恢复。包含了主从服务的监控、自动故障恢复、通知。
求知耶·2024-08-27 06:07

mysql集群

谈论集群之前，先说明一下项目发展的不同阶段对数据库性能的要求。项目发展经历1.项目初始阶段在这个阶段，主要是单节点数据库，注重的是可靠性。此时主要避免单点故障，做法是主从复制。
唏噗·2024-08-27 06:32

LVS负载均衡群集

目录一、什么是集群二、集群使用在哪一个场景三、集群的分类四、负载均衡的集群架构五、负载均衡的工作模式六、部署安装LVS-NAT1.1步骤1.2ipvsadm工具选项1.3实际案例（这里面有很多细节，暂时没有解释说明
必叫你大败而归·2024-08-27 05:29

Haproxy搭建Web集群

目录一、Haproxy的概念二、Haproxy主要特性三、Haproxy负载均衡的策略四、HaproxyLVSNginx的区别五、编译部署Haproxy1.1haproxy配置文件中的五部分内容1.2搭建haproxy1.3日志定义一、Haproxy的概念HAProxy是可提供高可用性、负载均衡以及基于TCP和HTTP应用的代理，是免费、快速并且可靠的一种解决方案。HAProxy非常适用于并发大（
必叫你大败而归·2024-08-27 05:29

lvs+keepalived+nfs集群部署

keepalived介绍及lvs+keepalived+nfs集群部署目录一、Keepalived概述二、Keepalived工作原理三、Keepalived体系主要模块及其作用四、Keepalived
Linux运维老纪·2024-08-27 05:26

吐槽Navicat系列3——全量获取表格数据的性能瓶颈

请参看如下视频，带大家体验不同管理工具对大表的不同处理。视频展示链接：https://www.bilibili.com/video/BV1uP4y1c7qM?
恒辉信达·2024-08-27 04:16

MySQL集群技术1——编译部署mysql

MySQL在服务器中的部署办法一般而言，企业中的服务器操作系统都为linux，对于MySQL的安装则通常采用源码编译的方式来进行。MySQL是一个广泛使用的开源关系型数据库管理系统。如果您希望从源代码编译和安装MySQL，可以遵循以下步骤。请注意，这里假设您正在使用类Unix系统（如Linux或macOS），并且您具有root或sudo访问权限。准备工作更新系统包列表：sudoaptupdate安
Autter_A3·2024-08-27 03:46

1.NodeJs与NPM

NPM介绍NPM是随同NodeJS一起安装的包管理工具，能解决NodeJS代码部署上的很多问
柳暗花明又一匪·2024-08-27 00:26

数据库基础：mysql主从集群搭建

position：表示从file的哪个位置开始；binlog_do_db：表示同步哪一个库在后面的slave配置中，这三个结果都需要使用到。4.Slave(6.85)节点配置配置从库(1)修改my.cnf文件，在[mysqld]加入下面的内容：#服务的唯一编号server-id=2#开启mysqlbinlog功能log-bin=mysql-bin#binlog记录内容的方式，记录被操作的每一行bi
2401_84049040·2024-08-27 00:58

doris跨hdfs集群迁移数据

官网-数据备份步骤一，在dorisA集群执行：CREATEREPOSITORY`repotestall`WITHBROKER`broker_name`ONLOCATION"hdfs://xx.xx.xx.xx
州周·2024-08-27 00:27

钱大妈生鲜如何利用 CCR 实现 Apache Doris 集群读写分离

钱大妈是社区生鲜连锁品牌的开拓者，经过十一年的稳健运营，已成为行业内的领军品牌，截至2023年7月已全国布局超30多座城市，门店总数3000余家，服务家庭超1000万。近年来，随着业务的高速发展以及门店的快速扩张，钱大妈需要对生鲜产品的采购、销售、库存等数据进行实时监控和分析，以保障食品的新鲜度及品质。同时需要管理众多门店与供应链信息，以了解各区域销售趋势和顾客偏好，从而优化商品结构和库存管理。在
ApacheDoris·2024-08-27 00:57

使用 pip 换源的指南

使用pip换源的指南Python包管理工具pip通常从官方的PyPI（PythonPackageIndex）仓库下载包。但由于网络限制或速度问题，我们可以选择使用国内镜像源来加速包的下载。
pumpkin84514·2024-08-27 00:56

Npm使用教程

Npm使用教程npm（NodePackageManager）是Node.js的包管理工具，它为Node.js开发者提供了一种便捷的方式来管理项目依赖、发布和共享代码。
shiming8879·2024-08-26 23:23

关于kafka的分区和消费者之间的关系

消费者和消费者组当生产者向Topic写入消息的速度超过了消费者（consumer）的处理速度，导致大量的消息在Kafka中淤积，此时需要对消费者进行横向伸缩，用多个消费者从同一个主题读取消息，对消息进行分流
窦再兴·2024-08-26 22:48

javaweb-数据库

DeveloperZone安装官网下载地址：MySQL::DownloadMySQLCommunityServer(ArchivedVersions)图形化工具通常为了提高开发效率，都会借助于现成的图形化管理工具来操作数据库
kussmcx·2024-08-26 21:37

yum是什么？怎么用？

yum是一个用于基于RPM（RedHatPackageManager）的Linux发行版的包管理工具，全称为"YellowdogUpdater,Modified"。
云夏之末·2024-08-26 20:30

redis分片集群

1.为什么使用分片集群？主从和哨兵集群模式可以解决高并发和高可用的问题，依然存在两个问题没有解决：海量数据的存储问题；高并发写的问题；使用redis分片集群能够解决。2.redis分片集群原理？
求知耶·2024-08-26 18:10

[java][集群]consul集群安装

/usr/local/bin/consulagent-server-data-dir=/tmp/consul-node=server-1-bind=192.168.3.110-bootstrap-expect3-client=0.0.0.0-ui/usr/local/bin/consulagent-server-data-dir=/tmp/consul-node=server-2-bind=192
awonw·2024-08-26 17:05

java操作zookeeper

java操作zookeeper文档linux安装java-centos安装java-linux配置java环境变量zookeeper单机安装zookeeper集群安装zookeeper客户端命令行操作、
shuair·2024-08-26 16:59

基于Zookeeper搭建Kafka高可用集群

基于Zookeeper搭建Kafka高可用集群一、Zookeeper集群搭建为保证集群高可用，Zookeeper集群的节点数最好是奇数，最少有三个节点，所以这里搭建一个三个节点的集群。
数字游牧人0v0·2024-08-26 16:58

zookeeper+KAFKA 集群搭建

它是一个为分布式应用提供一致性服务的软件，提供的功能包括：配置维护、域名服务、分布式同步、集群管理等。
懵逼的运维弟弟·2024-08-26 16:28

面试笔记8.24

我会在集群中部署多台服务器，通过分布式计算和存储来处理大规模数据。解答思路：首先，我会搭建一个Hadoop或Spark集群，确保集群中的每台服务器都能正常通信。
励志秃头码代码·2024-08-26 16:55

zookeeper单机安装

zookeeper单机安装文档linux安装java-centos安装java-linux配置java环境变量zookeeper单机安装zookeeper集群安装zookeeper客户端命令行操作、节点类型及监听器
shuair·2024-08-26 15:49

Zookeeper实现分布式锁

文章目录什么是ZookeeperZookeeper集群机制Zookeeper特性Zookeeper数据结构Zookeeper应用场景Zookeeper的环境搭建（linux）Zookeeper客户端Zookeeper
爱吃糖的靓仔·2024-08-26 15:48

什么是耦合、紧耦合、松耦合

但随着集群规模的扩大，系统的稳定性逐渐变差，主要原因如下：1、同步操作导致对
mingzhi61·2024-08-26 15:18

大数据技术之Zookeeper安装 （2）

目录下载地址本地模式安装1）安装前准备2）配置修改3）操作Zookeeper配置参数解读Zookeeper集群操作集群规划解压安装配置服务器编号配置zoo.cfg文件集群操作Zookeeper集群启动停止脚本创建脚本增加脚本执行权限
大数据深度洞察·2024-08-26 14:43

flink 状态参数设置

前提代码示例，通过flink消费kafka，查看list状态中的数据，确定参数的具体含义kafka的代码：发送两个key值，一秒发送一次for(inti=0;isource=KafkaSource.builder
陪你一起捡蛋壳·2024-08-26 13:36

redis面试（十八）RedLock加锁原理

普通的redis分布式锁，其实是在redis集群中根据hash算法选择一台redis实例创建一个锁就可以了大致流程如下：获取当前时间戳，单位是毫秒跟上面类似，
木小同·2024-08-26 12:26
上一页 8 9 10 11 12 13 14 15 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他