rocketMQ集群

【RocketMQ每日一问】RocketMQ如何保证消息不丢失?

1.生产端不要使用oneway方式发送，因为这种方式不会有返回结果设置重试次数发送失败添加回调对消息进行处理2.broker端开启同步刷盘flushDiskType=SYNC_FLUSH，这样在刷盘失败的时候会返回SendStatus.FLUSH_DISK_TIMEOUT开启主从同步复制，brokerRole=SYNC_MASTER，这样在从写失败的情况下会返回SendStatus.FLUSH_S
jianjun_fei·2024-01-10 09:09

2022Java最新真实面试题汇总

一、面经适当夸夸面试官（或所在公司）不会有坏处如果某个问题完全不会（或稍微懂点），直接承认（或略作回答）并把话题引导向类似话题（redis集群的槽机制->一致性哈希）第二条如果完全不会，可以在表达自己不会之后给与面试官一点反问
一头狒狒·2024-01-10 09:08

【RocketMQ每日一问】RocketMQ重平衡逻辑是怎么样的?

消费者启动时，订阅相应的topic并加入到消费者组。消费者将消费进度信息存储到Broker中，包括当前消费到的消息的offset、队列信息等。消费者定时从Broker中获取topic的路由信息（包括消息队列、broker信息等），并更新本地缓存。当消费者组内新增或删除消费者时，触发重平衡事件，即重新分配消息队列给消费者。重平衡事件由消费组内最先触发的消费者发起，通知Broker开始重平衡。Brok
jianjun_fei·2024-01-10 09:05

Linux中快速搭建RocketMQ测试环境

必要的文件下载为什么选择RocketMQ|RocketMQx86_64位JDK下载0jdk/8u391-b13rocketmq二进制包下载-rocketmq-all-5.1.4-bin-release.zip
搬砖仔·2024-01-10 09:04

kubernetes集群搭建ES

---apiVersion:v1kind:Servicemetadata:name:elasticsearchnamespace:${K8S_NAMESPACE}labels:k8s-app:elasticsearchkubernetes.io/cluster-service:"true"addonmanager.kubernetes.io/mode:Reconcilekubernetes.io/
序冢--磊·2024-01-10 09:00

Hive之set参数大全-3

具体来说，当hive.debug.localtask被设置为true时，Hive在执行查询时会尽量在本地运行一些任务，而不是分布式运行在集群上。这使得开发人员可以更轻松地调试和观察
OnePandas·2024-01-10 09:28

黑猴子的家：Zookeeper 选举机制

1、半数机制半数机制：集群中半数以上机器存活，集群可用。所以zookeeper适合装在奇数台机器上。2、leaderZookeeper虽然在配置文件中并没有指定master和slave。
黑猴子的家·2024-01-10 09:15

深入理解 Hadoop （七）YARN资源管理和调度详解

随着Hadoop的发展和流行，单个Hadoop集群中的用户量和应用程序类型不断增加，适用于批处理场景的FIFO调度机制不能很好地利用集群资源，也不能够满足不同应用程序的服务质量要求，因此需要设计适用于多用户的资源调度器
我很ruo·2024-01-10 08:20

Zookeeper设计理念与源码剖析

（因为分布式环境下永远无法精确地确认不同服务器不同事件发生的先后顺序）ZooKeeper集群中的所有节点的数据状态通过ZAB协议保持一致。ZAB有两种工作模式：（1）崩溃恢复：集群没有Lead
我很ruo·2024-01-10 08:49

深入理解 Hadoop （二）HDFS架构演进

HDFS分布式集群架构设计实现核心设计思路：分而治之的思路，实现分散存储+冗余存储元数据管理核心问题：文件系统目录树文件和数据块的映射关系数据块和副本存储主机之间的映射关系NameNode内部两个非常重要的组件
我很ruo·2024-01-10 08:49

深入理解 Hadoop （四）HDFS源码剖析

HDFS集群启动脚本start-dfs.sh分析启动HDFS集群总共会涉及到的角色会有namenode,datanode,zkfc,journalnode,secondaryName共五种角色。
我很ruo·2024-01-10 08:10

Orchestrator源码解读2-故障失败发现

目录目录前言核心流程函数调用路径GetReplicationAnalysis故障类型和对应的处理函数拓扑结构警告类型与MHA相比前言Orchestrator另外一个重要的功能是监控集群，发现故障。
DBA之路·2024-01-10 08:57

2024.1.9 Spark SQL day06 homework

四.Spark程序运行集群分类一.SparkSQL中数据清洗的API有哪些，各自作用是什么？
白白的wj·2024-01-10 08:53

Flink CDC使用

Flink环境准备Flink版本对应的CDC版本两个jar包上传到flinkbin目录下flink-sql-connector-mysql-cdcmysql-connector-java重启Flink集群
无故事王国LH·2024-01-10 08:22

记一次spark-sql数据倾斜解决方案

经过两三个小时，终于把sql写出来，提交到spark集群，跑的时候发现跑了二十多分钟没跑完，心想肯定是倾斜，因为并没有做什么复杂的处理，仅仅是解析一下字段，补充点维度信息。
王糍粑的小夕·2024-01-10 08:20

一个名叫Sentinel-Rules-SDK的组件，使得Sentinel的流控&熔断规则的配置更加方便

2Sentinel具有以下特征:丰富的应用场景：Sentinel承接了阿里巴巴近10年的双十一大促流量的核心场景，例如秒杀（即突发流量控制在系统容量可以承受的范围）、消息削峰填谷、集群流量控制、实时熔断下游不可用应用等
Howinfun·2024-01-10 08:29

CDH集成LDAP配置

blog.javachen.com/2014/11/12/config-ldap-with-kerberos-in-cdh-hadoop.html参考上面基本配置，添加了部分配置本文主要记录cdhhadoop集群集成
101之歌·2024-01-10 07:48

k8s的集群调度

k8s的集群调度:scheduler:负责调度资源，把pod调度到node节点。
Lad1129·2024-01-10 07:17

资源调度（2）-----pod的亲和性和反亲和性

集群调度:schedule的调度算法。预算策略：过滤出合适的节点优先策略：选择部署的节点nodeName:硬匹配，不走调度策略。
Lad1129·2024-01-10 07:35

Ceph学习 -- （3）Ceph接口与存储引擎

ceph分布式-》无需查表，算算就好-》算出的结果clustermapclustermapmonmaposdmappgmapcrushmaprados集群：1、mon集群负责：1、监控全局状态-》clustermap1
肥海学习日志·2024-01-10 07:02

云原生专栏

kubesphere基础服务搭建5.云原生安全之kubesphere应用网关配置域名TLS证书6.云原生之DevOps和CICD7.云原生之jenkins集成SonarQube8.云原生存储之Ceph集群
野心与梦·2024-01-10 07:31

第28关 k8s监控实战之Prometheus(四)

这节课我们利用prometheus来监控二进制部署的ETCD集群。
博哥爱运维·2024-01-10 07:31

k8s-存储 11

一、configmapu存储首先，确保集群正常，节点都处于就绪状态Configmap用于保存配置数据，以键值对形式存储。
coco--hui·2024-01-10 07:58

MySQL高可用和读写分离

MySQL高可用和读写分离文章目录MySQL高可用和读写分离一、从单机到集群1.1单机MySQL数据库到几个问题1.2单机MySQL到技术演进二、MySQL的主从复制2.1核心2.2binlog2.3方案一
鲲鹏飞九万里·2024-01-10 07:27

k8s的集群调度

k8s的集群调度:scheduler:负责调度资源，把pod调度到node节点。预算策略优先策略1、List-watchk8s集群当中，通过list-watch的机制进行每个组件的协作,保持数据同步。
weixin_51694382·2024-01-10 07:53

K8S项目发布

蓝绿发布：把应用服务集群标记为两个组，蓝组和绿组，先升级蓝组，要把蓝组从负载均衡中移除，绿组继续提供服务蓝组升级完毕，再把绿组从负载均衡中移除，绿组升级，然
早上的星星·2024-01-10 07:53

k8s的集群调度

1、scheduler：负责调度资源，把pod调度到指定的node节点（1）预算策略（2）优先策略2、List-watch（1）在k8s集群中，通过List-watch的机制进行每个组件的协作，保持数据同步
海德Hyde·2024-01-10 07:53

K8S集群调度

scheduler:负责调度资源，把pod调度到指定的node节点预算策略：优选策略：1、List-watchK8S集群当中，通过list-watch的机制进行每个组件的协作，保持数据同步。
早上的星星·2024-01-10 07:23

K8S亲和性，反亲和性，及污点

匹配原则也是根据节点的标签软策略：尽量满足你的要求，而不是一定满足拓扑域：k8s集群节点当中的一个组织结构，可以根据节点的物理关系或者逻辑关系进行可以用来表示节点之间的空间关系，网络关
早上的星星·2024-01-10 07:23

8.云原生存储之Ceph集群

kubesphere基础服务搭建5.云原生安全之kubesphere应用网关配置域名TLS证书6.云原生之DevOps和CICD7.云原生之jenkins集成SonarQube8.云原生存储之Ceph集群文章目录为什么要用
野心与梦·2024-01-10 07:52

Kubernetes（K8S）简介

Kubernetes是当今最流行的开源容器管理平台,是Google发起并维护的基于Docker的开源容器集群管理系统。它是大名鼎鼎的GoogleBorg的开源版本。
赵唯一·2024-01-10 07:21

Elasticsearch集群 单个节点分片限制

如果在Elasticsearch中单个节点上的分片数量超过了cluster.max_shards_per_node设置的限制（默认限制通常是1000分片），Elasticsearch不会提供一个特定的状态码，而是会拒绝创建新的分片，并返回一个错误消息。这个错误消息通常会在创建索引或分片的API调用的HTTP响应体中体现，并伴随一个HTTP状态码。在尝试创建超过限制的分片时，你可能会收到类似以下的错
小湘西·2024-01-10 07:09

04-Nacos微服务注册中心--集群部署和配置中心

一、配置中心Nacos不仅可以作为注册中心，也可以作为配置中心1.1为什么需要配置中心在没有配置中心之前，传统应用配置的存在以下痛点：1、采用本地静态配置，无法保证实时性：修改配置不灵活且需要经过较长的测试发布周期，无法尽快通知到客户端，还有些配置对实时性要求很高，比方说主备切换配置或者碰上故障需要修改配置，这时通过传统的静态配置或者重新发布的方式去配置，那么响应速度是非常慢的，业务风险非常大2、
浑水摸鱼程序猿·2024-01-10 07:07

SmartLifecycle之RocketMq优雅停机

SmartLifecycle之RocketMq优雅停机前言线上环境发布重启时，经常会导致mq消费失败，不够优雅，之前对RocketMq了解也不太深入，刚好趁这个机会，解决mq的优雅停机问题，顺带着好好撸一撸
白菜404·2024-01-10 07:38

深度解析Dubbo的基本应用与高级应用：负载均衡、服务超时、集群容错、服务降级、本地存根、本地伪装、参数回调等关键技术详解

负载均衡官网地址：http://dubbo.apache.org/zh/docs/v2.7/user/examples/loadbalance/如果在消费端和服务端都配置了负载均衡策略，以消费端为准。这其中比较难理解的就是最少活跃调用数是如何进行统计的？讲道理，最少活跃数应该是在服务提供者端进行统计的，服务提供者统计有多少个请求正在执行中。但在Dubbo中，就是不讲道理，它是在消费端进行统计的，为
光芒软件工匠·2024-01-10 06:19

搭建镜像仓库harbor-安装及使用教程

Harbor是由VMware公司开源的企业级的DockerRegistry管理项目，相比docker官方拥有更丰富的权限权利和完善的架构设计，适用大规模docker集群部署提供仓库服务。
南烟ღ·2024-01-10 06:50

Hadoop之mapreduce参数大全-1

如果一个任务使用的虚拟内存超过了此参数指定的值，则任务会被认为是失败的，并且MapReduce集群会尝试重新分配任务。默认情况下，此参数的值为MapReduce任务的堆内存大小的两倍。可以
OnePandas·2024-01-10 06:00

【Redis】非关系型数据库之Redis的主从复制、哨兵和集群高可用

目录一、主从复制、哨兵、集群的区别二、主从复制2.1主从复制的作用2.2主从复制的原理2.3主从复制的实操步骤一：环境准备步骤二：安装Redis以及配置文件修改Redis的主从配置文件都一样步骤四：验证主从复制三
liu_xueyin·2024-01-10 05:28

Hadoop体系结构之 HDFS

HDFS采用主从（Master/Slave）结构模型，一个HDFS集群是由一个NameNode和若干个DataNode组成的（在最新的Hadoop2.2版本已经实现多个NameNode的配置-这也是一些大公司通过修改
Alukar·2024-01-10 05:05

云卷云舒：【实战篇】DB2迁移

DB2主要应用于大型应用系统，具有较好的可伸缩性，可支持从大型机集群到单用户环境。DB2提供了较高级别的数据可用性、完整性、安全性、可恢复性，以及小规模到大规模应用程序
Cloud云卷云舒·2024-01-10 05:36

云卷云舒：kubernetes简介

它能够编排多种容器任务，涵盖虚拟机集群管理、负载均衡以及网络流量分配等等。2017年，aws、微软云、阿里云等等著名的云计算公司都开始宣布原生支持kubernetes。
Cloud云卷云舒·2024-01-10 05:36

LVS负载均衡群集架构(一)：NET模式群集部署

、解决方法二、集群的分类1、负载均衡群集:聚合和负载均衡2、高可用群集(HighAvailabilityCluster)3、高性能运算群集(HighPerformanceComputerCluster)
可乐卷儿·2024-01-10 05:15

lvs群集基础应用

群集：也叫集群（Cluster）,表示一群、一串的意思，用在服务器领域表示大量服务器的集合体，用以区分单个服务器1、群集的类型（1）负载均衡群集（LB）(loadbalancecluster)：负载分配依赖于主节点的分流算法
meng010001·2024-01-10 05:45

k8s的集群调度

k8s中的list-watch机制list-watc机制的概念运用Kubernetes是通过List-Watch的机制进行每个组件的协作，保持数据同步的，每个组件之间的设计实现了解耦。用户是通过kubectl根据配置文件，向APIServer发送命令，在Node节点上面建立Pod和Container。APIServer经过API调用，权限控制，调用资源和存储资源的过程，实际上还没有真正开始部署应用
相遇蟹堡王，尽享蟹黄堡·2024-01-10 05:15

从零开始完成APP自动化测试（一）--APP自动化环境搭建（Mac版）

元素操作第五章APP自动化测试框架搭建Python+Appium+pytest-html第六章uiautomator2、web-editor基础操作第七章Airtest基础操作第八章ATXServer2多设备集群环境搭建文章目录一
拒绝内卷的小测试·2024-01-10 03:59

从零开始完成APP自动化测试（三）--adb命令

元素操作第五章APP自动化测试框架搭建Python+Appium+pytest-html第六章uiautomator2、web-editor基础操作第七章Airtest基础操作第八章ATXServer2多设备集群环境搭建文章目录一
拒绝内卷的小测试·2024-01-10 03:59

SpringCloud Alibaba

Nacos（服务注册与发现）二.Dubbo（服务调用）三.Ribbon（负载均衡）见SpringCloud四.Gateway（网关）五.Sentinel（服务容错）六.ScheduleX（分布式调度）七.RocketMQ
xnninger·2024-01-10 03:56

DataGear专业版 1.0.0 发布，数据可视化分析平台

DataGear专业版基于开源版开发，新增了诸多企业级特性，包括：MySQL、PostgreSQL、Oracle、SQLServer以及更多兼容部署数据库支持OAuth2.0/CAS/LDAP统一登录集成支持集群部署支持系统备份与还原支持更细粒度的权限控制支持前后端敏感信息加密传输支持等等
DataGear·2024-01-10 02:17

spring cloud 服务之间的负载均衡

在使用springcloud的时候,我们使用Feign来进行服务之间的相互访问;那如果我们该服务的访问流量很大的时候我们肯定不能单独使用项目来跑服务,这时候分布式系统就要搭配集群使用了~;前面回顾:springcloud
毛于晏·2024-01-10 01:36

实现Redis分布式锁

前言在面试中经常会被面试官问到Redis分布式锁,随着用户量和业务的增加,传统的单体架构已经无法满足我们的业务需求,这时候单体架构项目的必须升级为分布式、集群、微服务。
26a058e669f9·2024-01-10 00:10
上一页 75 76 77 78 79 80 81 82 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他