Kafka架构设计

JVM系列-9.性能调优

作者简介：大家好，我是爱吃芝士的土豆倪，24届校招生Java选手，很高兴认识大家系列专栏：Spring原理、JUC原理、Kafka原理、分布式技术原理、数据库技术、JVM原理如果感觉博主的文章还不错的话
爱吃芝士的土豆倪·2024-01-27 21:19

对于mysql，redis，Kafka，zookeeper磁盘缓存技术使用分析

对于mysql，redis，Kafka，zookeeper磁盘缓存技术使用分析大部分组件是基于磁盘存储的，但由于CPU速度和磁盘速度之间的鸿沟，都会使用缓存技术来提高性能，缓存简单来说就是一块内存区域，
魏春雨·2024-01-27 21:07

基于SSM的华强手机商城--57726（免费领源码）可做计算机毕业设计JAVA、PHP、爬虫、APP、小程序、C#、C++、python、数据可视化、大数据、全套文案

华强手机商城系统分析2.1可行性分析2.2系统流程分析2.2.1数据流程3.3.2业务流程2.3系统功能分析2.3.1功能性分析2.3.2非功能性分析2.4系统用例分析2.5本章小结3华强手机商城总体设计3.1系统架构设计
QQ_785101605·2024-01-27 20:43

MQ消息队列主流消息服务规范及代表产品

市面上消息队列的种类繁多，我们经常在做技术选型的时候，就会搜“RabbitMQ/RocketMQ/Kafka…的区别”这样的字眼，为了就是更好地选型，结合业务需求以及消息队列的性能、功能特性、设计规范来综合考虑
c_zyer·2024-01-27 18:13

【代码随想录-数组】移除元素

推荐:kwan的首页,持续学习,不断总结,共同进步,活到老学到老导航檀越剑指大厂系列:全面总结java核心技术点,如集合,jvm,并发编程redis,kafka,Spring,微服务,Netty等常用开发工具系列
檀越剑指大厂·2024-01-27 18:08

抗住千万流量的大型分布式系统架构设计

点击上方“码农突围”，马上关注这里是码农充电第一站，回复“666”，获取一份专属大礼包真爱，请设置“星标”或点个“在看”本文是学习大型分布式网站架构的技术总结。对架构一个高性能、高可用、可伸缩及可扩展的分布式网站进行了概要性描述，并给出一个架构参考。文中一部分为读书笔记，一部分是个人经验总结，对大型分布式网站架构有较好的参考价值。一、大型分布式网站架构技术1、大型网站的特点用户多，分布广泛大流量，
Ch97CKd·2024-01-27 17:26

【分布式技术专题】「分布式技术架构」 探索Tomcat集群架构原理和开发分析指南

探索Tomcat技术架构设计模式的奥秘Tomcat集群原理Tomcat集群能带来什么Tomcat集群产生什么问题Tomcat单服务体系架构Tomcat集群"简单版"首先要解决Session共享的问题典型负载均衡策略分析
洛神灬殇·2024-01-27 17:55

SpringBoot activemq收发消息、配置及原理

与Springframework相比，SpringBoot更近了一步，通过auto-configuration机制实现了对jms及amqp主流框架如ActiveMQ、RabbitMQ以及Kafka的自动配置
weixin_44612246·2024-01-27 17:16

Kafka-4.1-工作原理综述

1Kafka工作原理详解1.1工作流程Kafka集群将Record流存储在称为Topic的类中，每个记录由⼀个键、⼀个值和⼀个时间戳组成。
江中散人·2024-01-27 16:47

【云原生进阶之PaaS中间件】第三章Kafka-2-安装部署

1安装部署1.1kafka的分布式kafka是依靠zookeeper来实现分布式的，所以再启动前需要先启动zookeeper，如下图1.2集群部署官方下载地址：ApacheKafka（1）安装和Hadoop
江中散人·2024-01-27 16:16

【云原生进阶之PaaS中间件】第三章Kafka-3-命令操作

1命令操作1.1主题命令操作查看操作主题命令参数：[atguigu@hadoop102kafka]$bin/kafka-topics.sh参数描述--bootstrap-server，连接的KafkaBroker
江中散人·2024-01-27 16:16

【Spring连载】使用Spring访问 Apache Kafka（十六）----空payload和‘Tombstone‘记录的日志压缩

【Spring连载】使用Spring访问ApacheKafka（十六）----空payload和'Tombstone'记录的LogCompaction当你使用LogCompaction时，你可以发送和接收具有空
85程序员老王·2024-01-27 16:26

【Spring连载】使用Spring访问 Apache Kafka（十七）----处理异常

【Spring连载】使用Spring访问ApacheKafka（十七）----处理异常HandlingExceptions一、监听器错误处理程序ListenerErrorHandlers二、容器错误处理程序
85程序员老王·2024-01-27 16:26

【Spring连载】使用Spring访问 Apache Kafka（十八）----非阻塞重试

【Spring连载】使用Spring访问ApacheKafka（十八）----非阻塞重试Non-BlockingRetries一、HowThePatternWorks二、BackOffDelayPrecision
85程序员老王·2024-01-27 16:26

【Spring连载】使用Spring访问 Apache Kafka（十）----监控

【Spring连载】使用Spring访问ApacheKafka（十）----监控Monitoring一、监控监听器性能MonitoringListenerPerformance二、监控KafkaTemplate
85程序员老王·2024-01-27 16:56

【Spring连载】使用Spring访问 Apache Kafka（十一）----事务

【Spring连载】使用Spring访问ApacheKafka（十一）----事务Transactions一、概览二、使用KafkaTransactionManager三、事务同步TransactionSynchronization
85程序员老王·2024-01-27 16:56

【Spring连载】使用Spring访问 Apache Kafka（六）----应用程序事件

【Spring连载】使用Spring访问ApacheKafka（六）----应用程序事件ApplicationEvents一、检测空闲和无响应的Consumers二、事件消费EventConsumption
85程序员老王·2024-01-27 16:55

【Spring连载】使用Spring访问 Apache Kafka（七）----Topic/Partition初始偏移量&定位到特定的偏移量

【Spring连载】使用Spring访问ApacheKafka（七）----Topic/Partition初始偏移量&定位到特定的偏移量一、Topic/Partition的初始偏移量InitialOffset
85程序员老王·2024-01-27 16:55

【Spring连载】使用Spring访问 Apache Kafka（三）----接收消息

【Spring连载】使用Spring访问ApacheKafka（三）----接收消息一、消息监听器MessageListeners二、消息监听器容器MessageListenerContainers2.1
85程序员老王·2024-01-27 16:25

【Spring连载】使用Spring访问 Apache Kafka（十五）----消息头

【Spring连载】使用Spring访问ApacheKafka（十五）----消息头MessageHeadersApacheKafkaclient中提供了对消息中headers的支持。
85程序员老王·2024-01-27 16:53

架构分层：我们为什么一定要这么做？

架构分层和高并发架构设计又有什么关系呢？本节课，我将带你寻找答案。什么是分层架构软件架构分层在软件工程中是一种常见的设计方式，它是将整体系统
燕山暮雪·2024-01-27 16:41

微前端与单页面应用：如何将两种架构结合

1.背景介绍在现代网络应用中，微服务和单页面应用(SPA)是两种非常常见的架构设计。微服务架构是一种分布式系统的架构，其中系统被分解为多个小的服务，这些服务可以独立部署和扩展。
OpenChat·2024-01-27 15:42

《系统架构设计师教程（第2版）》第5章-软件工程基础知识-01-软件工程

文章目录1.软件工程概述1.1软件工程的定义1.2软件工程过程2.软件过程模型2.1瀑布模型(WaterfallModel)2.2原型化模型/快速原型(PrototypeModel)1）原型开发阶段2）目标软件开发阶段2.3螺旋模型(SpiralModel)1）概述2）螺旋每一层的4个阶段3）螺旋结构3.敏捷模型3.1敏捷方法的核心思想1）是适应型（而非可预测型）2）以人为本（非以过程为本）3）迭
玄德公笔记·2024-01-27 14:39

《系统架构设计师教程（第2版）》第5章-软件工程基础知识-02-需求工程

文章目录1.概述1.1需求1）需求的含义2）需求的三个层次1.2需求工程1.需求获取1.1需求获取的基本步骤1）开发高层的业务模型2）定义项目范围和高层需求3）识别用户角色和用户代表4）获取具体的需求5）确定目标系统的业务工作流6）需求整理与总结1.2需求获取方法1）用户面谈2）需求专题讨论会3）问卷调查4）现场观察5）原型化方法6）头脑风暴法2.需求变更2.1变更控制过程1）变更管理过程：2）常
玄德公笔记·2024-01-27 14:39

架构：HBase的核心组件和架构设计

在本文中，我们将深入了解HBase的核心组件和架构设计，为读者提供一个全面的了解。1.背景介绍HBase是一个分布式、可扩展、高性能的列式存储系统，基于Google的Bigtable论文设计。
OpenChat·2024-01-27 14:02

vit细粒度图像分类（二）SwinFC 学习笔记

基准骨干网络采用具有多阶段层级架构设计的SwinTransformer模型作为全新视觉特征提取器，从中获取局部和全局信息以及多尺度特征。
无妄无望·2024-01-27 13:39

flume+kafka+SparkStreaming+mysql+ssm+高德地图热力图项目

第一步、编写python脚本，产生模拟数据#coding=UTF-8importrandomimporttimephone=["13869555210","18542360152","15422556663","18852487210","13993584664","18754366522","15222436542","13369568452","13893556666","1536669855
printf200·2024-01-27 12:24

架构设计面试系列-01

1.软件架构设计都有哪些基本原则？
梦睡了·2024-01-27 12:06

Ceph分布式存储自动化运维平台开发实践

1.1.1Ceph的核心组件1.1.2Ceph的优势1.2自动化运维的需求目标2.平台架构设计和组件版本2.1平台架构设计2.2组件版本2.3模块划分（已经脱敏处理）2.3.1当前版本V1.0支持功能2.3.2
抛物线.·2024-01-27 12:34

架构设计：RPC框架的基本架构与组件

1.背景介绍RPC(RemoteProcedureCall，远程过程调用)是一种在分布式系统中，允许程序调用另一个程序的过程，而不用关心远程过程的运行位置和运行环境的技术。RPC框架是实现RPC功能的基础设施，它提供了一种简洁、高效的方式来实现程序之间的通信和协作。RPC框架的核心组件包括客户端、服务端、注册中心、协议、序列化和反序列化等。在分布式系统中，客户端可以通过RPC框架调用服务端提供的远
OpenChat·2024-01-27 12:29

Kafka面试题

0.思维导图  Kafka是一个分布式的基于发布/订阅模式的消息队列，主要用于大数据实时处理邻域  消息队列分为点对点模式（消费者主动拉取数据，消息收到后清除消息）和发布订阅模式（消费者消费数据之后，不删除数据
韩顺平的小迷弟·2024-01-27 10:33

kafka summary

最近整体梳理之前用到的一些东西，回顾Kafka的时候好多东西都忘记了，把一些自己记的比较模糊并且感觉有用的东西整理一遍并且记忆一遍，仅用于记录以备后续回顾Kafka的哪些场景中使用了零拷贝生产者发送消息
会说话的皮卡丘·2024-01-27 09:22

电商系统设计到开发03 引入Kafka异步削峰

一、前言系统设计：电商系统设计到开发01第一版设计到编码-CSDN博客接着上篇文章：电商系统设计到开发02单机性能压测-CSDN博客本篇为大制作，内容有点多，也比较干货，希望可以耐心看看已经开发的代码，并对其下单接口进行了压力测试压力测试，该接口一个请求需要查询数据库4次，更新4次，插入2次，总共访问数据库10次，其中2个事务，3次查询是加锁查询，还有1次rpc请求，单实例情况下吞吐量为110/s
风萧萧兮s·2024-01-27 09:15

easy-upsert-starter 轻量级数据转换存储服务-MySQL使用(二)

easy-upsert-starter轻量级数据转换存储服务简介：针对轻量级数据(单次包数据量10万)处理，提供数据转移存储到MySQL、Kafka、ES、HBase、Redis配置相应的数据源，注入IUpser
还在忙碌的吴小二·2024-01-27 09:46

Kafka-服务端-PartitionStateMachine

PartitionStateMachine是ControllerLeader用于维护分区状态的状态机。分区的状态是通过PartitionState接口定义的，它有四个子类分别代表了分区四种可能的状态，如表所示。分区各个PartitionState之间的转换如图所示。下面分析各个状态之间转换时，需要完成的相关操作。NonExistentPartition→NewPartition从ZooKeeper
Andy技术支援·2024-01-27 08:53

知识库-kafka shell脚本用法

脚本名称用途描述connect-distributed.sh连接kafka集群模式connect-standalone.sh连接kafka单机模式kafka-acls.shtodokafka-broker-api-versions.shtodokafka-configs.sh
知秋ing·2024-01-27 08:52

shell脚本--kafka生产数据

直接上代码kafka参数修改成自己的配置。#!
手提青灯觅佳人·2024-01-27 08:52

Kafka zookeeper-shell.sh

bin/zookeeper-shell.sh作用是连接zookeeper，并通过命令查询注册的信息，本质上就是zookeeper的语法。bin/zookeeper-shell.shzookeeper_host:port[/path][args…]args参数类型如下statpath[watch]setpathdata[version]lspath[watch]delquota[-n|-b]path
云川之下·2024-01-27 08:18

【shell-10】shell实现的各种kafka脚本

kafka-shell工具背景日志log一.启动kafka->(start-kafka)二.停止kafka->(stop-kafka)三.创建topic->(create-topic)四.删除topic
我先森·2024-01-27 08:41

Flink生产环境相关问题

1.Flink+Kafka保证精确一次消费相关问题？Fink的检查点和恢复机制和可以重置读位置的source连接器结合使用，比如kafka，可以保证应用程序不会丢失数据。
大数据左右手·2024-01-27 08:09

JVM系列-8.GC调优

作者简介：大家好，我是爱吃芝士的土豆倪，24届校招生Java选手，很高兴认识大家系列专栏：Spring原理、JUC原理、Kafka原理、分布式技术原理、数据库技术、JVM原理如果感觉博主的文章还不错的话
爱吃芝士的土豆倪·2024-01-27 08:06

JVM系列-7内存调优

作者简介：大家好，我是爱吃芝士的土豆倪，24届校招生Java选手，很高兴认识大家系列专栏：Spring原理、JUC原理、Kafka原理、分布式技术原理、数据库技术、JVM原理如果感觉博主的文章还不错的话
爱吃芝士的土豆倪·2024-01-27 08:32

0806-Kafka异地复制

Kafka异地同步：Mirror-Maker（消费者+生产者）原理大概是启动consumer消费南京的topicmessage，发送到重庆的kafka集群。
红苹果_小米粒·2024-01-27 08:04

架构整洁之道——价值维度与编程范式

架构图里实际上包含了所有底层设计细节，这些细节信息共同支撑了顶层的架构设计，底层设计信息和顶层架构设计共同组成了整个架构文档。
Korbin Luo·2024-01-27 07:35

鸿蒙架构&Android架构分析

鸿蒙（HarmonyOS）和Android是两种主要的智能设备操作系统，它们在架构设计、功能特性和开发者支持等方面展现出不同的理念和优势。
wayne214·2024-01-27 06:03

基于Java+SpringMvc+vue+element实现上海汽车博物馆平台

留言文末获取源码联系方式查看下方微信号获取联系方式承接各种定制系统精彩系列推荐Java毕设项目精品实战案例《1000套》文章目录基于Java+SpringMvc+vue+element实现上海汽车博物馆平台一、前言介绍：二、系统设计：2.1系统设计原则：2.2整体架构设计
央顺技术团队·2024-01-27 06:22

Flink 集成 Debezium Confluent Avro ( format=debezium-avro-confluent )

本文介绍的场景是：使用KafkaConnect的DebeziumMySQLSourc
　Laurence·2024-01-27 06:54

软件系统架构黄金法则：响应式架构的设计原则

响应式架构是一种可以根据不同的用户和设备需求动态调整界面和功能的架构设计。它可以帮助软件系统更好地适应不同的用户和设备，提高用户体验和满足不同业务需求。在这篇文章中，我们将深入探讨响应
OpenChat·2024-01-27 06:15

37.Java连接Kafka

37.1实验环境Intellij已安装且正常运行Maven环境正常RedHat7.2CM和CDH版本为5.11.2Kafka2.2.0-0.10.2创建topic，test3有3个replication
大勇任卷舒·2024-01-27 06:40

RocketMQ-同城双活-高可用架构-同程旅行

背景介绍为何选择RocketMQ我们在几年前决定引入MQ时，市场上已经有不少成熟的解决方案，比如RabbitMQ,ActiveMQ，NSQ，Kafka等。
无心六神通·2024-01-27 04:59
上一页 23 24 25 26 27 28 29 30 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他