Kafka原理解析

kafka工具类

生产者publicclassTestProducer{publicstaticvoidmain(String[]args){KafkaProducerproducer=KafkaUtils.createProducer
xixiyuguang·2023-09-29 20:19

kafka消息队列简单使用

下面是使用SpringBoot和Kafka实现消息队列的简单例子：引入依赖在pom.xml中添加以下依赖：org.springframework.kafkaspring-kafka2.7.5配置Kafka
一只java小菜鸡·2023-09-29 19:48

Flink的DataStream集成kafka

对于实时处理当中，我们实际工作当中的数据源一般都是使用kafka，所以我们一起来看看如何通过Flink来集成kafkaflink提供了一个特有的kafkaconnector去读写kafkatopic的数据
我还不够强·2023-09-29 17:39

k8s 安装filebeat使用 以及自定义filebeat.yml

dockerfileFROMelastic/filebeat:7.10.2#自定义指定filebeat.yamlCMD["-e","-c","elk-log.yml"]2、k8s部署filebeat并写入kafka2.1
满满的伤疤·2023-09-29 17:38

【Kafka专题】Kafka快速实战以及基本原理详解

目录前言课程内容一、Kafka介绍1.1MQ的作用1.2为什么用Kafka二、Kafka快速上手2.1实验环境2.2单机服务体验2.3理解Kafka的消息传递机制2.4Kafka集群2.5理解服务端的Topic
验证码有毒·2023-09-29 17:03

Java8特性之Stream的原理解析和日常使用

本文是向大家介绍：Java8特性之Stream流的原理和日常使用，可以直观的理解Stream流操作和玩转集合1、什么是Stream1.1、简介java8新添加了一个特性：流Stream。Stream和I/O流不同，它更像具有Iterable的集合类，但行为和集合类又有所不同，它是对集合对象功能的增强，让开发者能够以一种声明的方式处理数据源（集合、数组等），它专注于对数据源进行各种高效的聚合操作（a
高阳很捷迅·2023-09-29 13:57

Guava限流器原理浅析

文章目录基本知识限流器的类图使用示例原理解析限流整体流程问题驱动1、限流器创建的时候会初始化令牌吗？2、令牌是如何放到桶里的？
墨、鱼·2023-09-29 11:17

使用@Conditional注解根据配置文件注入不同的对象

背景：项目中使用了datahub，kafka两种消息队列，为了避免硬编码，应该根据配置文件来决定使用哪种消息队列，以及初始化哪个对象。为了简洁，我只写了简单代码来表明实现逻辑。
uweii·2023-09-29 10:55

巧用@Conditional注解根据配置文件注入不同的bean对象

项目中使用了mq，kafka两种消息队列进行发送数据，为了避免硬编码，在项目中通过不同的配置文件自动识别具体消息队列策略。这里整理两种实施方案，仅供参考！
懒虫虫~·2023-09-29 10:24

RabbitMQ中间件

消息传递：指的是程序之间通过在消息中发送数据进行通信，而不是通过直接调用彼此来通信2、当下主流的消息中间件RabbitMQ、Kafka、ActiveMQ、RocketMQ3、作用冗余（存储）、扩展性、可恢复性
凤凤思密达萌萌哒·2023-09-29 10:22

kafka消息格式V2版本介绍

kafka从0.11.0版本开始所使用的消息格式版本为v2，这个版本的消息相比于v0和v1的版本而言改动很大，同时还参考了ProtocolBuffer而引入了变长整型（Varints）和ZigZag编码
Jackzsss·2023-09-29 09:44

kafka的版本号

今天聊聊kafka版本号的问题，这个问题实在是太重要了，我觉得甚至是日后能否用好kafka的关键。
wc1695040842·2023-09-29 09:14

【实战】SpringBoot + KafKa

1.配置pom包org.springframework.kafkaspring-kafka2.配置application.ymlkafka部分：kafka:#指定kafka代理地址，可以多个bootstrap-servers
NBI大数据可视化分析·2023-09-29 09:03

kafka-消息格式

value,消息中header的格式会在下一节描述.保持消息中的key和value不透明(二进制格式)是正确的决定:目前构建序列化库取得很大的进展,而且任何单一的序列化方式都不能满足所有的用途.毋庸置疑,使用kafka
m0_45987292·2023-09-29 09:44

【单机上部署kafka3.5版本】

今天我要跟大家分享一下如何在单机上部署kafka3.5版本。kafka是一个分布式的消息队列，可以实现高效的数据传输和处理。kafka3.5是最新的稳定版本，带来了一些新的特性和优化。
羽长风·2023-09-29 09:44

Kafka 消息中间件

文章目录一、消息队列的应用场景1.异步处理2.系统解耦3.流量削峰4.日志处理（大数据领域常见）二、Kafka简介1.Kafka的概念2.消息中间件的对比、选择3.Kafka安装配置4.Kafka的基准测试三
从零开始的JAVA世界·2023-09-29 09:42

kafka各版本消息介绍

kafka各版本消息介绍V0offset：分区中的偏移量messagesize：消息大小crc32(4B):crc32校验值。校验范围为magic至value之间。
cdchen2017·2023-09-29 09:11

1、Kafka 安装与简单使用

第1章Kafka概述1.1定义Kafka传统定义：Kafka是一个分布式的基于发布/订阅模式的消息队列（MessageQueue），主要应用于大数据实时处理领域。
myprincess003·2023-09-29 09:01

kafka 集群搭建 & 常用命令

1、集群搭建：将kafka压缩包解压到某一目录tar-zxvfkafka_2.12-3.5.1.tgz修改节点配置文件vimconfig/server.propertiesbroker.id=0log.dirs
我的棉裤丢了·2023-09-29 09:30

docker-compose 网络配置- IP 主机名 hosts配置

docker-compose配置IP、hostname、hosts配置配置IPversion:"3"networks:bd-network:#声明网络external:trueservices:kafka
xfchn多多学习学习·2023-09-29 06:14

探索ClickHouse——连接Kafka和Clickhouse

安装Kafka新增用户sudoadduserkafkasudoadduserkafkasudosu-lkafka安装JDKsudoapt-getinstallopenjdk-8-jre下载解压kafka
breaksoftware·2023-09-29 06:41

探索ClickHouse——使用MaterializedView存储kafka传递的数据

在《探索ClickHouse——连接Kafka和Clickhouse》中，我们讲解了如何使用kafkaengin连接kafka，并读取topic中的数据。
breaksoftware·2023-09-29 06:10

ELK简介

ELK1.ELK2.Elasticsearch（ES）3.Logstash4.Kibana5.Filebeat6.缓存/消息队列（redis、kafka、RabbitMQ等）1.ELKELK是三个开源软件的首字母缩写
壹只菜鸟·2023-09-29 05:33

深度学习中Dropout原理解析（10X单细胞和10X空间转录组）

1.Dropout简介1.1Dropout出现的原因在机器学习的模型中，如果模型的参数太多，而训练样本又太少，训练出来的模型很容易产生过拟合的现象。在训练神经网络的时候经常会遇到过拟合的问题，过拟合具体表现在：模型在训练数据上损失函数较小，预测准确率较高；但是在测试数据上损失函数比较大，预测准确率较低。过拟合是很多机器学习的通病。如果模型过拟合，那么得到的模型几乎不能用。为了解决过拟合问题，一般会
单细胞空间交响乐·2023-09-29 03:07

【周赛364-单调栈】美丽塔 II-力扣 2866

推荐:kuan的首页,持续学习,不断总结,共同进步,活到老学到老导航檀越剑指大厂系列:全面总结java核心技术点,如集合,jvm,并发编程redis,kafka,Spring,微服务,Netty等常用开发工具系列
檀越剑指大厂·2023-09-29 02:22

【入门】安装Kafka

安装Kafka打开CMD到C:\Develop\kafka_2.11-0.9.0.0这个路径下，输入bin\windows\kafka-server-start.batconfig\server.properties
Magicach·2023-09-29 02:02

kafka环境搭建以及基本原理

kafka最先是作为日志数据采集，后用于消息传递，kafka能承担tb级别数据存储，确保服务的可用性，允许少量数据的丢失作为消息中间件就有异步、解耦、削峰三个作用一、单机搭建单机ip：192.168.64.133
高如风·2023-09-29 00:14

Kafka参数之auto.offset.reset

前言：之所以要说下这个参数是因为，在做kafka和流式框架整合的时候，这个参数经常会被设置。
hankl1990·2023-09-28 23:39

Spring Boot Kafka优雅使用

前言需要对Kafka有一定的了解先抛出几个问题:springbootkafka使用如何配置多线程消费？如何手动管理Offset？如何命名多线程名称？
Jounghu·2023-09-28 23:19

【AI绘画】Stable Diffusion WebUI

推荐:kuan的首页,持续学习,不断总结,共同进步,活到老学到老导航檀越剑指大厂系列:全面总结java核心技术点,如集合,jvm,并发编程redis,kafka,Spring,微服务,Netty等常用开发工具系列
檀越剑指大厂·2023-09-28 22:56

MQ相关

消息队列具有如下属性：消息顺序普通队列支持“分区有序”和“全局队列”两种模式，ActiveMQ和Kafka均为分区有序。分区有序的队列通过分布式处理，支
夏与清风·2023-09-28 20:04

Kafka面试题全套整理 | 划重点要考！

Kafka面试题全套整理|划重点要考！
Java机械师·2023-09-28 18:04

初识kafka

Kafka目前被定位为一个分布式流式处理平台，它以高吞吐、可持久化、可水平扩展、支持流数据处理等多种特性而被广泛使用。
米兰的小铁匠xxm·2023-09-28 17:48

2021-08-17

这份保姆级Kafka两万字指南，图文并茂，看完你都明白了2021-08-0610:00·Java码农之路1、为什么有消息系统1、解耦合2、异步处理例如电商平台，秒杀活动。
一把青龙湾月刀·2023-09-28 17:03

Kafka：介绍和内部工作原理

展示Kafka工作方式的简单架构。什么是Kafka？为什么我们要使用它？它是消息队列吗？它是一个分布式流处理平台或分布式提交日志。
冲浪中台·2023-09-28 16:54

Kafka：介绍和内部工作原理

展示Kafka工作方式的简单架构。什么是Kafka？为什么我们要使用它？它是消息队列吗？•它是一个分布式流处理平台或分布式提交日志*。
小技术君·2023-09-28 14:28

2-Kafka版本迭代及特性

Kafka的版本选择，以及每个版本的特性和变化。
wenthkim·2023-09-28 14:03

从0到一搭建Kafka-单机版-通过单机版zookeeper配置

教程https://www.bilibili.com/video/BV1t34y1G7NW/一、安装软件首先得找到一些基本概念：1、类比Java的文件执行过程：Java程序从源代码到运行主要有三步：编译：将我们的代码（.java）编译成虚拟机可以识别理解的字节码(.class)解释：虚拟机执行Java字节码，将字节码翻译成机器能识别的机器码执行：对应的机器执行二进制机器码参考林小鹿大佬机器码机器码
xin麒·2023-09-28 14:43

Kafka快速实战以及基本原理详解

文章目录1、Kafka介绍1.1、MQ的作用1.2、为什么要用Kafka2、Kafka快速上手2.1、实验环境2.2、单机服务体验2.3、理解Kakfa的消息传递机制1、Kafka介绍ChatGPT对于
Tacy0213·2023-09-28 13:15

小米科技笔记 | ElasticSearch与Redis底层原理解析

大家好，我是小米，一个热衷于技术分享的小伙伴！今天，我们来探讨一下两个非常重要的数据存储和检索工具：ElasticSearch和Redis。虽然它们都是高度优化的工具，但在底层原理上有着明显的区别。接下来，我将为大家详细解析它们的底层工作原理，帮助你更好地理解它们的使用场景和优劣势。ElasticSearch：分布式搜索引擎的典范首先，让我们来了解一下ElasticSearch。它是一个基于开源搜
知其然亦知其所以然·2023-09-28 12:40

大数据之Kafka

Kafka概述传统定义：一个分布式的基于发布/订阅模式的消息队列，主要应用于大数据实时处理领域。最新定义：一个开源的分布式事件流平台，被数千家公司用于高性能数据管道、流分析、数据集成和关键任务应用。
十七✧ᐦ̤·2023-09-28 12:40

Kafka Consumer深入理解

最近项目需要进行实时读取服务端信息，在网上看到kafka可以解决这个问题，开发完成后对kafka做一个简单的整理，希望可以帮助到刚开始学习kafka的同学，给自己也做个笔记：首先说一下kafka是个什么东西
Alex_81D·2023-09-28 11:43

kafka集群启动和停止

1、启动先启动zk集群然后在所有节点执行脚本nohupkafka-server-start.sh/kkb/install/kafka/config/server.properties>/dev/null2
我还不够强·2023-09-28 11:11

docker安装kafka并配置kafka可视化界面

使用docker-compose安装kafka并配置zookeeper创建工作目录在你的服务器可用位置，创建一个空白目录【名称随意】(如：我创建了一个名为work_space_kafka的目录)。
Jesse_Kyrie·2023-09-28 10:00

记录Elasticsearch circuit_breaking_exception异常解决

业务场景：Flink消费Kafka数据写入ES组件版本：CDH：6.3.0Flink：1.12.1Elasticsearch:7.7.0异常明细Causedby:ElasticsearchStatusException
csdn_chshuai·2023-09-28 10:58

Offset Explorer 2.0解决unable to connect broker 0

使用OffsetExplorer2.0访问kafka时，要在windows的host文件里面加上你kafka的主机名，文件路径在/windows/system32/drivers/etc，因为kafkatool
Crayon Lin·2023-09-28 10:27

Kafka Log存储解析以及索引机制

1.概述  在Kafka架构，不管是生产者Producer还是消费者Consumer面向的都是Topic。Topic是逻辑上的概念，而Partition是物理上的概念。
独影月下酌酒·2023-09-28 08:49

kafka伪集群部署，使用KRAFT模式

1:拉去管理kafka界面UI镜像dockerpullprovectuslabs/kafka-ui2:拉去管理kafka镜像dockerpullbitnami/kafka3:docker-compose.ymlversion
小徐敲java·2023-09-28 08:18

kafka伪集群部署，使用zookeeper模式

1:拉去管理kafka界面UI镜像dockerpullprovectuslabs/kafka-ui2:拉去管理kafka镜像dockerpullbitnami/kafka3:docker-compose.ymlversion
小徐敲java·2023-09-28 08:44

官方AI语音系统电销机器人系统搭建|AI智能|电话机器人源码|最新电销外呼系统多服务器版本七牛科大免费识别阿里免费识别科大识别阿里识别电话机器人

端是VUE后端是java还有CC++4台服务器组成nginx，kafka，mysql数据库，fs。
m0_52165567·2023-09-28 05:47
上一页 99 100 101 102 103 104 105 106 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他