kafka配置优化

kafka入门(四)：kafka生产者发送消息

发后即完，只管往kafka中发送消息，而不关心消息是否正确到达。这种发送方式的性能最高，可靠性也最差。
乐之者v·2023-12-17 23:37

kafka学习笔记--Topic 数据的存储机制

如有侵权、联系速删视频教程链接：【尚硅谷】Kafka3.x教程（从入门到调优，深入全面）文章目录大致介绍实际查看index文件和log文件详解大致介绍Topic是逻辑上的概念，而partition是物理上的概念
向着百万年薪努力的小赵·2023-12-17 23:40

kafka学习笔记--Kafka副本

如有侵权、联系速删视频教程链接：【尚硅谷】Kafka3.x教程（从入门到调优，深入全面）文章目录1副本基本信息2Leader选举流程3Leader和Follower故障处理细节3.1Follower故障处理细节
向着百万年薪努力的小赵·2023-12-17 23:40

【Kafka基本原理】

文章目录一、Kafka介绍1、MQ的作用2、为什么要用Kafka三、理解Kakfa的消息传递机制四、Kafka集群服务五、理解服务端的Topic、Partition和Broker六、Kafka集群的整体结构一
向前再向前·2023-12-17 22:28

【从客户端理解Kafka的使用方式】

重点依然是要建立自己脑海中的Kafka消费模型。Kafka的HighLevelAPI使用是非常简单的，所以梳理模型时也要尽量简单化，主线清晰，细节慢慢扩展。
向前再向前·2023-12-17 22:25

zookeeper集群+kafka集群

zookeeper集群+kafka集群kafka3.0之前依赖于zookeeperzookeeper开源，分布式的架构，提供协调服务（Apache项目）基于观察者模式涉及的分布式服务管理架构存储和管理数据
喝点维C·2023-12-17 22:54

kafka安装配置

Kafka是一个分布式数据流平台，可以运行在单台服务器上，也可以在多台服务器上部署形成集群。
carmen_山海·2023-12-17 19:21

Kafka3.0.0安装使用教程

去kafka官网下载3.0.0版本https://kafka.apache.org/downloads将压缩包上传到服务器tar-zxvfkafka_2.12-3.0.0.tgz解压目录结构如下cdconfigllzookeeper.properties
YMY_666·2023-12-17 18:42

Kafka

kafka如何防止消息丢失？ack=all且分区ISR数量大于等于2可以保证百分百不会丢失kafka怎么防止消息重复消费(幂等性)？
YMY_666·2023-12-17 18:39

把 RabbitMQ 讲的那叫一个透彻，佩服

整体阅读在40分钟左右大家好，我是阳威常见的消息队列很多，主要包括RabbitMQ、Kafka、RocketMQ和ActiveMQ，相关的选型可以看我之前的系列，这篇文章只讲RabbitMQ，先讲原理，
ღ᭄陽先生꧔ꦿ᭄·2023-12-17 18:26

Kafka-生产调优

Kafka生产调优实践通常在生产环境中，Kafka都是用来应对整个项目中最高峰的流量搭建Kafka监控平台生产环境通常会对Kafka搭建监控平台。
有梦想的年轻人6174·2023-12-17 17:12

Kafka-日志索引

Kafka的Log日志梳理Topic下的消息是如何存储的？在搭建Kafka服务时，在server.properties配置文件中通过log.dir属性指定了Kafka的日志存储目录。
有梦想的年轻人6174·2023-12-17 17:09

SpringBoot2.x整合kafka消息队列中间件

docker-compose搭建kafka#docker-compose配置文件version:'3.2'services:zookeeper:image:wurstmeister/zookeepercontainer_name
程序员buddha·2023-12-17 15:54

在 idea 中以 yarn-client 远程提交 Spark 作业

示例代码RemoteSubmitApp主类packagecom.clouderaimportorg.apache.kafka.clients.consumer.ConsumerConfigimportorg.apache.kafka.common.serialization.StringDeserializerimportorg.apache.log4j.Loggerimportorg.apach
lei_charles·2023-12-17 13:41

【算法Hot100系列】最长回文子串

推荐:kwan的首页,持续学习,不断总结,共同进步,活到老学到老导航檀越剑指大厂系列:全面总结java核心技术点,如集合,jvm,并发编程redis,kafka,Spring,微服务,Netty等常用开发工具系列
檀越剑指大厂·2023-12-17 12:26

Kafka-Kafka核心参数详解

Kafka的HighLevelAPI使用是非常简单的，所以梳理模型时也要尽量简单化，主线清晰，细节慢慢扩展。Kafka提供了两套客户端API，HighLevelAPI和LowLevelAPI。
长情知热爱·2023-12-17 11:54

恢复Django 项目

你可以使用以下命令来检查pip是否已安装2.2安装Packages2.2.1安装Django2.2.2安装pymysql2.2.3安装kafka2.2.4安装requests2.2.5安装simplepro2.2.6
芝麻馅汤圆儿·2023-12-17 11:51

kafka学习笔记--节点的服役与退役

如有侵权、联系速删视频教程链接：【尚硅谷】Kafka3.x教程（从入门到调优，深入全面）文章目录服役新节点新节点准备执行负载均衡操作退役旧节点执行负载均衡操作执行停止命令服役新节点依旧使用前面文章创建的三个
向着百万年薪努力的小赵·2023-12-17 10:25

kafka3.0创建topic出现zookeeper is not a recognized option

在linux云服务器上搭建了一套kafka3.0集群，然后安装以前的创建topic指令，例如这样——.
朱季谦·2023-12-17 09:58

电商数仓项目----笔记三(用户行为数据同步)

在前面的笔记一和笔记二中，我们已经分别将用户行为数据和业务数据采集到kafka中了：在实时数仓中，由于Flink会从kafka中读取数据，也无需我们再同步数据了，因此同步数据是我们离线数仓的事。
zmx_messi·2023-12-17 08:43

服务总线SpringCloudBus

SpringCloudBus可选的消息代理有RabbitMQ和Kafka。2集成SpringClou
黄晶谛·2023-12-17 08:21

Kafka Avro序列化之三：使用Schema Register实现

为什么需要SchemaRegister注册表无论是使用传统的AvroAPI自定义序列化类和反序列化类还是使用Twitter的Bijection类库实现Avro的序列化与反序列化，这两种方法都有一个缺点：在每条Kafka
跟着大数据和AI去旅行·2023-12-17 06:46

消息队列(MQ)

对于MQ来说，不管是RocketMQ、Kafka还是其他消息队列，它们的本质都是：一发一存一消费。下面我们以这个本质作为根，一起由浅入深地聊聊MQ。
荒~·2023-12-17 06:11

Bifrost 中间件 X-Requested-With 系统身份认证绕过漏洞复现

0x01产品简介Bifrost是一款面向生产环境的MySQL，MariaDB，kafka同步到Redis，MongoDB，ClickHouse等服务的异构中间件0x02漏洞概述Bifrost中间件X-Requested-With
OidBoy_G·2023-12-17 06:02

【Flink-cdc-Mysql-To-Kafka】使用 Flinksql 利用集成的 connector 实现 Mysql 数据写入 Kafka

【Flink-cdc-Mysql-To-Kafka】使用Flinksql利用集成的connector实现Mysql数据写入Kafka1）环境准备2）准备相关jar包3）实现场景4）准备工作4.1.Mysql4.2
bmyyyyyy·2023-12-17 05:04

【Flink-Sql-Kafka-To-ClickHouse】使用 FlinkSql 将 Kafka 数据写入 ClickHouse

【Flink-Sql-Kafka-To-ClickHouse】使用FlinkSql将Kafka数据写入ClickHouse1）需求分析2）功能实现3）准备工作3.1.Kafka3.2.ClickHouse4
bmyyyyyy·2023-12-17 05:57

《PySpark大数据分析实战》-11.Spark on YARN模式安装Hadoop

对大数据技术栈Hadoop、Hive、Spark、Kafka等有深入研究，对Data
wux_labs·2023-12-17 05:16

《PySpark大数据分析实战》-12.Spark on YARN配置Spark运行在YARN上

对大数据技术栈Hadoop、Hive、Spark、Kafka等有深入研究，对Data
wux_labs·2023-12-17 05:10

阿里云centos8.1 Docker+Kafka安装使用

环境&软件包阿里云centos8.1dockerzookeeperkafka安装zookeeperkafka依赖zookeeper，通过zookeeper管理broker，需先安装zookeeper#拉取镜像
artCoding·2023-12-17 05:23

把所有Java知识操作都写出来了-Github上收获45K+star的阿里P8整理的新版手抄本

该文档在Github上收获45K+star的Java核心神技（这参数，质量多高就不用我多说了吧）非常全面，包含基础知识、Java集合、JVM、多线程并发、spring原理、微服务、Netty与RPC、Kafka
构架师鱼鱼·2023-12-17 03:32

dcoker-compose一键部署EFAK —— 筑梦之路

简介EFAK（EagleForApacheKafka，以前称为KafkaEagle）是一款由国内公司开源的Kafka集群监控系统，可以用来监视kafka集群的broker状态、Topic信息、IO、内存
筑梦之路·2023-12-17 03:40

消息队列zookeeper集群+kafka

消息队列zookeeper集群+kafkakafka3.0之前依赖于zookpeeperzookeeper开源分布式架构，提供协调服务（Apache项目）基于观察者模式设计的分布式服务管理架构存储和管理数据
m0_52416577·2023-12-17 01:24

Flink 有状态流式处理

传统批次处理方法【1】持续收取数据（kafka等），以window时间作为划分，划分一个一个的批次档案（按照时间或者大小等）；【2】周期性执行批次运算（Spark/Stom等）；传统批次处理方法存在的问题
程序猿进阶·2023-12-17 00:30

TDengine Kafka Connector将 Kafka 中指定 topic 的数据（批量或实时）同步到 TDengine

教程放在这里：TDengineJavaConnector，官方文档已经写的很清晰了，不再赘述。这里记录一下踩坑：1.报错java.lang.UnsatisfiedLinkError:notaosinjava.library.pathatjava.lang.ClassLoader.loadLibrary(ClassLoader.java:1860)atjava.lang.Runtime.loadLi
谢小鱼·2023-12-16 23:56

Kafka的安装介绍

1.准备工作准备三台服务器kafka1:192.168.36.242kafka2:192.168.36.243kafka3:192.168.36.244三台服务器关闭防火墙和selinuxsystemctlstopfirewalld
一个小宏混·2023-12-16 23:59

Kafka中的fetch-min-size、fetch-max-wait和request.timeout.ms配置

当前kafka的版本为2.8.11，SpringBoot的版本为2.7.6，在pom.xml中引入下述依赖：org.springframework.kafkaspring-kafka2.8.11然后在yml
y_bccl27·2023-12-16 21:12

Kafka中的enable-auto-commit和auto-commit-interval配置

当前kafka的版本为2.8.11，SpringBoot的版本为2.7.6，在pom.xml中引入下述依赖：org.springframework.kafkaspring-kafka2.8.11提前说明
y_bccl27·2023-12-16 21:36

Kafka Avro序列化之二：使用Twitter的Bijection 类库实现

KafkaAvro序列化之一：使用自定义序列化比较麻烦，需要根据schema生成实体类，需要调用avro的API实现对象到byte[]的序列化和byte[]到对象的反序列化转化，而那些方法看上去比较繁琐
跟着大数据和AI去旅行·2023-12-16 20:34

Kafka内容分享(四)：Kafka 架构和幂等性与事务

目录一、架构1.1、Kafka重要概念1.1.1、broker1.1.2、zookeeper1.1.3、producer（生产者）1.1.4、consumer（消费者）1.1.5、consumergroup
之乎者也··2023-12-16 18:44

【星环云课堂大数据实验】kafka消息发布与订阅

文章目录一、Kafka概述二、实验环境三、实验准备四、实验目的五、实验步骤5.1、创建KafkaTopic5.2、Kafka消息发布5.3、Kafka消息订阅六、实验感悟一、Kafka概述Kafka是由
生生不息~·2023-12-16 17:12

Kafka学习（二）-------- 什么是Kafka

通过Kafka的快速入门https://www.cnblogs.com/tree1123/p/11150927.html能了解到Kafka的基本部署，使用，但他和其他的消息中间件有什么不同呢？
大数据流动·2023-12-16 17:17

环境安全之配置管理及配置安全设置指导

一、前言IT运维过程中，配置的变更和管理是一件非常重要且必要的事，除了一般宏观层面的配置管理，还有应用配置参数的配置优化，本文手机整理常用应用组件配置项配置，尤其安全层面，以提供安全加固指导实践。
羌俊恩·2023-12-16 17:01

Java面试题及答案整理（ 2022 年 2 月最新版，持续更新）

Java工程师面试题包括了：MyBatis、ZK、Dubbo、EL、Redis、MySQL、并发编程、Java面试、Spring、微服务、Linux、Springboot、SpringCloud、MQ、Kafka
大老高程序员·2023-12-16 17:01

SpringCloudStream实战拆解以及3.1后新版本特性分析

2.2:一秒切换对接kafka2.3：一秒切换对接RocketMQ三、详解SCS三神器3.1Binder3.2Binding3.3Message四、SCS提供的高级功能4.1消息分组消费机制4.2个性化使用五
roykingw·2023-12-16 17:20

消息通知泛型版

最近在做一个项目，项目内部需要使用消息通知系统，由于只是单机内部消息通知，使用类似kafka这样的消息队列就太重量级了。所以设计了一个简单的消息通知功能。
天地一蜉蝣_6e86·2023-12-16 15:18

消息队列kafka详解：Kafka架构介绍

一.工作流程Kafka中消息是以topic进行分类的，Producer生产消息，Consumer消费消息，都是面向topic的。
码农小旋风·2023-12-16 14:20

Kafka Avro序列化之一：使用自定义序列化

定义Schema通过ApacheAvro编程快速入门，我们定义了User实体类。user.avsc{"namespace":"org.example.avro","type":"record","name"
跟着大数据和AI去旅行·2023-12-16 14:50

本地 idea 连接操作服务器上的 kafka，配置内外网映射

主要就是内外网映射的配置在Kafka的安装目录中的config/server.properties文件中注释掉原来的advertised.listeners和listeners添加以下内容，将下面内容中的
超爱慢·2023-12-16 14:18

《PySpark大数据分析实战》-10.独立集群模式的代码运行

对大数据技术栈Hadoop、Hive、Spark、Kafka等有深入研究，对Data
wux_labs·2023-12-16 14:49

《PySpark大数据分析实战》-08.宽窄依赖和阶段划分

对大数据技术栈Hadoop、Hive、Spark、Kafka等有深入研究，对Data
wux_labs·2023-12-16 14:19
上一页 35 36 37 38 39 40 41 42 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他