kafka入门到精通

kafka（一）快速入门

一、kafka（一）是什么？
匠道·2024-01-25 05:19

python使用kafka初步入门

kafka的使用zookeeper相关zookeeper的安装，查看文档：zookeeper的使用在kafka中，zookeeper主要存kafka节点的数据。
Tang_Lyan·2024-01-25 05:23

GreptimeDB v0.6 发布 | 支持 Datanodes 间迁移数据表 Region

接下来我们将介绍GreptimeDBv0.6的主要版本改进：v0.6功能上新其他亮点更新RegionMigration在v0.5版本中，我们引入了对KafkaWAL的支持，使得在多个Datanode之
Greptime·2024-01-25 03:12

基于redis实现消息队列

市面上的MQ应用有很多（例如：Kafka，RabbitMQ，Disque），同时也可以基于Redis来实现，比较典型的方案有：基于List的LPUSH+BRPOP的实现PUB/SUB，订阅/发布模式基于
tracy_668·2024-01-24 21:12

Conda python管理环境environments 三 从入门到精通

Conda系列：翻译:Anaconda与miniconda的区别Miniconda介绍以及安装Condapython运行的包和环境管理入门Condapython管理环境environments一从入门到精通
AI架构师易筋·2024-01-24 19:35

Conda python管理环境environments 四 从入门到精通

Conda系列：翻译:Anaconda与miniconda的区别Miniconda介绍以及安装Condapython运行的包和环境管理入门Condapython管理环境environments一从入门到精通
AI架构师易筋·2024-01-24 19:35

Conda python管理环境environments 二 从入门到精通

Conda系列：翻译:Anaconda与miniconda的区别Miniconda介绍以及安装Condapython运行的包和环境管理入门Condapython管理环境environments一从入门到精通
AI架构师易筋·2024-01-24 19:34

Conda python管理packages一 从入门到精通

Conda系列：翻译:Anaconda与miniconda的区别Miniconda介绍以及安装Condapython运行的包和环境管理入门Condapython管理环境environments一从入门到精通
AI架构师易筋·2024-01-24 19:03

Kafka高可用集群安装

开始安装配置Kafaka1.编辑server.properties文件#############################ServerBasics##############################Theidofthebroker.Thismustbesettoauniqueintegerforeachbroker.broker.id=1#######################
NikolasNull·2024-01-24 19:05

kaafka的rebalance机制

Kafka的Rebalance机制是为了实现高可用和负载均衡而设计的。
啄sir.·2024-01-24 19:44

小白初探架构模式—常用的设计模式

主从架构的实现2.4主从架构的示例3.主从架构设计的延伸3.1主备模式3.2主从复制3.3集群分片3.4异地多活4.总结1.前言作为一个架构设计小白，我们通常用了很多种工具，比如Mysql、Redis、Kafka
程序员阿奇·2024-01-24 19:03

c++ lambda 使用

boolKafkaResourceManager::Register(std::stringname,std::function()>callback){std::shared_ptrresource=
墨子哲·2024-01-24 17:10

c lib rdkafka接口说明

一、主要数据结构1、typedefstructrd_kafka_conf_srd_kafka_conf_t;rd_kafka_conf_t是kafka的全局配置结构，通过rd_kafka_conf_new
墨子哲·2024-01-24 17:10

RabbitMQ 入门到精通

RabbitMQ入门到精通一、了解RabbitMQ1.基础知识2.多种交换机模型详解二、服务端搭建1.简单搭建2.信息持久化到容器外部三、消息生产者和消费者1.消息生产者2.消息消费者3.RabbitTemplate
归去来 兮·2024-01-24 15:50

查看 Avro 格式的 Kafka 消息（启用了 Confluent Schema Registry )

使用Avro格式传递Kafka消息要比Json更加高效，因为它是二进制格式，在启用了ConfluentSchemaRegistry的情况下，会进一步地提升传输效率，因为Avro中的Schema信息将不再出现在消息中
　Laurence·2024-01-24 15:57

Zookeeper集群 + Kafka集群

目录一、Zookeeper概述二、Kafka概述三、部署1.部署Zookeeper集群1.环境准备2.安装Zookeeper2.部署kafka集群1.下载安装包2.安装Kafka3.部署Filebeat
睡美人章繁·2024-01-24 14:24

14、Kafka ------ kafka 核心API 之 流API（就是把一个主题的消息 导流 到另一个主题里面去）

目录kafka核心API之流APIKafka流API的作用：流API的核心API：使用流API编程的大致步骤如下：代码演示流API用法MessageStream流API代码演示消息从test1主题导流到
_L_J_H_·2024-01-24 14:33

【Kafka】高级特性：生产者

目录消息发送消息生产流程ProducerRecord序列化器分区器拦截器生产者原理剖析主线程消息累加器发送线程生产者参数消息发送消息生产流程整个流程如下：Producer创建时，会创建一个Sender线程并设置为守护线程。生产消息时，内部其实是异步流程；生产的消息先经过拦截器->序列化器->分区器，然后将消息缓存在缓冲区（该缓冲区也是在Producer创建时创建）。批次发送的条件为：缓冲区数据大小
Ethan-running·2024-01-24 14:03

Kafka 集群如何实现数据同步？

Kafka介绍Kafka是一个高吞吐的分布式消息系统，不但像传统消息队列（RaabitMQ、RocketMQ等）那样能够【异步处理、流量消峰、服务解耦】还能够把消息持久化到磁盘上，用于批量消费。
java2508·2024-01-24 14:02

使用时间戳来消费消息(kafka)

fromconfluent_kafkaimportConsumer,KafkaErrord
鲁班班·2024-01-24 14:32

Matlab神经网络

newff函数区别MATLAB中patternnet函数返回的网络结构中各个参数的含义神经网络对象属性径向基函数神经网络（RBFNN）详解RBF网络深度学习之径向基（RBF）时间序列分析时间序列预测从入门到精通
weixin_42849849·2024-01-24 13:43

C语言入门到精通之练习六：用*号输出字母C的图案

题目：用*号输出字母C的图案。程序分析：可先用'*'号在纸上写出字母C，再分行输出。程序源代码：#include"stdio.h"intmain(){printf("用*号输出字母C!\n");printf("****\n");printf("*\n");printf("*\n");printf("****\n");}以上实例输出结果为：用*号输出字母C!**********希望你也学会了，更多编
二当家的素材网·2024-01-24 12:09

Kafka集群的安装与配置（二）

2.2.2生产者命令行操作1）查看操作生产者命令参数[atguigu@hadoop102kafka]$bin/kafka-console-producer.sh2）发送消息[atguigu@hadoop102kafka
ole_triangle_java·2024-01-24 12:59

Kafka(二）原理详解

一、kafka核心总控制器（Controller）在Kafka集群中会有一个或者多个broker，其中有一个broker会被选举为控制器（KafkaController），它负责管理整个集群中所有分区和副本的状态
匠道·2024-01-24 12:20

kafka入门(九)：kafka分区分配策略

kafka分区分配策略参数：Kafka提供了消费者客户端参数partition.assignment.strategy来设置消费者与订阅主题之间的分区分配策略。
乐之者v·2024-01-24 12:20

Zookeeper集群 + Kafka集群，Filebeat+Kafka+ELK

目录什么是Zookeeper？Zookeeper工作机制Zookeeper特点Zookeeper数据结构Zookeeper选举机制实验部署Zookeeper集群1.安装前准备安装JDK下载安装包2.安装Zookeeper修改配置文件拷贝配置好的Zookeeper配置文件到其他机器上在每个节点上创建数据目录和日志目录在每个节点的dataDir指定的目录下创建一个myid的文件配置Zookeeper启
思华年^O^·2024-01-24 12:48

kafka

kafka内容producer：发布消息的对象称之为主题生产者（Kafkatopicproducer）topic：Kafka将消息分门别类，每一类的消息称之为一个主题（Topic）consumer：订阅消息并处理发布的消息的对象称之为主题消费者
IsLuNaTiC·2024-01-24 12:18

Kafka消费者提交偏移量

偏移量在Kafka中，偏移量（offset）是一个与分区相关的概念，用于跟踪一个消费者在分区中已经处理的消息位置。每个分区都有自己的偏移量，用于记录已经传递给消费者的消息的位置。
鲁班班·2024-01-24 12:18

登录kafka报错：Could notstart Jolokia agent: java.net.BindException: Address in use

在执行kafka命令增加或删除topic的时候，发现总是报错。Addressinuse？端口还是ip被占用了。只能禁用了，再执行命令。
后季暖·2024-01-24 12:48

kafka集群的错误处理

今天由于kafka集群搭建时的配置不当，由于一台主消费者挂掉(服务器崩了，需要维修)，导致了所有新版消费者(新版的offset存储在kafka)都无法拉取消息。
Stalary·2024-01-24 10:16

Java学习之路：从入门到精通的书籍

本文将为你提供一条Java学习之路，并推荐一些优秀的书籍，帮助你从入门到精通。阶段一：入门与进阶1.《HeadFirstJava（第二版）》•作者：KathySierra,Bert
半亩方塘立身·2024-01-24 10:24

JVM系列-5.java内存区域

作者简介：大家好，我是爱吃芝士的土豆倪，24届校招生Java选手，很高兴认识大家系列专栏：Spring原理、JUC原理、Kafka原理、分布式技术原理、数据库技术、JVM原理如果感觉博主的文章还不错的话
爱吃芝士的土豆倪·2024-01-24 10:53

IDEA报错：No hostname could be resolved for the IP address 127.0.0.1, using IP address as host name.

idea编辑flink连接kafka读取数据时报错：NohostnamecouldberesolvedfortheIPaddress127.0.0.1,usingIPaddressashostname.Localinputsplitassignment
唯一2333·2024-01-24 09:09

消息中间件之八股面试回答篇：一、问题概览+MQ的应用场景+RabbitMQ如何保证消息不丢失（生产者确认机制、持久化、消费者确认机制）+回答模板

问题概览目前主流的消息队列技术（MQ技术）分为RabbitMQ和Kafka，其中深蓝色为只要是MQ，一般都会问到的问题。浅蓝色是针对RabbitMQ的特性的问题。蓝紫色为针对Kafka的特性的问题。
鸡鸭扣·2024-01-24 09:38

Flink（十五）【Flink SQL Connector、savepoint、CateLog、Table API】

前言今天一天争取搞完最后这一部分，学完赶紧把Kafka和Flume学完，就要开始做实时数仓了。据说是应届生得把实时数仓搞个80%~90%才能差不多找个工作，太牛马了。
让线程再跑一会·2024-01-24 07:17

记一次Flink通过Kafka写入MySQL的过程

一、前言总体思路：source-->transform-->sink,即从source获取相应的数据来源，然后进行数据转换，将数据从比较乱的格式，转换成我们需要的格式，转换处理后，然后进行sink功能，也就是将数据写入的相应的数据库DB中或者写入Hive的HDFS文件存储。思路：pom部分放到最后面。二、方案及代码实现2.1Source部分Source部分构建一个web对象用于保存数据等操作，代码
梦痕长情·2024-01-24 07:17

Zookeeper集群+Kafka集群

目录Zookeeper1.Zookeeper定义2.Zookeeper工作机制3.Zookeeper特点4.Zookeeper数据结构5.Zookeeper应用场景统一命名服务统一配置管理统一集群管理服务器动态上下线软负载均衡6.Zookeeper选举机制第一次leader选举非第一次选举7.部署Zookeeper集群安装Zookeeper在每个节点上创建数据目录和日志目录配置Zookeeper启
Ybaocheng·2024-01-24 06:20

嵌入式 从入门到精通

1.对字符串常见的操作：1.strlen:获得字符串的长度2.strcpy(str1,str2):获得字符串的拷贝（若果被拷贝的字符串长度过高容易引起越界访问）3.strcat(str1,str2):把str2拼接到str1上注意：1.字符串的str1空间要足够大4.strcmp（str1,str2）：字符串的大小的比较如果str1==str2，结果为0；如果str1>str2,结果为大于0；如果
zhoufuning1·2024-01-24 05:33

嵌入式——从入门到精通 第三天

一c语言基础1进制转换：二进制，八进制，十六进制二进制：01八进制：01234567十六进制：0123456789abcdef低进制往高进制时：对应位乘以对应位的权值再求和高进制往低进制：高进制数除以低进制数得到的余数逆序排列2程序在c语言中的运行方式程序（外存中）执行（加载到内存中）执行程序结束（回收内存空间）3数字在内存中的存储：正数在计算机中存储对应的二进制数负数在计算机中存放补码1.原码2
zhoufuning1·2024-01-24 05:03

嵌入式——从入门到精通第四天

printf1.打印非输入控制符：printf("helloworld");\n换行符\t横向制表符\v纵向制表符\退格符\r回车符\\\字符\''''字符2.打印打个输出控制符%d占位符以十进制整形方式打印%o按照八进制打印%x按照十六进制打印（%X则是打印出来字母大写%#x则是打印出来前面加上0x）%c按照字符打印%f按照浮点数类型打印%s按照字符串打印%p按照指针类型打印%u按照无符号类型打
zhoufuning1·2024-01-24 05:03

嵌入式 从入门到精通第五天

括号>单目运算符>双目运算符>三目运算符>赋值运算符算数运算符>移位预算内算符>关系运算符>位运算符>1.if分支语句：1.简单分支：2.阶梯分支：if（表达式1）{语句块1；}elseif{语句块2；}elseif{语句块3}else；{语句块4；}3.嵌套分支：if（表达式1）{if（表达式二）{if（表达式三）{语句一}}}else嵌套分支逻辑不太清晰，所以我们一般最多嵌套三到五层2.swi
zhoufuning1·2024-01-24 05:03

嵌入式—从入门到精通第六天

1.循环结构：1.while2.do..while3.for1.基本形式2.嵌套形式for（A;B;C）{D;for（E;F;G）{H;}}外层循环执行一次，里层循环执行一遍4.goto一般只有在出错处理时才会用到2.辅助控制语句：1.break跳出循环或者switch结构2.continue结束本次循环一个循环中拼比某几次循环可以使用continue3.return结束当前函数数组：1.一组类型
zhoufuning1·2024-01-24 05:03

嵌入式 从入门到精通 第七天

VMwareworkstation快捷命令yy：复制p：粘贴dd：剪切1常见排序方法：1.冒泡排序：设数组中有n个数外层需要进行i=n-1趟冒泡排序就可以将所有元素升序排列了j头文件
zhoufuning1·2024-01-24 05:30

(5)消息分发策略

在介绍kafka的分区策略之前，先看看几个简单的概念1.topic在kafka中，topic是一个存储消息的逻辑概念，可以认为是一个消息集合。每条消息发送到kafka集群的消息都有一个类别。
Mrsunup·2024-01-24 05:36

Storm和hadoop对比及storm组件

MR数分钟，数小时不会主动停止终于完成的时候storm优点：跨语言，可伸缩，低延迟，秒级容错核心概念：Tuple主要数据结构,有序元素的列表streamtuple的序列spouts数据流源头，可以读取kafka
smartjiang·2024-01-24 02:01

jmeter body data内容过多时卡住 (__FileToString节约你的生命)

参考：JmeterisnothandlinghugeJSONpayloadJmeter(二十三)-从入门到精通-JMeter函数-上篇（详解教程）jmeter有个bug，当bodydata栏里的内容太多时
duoyasong5907·2024-01-23 22:18

Kafka-服务端-API层

Handler线程属于Kafka的API层，Handler线程对请求的处理通过调用KafkaApis中的方法实现。
Andy技术支援·2024-01-23 21:29

Kafka-服务端-副本机制

Kafka从0.8版本开始引入副本(Replica)的机制，其目的是为了增加Kafka集群的高可用性。
Andy技术支援·2024-01-23 19:17

Kafka-服务端-KafkaController

Broker能够处理来自KafkaController的LeaderAndIsrRequest、StopReplicaRequest、UpdateMetadataRequest等请求。
Andy技术支援·2024-01-23 19:17

Kafka-服务端-网络层

Reactor模式Kafka网络层采用的是Reactor模式，是一种基于事件驱动的模式。熟悉Java编程应该了解JavaNIO提供了实现Reactor模式的API。
Andy技术支援·2024-01-23 19:16
上一页 21 22 23 24 25 26 27 28 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他