3.0.0 第9页

Kafka3.0.0版本——消费者（Range分区分配策略以及再平衡）

目录一、Range分区分配策略原理1.1、Range分区分配策略原理的示例一1.2、Range分区分配策略原理的示例二1.3、Range分区分配策略原理的示例注意事项二、Range分区分配策略代码案例2.1、创建带有4个分区的fiveTopic主题2.2、创建三个消费者组成消费者组2.3、创建生产者2.4、测试2.5、Range分区分配策略代码案例说明三、Range分区分配再平衡案例3.1、停止某

小志的博客·2023-09-10 06:29

Kafka3.0.0版本——消费者（RoundRobin分区分配策略以及再平衡）

目录一、RoundRobin分区分配策略原理二、RoundRobin分区分配策略代码案例2.1、创建带有7个分区的sixTopic主题2.3、创建三个消费者组成消费者组2.3、创建生产者2.4、测试2.5、RoundRobin分区分配策略代码案例说明三、RoundRobin分区分配再平衡案例3.1、停止某一个消费者后，（45s以内）重新发送消息示例3.2、停止某一个消费者后，（45s以后）重新发送

小志的博客·2023-09-10 06:13

Kafka3.0.0版本——消费者（消费者组原理）

目录一、消费者组原理1.1、消费者组概述1.2、消费者组图解示例1.3、消费者组注意事项一、消费者组原理1.1、消费者组概述ConsumerGroup（CG）：消费者组，由多个consumer组成。形成一个消费者组的条件，是所有消费者的groupid相同。注意：（1）、消费者组内每个消费者负责消费不同分区的数据，一个分区只能由一个组内消费者消费。（2）、消费者组之间互不影响。所有的消费者都属于某个

小志的博客·2023-09-08 21:20

Kafka3.0.0版本——消费者（消费者组详细消费流程图解及消费者重要参数）

目录一、消费者组详细消费流程图解二、消费者的重要参数一、消费者组详细消费流程图解创建一个消费者网络连接客户端，主要用于与kafka集群进行交互，如下图所示：调用sendFetches发送消费请求，如下图所示：(1)、Fetch.min.bytes每批次最小抓取大小，默认1字节(2)、fetch.max.wait.ms一批数据最小值未达到的超时时间，默认500ms(3)、Fetch.max.byte

小志的博客·2023-09-08 15:45

Kafka3.0.0版本——消费者（独立消费者消费某一个主题数据案例__订阅主题）

目录一、独立消费者消费某一个主题数据案例1.1、案例需求1.2、案例代码1.3、测试一、独立消费者消费某一个主题数据案例1.1、案例需求创建一个独立消费者，消费firstTopic主题中数据，所下图所示：注意：在消费者API代码中必须配置消费者组id。命令行启动消费者不填写消费者组id会被自动填写随机的消费者组id。1.2、案例代码代码packagecom.xz.kafka.consumer;im

小志的博客·2023-09-08 12:42

Kafka3.0.0版本——消费者（独立消费者消费某一个主题中某个分区数据案例__订阅分区）

目录一、独立消费者消费某一个主题中某个分区数据案例1.1、案例需求1.2、案例代码1.3、测试一、独立消费者消费某一个主题中某个分区数据案例1.1、案例需求创建一个独立消费者，消费firstTopic主题0号分区的数据，所下图所示：1.2、案例代码生产者往firstTopic主题0号分区发送数据代码packagecom.xz.kafka.producer;importorg.apache.kafk

小志的博客·2023-09-08 09:57

Kafka3.0.0版本——消费者（消费者组案例）

目录一、消费者组案例1.1、案例需求1.2、案例代码1.2.1、消费者1代码1.2.2、消费者2代码1.2.3、消费者3代码1.2.4、生产者代码1.3、测试一、消费者组案例1.1、案例需求测试同一个主题的分区数据，只能由一个消费者组中的一个消费。如下图所示：1.2、案例代码复制一份基础消费者的代码，在IDEA中同时启动，即可启动同一个消费者组中的两个消费者。1.2.1、消费者1代码代码packa

小志的博客·2023-09-08 09:55

一百七十二、Flume——Flume采集Kafka数据写入HDFS中（亲测有效、附截图）

目的作为日志采集工具Flume，它在项目中最常见的就是采集Kafka中的数据然后写入HDFS或者HBase中，这里就是用flume采集Kafka的数据导入HDFS中二、各工具版本（一）Kafkakafka_2.13-3.0.0

天地风雷水火山泽·2023-09-08 06:03

Kafka3.0.0版本——消费者（消费者总体工作流程图解）

一、消费者总体工作流程图解角色划分：生产者、zookeeper、kafka集群、消费者、消费者组。如下图所示:生产者发送消息给leader，followerr主动从leader同步数据，一个消费者可以消费某一个分区数据或者一个消费者可以消费多个分区数据。如下图所示:每个分区的数据只能由消费者组中一个消费者消费。如下图所示:每个消费者的offset由消费者提交到系统主题保存。如下图所示:

小志的博客·2023-09-08 01:00

Kafka3.0.0版本——增加副本因子

目录一、服务器信息二、启动zookeeper和kafka集群2.1、先启动zookeeper集群2.2、再启动kafka集群三、增加副本因子3.1、增加副本因子的概述3.2、增加副本因子的示例3.2.1、创建topic(主题)3.2.2、手动增加副本存储一、服务器信息四台服务器原始服务器名称原始服务器ip节点centos7虚拟机1192.168.136.27broker0centos7虚拟机219

小志的博客·2023-09-07 11:35

CVE-2023-20883 拒绝服务攻击

在SpringBoot版本3.0.0-3.0.6、2.7.0-2.7.11、2.6.0-2.6.14、2.5.0-2.5.14和不受支持的旧版本中，如果将SpringMVC与反向代理缓存一起使用，则可能会发生拒绝服务

墨语wcy·2023-09-07 11:02

Kafka3.0.0版本——文件存储机制

这里写木目录标题一、Topic数据的存储机制1.1、Topic数据的存储机制的概述1.2、Topic数据的存储机制的图解1.3、Topic数据的存储机制的文件解释二、Topic数据的存储位置示例一、Topic数据的存储机制1.1、Topic数据的存储机制的概述Topic是逻辑上的概念，而partition是物理上的概念。每个partition对应于一个log文件，该log文件中存储的就是Produ

小志的博客·2023-09-07 06:51

Kafka3.0.0版本——文件清理策略

目录一、文件清理策略1.1、文件清理策略的概述1.2、文件清理策略的官方文档1.3、日志超过了设置的时间如何处理1.3.1、delete日志删除（将过期数据删除）1.3.2、compact日志压缩一、文件清理策略1.1、文件清理策略的概述Kafka中默认的日志保存时间为7天，可以通过调整如下参数修改保存时间。参数解释log.retention.hours小时，最低优先级（默认7天）log.rete

小志的博客·2023-09-07 03:55

swagger 3.0.0 集成 springboot 2.6+ 生成doc.html 和swagger-ui

1.项目中引入pom.xml依赖3.0.03.0.3io.springfoxspringfox-swagger2${swagger.version}io.springfoxspringfox-swagger-ui${swagger.version}io.springfoxspringfox-boot-starter${swagger.version}com.github.xiaoyminknife

哈喽，树先生·2023-09-07 02:41

OpenSSL 3.0.0 设计（五）｜遗留问题、遗留 Provider 模块、ENGINE API

译｜王祖熙（花名：金九)蚂蚁集团开发工程师负责国产化密码库Tongsuo的开发和维护专注于密码学、高性能网络、网络安全等领域本文2179字阅读6分钟本文翻译OpenSSL官网文档：https://www.openssl.org/docs/OpenSSL300Design.htmlTongsuo-8.4.0是基于OpenSSL-3.0.3开发，所以本文对Tongsuo开发者同样适用，内容丰富，值得一

·2023-09-06 10:38

observer debugger 启动不了； erlang R17

Couldnotfind'wxe_driver.so'in:/usr/local/lib/erlang/lib/wx-1.3/privwx没装好http://sourceforge.net/projects/wxwindows/files/3.0.0

sdsabc2000·2023-09-06 04:34

Hadoop下载与安装

第一步:前期需要准备的材料:①Hadoop-3.0.0下载从http://archive.apache.org/dist/hadoop/core/下载Hadoop-3.0.0，下载二进制压缩包文件：hadoop

tonglanfang·2023-09-06 01:25

微信小程序添加用户授权《隐私保护协议》

小程序公众平台---设置---服务内容声明---用户隐私保护指引（提交审核时，也会检测是否采集用户隐私，有用到隐私接口的话需要添加哦）微信小程序添加隐私保护协议弹框（基础库需在3.0.0以上）1、app

努力学习~冲鸭·2023-09-05 21:45

Hive-3.0.0完全分布式部署

前置条件需要安装好了jdk环境、mysql、以及全分布的Hadoop集群一、安装将安装包解压到/opt目录下tar-zxfapache-hive-3.0.0-bin.tar.gz-C/opt配置环境变量

bigdata-rookie·2023-09-05 20:49

Android studio 实现生成二维码和扫描二维码

'implementation'com.journeyapps:zxing-android-embedded:3.6.0'implementation'com.google.zxing:javase:3.0.0

运气真不错！·2023-09-03 15:21

GmSSL-3.0.0国密支持的验证笔记

GmSSL-3.0.0国密支持的验证笔记github上直接下源码编译github上的tag只有3.0.0和3.1.1两个版本GmSSL-3.1.1ubuntu18.04上直接编译报错，放弃了。

跃龙客·2023-09-02 11:44

Spark连接Hive读取数据

#系统环境Ubuntu16.04LTS#镜像文件ubuntu-16.04.6-desktop-i386.iso#软件依赖（链接提取码：6666）spark-3.0.0-bin-without-hadoop.tgzhadoop

YHT29·2023-09-02 11:46

Java使用pdfbox将pdf转图片

两种我都尝试了下，icepdf解析出来有时候会出现中文显示不出来，网上的解决方式又特别麻烦，不是安装字体，就是重写底层类，所以我选择了pdfbox添加依赖org.apache.pdfboxpdfbox3.0.0

qq243920161·2023-09-02 05:37

Jenkins发布jar包到nexus私服报Return code 400 ReasonPhrase Bad Request

问题描述开发通过jenkins发布jar包到nexus私服，报如下错误：[ERROR]Failedtoexecutegoalorg.apache.maven.plugins:maven-deploy-plugin:3.0.0

freflying1119·2023-08-31 11:29

RxJava 操作符

rxjavarxandroidimplementation"io.reactivex.rxjava3:rxjava:3.1.3"implementation"io.reactivex.rxjava3:rxandroid:3.0.0

简单不一定不好·2023-08-31 08:50

Apache Kafka分布式流处理平台及大厂面试宝典v3.0.0

概述**本人博客网站**IT小神www.itxiaoshen.com定义ApacheKafka官网地址http://kafka.apache.org/最新版本为3.0.0ApacheKafka是一个开源的分布式事件流平台

IT小神·2023-08-30 16:50

Kafka3.0.0版本——Follower故障处理细节原理

目录一、服务器信息二、服务器基本信息及相关概念2.1、服务器基本信息2.2、LEO的概念2.3、HW的概念三、Follower故障处理细节一、服务器信息三台服务器原始服务器名称原始服务器ip节点centos7虚拟机1192.168.136.27broker0centos7虚拟机2192.168.136.28broker1centos7虚拟机3192.168.136.29broker2二、服务器基本

小志的博客·2023-08-30 16:49

Kafka3.0.0版本——手动调整分区副本示例

目录一、服务器信息二、启动zookeeper和kafka集群2.1、先启动zookeeper集群2.2、再启动kafka集群三、手动调整分区副本3.1、手动调整分区副本的前提条件3.2、手动调整分区副本的示例需求3.3、手动调整分区副本的示例一、服务器信息四台服务器原始服务器名称原始服务器ip节点centos7虚拟机1192.168.136.27broker0centos7虚拟机2192.168.

小志的博客·2023-08-30 14:44

OpenSSL 3.0.0 设计（四）｜代码维护、FIPS 测试

译｜王祖熙（花名：金九)蚂蚁集团开发工程师负责国产化密码库Tongsuo的开发和维护专注于密码学、高性能网络、网络安全等领域本文2862字阅读8分钟本文翻译OpenSSL官网文档：https://www.openssl.org/docs/OpenSSL300Design.htmlTongsuo-8.4.0是基于OpenSSL-3.0.3开发，所以本文对Tongsuo开发者同样适用，内容丰富，值得一

·2023-08-30 11:47

JS -RSA 明文加密--用户密码加密

1配置文件引入加密包package.json"jsencrypt":"^3.0.0-rc.1",2加密公钥配置import{JSEncrypt}from'jsencrypt'importrequestfrom

咖猫·2023-08-30 11:40

itext7 +thymeleaf实现html转pdf, 模板动态填值，解决linux环境兼容问题

1.导入需要使用的包com.itextpdfhtml2pdf3.0.0org.thymeleafthymeleaf3.0.11.RELEASE2.转行工具类packagecom.example.demo.controller

晨曦话java·2023-08-30 07:24

Kafka3.0.0版本——Leader故障处理细节原理

目录一、服务器信息二、服务器基本信息及相关概念2.1、服务器基本信息2.2、LEO的概念2.3、HW的概念三、Leader故障处理细节一、服务器信息三台服务器原始服务器名称原始服务器ip节点centos7虚拟机1192.168.136.27broker0centos7虚拟机2192.168.136.28broker1centos7虚拟机3192.168.136.29broker2二、服务器基本信息

小志的博客·2023-08-30 07:02

flutter高德地图大头针

1、效果图2、pubget#地图定位amap_flutter_map:^3.0.0amap_flutter_location:^3.0.03、上代码import'dart:async';import'dart

邵神仙·2023-08-30 06:06

Kafka3.0.0版本——Leader Partition自动平衡

目录一、LeaderPartition自动平衡的概述二、LeaderPartition自动平衡的相关配置参数三、LeaderPartition自动平衡的示例一、LeaderPartition自动平衡的概述正常情况下，Kafka本身会自动把LeaderPartition均匀分散在各个机器上，来保证每台机器的读写吞吐量都是均匀的。但是如果某些broker宕机，会导致LeaderPartition过于集

小志的博客·2023-08-30 02:29

安装google后找不到google包的问题解决

sentencepiece时其引用依然找不到google包问题原因首先确定，在对应的环境下面使用pip命令安装的包是装在对应的conda虚拟环境里面的，使用condalist命令可以找到此环境下所有的包：google3.0.0pypi

masteryi-0018·2023-08-29 21:23

SpringBoot v2.7.x+ 整合Swagger3入坑记？

目录一、依赖二、集成SwaggerJavaConfig三、配置完毕四、解决方案彩蛋想尝鲜，坑也多，一起入个坑~一、依赖SpringBoot版本：2.7.14Swagger版本：3.0.0com.github.xiaoyminknife4j-spring-boot-starter3.0.3io.springfoxspringfox-boot-starter3.0.0

流沙QS·2023-08-29 17:05

基于kraft组建kafka集群(3.0.0)

kafka自带的维护方式来通信准备：三台服务器：我买的是三台腾讯云，而且是不同机房的腾讯云，所以要在各个机器的安全组中设置所有端口对对方开放才能进行通信；kafka安装包：版本为kafka_2.12-3.0.0

Holdenxiao·2023-08-29 05:39

XCode14创建的项目 pod init或pod install报错

――――――――――――――――――――――――――――――――――――――――――――――――――――――###Command```/Users/xinhualong/.rvm/gems/ruby-3.0.0

只写干货不写文章·2023-08-28 18:44

springboot配置swagger3-springfox实现

概述springfox之前配置需要声明多个依赖，到了3直接声明一个starter就行了.springboot版本2.7.7springfox-boot-starter版本3.0.0配置声明依赖io.springfoxspringfox-boot-starter3.0.0

好大的月亮·2023-08-27 14:44

Flutter 版本更新和 dart SDK版本跟新

ThecurrentDartSDKversionis2.19.5.Becausepivot_chatrequiresSDKversion>=3.0.0<4.0.0,versionsolvingfailed.pubgetfailedcommand

wniuniu_·2023-08-27 13:47

QT通过ODBC连接GBase 8s数据库（Windows）示例

示例环境：操作系统：Windows1064位数据库及CSDK版本：GBase8sV8.8_3.0.0_164位QT：5.12.064位1，CSDK安装及ODBC配置1.1，免安装版CSDK下载免安装版的

liaosnet·2023-08-27 03:36

Nexus2迁移升级到Nexus3

旧版本升级流程3.1.0或更高版本升级到最新3.x版本3.0.0到3.0.2学习3.1.0中引入的重要目录布局升级到最新3.x版本最新

小日子呀·2023-08-26 20:40

hive3.1.4源码编译兼容spark3.0.0 hive on spark hadoop3.x修改源码依赖步骤详细

使用hive3.1.2和spark3.0.0配置hiveonspark的时候，发现官方下载的hive3.1.2和spark3.0.0不兼容，hive3.1.2对应的版本是spark2.3.0，而spark3.0.0

薛定谔的猫不吃猫粮·2023-08-26 09:49

flutter权限管理

添加依赖#权限permission_handler:^3.0.0使用在android的mainfest中添加权限:然后在代码中请求:import'package:permission_handler/permission_handler.dart

深圳一匹狼·2023-08-26 05:53

基于 Alpine 环境源码构建 alibaba-tengine（阿里巴巴）的 Docker 镜像

说明：此处以alpine3.18.3&tengine3.0.0为实验进行容器镜像构建。1.1、Alpine系统特点小巧：基于Musllibc和busyb

ChaITSimpleLove·2023-08-23 19:53

Spring Boot整合Swagger3注解@ApiImplicitParam的allowMultiple属性

SpringBoot整合Swagger3的依赖版本为：io.springfoxspringfox-boot-starter3.0.0注解@ApiImplicitParam的allowMultiple属性表示该请求参数允许多个

y_bccl27·2023-08-23 05:06

Spring Boot整合Swagger3配置全局Token

SpringBoot整合Swagger3的依赖版本为：io.springfoxspringfox-boot-starter3.0.0第一种：全局的Auth认证方式（推荐