kafka消息队列golang

Kafka-服务端-KafkaController

Broker能够处理来自KafkaController的LeaderAndIsrRequest、StopReplicaRequest、UpdateMetadataRequest等请求。
Andy技术支援·2024-01-23 19:17

Kafka-服务端-网络层

Reactor模式Kafka网络层采用的是Reactor模式，是一种基于事件驱动的模式。熟悉Java编程应该了解JavaNIO提供了实现Reactor模式的API。
Andy技术支援·2024-01-23 19:16

消息队列面试系列-02

1.RabbitMQ实现消息持久化需要满足哪些条件？RabbitMQ要实现消息持久化，必须满足以下4个条件：1、投递消息的时候durable设置为true，消息持久化，代码：channel.queueDeclare(x,true,false,false,null)，第2个参数设置为true持久化；2、设置投递模式deliveryMode设置为2（持久），代码：channel.basicPublis
梦睡了·2024-01-23 19:29

消息队列面试系列-01

1.什么是消息队列？MQ全称为MessageQueue消息队列（MQ）是一种应用程序对应用程序的通信方法。消息队列中间件是分布式系统中重要的组件，主要解决应用耦合，异步消息，流量削锋等问题。
梦睡了·2024-01-23 19:28

算子：详细篇

目录一、执行环境1.1创建执行环境1.2执行模式二、源算子2.1从集合中读取数据2.2从文件读取数据2.3从socket读取数据2.4从kafka读取数据三、转换算子3.1基本转换算子（1）映射(map
莫噶·2024-01-23 18:29

报错Caused by: org.apache.kafka.common.errors.TimeoutException: Timeout of 60000ms expired before the

Exceptioninthread"main"org.apache.flink.runtime.client.JobExecutionException:Jobexecutionfailed.atorg.apache.flink.runtime.jobmaster.JobResult.toJobExecutionResult(JobResult.java:144)atorg.apache.flin
莫噶·2024-01-23 18:58

RabbitMQ

1.消息队列简介消息队列（MessageQueue，简称MQ），从字面意思上看，本质是个队列，FIFO先入先出，只不过队列中存放的内容是message而已。
愚人钊呀·2024-01-23 18:00

JVM系列-4.类加载器

作者简介：大家好，我是爱吃芝士的土豆倪，24届校招生Java选手，很高兴认识大家系列专栏：Spring原理、JUC原理、Kafka原理、分布式技术原理、数据库技术、JVM原理如果感觉博主的文章还不错的话
爱吃芝士的土豆倪·2024-01-23 18:24

如何选择和配置适合医院病历管理系统的MySQL版本？

专业做Java、Python、微信小程序、安卓、大数据、爬虫、Golang、大屏等实战项目。⛽⛽实战项目：有源码或者技术上的问题欢迎在评论区一起讨论交流！
计算机编程指导师·2024-01-23 17:31

深入解析Spring Boot与MySQL在医院信息管理系统中的应用

专业做Java、Python、微信小程序、安卓、大数据、爬虫、Golang、大屏等实战项目。⛽⛽实战项目：有源码或者技术上的问题欢迎在评论区一起讨论交流！
计算机编程指导师·2024-01-23 17:29

DataStream API(源算子)

目录源算子1，从集合中读取数据2，从文件读取数据3，从Socket读取数据4，从Kafka读取数据5，自定义源算子6，Flink支持的数据类型6.1Flink支持多种数据类型，包括但不限于：6.2对于POJO
佛系爱学习·2024-01-23 16:17

使用Flink处理Kafka中的数据

目录使用Flink处理Kafka中的数据前提：一，使用Flink消费Kafka中ProduceRecord主题的数据具体代码为（scala）执行结果二，使用Flink消费Kafka中ChangeRecord
佛系爱学习·2024-01-23 16:46

Flink编程——基础环境搭建

IDEA集群环境搭建本地模式安装步骤1：下载步骤2：启动集群步骤3：提交作业（Job）步骤4：停止集群总结准备环境搭建我们先把电脑的准备环境给安装好，这样后面才能顺利的学习和时间因为后面可能用到的有：Kafka
不二人生·2024-01-23 16:40

Pg批量更新数据产生的死锁问题

两个服务同时批量更新相同Pg表的相同记录时，产生如下错误：[2024-01-1809:17:52,172host:173.16.34.10ERRORalarm[org.springframework.kafka.KafkaListenerEndpointContainer
Pluto_CSND·2024-01-23 16:27

Spring Boot和Redis Geo实现附近的人【redis实战 三】

1.性能2.存储效率3.简化的操作和集成4.灵活性和可扩展性5.成本效益注意事项实战maven依赖controller实现前端页面实现效果图(实现))引言(redis实战)RedisList：打造高效消息队列的秘密
一只牛博·2024-01-23 15:52

Redis List：打造高效消息队列的秘密武器【redis实战 一】

欢迎来到我的博客，代码的世界里，每一行都是一个故事RedisList：打造高效消息队列的秘密武器前言RedisList简介List实现消息队列的优势优势：与专业消息队列的比较：实战maven依赖配置RedisConfiguration
一只牛博·2024-01-23 15:22

如何测试你的 Golang 代码

文章目录简单概述最易想到的方法一个快速体验案例学会使用gotesting测试的编写规则灵活记忆API的使用实践一个案例简洁紧凑的表组测试详细的日志输出灵活控制运行哪些测试总结参考不论是开源项目，还是日常程序的开发，测试都是必不可少的一个环节。今天我们开始进入Go测试模块testing的介绍。简单概述我们选择开源项目，通常会比较关注这个项目的测试用例编写的是否完善，一个优秀项目的测试一般写的不会差。
波罗学·2024-01-23 15:49

大型网站架构之分布式消息队列

大型网站架构之分布式消息队列以下是消息队列以下的大纲，本文主要介绍消息队列概述，消息队列应用场景和消息中间件示例（电商，日志系统）。
罗卜丝粉·2024-01-23 15:17

架构设计：消息队列之Kafka深度解析

Kafka是一种分布式的，基于发布/订阅的消息系统。主要设计目标如下：●以时间复杂度为O(1)的方式提供消息持久化能力，并保证即使对TB级以上数据也能保证常数时间的访问性能●高吞吐率。
弗语笑红尘·2024-01-23 15:47

大型网站架构系列：分布式消息队列

一、消息队列概述消息队列中间件是分布式系统中重要的组件，主要解决应用耦合，异步消息，流量削锋等问题。实现高性能，高可用，可伸缩和最终一致性架构。是大型分布式系统不可缺少的中间件。
lz0426001·2024-01-23 15:44

golang公众号菜单实现

https://github.com/bonly/exercise/blob/dccf193a401c386719b8dcd7440d1f3bb74cb693/2013/201308/20130829_wechat_menu.go#L118
爱折腾的小码农·2024-01-23 14:53

监控系统——Zabbix

Web界面ZabbixAgentZabbixProxyJavaGatewayZabbix6.0部署部署zabbix服务端添加zabbix客户端主机自定义监控内容监控指标系统方面：网站方面：数据库方面：消息队列方面
袁慕求玲·2024-01-23 14:49

消息队列之王——Kafka

Zookeeper在学习kafka之前，我们需要先学习Zookeeper，那Zookeeper是什么呢？Zookeeper是一个开源的分布式的，为分布式框架提供协调服务的Apache项目。
袁慕求玲·2024-01-23 14:17

Golang初学者的踩坑之旅

GOROOT与GOPATH重点说一下这个GOPATH，可以设置为任意路径，例如我设置为GOPATH=C:\Users\fan\go，然后在下面新建3个文件夹，pkg，src，bin，当你使用goget命令时，下载的package就会放到src目录下，一些可执行文件会放到bin目录下，例如一些工具。1.1bin目录下的一些可执行文件在不使用依赖管理工具的情况下，我们新建项目都需要放在src目录下，或
库洛琪·2024-01-23 14:33

使用DTS实现TiDB到GaiaDB数据迁移

1概览本文主要介绍通过DTS数据迁移功能，结合消息服务forKafka与TiDB数据库的Pump、Drainer组件，完成从TiDB迁移至百度智能云云原生数据库GaiaDB。
大数据和云计算技术·2024-01-23 14:06

Go后端开发 -- goroutine && channel

Go后端开发–goroutine&&channel文章目录Go后端开发--goroutine&&channel一、goroutine介绍1.协程的由来2.Golang对协程的处理3.协程并发4.Go并发
蝎子莱莱xo·2024-01-23 13:15

【Kafka】开发实战和Springboot集成kafka

目录消息的发送与接收生产者消费者SpringBoot集成kafka服务端参数配置消息的发送与接收生产者生产者主要的对象有：KafkaProducer，ProducerRecord。
Ethan-running·2024-01-23 13:23

Kafka——管理Kafka(命令行工具)详解

文章目录@[toc]管理Kafka1、主题操作（kafka-topic.sh）1.1、创建主题(–create)1.2、增加分区(–alter)1.3、减少分区数量(无)1.4、删除主题(–delete
Young丶·2024-01-23 13:21

使用Go进行HTTP性能优化

Go语言，也被称为Golang，是一种高效且强大的编程语言，特别适合构建高性能的Web应用程序。在处理HTTP请求时，通过一些优化技巧，可以显著提高应用程序的性能。
华科℡云·2024-01-23 13:50

Consumer源码解读

consumer初始化2、如何选举ConsumerLeader3、ConsumerLeader是如何制定分区方案4、Consumer如何拉取数据5、Consumer的自动偏移量提交Consumer初始化从KafkaConsumer
llp1110·2024-01-23 13:40

Producer源码解读

Producer源码解读在Kafka中,我们把产生消息的一方称为Producer即生产者,它是Kafka的核心组件之一,也是消息的来源所在。
llp1110·2024-01-23 13:09

Kafka集群与可靠性

Kafka集群与可靠性1.Kafka集群搭建实战使用两台Linux服务器：一台192.168.182.137一台192.168.182.138安装kafka首先，我们需要配置java环境变量（这里就略过了
llp1110·2024-01-23 13:39

SpringBoot整合Kafka

SpringBoot整合Kafka1.快速入门1.1引入依赖，搭建maven工程88UTF-8org.springframework.kafkaspring-kafka2.3.3.RELEASEorg.springframework.bootspring-boot-starter-jsonorg.springframework.bootspring-boot-starter-testtestorg
llp1110·2024-01-23 13:37

Zookeeper+Kafka集群

1Zookeeper1.1Zookeeper概述Zookeeper是一个开源的分布式的，为分布式框架提供协调服务的Apache项目。分布式系统管理框架，主要用来解决分布式应用集群中应用系统的一致性问题，想大于各种分布式应用的注册中心+文件系统+通知机制本质用于注册各种分布式应用，存储和管理这些分布式应用的元数据，如果应用或服务本身状态发生变化就会通知到客户端数据结构ZooKeeper数据模型的结构
王德发666·2024-01-23 12:25

利用Kafka的Assign模式实现超大群组（10万+）消息推送

本文主要是针对在线用户推送场景来进行总结和探讨：如何利用Kafka的Assign模式，解决百万级长链接海量消息的路由广播问题？如何解决超大聊天室成员（超过10万）的消息推送问题？
小何爆炸·2024-01-23 12:34

Golang bytes 包学习

常量变量函数funcCompare(a,b[]byte)intfuncContains(b,subslice[]byte)boolfuncContainsAny(b[]byte,charsstring)boolfuncContainsRune(b[]byte,rrune)boolfuncCount(s,sep[]byte)intfuncEqual(a,b[]byte)boolfuncEqualFo
白如意i·2024-01-23 12:51

Golang modules 使用

Golang1.11推出了modules机制来进行依赖管理。
白如意i·2024-01-23 12:21

RabbitMQ（不完整版）

文章目录RabbitMQ入门1.什么是MQ2.为什么要用MQ流量消峰应用解耦异步处理3.MQ的分类ActiveMQKafkaRocketMQRabbitMQ4.RabbitMQRabbitMQ的概念四大核心概念
凇:)·2024-01-23 12:46

大厂大数据面试题收录（1）

5.kafka组件熟悉吗,kafka如何实现消息的有序的？6.在大数据组件中，你们一般用的资源管理框架是哪个？7.那你能谈一下yarn的基础架构及调度流程吗？
后季暖·2024-01-23 11:49

部署Filebeat+Kafka+ELK 集群

目录Kafka概述为什么需要消息队列（MQ）使用消息队列的好处消息队列的两种模式Kafka定义Kafka简介Kafka的特性Kafka系统架构在zookeeper集群的基础上部署kafka集群部署zookeeper
GnaW1nT·2024-01-23 10:18

ELK分离式日志（2）

192.168.233.50）下载fliebeat：安装nginx后查看下日志文件：设置filebeat的主配置文件:关闭logstash，检测文件：在50节点上启动filebeat：访问页面：二.zookeeper+kafka
伍dLu·2024-01-23 10:46

日志平台搭建手册

执行命令：useraddelk#创建用户passwdelk#设置elk用户密码采用同样的方法创建用户zookeeper和kafka，这两个用户分别管理zookeep
萧十一郎君·2024-01-23 09:15

Kafka-服务端-日志存储

基本概念首先需要了解的是，Kafka使用日志文件的方式保存生产者发送的消息。每条消息都有一个offset值来表示它在分区中的偏移量，这个offset值是逻辑值，并不是消息实际存放的物理地址。
Andy技术支援·2024-01-23 08:33

Kafka-服务端-DelayedOperationPurgatory

DelayedOperationPurgatory的底层依赖于Kafka提供的时间轮实现。
Andy技术支援·2024-01-23 08:33

Kafka-消费者-KafkaConsumer分析总结

KafkaConsumer依赖SubscriptionState管理订阅的Topic集合和Partition的消费状态，通过ConsumerCoordinator与服务端的GroupCoordinator
Andy技术支援·2024-01-23 08:32

kafka（二）——常用命令

常用脚本kafka执行脚本默认在安装的bin目录下，本文中示例均基于bin目录执行。
却道天凉_好个秋·2024-01-23 08:32

kafka的基本使用--学习笔记

catalyst引擎作用：将SparkSql转换成sparkrdd任务提交进行计算解析器将sparksql代码解析成语法树(未解析的逻辑查询计划)分析器将语法树解析成解析后的逻辑查询计划对逻辑查询计划进行属性和关系关联检验优化器将解析后的逻辑查询计划进行优化,得到优化后的逻辑查询计划谓词下推(调整执行顺序)和列值裁剪(过滤列)执行器将优化后的逻辑查询计划转换成物理查询计划转换成RDD任务进行执行k
祈愿lucky·2024-01-23 08:32

Sqoop与Kafka的集成：实时数据导入

将Sqoop与Kafka集成是实现实时数据导入和流处理的关键步骤之一。Sqoop用于将数据从关系型数据库导入到Hadoop生态系统中，而Kafka则用于数据流的传输和处理。
晓之以理的喵~~·2024-01-23 08:01

Kafka（三）【Broker 存储】

目录前言KafkaBroker1、工作流程1.1、Zookeeper存储的Kafka信息1.2、KafkaBroker的总体工作流程1.3、Broke重要参数2、Kafka副本2.1、副本基本信息2.2
让线程再跑一会·2024-01-23 08:57

SpringBoot3.1.7集成Kafka和Kafka安装

一、背景我们在很多系统开发都需要用到消息中间件，目前来说Kafka凭借其优秀的性能，使得它的使用率已经是名列前茅了，所以今天我们将它应用到我们的系统二、版本选择在使用一个中间件一定要考虑版本的兼容性，否则后面会遇到很多问题
风萧萧兮s·2024-01-23 08:24
上一页 40 41 42 43 44 45 46 47 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他