sarama

golang如何使用sarama访问kafka

https://www.jianshu.com/p/3102418e5a7dgolang如何使用sarama访问kafkagolang连接kafka有三种client认证方式：无认证TLS认证SASL/
wz998·2021-06-21 15:13

golang 函数返回chan类型的操作

在阅读kafka的golang客户端代码sarama-cluster时，遇到了如下一段代码：//Messagesreturnsthereadchannelforthemessagesthatarereturnedby
·2021-04-29 12:57

Hyperledger-Fabric源码分析（orderer-consensus-kafka）

Fabric的kafka交互用到了sarama包，有兴趣可以自行去研究下，这里就不展开了，还是focus在业务逻辑的部分。强烈建议在看这个之前或之后去看下这篇文章。
Pillar_Zhong·2021-04-17 19:12

[ERROR] sarama.NewSyncProducer error:kafka: client has run out of available brokers to talk to (Is y

[ERROR]sarama.NewSyncProducererror:kafka:clienthasrunoutofavailablebrokerstotalkto(Isyourclusterreachable
Hugo Lei·2020-11-27 10:27

golang实现java uuid的序列化方法

的序列化packagemainimport("encoding/binary""encoding/json""fmt""log""os""strings""time""github.com/Shopify/sarama
·2020-09-20 17:46

golang kafka客户端实现

最近在弄golang框架的事情，连接kafka，目前采用的是sarama进行连接，开发测试是ok的，但是考虑到在生产环境中使用。
0day__·2020-09-12 08:09

玩一玩 Golang 连接 kafka(单机)

的安装第三方库准备安装依赖库saramagogetgithub.com/Shopify/saramasarama-cluster依赖库（如果你需要的是集群模式）gogetgithub.com/bsm/sarama-cluster
半岛码农·2020-09-12 06:40

golang结合Kafka消息队列实践(二)

上次讲到kafka有个consumergroup的概念，而我们使用的sarama并没有支持，所以这次引入sarama-cluster项目:goget“github.com/bsm/sarama-cluster
jeffrey11223·2020-09-12 06:00

Golang学习篇—kafka压缩使用生产和消费

1.kafka使用依赖包"github.com/Shopify/sarama""github.com/bsm/sarama-cluster"2.kafka生产和消费端二次封装Common.gopackageXLKafkaimport"github.com
Word哥·2020-09-12 04:43

sarama架构

1.client创建producer或consumer时，都会创建一个client与之关联，client负责获取metadata信息，并且client会启动一个backgroundMetadataUpdater，定期获取metadata。client维护一个broker表，client在创建时，就连接到kafkabroker，并启动broker的responseReceiver，用于接收kafka
马客斯·2020-08-23 02:14

kafka简单示例

连接kafkapackagemainimport("fmt""github.com/Shopify/sarama"//v1.19.0)//基于sarama第三方库开发的kafkaclientfuncmain
CrazyDemo·2020-08-22 11:07

go语言日志收集系统--sarama,tail,config,logs库使用

sarama库--连接kafka把日志写入kafka从"github.com/Shopify/sarama"下载，windows系统不支持最新版本，所以需要用gomod方式下载1.19版本，不能用goget
薛定谔的饿猫·2020-08-14 04:40

golang 将kafka的offset置为最新

采用方案：1、创建consumer时将offset设置为最新import("github.com/Shopify/sarama"cluster"github.com
持成·2020-08-10 21:09

sarama-cluster消费者运行时报panic: non-positive interval for NewTicker

，照着例子运行customer代码如下:packagemainimport(_"flag""fmt""log""os""os/signal"_"syscall""github.com/Shopify/sarama
moliyiran·2020-08-10 18:08

go 操作kafka包 sarama 使用（示例）

go操作kafka包sarama使用（一）截止当前时间，github上golang操作kafka的包主要有两个：Shopify/saramastarts5.7kconfluentinc/confluent-kafka-gostarts2ksaram
luslin1711·2020-08-10 18:25

【GO】14.sarama lib实现kafka实例

Mac安装kafkaHomebrew安装brewinstallkafka安装会依赖zookeeper。注意：安装目录：/usr/local/Cellar/kafka/2.2.1安装的配置文件路径/usr/local/etc/kafka/server.properties/usr/local/etc/kafka/zookeeper.properties启动zookeeperzookeeper-ser
chen_peng7·2020-08-10 15:47

Golang - Kafka操作

写入packagemainimport("fmt""github.com/Shopify/sarama""os""time")funcmain(){config:=sarama.NewConfig()config.Producer.Return.Successes
暗黑程序员·2020-08-10 11:59

Golang zap框架应用(三)—— 按时间段存储日志

.将error及以上添加到error.log文件中4.将日志写入到kafka服务中4.按指定时间段记录日志下载：goget-ugo.uber.org/zapgogetgopkg.in/Shopify/sarama.v1gogetgithub.com
思维的深度·2020-08-10 10:03

golang kafka sarama 消费者组

之前用kafka，没在网上找到关于sarama消费者组的代码。后来才在源码里面找到例子，现在稍微修改了下代码，记录一下。
qq_1536161955·2020-08-10 10:10

golang kafka client

针对golang的kafkaclient有很多开源package，例如sarama,confluent等等。在使用sarama包时，高并发中偶尔遇到crash。
翔云123456·2020-08-10 09:14

golang用sarama连接kafka

连接这种方式我自己有个疑问分别在v2ex和GitHub上提了问题,如有知道的也请告知packagemainimport("fmt""log""os""os/signal""time""github.com/Shopify/sarama
cumt_TTR·2020-08-10 09:59

Golang kafka基础操作（转）

consumer.gopackagemainimport("fmt""github.com/Shopify/sarama"log""os""strings""sync")var(wgsync.WaitGrouplogger
flewliu·2020-08-10 08:17

go 读写kafka

kafka版：kafka_2.11-2.1.01）.准备安装依赖库saramagogetgithub.com/Shopify/sarama该库要求kafka版本在0.8及以上，支持kafka定义的high-levelAPI
jsyxcjw·2020-08-09 09:01

kafka长连接(golang)

kafkasarama提供producer及consumer相关客户端建立及使用，本文主要研究sarama如何保证客户端使用时的长连接。
小二黑嘿嘿·2020-08-07 18:58

kafka server: Tried to send a message to a replica that is not the leader for some partition. Your metadata is out of date

错误如标题:场景:k8s容器中通过go语言编写的sarama创建一个AsyncProducer错误原因查找1.通过放开sarama的日志(自己实现日志接口,重定义Logger)1.1sarama源码*/
龙&缘·2020-08-06 11:00

golang 函数返回chan类型

golang函数返回chan类型在阅读kafka的golang客户端代码sarama-cluster时，遇到了如下一段代码：//Messagesreturnsthereadchannelforthemessagesthatarereturnedby
CodeMechine·2020-08-04 21:19

Go module

我的源文件在src目录下，下载的第三方依赖也在src目录下，例如go-redis、go-sql-driver之前是用`gogetgithub.com/Shopify/sarama`命令下载第三方依赖，不能指定版本
要一直走下去·2020-07-09 18:00

panic: interface conversion: interface {} is nil, not chan *sarama.ProducerError

golangkafkasarama包时，遇到如下问题：高并发情况下使用同步syncproducer，偶尔遇到crash:panic:interfaceconversion:interface{}isnil,notchan*sarama.ProducerErrorgoroutine413
翔云123456·2020-07-09 08:48

关于golang接入Kafka消息队列的记录

总结一下用golang写的服务中接入kafka消息队列的记录和有用链接：golang有两个主流的kafkalib,sarama和confluent-kafka-go,在编译运行时均需要用到gcc。
聪米·2020-07-02 15:05

用go实现的kafka客户端，基于sarama和sarama-cluster

工作中需要将原先的消息队列替换成kafka，于是接触了基于go实现的sarama，又因为sarama不支持consumergroup，于是又使用了saramacluster，同时又希望尽量保证消费一次的语义
jeffrey11223·2020-07-02 05:31

Uber日志zap同时输出到Kafka，Console，文件(支持文件分隔，备份)

zap.LoggertypeLogKafkastruct{Producersarama.SyncProducerTopicstring}func(lk*LogKafka)Write(p[]byte)(nint,errerror){msg:=&sarama.ProducerMessage
hexiaoyun128·2020-07-02 02:25

sarama GoDoc 简译

引言：目前使用golang接入kafka，于是便用到了github.com/Shopify/sarama,一个kafka的golangclientlibrary,但官方doc中尚无中文版本，于是本人在这里捉襟见肘做一个简单地翻译
anteoy·2020-07-01 15:58

go saram 消费者调用逻辑

业务层：NewConsumer(client.mBrokers,group,topic,config)cluster-comsuer.go构造Consumer：consumer,err:=sarama.NewConsumerFromClient
yanerhao·2020-06-30 05:53

解决kafka consumer 无法从最新一条开始消费的问题

=cluster.NewConfig()config.Group.Mode=cluster.ConsumerModePartitionsconfig.Consumer.Offsets.Initial=sarama.OffsetNewest
不想再当程序猿·2020-06-30 02:24

golang如何使用sarama访问kafka

golang如何使用sarama访问kafkagolang连接kafka有三种client认证方式：无认证TLS认证SASL/PLAIN认证,(其他SASL/SCRAM,SASL/GSSAPI都不支持)
CodingCode·2020-02-24 15:09

Go操作kafka

saramaGo语言中连接kafka使用第三方库:github.com/Shopify/sarama。
俆俆·2020-02-08 23:00

go语言操作kafka

saramaGo语言中连接kafka使用第三方库:github.com/Shopify/sarama。下载及安装gogetgithub.com/Shopify/sarama注意事项s
Dr-wei·2019-10-26 11:00

Go操作kafka

目录一、sarama1.1下载及安装1.2注意事项二、连接kafka发送消息三、连接kafka消费消息更新、更全的《Go从入门到放弃》的更新网站，更有python、go、人工智能教学等着你：https:
咸鱼Chen·2019-09-13 19:00

Golang的Kafka 框架支持consumer group

golang的kafka框架有很多种，sarama是一种比较常用的，是用golang写的，但是不能支持consumergroup。
conggova·2019-07-26 11:09

kafka的go版本api介绍及使用示例

一、概述go语言版本的kafakaAPI，使用sarama和sarama-cluster包，支持offset追踪。生产和消费的过程，都是通过设置一个配置结构体开始的。
爱思考的实践者·2019-06-20 20:41

Golang中使用kafka

golang中比较好用的kafkaclient有saramaconfluent-kafka-gogo_kafka_clientoptiopay-kafkasiesta其中sarama的使用者应该是最多的
cl——cl·2019-03-02 20:00

golang kafka 2

packagemainimport("fmt""math/rand""os""strconv""strings""time""github.com/Shopify/sarama""github.com/
wz998·2019-01-28 18:19

golang如何使用sarama访问kafka

下面一个客户端代码例子访问kafka服务器，来发送和接受消息。使用方式1、命令行参数$./kafkaclient-hUsageof./client:-castringCACertificate(default"ca.pem")-certstringClientCertificate(default"cert.pem")-commandstringconsumer|producer(default"
CodingCode·2018-12-17 09:36

Go创建Kafka生产者和消费者

1.定义Producer和Consumer结构体typeProducerstruct{BrokerServersstring`json:"broker_servers"`Config*sarama.Config
fantasticMao·2018-12-05 21:09

golang中使用kafka

golang中比较好用的kafkaclient有saramaconfluent-kafka-gogo_kafka_clientoptiopay-kafkasiesta其中sarama的使用者应该是最多的
yandaren·2018-09-29 18:36

【go-kafka】go对接kafka安装配置

前言针对golang的kafkaclient有很多开源package，例如sarama,confluent等等。confluent-kafka-go，是kafka官网推荐的golangpackage。
梦流寒天·2018-07-02 23:17

Go连接Kafka

github.com/bsm/sarama-cluster”结合“github.com/Shopify/sarama”满足了此要求。并发量小时，可以用同步生产者，但是并发量大时，必须使用异步生产者。
dazheng·2016-11-01 13:39

sarama架构

1.client创建producer或consumer时，都会创建一个client与之关联，client负责获取metadata信息，并且client会启动一个backgroundMetadataUpdater，定期获取metadata。client维护一个broker表，client在创建时，就连接到kafkabroker，并启动broker的responseReceiver，用于接收kafka
mdj67887500·2015-12-25 19:00
上一页 1 2 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他