librdkafka

如何将 Laravel 的日志推到 Kafka？

要求依赖要求php-rdkafka>=4.0.0依赖安装1.安装rdkafkagitclone--depth1https://github.com/edenhill/librdkafka.git/tmp
谢彪·2020-08-10 15:13

ArchLinux上安装librdkafka

ArchLinux上安装librdkafkaTableofContents1.下载github代码2.编译3.安装1下载github代码gitclonehttps://github.com/edenhill/librdkafka.git2
csfreebird·2020-08-10 10:49

c语言使用librdkafka库实现kafka的生产和消费实例

关于librdkafka库的介绍，可以参考kafka的c/c++高性能客户端librdkafka简介，本文使用librdkafka库来进行kafka的简单的生产、消费一、producerlibrdkafka
小麒麟666·2020-08-10 09:28

openwrt下编译librdkafka例程

主机系统：ubuntu14.04openwrt版本：CClibrdkafka版本：0.8.61，创建文件夹package/kafka_app在该文件夹下创建src文件夹和Makefile:##Toplevelmakefileforexampleapplication#include$(TOPDIR)/rules.mkPKG_NAME:=kafka_appPKG_VERSION:=1.0.0PKG_
caoshunxin01·2020-08-10 09:07

使用librdkafka的C++接口实现简单的生产者和消费者

一.编译librdkafka环境：Fedora20，32位依赖：pthreads（必选），zlib（可选），libssl-dev（可选），libsasl2-dev（可选）先查看自己的linux上是否安装了
灿哥哥·2020-08-10 09:07

移植库librdkafka到openwrt

1,建目录：feeds/packages/libs/librdkafka2，在该目录下创建Makefile:##Copyright(C)2011OpenWrt.org##Thisisfreesoftware
caoshunxin01·2020-08-10 09:07

AIX6.1下编译librdkafka

前置安装包首先需要安装g++环境，可参考我的上一篇博文AIX6.1安装g++安装mktemp，configure脚本需要rpm-ivhmktemp-1.7-1.aix5.1.ppc.rpm安装pythonrpm-ivhexpat-2.1.1-1.aix6.1.ppc.rpmrpm-ivhgdbm-1.10-1.aix6.1.ppc.rpmrpm-ivhreadline-6.1-2.aix6.1.p
blackocular·2020-08-10 09:58

linux C语言 SOCKET 服务器断开导致客户端SEND崩溃问题解决办法

原文来自：http://blog.chinaunix.net/uid-24830931-id-3786670.html一、现象描述在利用librdkafka同kafkabroker通信过程中，当kafkabroker
newsyoung1·2020-08-05 13:07

kafka文档（5）－－－－0.8.2－C/C++客户端介绍

文章源地址：https://github.com/edenhill/librdkafka/blob/master/INTRODUCTION.mdlibrdkafka是ApacheKafka客户端C语言的高性能实现
录事参军·2020-08-02 23:52

使用librdkafka作为producer (一)

github地址：https://github.com/edenhill/librdkafka使用librdkafka开发一个producer的步骤：librdkafka:1.conf设置kafkaconf
飞猪潜水·2020-07-31 23:07

librdkafka带鉴权认证访问kafka服务器

librdkafka简介librdkafka是用c语言实现的一个高性能的kafka客户端，因为性能强大，开发者们基于librdkafka开发了各种语言的kafka客户端，比如librdkafkad(c+
weixin_34007020·2020-07-28 18:18

kafka使用笔记-librdkafka支持sasl认证

由于业务需要，需要在librdkafka开源库的基础上增加SASL认证。相关的资料又比较少，特此记录，以便后用。本此librdkafka的使用时在windows平台，。
搬砖的小青年儿·2020-07-28 06:42

centos 离线安装confluent_kafka 模块

Python模块的机子不能上网，只能下载源码进行安装说明：如果可以上网直接pipinstallconfluent_kafka即可需安装模块：confluent_kafka#confluent_kafka依赖librdkafka
marywang56·2020-07-16 03:24

php-rdkafka 扩展安装

kafka一、php-rdkafka文档地址：https://arnaud-lb.github.io/php-rdkafka/phpdoc/book.rdkafka.htmlrdkafka安装需要依赖librdkafka
骑着大象去上班·2020-07-15 08:45

win10 Kafka环境搭建 + 编译C++(librdkafka) 封装库

前言：历时两天终于将kafka环境搭建好，并将librdkafka的库编译好，踩过很多坑，特在此记录以下。
jieshaoxiansen·2020-07-11 09:30

win10 vs2015 编译64位 librdkafka

1.ActivePerl安装下载地址https://www.activestate.com/products/activeperl/downloads/直接点击next安装，我下载的5.26，不知道为啥点next没反应，于是点repair安装的。安装完后cmd输入perl-version显示版本信息说明安装正确。2.openssl安装从官网下载就行https://oomake.com/downlo
tudou880306·2020-07-10 03:51

php安装rdkafka扩展

安装librdkafka安装配置Git在安装之前请先确定当前服务器是否安装git，如果已安装配置好git，请直接进入下一步骤。
皮老师·2020-07-07 22:24

Librdkafka对kafka topic的封装

上一节我们讲了librdkakfa对topic-partition的封装,任何一个partition都必须要属于一下topic;我们这节就来分析一上librdkafka对topic的封装rd_kafka_itopic_s
扫帚的影子·2020-07-02 07:23

Linux 安装kafka的库librdkafka

1、从GitHub上获取gitclonehttps://github.com/edenhill/librdkafka.git2、进入目录，cdlibrdkafka/sudo.
猫瑾·2020-06-28 21:10

C语言 librdkafka 简单分析生产、消费的实例

生产#include#include#include#includestaticvolatilesig_atomic_trun=1;/***@briefSignalterminationofprogram*/staticvoidstop(intsig){run=0;fclose(stdin);/*abortfgets()*/}staticvoiddr_msg_cb(rd_kafka_t*rk,co
猫瑾·2020-06-28 21:10

Nodejs Kafka lib安装的坑

准备开始用Kafka，直接用阿里的集群阿里的client是基于node-rdkafka稍微看了下，node-rdkafka直接是在librdkafka做了一层封装，应该效率不错，想起自己封的fastext
RaferYY·2020-06-27 11:09

使用kafka

并且kafka通过zookeeper来管理服务器和集群拓扑，相当于管理了kafka的各个节点组件，所以要使用kafka，是要搭配着zookeeper来使用的如何搭建1、安装kafka先安装安装librdkafka
有想法的工程师·2020-06-25 20:48

Mac 安装 kafka 消息队列

安装kafka#brewinstallkafka3、查看java版本#java-version4、查看安装的扩展列表#brewlist5、搜索kafka相关的库#brewsearchkafka6、安装librdkafka
SuperGu·2020-06-23 17:47

php安装rdkafka拓展

rdkafka版本1.0.0适用centos6wgethttps://github.com/edenhill/librdkafka/archive/v1.0.0.zipunzipunzipv1.0.0.
Sunny_Future·2020-06-22 05:48

Kafka快速入门（十二）——Python客户端

Kafka快速入门（十二）——Python客户端一、confluent-kafka1、confluent-kafka简介confluent-kafka是Python模块，是对librdkafka的轻量级封装
天山老妖S·2020-06-14 21:05

PHP操作Kafka：php-rdkafka扩展的安装

【相关文章】Linux下搭建Kafka服务1、安装librdkafka：librdkafka是ApacheKafka协议的C库实现，提供生产者、消费者和管理客户端。
李维山·2020-06-08 20:50

Kafka快速入门（九）——C客户端

Kafka快速入门（九）——C客户端一、Librdkafka简介1、librdkafka简介librdkafka是C语言实现的ApacheKafka的高性能客户端，提供C++接口。
天山老妖S·2020-06-06 20:35

windows下c++中使用kafka

kafka的c/c++的client有librdkafkakafka_cpp这个是笔者基于librdkafka封装的cpp库libkafkalibkafka-asiocsi-kafkalibasynckafkaclientkafka-cpp
yandaren·2020-04-14 06:47

Kafka(0.9.0.1) Offset重置工具

为什么要写这个小工具在之前的文章Kafka重置消费的Offset介绍过可以利用librdkafka来写一个重置offset的小工具;librdkafka有个小问题,在当前的版本里作者限制了提交最早的offset
扫帚的影子·2020-04-09 02:43

Librdkafka的基础数据结构 2 --- 定时器 原子操作与引用计数

Timer原子操作引用计数Timer所在文件:sr/rdkafka_timer.c(h)主要是通过TimerManager来管理多个timer,达到处理定时任务的效果TimerManager定义:typedefstructrd_kafka_timers_s{TAILQ_HEAD(,rd_kafka_timer_s)rkts_timers;structrd_kafka_s*rkts_rk;mtx_t
扫帚的影子·2020-03-27 10:20

用Python连接kafka时出现ImportError:librdkafka.so.1:cannotopen shared object file:No such file or directory异常处理

用Python往kakfa读写数据,选择的是confluent-kafka0.9.4库,在fromconfluent_kafkaimportConsumer时报如下异常：应该是找不到动态链接库librdkafka.so
囧蛋·2020-03-11 14:45

librdkafka 安装与使用

title:librdkafka安装与使用copyright:truedate:2019-05-2008:53:02categories:消息队列tags:kafka消息队列librdkafkaMQ安装
FrankYu·2020-03-03 07:15

Librdkafka对Kafka Message的封装和相关操作

structrd_kafka_message_tstructrd_kafka_msg_tstructrd_kafka_msgq_tkafkamessage的协议格式可参考官网structrd_kafka_message_s所在文件:src/rdkafka.h生产的数据在application层调用接口后最终会将数据封装成这个结构,从broker消费下来的数据回调给application层时也会封装
扫帚的影子·2020-02-29 01:15

c# rdkafka 设置偏移量(offset)

参考资料：librdkafka:如何设置Kafka消费者订阅消息的起始偏移位置领导要求kafka消费者端消费最新的数据。不知道怎么设置偏移量，查了资料。
大稳·杨·2020-01-09 17:00

Kafka学习笔记4--Kafka生产者的客户端（PHP）开发

PHP操作Kafka需要安装librdkafka库和kafka的PHP扩展。
鹿呦呦·2020-01-01 19:00

Librdkafka的操作处理队列

Librdkafka将与kafkabroker的交互,内部实现的一些操作,都封装成operator结构,然后放入操作处理队列里,统一处理;这个队列其实也是一个线程间通讯的管道;围绕这个队列的操作,是rdkafka
扫帚的影子·2019-11-06 18:45

Librdkafka的基础数据结构 3 -- Buffer相关 1

TemporarybufferBuffersegmentBufferBufferslice临时写入缓冲区所在文件:src/rdkafka_buf.h(c)写操作缓冲区,写入时保证了8位内存对齐,以便提高内存读取效率和跨平台的安全性;定义:typedefstructrd_tmpabuf_s{size_tsize;//buf即内部缓冲区容量size_tof;//当前写入位置char*buf;//内部缓
扫帚的影子·2019-11-04 17:06

Librdkafka的基础数据结构 1 --- 队列

Librdkafka用纯C写成,作者在CAPI基础上作了C++的简单封装;说到C,自然里面离不开大量的指针操作,内存操作,引用计数等等,作者一一为我们作了实现;基础数据结构里面也说到了很多,比如链表,各种队列
扫帚的影子·2019-11-01 19:24

Librdkafka用于kafka topic-partition的相关数据结构和操作

topic-partition是kafka分布式的精华,也是针对kafka进行生产或消费的最小单元;在这篇里我们开始介绍相关的数据结构内容如下:rd_kafka_topic_partition_trd_kafka_topic_partition_list_trd_kafka_toppar_srd_kafka_topic_partition_t所在文件:src/rdkafka.h定义了一个parti
扫帚的影子·2019-11-01 08:59

Ubuntu16.04安装php kafka扩展

一.安装librdkafkagitclonehttps://github.com/edenhill/librdkafka.gitcdlibrdkafka/.
dfwasds·2019-10-27 15:55

librdkafka和Broker版本兼容

摘自：https://github.com/edenhill/librdkafka/wiki/Broker-version-compatibility自从发布了0.8.0.0.0版本之后，librdkafka
fengyuzaitu·2019-08-08 16:22

Golang的Kafka 框架支持consumer group

confluent是一种，是调用c语言的库librdkafka，可以支持consumergroup。但是会麻烦一点，需要安装librdkafka。安装librdkafka先看官网上的一句话。
conggova·2019-07-26 11:09

php rdkafka 扩展安装

首先安装librdkafka依赖gitclonehttps://github.com/edenhill/librdkafka.gitcdlibrdkafka/.
cnazh·2018-12-24 18:44

ubuntu安装librdkafka以及libpcap

一.安装libpcap第一步，先安装GCC，一般都会自动安装sudoapt-getinstallbuild-essential第二步，GNUM4可以从此处ftp.gnu.org/gnu/m4/下载sudotar-zxvfm4-latest.tar.gzcdm4-1.4.17sudo./configuresudomakesudomakeinstall第三步，安装flexsudoapt-getinst
FunySunny·2018-11-17 20:06

librdkafka带鉴权认证访问kafka服务器

librdkafka简介librdkafka是用c语言实现的一个高性能的kafka客户端，因为性能强大，开发者们基于librdkafka开发了各种语言的kafka客户端，比如librdkafkad(c+
搬瓦工·2018-06-24 00:00

解决librdkafka 报WARN：Protocol read buffer underflow

https://github.com/edenhill/librdkafka/issues/1660RT，公司的kafka更换了版本，用到librdkafka的场景就开始报这条警告解决方式如下：在初始化的时候
shangluyi·2018-04-02 20:59

librdkafka配置

//@file官方地址https://github.com/edenhill/librdkafka/blob/v0.9.2/CONFIGURATION.md原文地址：https://blog.csdn.net
qq_31776303·2018-03-26 13:50

Linux下kafka之C/C++客户端库librdkafka的编译，安装以及函数介绍

一、安装librdkafka首先在github上下载librdkafka源码，解压后进行编译；cdlibrdkafka-masterchmod777configurelds-gen.py.
libaineu2004·2018-01-30 15:10

Librdkafka对Kafka Metadata的封装和操作

我们在之前的Kafka源码分析系列中介绍过kafka集群的metadata,大家可以参考一下;简单说,kafka集群的metadata包括:所有broker的信息:ip和port;所有topic的信息:topicname,partition数量,每个partition的leader,isr,replica集合等kafka集群的每一台broker都缓存了整个集群的metadata,当broker或某
扫帚的影子·2018-01-27 11:29

Librdkafka的各种task处理

上一节我们介绍了Librdkafka中的任务处理队列的相关操作,这一节我们介绍一下放入这个队列中的各种任务(也可以叫event,也可以叫operator),也就是各种不同类型的operator具体的op
扫帚的影子·2018-01-09 11:20
上一页 1 2 3 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他