Confluent 第4页

postgres的一些资源汇总

dalibo.github.io/pgbadger/2，confluentinc/bottledwater-pgChangedatacapturefromPostgreSQLintoKafkahttp://blog.confluent.io

nagioswork·2020-07-27 20:34

centos 离线安装confluent_kafka 模块

centos离线安装confluent_kafka模块背景：需要安装Python模块的机子不能上网，只能下载源码进行安装说明：如果可以上网直接pipinstallconfluent_kafka即可需安装模块

marywang56·2020-07-16 03:24

kafka-streams faq

https://docs.confluent.io/current/streams/faq.htmlFAQAttentionWearelookingforfeedbackonAPIs,operators

xiao_jun_0820·2020-07-15 10:04

Kafka结合Avro、confluent进行序列化和反序列化

首先需要添加如下的依赖：org.apache.avroavro1.9.0org.apache.avroavro-tools1.9.0而confluent的相关包在maven上是找不到的。

渔闻520·2020-07-15 06:37

KafkaStreams介绍(二)

原文地址：https://docs.confluent.io/3.0.0/streams/index.html看了很多其他人翻译的文档，还是第一次翻译，有什么翻译的不好的地方还请指出。

Ransom0512·2020-07-14 21:34

KafkaStreams介绍

原文地址：https://docs.confluent.io/3.0.0/streams/index.html看了很多其他人翻译的文档，还是第一次翻译，有什么翻译的不好的地方还请指出。

艾欧尼亚归我了·2020-07-14 20:13

confluent community 体验

hub地址：https://www.confluent.io/hub/1.安装必须的软件：sudoyuminstallcurlwhich2.导入：sudorpm--importhttps://packages.confluent.io

vkingnew·2020-07-13 16:34

kafka删除主题数据和删除主题

kafka使用confluent-3.1.2删除的主题名：test1、删除主题在server.properties中增加设置，默认未开启delete.topic.enable=true删除主题命令/bin

forrest_ou·2020-07-13 04:52

用日志构建坚固的数据基础设施/为什么双写不好

1.备注本文译自https://www.confluent.io/blog/using-logs-to-build-a-solid-data-infrastructure-or-why-dual-writes-are-a-bad-idea

evandeng2009·2020-07-13 04:11

【译】调优Apache Kafka集群

该文从四个不同的目标出发给出了各自不同的参数配置，值得大家一读~原文地址请参考：https://www.confluent.io/blog/optimizing-apache-kafka-deployment

weixin_34138377·2020-07-12 09:11

Confluent Platform 的快速上手

先说下什么是Confluent?Confluent由ApacheKafka®的原始创建者创立的，以Kafka为技术核心的公司。

独家雨天·2020-07-12 03:37

Open Source 103：开源与云的商业碰撞

一个开源的键值对NoSQL数据库）MongoDB（MongoDB，一个开源的分布式文档NoSQL数据库）Confluent（ApacheKafka。

Linux技术·2020-07-12 01:23

kafka-connect-elasticsearch 的使用经验

>>>背景：最近在尝试将kafka的数据同步到elasticsearch中，这就用到了confluent的kafka-connect-elasticsearch套件了。

weixin_34138255·2020-07-10 08:06

kafka-connect安装使用

中的kafka，根据hdp版本找到对应的开源组件版本：hdp2.6.3—kafka0.10.1—kafka-connect0.10.1ConfluentOpenSource下载：https://www.confluent.io

ukakasu·2020-07-10 05:25

4个2020年开源的预言

预测1：云和开源之间的问题不会消失2019年，Confluent、Elastic和MongoDB等公司对

开源云中文社区·2020-07-09 18:05

kafka消息系统-Net下Confluent.Kafka 参数解释

在使用Confluent.Kafka消费数据的时候，有四个参数需要输入：{"group.id","test-consumer-group"},{"bootstrap.servers","localhost

多多岛的小火车·2020-07-09 02:22

07 Confluent_Kafka权威指南第七章：构建数据管道

文章目录CHAPTER7BuildingDataPipelines构建数据管道将数据集成到上下文ConsiderationsWhenBuildingDataPipelines构建数据管道时需要考虑的内容Timeliness时效性Reliability可靠性HighandVaryingThroughput高而多变的吞吐量DataFormats数据格式Transformations转换Security

冬天里的懒猫·2020-07-06 19:27

Kafka 的 Confluent Schema Registry安装与使用教程

聆听金生·2020-07-06 03:22

Kafka学习之路

虽然对于Kafka博客我一向坚持原创，不过这篇来自Confluent团队GwenShapira女士的博文实在精彩，所以还是翻译给大家，原文参见这里。~~~~~~~~~~~~

lkj41110·2020-07-05 03:18

关于golang接入Kafka消息队列的记录

总结一下用golang写的服务中接入kafka消息队列的记录和有用链接：golang有两个主流的kafkalib,sarama和confluent-kafka-go,在编译运行时均需要用到gcc。

聪米·2020-07-02 15:05

谷歌云“团战”亚马逊、AWS、阿里云、微软 Azure等

会上，谷歌公布了新伙伴的身份，Confluent，DataStax，Elastic，InfluxData

dengtan4987·2020-07-01 22:11

Kafka团队修改KSQL开源许可，怒怼云厂商

AI前线导读：今天，Confluent公司（为ApacheKafka开源软件提供商业化服务支持的初创公司，由Kafka的几位创立者离开LinkedIn后成立）联合创始人兼CEOJayKreps在Confluent

test 9·2020-07-01 21:50

04 Confluent_Kafka权威指南第四章： kafka消费者：从kafka读取数据

文章目录KafkaConsumers:ReadingDatafromKafkakafka消费者：从kafka读取数据KafkaConsumerConcepts消费者概念ConsumersandConsumerGroups消费者和消费者组ConsumerGroupsandPartitionRebalance消费者组和分区重平衡ChangestoHeartbeatBehaviorinRecentKaf

冬天里的懒猫·2020-07-01 17:06

Apache kafka是如何实现消息的精确一次（Exactly-once-semantics）语义的？

原文链接：https://www.confluent.io/blog/exactly-once-semantics-are-possible-heres-how-apache-kafka-does-it

码农无双·2020-07-01 03:02

Kafka 0.11.0.0 是如何实现 Exactly-once 语义的

Kafka0.11.0.0是如何实现Exactly-once语义的大数据之心关注2017.08.0514:42*字数5195阅读442评论0喜欢2原文地址：https://www.confluent.io

大数据技术实战·2020-07-01 00:22

基于Kafka Debezium Confluent实现MySql实时同步到ES

实现目标基于MySql的Binlog实现Mysql表实时同步到ES。实现方案1、总体技术方案基于Kafka的Connect技术。具体技术内容，不做介绍，网上有相关文章，本文章主要解决如何配置，因为网上大部分配置都是只能简单运行，只能插入，不能实现数据按照主键进行更新和删除同步的。2、基于debezium的MySqlConnector插件，完成Mysql同步到Kafka。此插件的机制与阿里的cana

zj007ok·2020-06-30 18:20

Kafka connect的offset commit机制

1.说明版本说明：Confluent：2.0.0Kafka：0.9.0.0准确的说，Kafkaconnector是一个双向的通道：kafka->target，对应任务称为SinkTask;source-

Quan.S·2020-06-30 00:44

以前，日志是我们的命脉，现在，日志是我们的责任！

Confluent的联合创始人、Kafka的联合创始人JayKreps写道：日志是从一开始就有的。日志只是按时间排序的一系列记录。

高效开发运维·2020-06-28 19:14

02 Confluent_Kafka权威指南第二章：安装kafka

文章目录CHAPTER2InstallingKafkakafka的安装配置FirstThingsFirstChoosinganOperatingSystemInstallingJavaInstallingZookeeperStandaloneServerZookeeperensemblezookeeper集合SizingYourZookeeperEnsembleInstallingaKafkaBr

冬天里的懒猫·2020-06-28 12:50

01 Confluent_Kafka权威指南第一章：初识kafka

文章目录CHAPTER1MeetKafka初识kafkaPublish/SubscribeMessaging发布/订阅消息HowItStarts如何开始IndividualQueueSystems单队列系统EnterKafka进入kafkaMessagesandBatches消息和批次Schemas(模式)BrokersandClusters(brokers和集群)MultipleClusters

冬天里的懒猫·2020-06-28 12:12

debezium+kafka实现mysql数据库的双向数据增量同步

一.部署前需要准备的东西jdk：1.8.0_181confluent：5.4.1debezium：1.1.0.Final修改数据库配置文件my.cnf或my.iniserver-id=11log-bin

lxs_only·2020-06-25 05:17

使用Kafka-Connector导数据

2、kafkaconnector-jdbc介绍link先安装kafka，然后下载confluent的包，默认这个安装包中已经包含了kafka、zookeeper等一些列kafka相关的东西。

星宫社·2020-06-24 12:13

设置Schema-Registry的配置，以支持Schema变化

笔者用confluent的schema-registry来实现Avro格式kafka消息的发送和接收。

码农无双·2020-06-24 11:26

Debezium for MySQL+Kafka+Confluent Schema Registry环境搭建

笔者用的软件信息如下：1.Kafka:kafka_2.11-2.0.0.tgz2.Confluent:confluent-oss-5.0.0-2.11.tar.gz3.Debezium:debezium-connector-mysql

码农无双·2020-06-24 11:26

KSQL介绍：面向Apache Kafka的开源Streaming SQL引擎

英文原文：https://www.confluent.io/blog/ksql-open-source-streaming-sql-for-apache-kafka/我非常高兴地宣布KSQL，这是面向ApacheKafka

Hadoop技术博文·2020-06-22 16:38

Debezium-实时同步MySQL到Kafka的环境搭建

1-软件信息1-Kafka:kafka_2.11-2.0.0.tgz2-Confluent:confluent-oss-5.0.0-2.11.tar.gz3-Debezium:debezium-connector-mysql

252619·2020-06-21 14:07

debezium获取mysql binlog通过kafka实现mysql同步

目标是实现mysql通过binlog的同步安装confluent下载地址地址解压tar-zxvfconfluent-5.1.2-2.11.tar.gz进入到confluent中快速启动ZooKeeper

ArchitectDream·2020-06-21 03:13

Kafka快速入门（十二）——Python客户端

Kafka快速入门（十二）——Python客户端一、confluent-kafka1、confluent-kafka简介confluent-kafka是Python模块，是对librdkafka的轻量级封装

天山老妖S·2020-06-14 21:05

Kafka快速入门（八）——Confluent Kafka简介

ConfluentKafka简介一、ConfluentKafka简介1、ConfluentKafka简介2014年，Kafka的创始人JayKreps、NahaNarkhede和饶军离开LinkedIn创立Confluent

天山老妖S·2020-05-27 21:11

Kafka核心API——Connect API

Confluent平台附带了几个内置connector，可以使用这些connector进行关系数据库或HDFS等常用系统到Kafka的数据传输，也是用来构建ETL的一种方案。

ZeroOne01·2020-05-26 17:11

Linkedin Camus，从Kafka到HDFS的数据传输管道

参考文章https://www.confluent.io/product/confluent-platform/http://blog.csdn.net/amghost/article/details/

晴天哥_374·2020-04-12 13:36

使用多数据中心部署来应对Kafka灾难恢复(一)

译者注：这篇文章翻译自https://www.confluent.io/blog/disaster-recovery-multi-datacenter-apache-kafka-deployments中提供的白皮书

扫帚的影子·2020-04-10 12:17

优化你的Apache Kafka部署

翻译自https://www.confluent.io/wp-content/uploads/Optimizing-Your-Apache-Kafka-Deployment-1.pdf前言Apachekafka

扫帚的影子·2020-04-09 09:32

Step by Step 实现基于 Cloudera 5.8.2 的企业级安全大数据平台 - Secured Kafka 整合 Schema Registry

几个概念SecuredKafka:经过Kerberos安全认证加固的Kafka集群，并且使用了自带的ACL功能；Confluent:一家专门围绕Kafk

大数据之心·2020-04-02 00:09

Pinot Realtime And ETL

Tracking:安装schemaregister:该服务用来注册pinot需要的scheme，这样所有需要schema的地方调用该服务即可.http://docs.confluent.io/1.0/installation.html

曹振华·2020-03-23 09:37

windows下使用confluent-kafka-go报错的问题

都说Go语言是跨平台的语言，不管是在linux还是windows都能进行开发，但在我开发的这一阵来，深深体会到了在windows下使用Go的一些开源库导致的各种问题，以下主要说下我在使用confluent-kafka-go

邵佳楠·2020-03-22 06:18

用Python连接kafka时出现ImportError:librdkafka.so.1:cannotopen shared object file:No such file or directory异常处理

用Python往kakfa读写数据,选择的是confluent-kafka0.9.4库,在fromconfluent_kafkaimportConsumer时报如下异常：应该是找不到动态链接库librdkafka.so

囧蛋·2020-03-11 14:45

Kafka在ASP.Net Core上的应用

imageASP.NetCore中使用的最多的是Confluent.Kafka这个包,以下用实例展示应用1.下载Nuget包首先是下载Confluent.Kafka这个包image2.创建Producer

WxhShine·2020-02-26 01:34

confluent jdbc connector - mysql

JDBCSourceConnectorQuickstart数据库环境准备CREATEDATABASEconnector;USEconnector;CREATETABLE`from_source`(`fdsid`int(11)NOTNULLAUTO_INCREMENT,`dsid`int(11)DEFAULTNULL,`from`int(11)DEFAULTNULL,`stype`int(11)DE

愚公300代·2020-02-18 08:37

BottledWater-PG安装部署

一前言BottledWater是Confluent公司开发的一款可以将postgresql数据库转换为kafkaevents的工具。

遥想公瑾当年·2020-02-15 12:45

推荐频道

Confluent