消息队列--kafka

clickhouse之表引擎

对于ck来说,目前位置包含了以下部分引擎:1.集成外部系统的表引擎,支持方式有kafka,JDBC,ODBC,HDFS等2.合并树家族(最为常用且重要)3.日志
落花流水i·2024-02-11 22:53

使用clickhouse kafka表引擎消费kafka写入clickhouse

系列文章目录1：seatunnel消费kafka数据写入clickhouse文章目录系列文章目录文章目录前言1.创建kafka引擎表2.创建clickhouseMergeTree表3.创建kafka物化视图写入结构表三
冰帆<·2024-02-11 22:22

【OrangePi Zero2 智能家居】阿里云人脸识别方案

一、接入阿里云二、C语言调用阿里云人脸识别接口三、SystemV消息队列和POSIX消息队列一、接入阿里云在之前树莓派的人脸识别方案采用了翔云平台的方案去1V1上传比对两张人脸比对，这种方案是可行，可以继续采用
咖喱年糕·2024-02-11 21:22

浏览器渲染原理

浏览器是如何渲染页面的当浏览器的网络线程收到HTML文档后，会产生一个渲染任务，并将其传递给渲染主线程的消息队列。在事件循环机制下，渲染主线程取出消息队列中的渲染任务，开启渲染流程。
·2024-02-11 19:49

SpringCloud微服务实战——搭建企业级开发框架（三十六）：使用Spring Cloud Stream实现消息中间件功能

  在以往消息队列的使用中，我们通常使用集成消息中间件开源包来实现对应功能，而消息中间件的实现又有多种，比如目前比较主流的ActiveMQ、RocketMQ、RabbitMQ、Kafka，Stream等
·2024-02-11 17:42

CVE初探之漏洞反弹Shell（CVE-2019-6250）

概述ZMQ(ZeroMessageQueue)是一种基于消息队列得多线程网络库，C++编写，可以使得Socket编程更加简单高效。
·2024-02-11 17:39

干货|为什么Kafka不支持读写分离

在Kafka中，生产者写入消息、消费者读取消息的操作都是与leader副本进行交互的，从而实现的是一种主写主读的生产消费模型。
Java机械师·2024-02-11 15:13

2.10日学习打卡----初学RocketMQ（一）

2.10日学习打卡对于MQ(Messagequeue)消息队列的一些解释可以看我原来写的文章初学RabbitMQ各大MQ产品比较一.RocketMQ概述发展历程RocketMQ概念术语生产者和消费者生产者负责生产消息
中北萌新程序员·2024-02-11 14:50

Kafka概念和基本架构

1、Kafka介绍Kafka是最初由Linkedin公司开发，是一个分布式、分区的、多副本的、多生产者、多订阅者，基于zookeeper协调的分布式日志系统（也可以当做MQ系统），常见可以用于web/nginx
悠然予夏·2024-02-11 12:38

kafka基础概念分享

一、目录1、MQ基础概念2、Kafka数据存储设计3、Kafka生产者设计4、Kafka消费者设计5、Kafka提交与移位6、Kafka消息保留策略二、MQ概念MQ是messagequeue,消息队列，
小豆腐和小豆浆·2024-02-11 12:38

kafka学习之基本概念

一、kafka常用基本概念producer：生产者，生产并发送消息的一方。consumer：消费者，接收消费消息的一方。topic：一类消息的集合。
侧身左睡·2024-02-11 12:08

Kafka概念类总结

Kafka概念类总结一、kafka定义二、优缺点优点缺点三kafka名词四consumer和topic五Kafka存储结构六Producer分区partition策略七Consumer消费方式partition
吃再多糖也不长胖·2024-02-11 12:38

kafka基本概念

绪论Kafka是由Apache软件基金会开发的一个开源流处理平台，由Scala和Java编写。
L.S.V.·2024-02-11 12:38

Elasticearch和Kafka概念对比

1、概念对比kafka集群包含多个broker，每个broker都是一个kafka实例。每个服务器会有多个broker，我们暂且认为每个服务器包含一个broker。
Yisnow.·2024-02-11 12:37

Kafka概念与安装

一、概念1.kafka主要由Producer、KafkaCluster、Consumer三部分构成2.KafkaCluster一般由多个服务器组成（至少需要2N+1，N>0），每个服务器有一个唯一的broker.id
35s·2024-02-11 12:37

kafka概念详述

【一】kafka基本概述具有发布和订阅消息流，以容错的方式记录消息流，以文件的方式来存储消息流，可以在消息发布的时候进行处理。
种棵红黑树·2024-02-11 12:37

kafka基础概念

简介Kafka是一个分布式、支持分区的（partition）、多副本的（replication）的基于发布/订阅模式的消息队列，主要应用于大数据实时处理领域。
大河院开心鸭·2024-02-11 12:37

Kafka概念图

盗一张图：取自：https://sookocheff.com/post/kafka/kafka-in-a-nutshell/
豪豪君在此·2024-02-11 12:07

Kafka 概念，安装，常用命令（一）

1、什么是KafkaKafka可以看成一个流平台，这个平台上可以发布和订阅数据流，并把他们保存起来，进行处理。
响彻天堂丶·2024-02-11 12:06

Kafka

第一章：Kafka的概述1.1、kafka是一个分布式的基于发布/订阅模型的消息队列，主要用于大数据实时处理领域。
小白鼠捉大猫咪·2024-02-11 12:06

Java面试题之：Kafka 概念

Java面试题之：Kafka概念Kafka概念Kafka概念  Kafka是一种高吞吐量、分布式、基于发布/订阅的消息系统，最初由LinkedIn公司开发，使用Scala语言编写，目前是Apache的开源项目
faramita_of_mine·2024-02-11 12:06

kafka的概念

它是Kafka中用于组织和存储消息的基本单元。一个Topic可以被看作是一个消息发布的地方，生产者将消息发布到一个特定的Topic，而消费者则订阅一个或多个Topic以接收消息。
可爱的小小小狼·2024-02-11 12:35

离线数仓（一）【数仓概念、需求架构】

前言今天开始学习数仓的内容，之前花费一年半的时间已经学完了Hadoop、Hive、Zookeeper、Spark、HBase、Flume、Sqoop、Kafka、Flink等基础组件。
让线程再跑一会·2024-02-11 11:58

使用 Kafka 和 MongoDB 进行 Go 异步处理

我还添加了Kafka为消息层服务，这样微服务就可以异步处理它自己关心的东西了。下面是这个使用了两个微服务的简单的异步处理示例的上层架构图。
跨过山河大海·2024-02-11 11:56

Redis与Kafka达成高并发更新库存与数据一致性保证

一.并发更新方案采用在Redis中判断并更新库存（库存值可增可减），由Redis保证库存的正确性，由Kafka与MongodDB数据库事务保证最终的一致性。
greatsharp·2024-02-11 11:56

消息队列原理和选型：Kafka、RocketMQ 、RabbitMQ 和 ActiveMQ

消息队列中间件重要吗？面试必问问题之一，你说重不重要。
90后小伙追梦之路·2024-02-11 11:56

Kafka&Kafka manager本地搭建

1、brewinstallkafka（kafka依赖zookeeper）：image.png2、启动zookeeper&Kafka：如上述提示：zookeeper-server-start/usr/local
hellokitty小丸子·2024-02-11 10:57

数据采集系统的优化实战

1概述在历时2个月的不断优化过程中，将数据采集系统的处理能力(kafka一个topic)从2.5万提升到了10万，基本符合对下一次峰值的要求了。
易企秀工程师·2024-02-11 10:09

在Windows QT下使用ZeroMQ

zeroMQ作为一个嵌入式消息队列系统，以其轻便灵活的使用方式，极为适合应用程序分布式通讯处理，或者是一种有效的代替常规saocket通讯的方法。
weixin_30578677·2024-02-11 09:30

I/O Zero Copy是什么？看完这篇你绝对会了

前文我们介绍了JavaI/O的底层原理，想必大家都知道类似Netty、KafKa等大数据量高吞吐框架都会提到一个概念ZeroCopy（零拷贝），这是什么技术呢，今天我们来学习下。
老司机de程序人生·2024-02-11 09:28

ZeroMQ:01---消息队列ZeroMQ简介

一、ZeroMQ概述ZeroMQ（又名ØMQ，MQ，或zmq）看起来像一个可嵌入的网络库，但其作用就像一个并发框架ZeroMQ类似于标准Berkeley套接字，其提供了各种传输工具，如进程内、进程间、TCP和组播中进行原子消息传送的套接字你可以使用各种模式实现N对N的套接字连接，这些模式包括：扇出、发布-订阅、任务分配、请求-应答ZeroMQ的速度足够快，因此可充当集群产品的结构ZeroMQ的异步
芒种、·2024-02-11 07:11

RabbitMQ——构建高性能消息传递的应用

前言大家好，我是chowley，说到消息队列，在我之前的生产者-消费者项目中使用的是ConCurrentLinkedList结构，今天来总结一下主流的消息队列实现——RabbitMQ。
Chowley·2024-02-11 07:32

RabbitMQ大揭秘

Queue(消息队列)Queue(消息队列)用来保存消息直到发送给消费者。它是消息的容器，也是消息的终点。一个消息可投入一个或多个队列。消息一直在队列里面，等待消费者连接到这个队列将其取走。
Mir_小熊同学·2024-02-11 06:36

RabbitMQ学习笔记

RabbitMQ笔记主流MQ简单了解衡量标准服务性能数据存储集群架构ActiveMQ适用于中小型企业，但在高并发情况下效率较低，不适用与并发Kafka高吞吐、速度快，但不支持事务，不能保证消息的可靠性一般用于日志传输
努力变优秀的Z·2024-02-11 06:05

RabbitMQ

MQ衡量指标：服务性能、数据存储、集群架构二、KafkaKafka是LinkedIn开源的分布式发布-订阅消息系统，目前归属于Apache顶级项
~Maple~·2024-02-11 06:05

RabbitMQ详解以及spring对RabbitMQ的集成(附带部分源码解读)

一·简介1丶为什么要使用消息队列https://wenku.baidu.com/view/e297236f83c4bb4cf7ecd193.html①异步处理(高并发)②系统解耦③流量削锋2丶为什么使用
HAKUNA·MATATA·2024-02-11 06:04

C#系列-C#访问MongoDB+redis+kafka（7）

目录一、C#中访问MongoDB.二、C#访问redis.三、C#访问kafka.C#中访问MongoDB在C#中访问MongoDB，你通常会使用MongoDB官方提供的MongoDBC#/.NETDriver
管理大亨·2024-02-11 06:59

考勤应用 - 人力资源系统

Bee具有较高的性能、扩展性等，其中包括前后端分离、插拔式的规则验证（验证器）、数据过滤（装饰器）、消息队列等，后端在Laravel的MVC模式上，又添加了Services、Repositories层，
SexyPhoenix·2024-02-11 04:04

kafka无法启动

服务日志vim/var/log/kafka/server.log2023-10-0715:22:30,394]FATAL[KafkaServer0],FatalerrorduringKafkaServerstartup.Preparetoshutdown
丿|一口亅皓桀·2024-02-11 04:46

微服务组件

消息队列-服务间的异步通信机制。容器化和编
辞暮尔尔-烟火年年·2024-02-11 03:31

深入探索Redis：如何有效遍历海量数据集

深入探索Redis：如何有效遍历海量数据集Redis作为一个高性能的键值存储数据库，广泛应用于各种场景，包括缓存、消息队列、排行榜等。
一休哥助手·2024-02-11 02:13

从零开始实现消息队列(一)

从零开始实现消息队列.什么是消息队列需求分析核心概念模型.什么是消息队列相信大家都了解过阻塞队列和生产者消费者模型,而阻塞队列最大的用途,就是用于实现生产者消费者模型,生产者消费者模型有以下好处:解耦合解释
墨溱·2024-02-11 00:51

JAVA 秒杀系统总结

文章目录参考博客测试工具项目要点1、库存扣除2、接口验证3、接口限流4、缓存一致性5、消息队列处理下单参考博客秒杀系统[从零开始的秒杀系统设计]测试工具JMeter：用于多线程测试接口。
肥牛火锅·2024-02-10 22:26

消息队列适用于以下场景

消息队列适用于以下场景：1.异步处理：当一个操作需要花费较长时间才能完成时，可以使用消息队列将任务放入队列中，让后台进程异步地处理这些任务。这样可以避免阻塞主线程，提高系统的响应速度和吞吐量。
java知路·2024-02-10 21:36

springboot redis 实现消息队列

在SpringBoot中使用Redis作为消息队列，可以通过以下步骤实现：1.添加依赖在`pom.xml`文件中添加SpringBootRedis和Jedis的依赖：```xmlorg.springframework.bootspring-boot-starter-data-redisredis.clientsjedis
java知路·2024-02-10 21:05

Linux进程间通信—消息队列

一、概述  进程间通信（interprocesscommunication，简称IPC）指两个进程之间的通信。系统中的每一个进程都有各自的地址空间，并且相互独立、隔离，每个进程都处于自己的地址空间中。所以同一个进程的不同模块譬如不同的函数）之间进行通信都是很简单的，譬如使用全局变量等。但是，两个不同的进程之间要进行通信通常是比较难的，因为这两个进程处于不同的地址空间中。  Linux内核提供了多种
温人之周.·2024-02-10 21:04

Linux进程间通信——消息队列

消息队列是存放消息的链表，存在于内核空间，由系统内核维护消息队列的特点：1.消息队列可以实现消息的随机查询，满足队列的特点但不一定要以先进先出的次序读取，可以按消息的类型读取；2.消息队列允许一个或多个进程向它写入或者读取消息
頋念安·2024-02-10 21:33

c语言系统编程八：Linux进程间通信之消息队列

Linux进程间通信之消息队列一消息队列概述二消息队列的特点三消息队列的创建和使用3.1获取系统唯一的key值3.2创建消息队列3.3查看消息队列和删除消息队列的shell命令3.4消息队列的信息格式的定义
qq_33808440·2024-02-10 21:33

linux应用 进程间通信之消息队列(System V)

1、定义SystemV消息队列是传统的Linux消息队列机制，它使用一组系统调用来创建、发送和接收消息。它的特点是可以在不同进程之间共享消息队列，但是在使用时需要手动管理消息队列的创建和删除。
我系真滴菜·2024-02-10 21:02

Kafka教程

1.kafka概况消息队列的好处：解耦，可恢复性，缓冲，峰值处理能力，异步通讯概念：Kafka是一个分布式的基于发布/订阅模式的消息队列（MessageQueue），主要应用于大数据实时处理领域。
July2333·2024-02-10 20:42
上一页 6 7 8 9 10 11 12 13 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他