kafka单机集群部署

深入浅出理解kafka原理系列之：自动提交和手动提交

深入浅出理解kafka原理系列之：自动提交和手动提交一、kafka消费者提交的内容二、自动提交三、自动提交代码示例四、手动提交五、手动同步提交代码示例六、手动异步提交代码示例一、kafka消费者提交的内容消费组
最笨的羊羊·2024-02-09 15:40

深入浅出理解kafka原理系列之：kafka消费者参数设置

深入浅出理解kafka原理系列之：kafka消费者参数设置1.max.poll.records2.max.poll.interval.ms3.enable.auto.commit4.heartbeat.interval.ms5
最笨的羊羊·2024-02-09 15:10

Kafka系列之：Kafka集群同时设置基于时间和日志大小两种方式保存Topic的数据

Kafka系列之：Kafka集群同时设置基于时间和日志大小两种方式保存Topic的数据一、基于日志大小二、基于时间大小三、参数设置四、设置命令一、基于日志大小"log.retention.bytes"是
最笨的羊羊·2024-02-09 15:09

Redis应用详解（一）分布式锁

在单机环境中，应用是在同一进程下的，只需要保证单进程多线程环境中的线程安全性，通过JAVA提供
fedorafrog·2024-02-09 14:58

初识kafka

[TOC]Kafka起初是由Linkedin公司采用Scala语言开发的一个多分区、多副本且基于ZooKeeper协调的分布式消息系统，现己被捐献给Apache基金会。
tracy_668·2024-02-09 14:07

69.Kudu、Spark2、Kafka安装—CDH

69.1演示环境介绍CDH集群运行正常操作系统版本为：CentOS6.5CM和CDH版本为：5.12.1CM管理员为：admin用户操作系统用户为：root用户69.2操作演示Kudu安装Kudu的Parcel部署下载Kudu的Parcel包：http://archive.cloudera.com/kudu/parcels/5.12.1/KUDU-1.4.0-1.cdh5.12.1.p0.10-e
大勇任卷舒·2024-02-09 14:55

大模型学习 一

spm_id_from=333.337.search-card.all.clickGPU计算单元多并行计算能力强指数更重要A10080GV100A100海外100元/时单卡多卡并行：单机多卡模型并行有资源的浪费反向传播反向传播
wangqiaowq·2024-02-09 12:20

spring boot 怎样集成kafka

SpringBoot可以使用SpringforApacheKafka库来集成Kafka。
low sapkj·2024-02-09 12:34

Spring Boot 集成 Kafka

SpringBoot作为主流微服务框架，拥有成熟的社区生态。市场应用广泛，为了方便大家，整理了一个基于springboot的常用中间件快速集成入门系列手册，涉及RPC、缓存、消息队列、分库分表、注册中心、分布式配置等常用开源组件，大概有几十篇文章，陆续会开放出来，感兴趣同学请提前关注&收藏消息通信有两种基本模型，即发布-订阅（Pub-Sub）模型和点对点（PointtoPoint）模型，发布-订阅
互联网全栈架构·2024-02-09 12:34

Redis部署简单步骤及主从搭建

一·单机版部署Redis1·Redis的介绍Redis是一个开源的内存数据结构存储系统，它支持多种数据结构，包括字符串、哈希表、列表、集合、有序集合等，可以用于缓存、消息队列、排行榜、计数器、分布式锁等多种场景
喜欢慢生活·2024-02-09 12:28

ELK环境搭建

Windows8.1elasticsearch：5.5.1logstash：2.0.0kibana：5.5.1注：由于实验性搭建，选择windows系统，但选择Linux系统效果更佳二、部署方案1.ELK+Redis2.ELK+Kafka
枯木风·2024-02-09 12:08

day04-Nginx负载均衡及缓存集成

纵向扩展是从单机的角度
Swittee丶Henry·2024-02-09 11:38

ElasticSearch7.9集群的安装部署

下面总结下elasticsearch集群部署，单机的安装部署请见linux上安装部署elasticsearch7.9_linux部署elasticsearch-CSDN博客前期准备：准备三台主机配置ubuntu22
一个高效工作的家伙·2024-02-09 11:53

腾讯AI大佬详解Apache Kafka实战

内容简介1.ApacheKafka简介：ApacheKafka是由Apache软件基金会开发的一个开源消息系统项目，由Scala写成。Kafka最初是由LinkedIn开发，并于2011年初开源。
笑起来真好看LQQ·2024-02-09 08:53

Kafka消息传递的可靠性

kafka拥有以下可靠性保证：可以保证分区消息的顺序。
阿猫阿狗Hakuna·2024-02-09 07:14

SpringBoot中使用注解来实现 Redis 分布式锁-学习笔记

2.分析流程使用Redis作为分布式锁，将锁的状态放到Redis统一维护，解决集群中单机JVM信息不互通的问题，规定操作顺序，保护用户的数据正确。
qinxun2008081·2024-02-09 07:46

【redis】Centos单机安装部署redis7.2版本

1.首先需要安装Redis所需要的依赖：yuminstall-ygcctcl2.将下载好的redis压缩包上传到服务器并解压至/usr/local/路径下，重命名为redis：下载地址：Download|RedisRedisYoucandownloadthelastRedissourcefileshere.Foradditionaloptions,seetheRedisdownloadssecti
卦者灵妹·2024-02-09 07:22

SQL条件判断语句嵌套window子句的应用【易错点】--HiveSql面试题25

数据分析4小结0需求分析需求：表如下user_idgood_namegoods_typerk1hadoop1011hive1221sqoop2631hbase1041spark1351flink2661kafka1471oozie108
莫叫石榴姐·2024-02-09 06:00

HiveSQL——条件判断语句嵌套windows子句的应用

0需求分析需求：表如下user_idgood_namegoods_typerk1hadoop1011hive1221sqoop2631hbase1041spark1351flink2661kafka1471oozie108
爱吃辣条byte·2024-02-09 06:58

redis单线程和优劣势

Redis单线程的优劣势1）单进程单线程优势代码更清晰，处理逻辑更简单2）单进程单线程弊端无法发挥多核CPU性能，不过可以通过在单机开多个Redis实例来完善。
时光_1024·2024-02-09 06:26

redis是单线程的为什么还这么快？

Redis是基于内存运行的高性能K-V数据库，官方提供的测试报告是单机可以支持约10w/s的QPS。但是，在设计上，Redis采用单线程架构。为什么单线程设计依然会有这么高的性能？
wming666·2024-02-09 06:40

linux 消息发布工具-kafka

下载地址：https://mirrors.cnnic.cn/apache/kafka一、系统构成在整个消息发布流程中，kafka作为一个中间件对系统的运行提供了解耦、削峰、异步处理的能力。
强壮的向阳花·2024-02-09 05:53

【云原生进阶之PaaS中间件】第三章Kafka-4.3.2-broker网络模型

1kafka网络模型运行原理kafkabroker在启动的时候，会根据你配置的listeners初始化它的网络组件，用来接收外界的请求，这个listeners你可能没配置过，它默认的配置是listeners
江中散人·2024-02-09 05:19

【云原生进阶之PaaS中间件】第三章Kafka-4.3.3-broker的leader和follower工作机制

1leader和follower1.1kafka的副本kafka副本的作用就是提高数据的可靠性，系统默认副本数量是1，生产环境一般配置数量是2个，保证数据可靠性；否则副本太多会增加磁盘的存储空间，增加网络上的数据传输
江中散人·2024-02-09 05:19

2024最新Java面试题及答案！（ 2024年 1 月最新版，持续更新）

面试题大全~这套互联网Java工程师面试题包括了：Java面试、Spring、JVM、MyBatis、Redis、MySQL、并发编程、微服务、Linux、Springboot、SpringCloud、MQ、Kafka
程序一逸·2024-02-09 05:00

redis集群搭建

redis集群搭建在开始redis集群搭建之前，我们先简单回顾一下redis单机版的搭建过程下载redis压缩包，然后解压压缩文件；进入到解压缩后的redis文件目录（此时可以看到Makefile文件）
角角_d216·2024-02-09 03:44

Redis服务

目录介绍特点缓存安装安装单机版redis实例1、创建工作目录2、下载对应的redis包3、解压到创建好的工作目录4、安装编译工具5、进入解压后的目录执行make编译6、配置环境变量7、备份配置文件8、修改配置文件
藻头男·2024-02-09 03:12

采集猫发单机器人，京东发单机器人安装与使用

京东发单机器人是一种可以帮助用户自动化完成京东发单操作的工具。
高省爱氧惠·2024-02-09 00:14

Kafka 入门介绍

目录一.前言二.使用场景三.分布式的流平台四.Kafka的基本术语4.1.主题和日志（Topic和Log）4.2.分布式（Distribution）4.3.异地数据同步技术（Geo-Replication
流华追梦·2024-02-09 00:43

手把手教你实现 Docker 部署 Redis 集群

首先，我们需要理论知识：RedisCluster是Redis的分布式解决方案，它解决了redis单机中心化的问题，分布式数据库——首要解决把整个数据集按照分区规则映射到
码农小光·2024-02-09 00:36

Elasticsearch: 非结构化的数据搜索

singleDoc#《olap/clickhousekeeper一致性协调服务》)，kafka->redpanda(https://www.
SakamataZ·2024-02-08 22:48

linux-centos7 集群环境搭建

1.软件版本1.1.软件vmware版本：12.5.6centos版本：71.2.硬件CPU：>1推荐2以上内存：>2G推荐4以上硬盘：>20G推荐40以上2.单机设置2.1.网络配置2.1.1.外部网络环境准备网断
被遗忘的优雅·2024-02-08 21:34

Kafka实战(五) - Kafka的秘技"坂本"之争

只有顺应版本,才能成就王者不败神话也是能否用好Kafka的关键。
JavaEdge·2024-02-08 20:50

二、Docker-Compose部署单机版Nacos

1、进入Centos操作系统，进入/usr/local/目录，执行mkdirnacos命令，创建nacos文件夹image.png2、在Nacos文件下创建docker-compose.yml文件，docker-compose.yml内容如下：version:'3'services:nacos:image:nacos/nacos-server:1.4.1container_name:nacosre
Love为何·2024-02-08 20:22

消息中间件：Puslar、Kafka、RabbigMQ、ActiveMQ

消息队列消息队列：它主要用来暂存生产者生产的消息，供后续其他消费者来消费。它的功能主要有两个：暂存（存储）队列（有序：先进先出从目前互联网应用中使用消息队列的场景来看，主要有以下三个：异步处理数据系统应用解耦业务流量削峰消息队列模型点对点模式多个生产者可以向同一个消息队列发送消息，一个消息只能被一个消费者消费，在被消费成功后，这条消息会被移除。如果消费者处理消息失败了，那么这条消息会重新被消费。发
Kingairy·2024-02-08 18:33

一探究竟，详解Kafka生产者和消费者的工作原理！

主题和日志对于每个主题，Kafka群集都会维护一个分区日志，如下所示：image.png每个分区（Partition）都是有序的(所以每一个Partition内部都是有序的)，不变的记录序列，这些记录连续地附加到结构化的提交日志中
废柴程序员·2024-02-08 17:42

linux根下很多系统目录丢失,Linux单机系统故障问题汇总

一、处理linux系统故障的思路作为一名优秀的linux工程师，一定要有一套清晰、明确的解决故障思路，当问题出现时，才能迅速定位、解决问题，这里总结出了一套处理问题的一般思路，供大家参考：1、重视报错提示信息：每个错误的出现，都是给出错误提示信息，一般情况下这个提示基本定位了问题的所在，因此一定要重视这个报错信息，如果对这些错误信息视而不见，问题永远得不到解决。2、查阅日志文件：有时候报错信息只是
Liu Titanium·2024-02-08 17:10

flink消费kafka源

后来一通折腾，发现我当时消费的配置，是用FlinkKafkaConsu
MinaLing·2024-02-08 16:14

K8s环境下rook-v1.13.3部署Ceph-v18.2.1集群

文章目录1.K8s环境搭建2.Ceph集群部署2.1部署RookOperator2.2镜像准备2.3配置节点角色2.4部署operator2.5部署Ceph集群2.6强制删除命名空间2.7验证集群3.Ceph
@TangXin·2024-02-08 14:26

Nacos的集群部署配置

Nacos的集群部署配置一、准备工作二、搭建集群配置三、使用Springbootda搭建获取信息四、注意一、准备工作本机符合Nacos的环境及基本配置，可参考Nacos在Windows的安装及整合MySQL
Joe14103·2024-02-08 14:17

Page 257~258 11.2.6处理“鼠标移动”消息

鼠标在当前窗口上移动，哪怕不单机，也会造成操作系统向该窗口发送消息。
yanzhenxi·2024-02-08 13:15

2.Kafka生产过程

三、Kafka生产过程分析1.写入方式producer采用推（push）模式将消息发布到broker，每条消息都被追加（append）到分区（patition）中，属于顺序写磁盘（顺序写磁盘效率比随机写内存要高
chongweiLin·2024-02-08 12:56

ubuntu下编译nginx平滑添加stream模块以及fastdfs访问模块

前言参考资料：ubntu下单机配置fastdfs作为开发环境（2）—nginx生产环境下再编译+fastdfs扩展模块的编译编译nginx平滑添加stream模块nginxstream模块初探Ubuntu16.04
码农下的天桥·2024-02-08 11:31

Spark streaming batch运行时间过长问题02

继续排查发现，在用Spark读取Kafka数据之后，由于数据通过Kafka读取后是逗号分隔的字符串，但是为了解决字符串某些字段中还有逗号的问题，只能使用正则表达式匹配，导致性能过慢。
kk_io·2024-02-08 10:01

Flink Checkpoint过程

Checkpoint使用了Chandy-Lamport算法流程1.正常流式处理（尚未Checkpoint）如下图，Topic有两个分区，并行度也为2，根据奇偶数我们假设任务从Kafka的某个Topic中读取数据
orange大数据技术探索者·2024-02-08 09:49

Flink Format系列(2)-CSV

Flink的csv格式支持读和写csv格式的数据，只需要指定'format'='csv'，下面以kafka为例。
sf_www·2024-02-08 09:48

storm整合kafka

maven4.0.0storm-kafka-mysqlstorm-kafka-mysql0.0.1-SNAPSHOTjarstorm-kafka-mysqlUTF-8javaxjavaee-api8.0providedorg.glassfish.webjavax.servlet.jsp.jstl1.2.2org.apache.stormstorm-core0.9.5provided
piziyang12138·2024-02-08 09:01

【项目实战】Flink+InfluxDB+Grafana实现对YARN集群队列资源进行画像

.实时计算技术选型第二章：Flink项目构建与测试1.快速构建Flink项目2.第一个Flink应用案例3.Flink单节点集群安装与测试4.FlinkShell代码测试第三章：FlinkONYARN集群部署
大数据研习社·2024-02-08 08:56

[缓存] - Redis

之前压缩数据设置key有效期选择回收策略(maxmemory-policy)减少不必要的连接限制redis的内存大小（防止swap，OOM）slowLog使用pipline批量操作数据2.高可用2.1单机版的高可用数据持久化
don't_know·2024-02-08 08:33

如何查看kafka的topic的消费者组有没有积压

Kafka自带的命令行工具kafka-consumer-groups.sh来查看消费者组的消费情况，包括是否有积压。具体步骤如下：打开命令行终端，进入Kafka安装目录下的bin文件夹。
不会吐丝的蜘蛛侠。·2024-02-08 08:29
上一页 9 10 11 12 13 14 15 16 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他