E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
kafka安装部署
怎样才是优秀的程序员?
linux、mysql、redis、
kafka
、netty.学习系统性地学习,而不止于碎片知识。善于向优秀的人学习~每解决一个问题,就多进步一点点。知其然,还知其所以然。看书,看官方文档,阅读源码。
乐之者v
·
2024-02-02 03:06
工作-软技能
职场和发展
替代ELK:ClickHouse+
Kafka
+FlieBeat,才是最佳选择?
背景SaaS服务未来会面临数据安全、合规等问题。公司的业务需要沉淀一套私有化部署能力,帮助业务提升行业竞争力。为了完善平台系统能力、我们需要沉淀一套数据体系帮助运营分析活动效果、提升运营能力。然而在实际的开发过程中,如果直接部署一套大数据体系,对于使用者来说将是一笔比较大的服务器开销。为此我们选用折中方案完善数据分析能力。EasticsearchvsClickhouseClickHouse是一款高
LinkSLA
·
2024-02-02 01:44
elk
clickhouse
kafka
Neo4j
安装部署
(windows、docker)
文章目录Neo4j
安装部署
前言windows系统安装解压压缩包并进入bin目录查看neo4j的相关命令访问7474端口Docker安装Neodesktop安装Neo4j
安装部署
前言这篇blog所涉及的资源都可以在
拉霍拉卡
·
2024-02-02 01:20
Neo4j
neo4j
windows
docker
Redis 5.0 Streams类型简介
它支持ConsumerGroup,熟悉
Kafka
或者RocketMQ等分布式消息队列的应该知道这个概念,通过将多个客户端加入同一个ConsumerGroup,可以实现多个客户端相互配合,每个消
空挡
·
2024-02-01 21:34
Kafka
运维相关知识
目录一、基本概念二、技术特性三、设计思想四、运维建议一、基本概念Apache
kafka
是一个分布式的基于push-subscribe的消息系统,它具备快速、可扩展、可持久化的特点。
全脂主妇
·
2024-02-01 17:31
消息组件
kafka
分布式
redis stream结合springboot构造简单消息队列
同时,stream借鉴了
kafka
的消费组模型概念和设计,使消费消息处理上更加高效快速。Redis中有三种消息队列模式:名称简要说明List不支持消息确认机制(Ack),不支持消息回朔pubSub不
jsl小时光
·
2024-02-01 17:50
redis
redis
spring
boot
数据库
mq
消息队列
【运维
安装部署
】Linux安装Maven,以及基于Nexus安装Maven私有化仓库
【Linux基于Nexus安装Maven私有化仓库】1.安装maven(需要先安装java环境)1.在服务器创建一个存放maven数据的文件夹mkdir/mydata/mavencd/mydata/maven2.下载maven安装包我比较喜欢使用3.6.3版本,如果需要修改版本,那么只需要修改地址上两处的版本号即可wgethttps://dlcdn.apache.org/maven/maven-3
陈茂
·
2024-02-01 16:01
linux
运维
maven
越来越好用的免费办公软件,在NAS上体验Docker版ONLYOFFICE Docs的新功能
越来越好用的免费办公软件,在NAS上体验Docker版ONLYOFFICEDocs的新功能关注我的小伙伴应该还记得,我之前给大家介绍过这款神仙级的免费办公套件ONLYOFFICE,并且还教大家在NAS上
安装部署
Stark-C
·
2024-02-01 15:39
docker
容器
运维
重写代码实现Flink连接Redis集群(Java版,解决Flink无法连接私有IP Redis集群问题)
1缘起团队需要使用实时数据(小时级别)给业务系统使用,数据流向是这样:实时数据-》
Kafka
-》Flink-》Redis(集群和哨兵),可是,Flink原生并不支持Redis连接,于是,有第三方提供连接工具
天然玩家
·
2024-02-01 15:04
#
Flink
实践大数据
java
flink
redis
Flink消费
kafka
写入hive,报错GC
报错信息Flink消费
kafka
写入hive,报错GC。Taskmanager内存加到16GB。不起作用。
dgbcf
·
2024-02-01 15:55
hive
大数据
hadoop
flink
Flink 读取
Kafka
消息写入 Hudi 表无报错但没有写入任何记录的解决方法
本问题发生的场景是:使用
Kafka
Connect的DebeziumMySQLSour
Laurence
·
2024-02-01 15:24
大数据专题
付费专栏
flink
hudi
kafka
无数据
无写入
streaming
Kafka
下载安装及基本使用
目录
Kafka
介绍消息队列的作用消息队列的优势应用解耦异步提速削峰填谷为什么要用
Kafka
Kafka
下载安装
Kafka
快速上手(单机体验)1.启动zookeeper服务2.启动
kafka
服务3.简单收发消息
山鸟与鱼!
·
2024-02-01 13:15
分布式中间件
kafka
分布式
java
后端
Cloudera Manager开启
kafka
JMX监控
在ClouderaManager上创建了3节点的
kafka
集群服务,想要外部连接
kafka
JMX监控kakfa数据,需要修改kakfa配置:-Dcom.sun.management.jmxremote.host
Troyong
·
2024-02-01 13:28
Kafka
kafka
jmx
cloudera
利用 Cloudera Manager下安装
kafka
文章目录前言一、基于CDH版本选择安装1.1基于CDH版本选择安装1.2选择依赖项1.3角色分配1.4设置
Kafka
Broker配置1.5查看命令详请1.6安装概要1.7主页查看/启动前言本文章是是利用
914 JJ
·
2024-02-01 13:28
KAFKA
kafka
大数据
cloudera
使用Cloudera Manager部署
Kafka
消息队列
一.下载需要安装的
Kafka
版本1.查看ClouderaDistributionofApache
Kafka
(简称CDK)版本CDK版本链接地址:https://www.cloudera.com/documentation
至尊宝l
·
2024-02-01 13:27
Cloudera
Manager
kafka
cloudera
分布式
Cloudera Manager 安装
Kafka
并简单使用
Kafka
简介
kafka
是一款分布式消息发布和订阅的系统,具有高性能和高吞吐率。
Kafka
是一种高吞吐量的分布式发布订阅消息系统,它可以处理消费者规模的网站中的所有动作流数据。
大数据AI
·
2024-02-01 13:25
大数据从入门到精通
cloudera
kafka
大数据
【开源学习】TB-gateway -- 基本配置与使用
【开源学习】TB-gateway--基本配置与使用tb-gateway
安装部署
centOS7安装(不推荐)Docker安装(推荐)tb-gateway通用配置文件连接配置模块thingsboard存储配置模块
情绪大瓜皮丶
·
2024-02-01 11:03
物联网
gateway
thingsboard
物联网
python
Kafka
生产者缓存
不建议使用:publicvoidproduce(Stringmessage){DmsProducerproducer=newDmsProducer();try{producer.produce("test1",0,"key",message);}finally{producer.close();}}原因:每次调用produce函数时,都会新建一个producer,每次都需要进行新建与broker连
沉默终止
·
2024-02-01 11:00
kafka
缓存
spring
KAFKA
鉴权设计以及相关探讨
文章目录1.
kafka
的鉴权设计2.
kafka
鉴权应用范围3.
kafka
鉴权的常用方法3.1SASL/GSSAPI3.2SASL/PLAIN3.2.1配置jaas3.2.2配置服务启动参数3.2.3配置
李姓门徒
·
2024-02-01 11:00
分布式
Kafka
大数据
kafka
分布式
大数据
利用
Kafka
实现延迟队列实践
利用
Kafka
实现延迟队列实践一、RocketMq二、
kafka
实践三、
kafka
实践+四、更多一、RocketMq阿里提供的RocketMq消息中间件是天然支持消息先延迟队列功能的,主要原理和实现方法可以参加以下链接
加权不下平权
·
2024-02-01 11:59
最佳实践
kafka
java
分布式
Kafka
如何实现延迟队列?
Kafka
并没有使⽤JDK⾃带的Timer或者DelayQueue来实现延迟的功能,⽽是基于时间轮自定义了⼀个⽤于实现延迟功能的定时器(SystemTimer)。
图图是个好孩纸~
·
2024-02-01 11:57
#
消息队列
kafka
java
分布式
Kafka
延迟队列的实现方式
Apache
Kafka
是一个高性能、可扩展的分布式消息队列,可以作为延迟队列的基础设施。本文将介绍如何使用
Kafka
实现延迟队列,并提供详细的Java示例。什么是延迟队列?
一叶飘零_sweeeet
·
2024-02-01 11:26
java
kafka
分布式
消息队列
kafka
实现延迟队列
前言首先说一下延迟队列这个东西,实际上实现他的方法有很多,
kafka
实现并不是一个最好的选择,例如redis的zset可以实现,rocketmq天然的可以实现,rabbitmq也可以实现。
走,我们去吹风
·
2024-02-01 11:55
kafka
分布式
golang
开发语言
后端
面试
confluent入库hive安全认证问题
使用confluent将
Kafka
中的数据入库hive失败的解决方案应用场景:用户想在HD平台使用confluent开源组件将
Kafka
中的数据直接导入到hive中,测试环境中已经实现,但生产环境中由于平台开启了
建康_木子
·
2024-02-01 10:08
【万字长文】带你搞懂
Kafka
中的所有知识点
目录概述主题和分区日志消息压缩日志分段条件日志清理多副本写入流程生产者必要参数配置消息的发送流程元数据更新重要的生产者参数消费者消费者组分区分配策略协调器重平衡触发方式流程如何避免rebalance位移提交消费者offset的存储broker集群控制器事务消息保障传输幂等性事务概述Apache
Kafka
1_5_2_
·
2024-02-01 09:46
Kafka
kafka
分布式
数据结构
18、
Kafka
------ SpringBoot 整合
Kafka
流API(演示发送到test1主题的消息,被导流到 test2主题,通过监听器看是否导流成功)
目录SpringBoot整合
Kafka
流API流API的支持配置属性分析为流配置应用程序id配置流API使用@Enable
Kafka
Streams效果演示完整代码1、application.properties
_L_J_H_
·
2024-02-01 09:42
#
Kafka
系列
kafka
spring
boot
linq
17、
Kafka
------ SpringBoot 整合
Kafka
发送 和 接收消息(使用
Kafka
Template 发送消息 和 使用 @
Kafka
Listener 修饰监听器来接收消息)
目录SpringBoot整合
Kafka
发送和接收消息使用
Kafka
Template发送消息1、配置自动创建主题(代码)2、发送消息(代码)1、controller2、service3、演示1、启动应用程序
_L_J_H_
·
2024-02-01 09:11
#
Kafka
系列
kafka
spring
boot
分布式
go mysql transfer_go-mysql-transfer
特性1、简单,不依赖其它组件,一键部署2、集成多种接收端,如:Redis、MongoDB、Elasticsearch、RocketMQ、
Kafka
、Ra
廖宝华
·
2024-02-01 08:40
go
mysql
transfer
k8s Sidecar filebeat 收集容器中的trace日志和app日志
目录一、背景二、设计三、具体实现Filebeat配置K8SSideCaryamlLogstash配置一、背景将容器中服务的trace日志和应用日志收集到
KAFKA
,需要注意的是trace日志和app日志需要存放在同一个
Cloud孙文波
·
2024-02-01 08:33
kubernetes
kubernetes
容器
云原生
消息中间件(MQ)对比:RabbitMQ、
Kafka
、ActiveMQ 和 RocketMQ
RabbitMQ、
Kafka
、ActiveMQ和RocketMQ是当前流行的消息中间件之一,它们各自具有独特的特点和适用场景。本文将对这四种消息中间件进行综合比较,帮助您在项目中作出明智的选择。
CodeArtisanX
·
2024-02-01 07:07
rabbitmq
kafka
activemq
QT研究笔记(一)windows 开发环境
安装部署
一、Qt是什么?Qt是一个跨平台的应用程序开发框架,最初由挪威的Trolltech公司开发,并于2008年被诺基亚收购。后来,Qt框架由Digia公司接手,并在2012年成立了TheQtCompany。Qt提供了一套丰富的工具和类库,可用于开发图形用户界面(GUI)应用程序、嵌入式系统、网络应用程序和其他各种类型的软件。Qt框架的主要特点包括:跨平台支持:Qt具有良好的跨平台性能,可以在各种操作系
w风雨无阻w
·
2024-02-01 07:55
QT
qt
笔记
windows
KAFKA
监控方法以及核心指标
文章目录1.监控指标采集1.1部署
kafka
_exporter1.2prometheus采集
kafka
_exporter的暴露指标1.3promethues配置告警规则或者配置grafana大盘2.核心告警指标
李姓门徒
·
2024-02-01 07:23
分布式
Kafka
大数据
kafka
分布式
大数据
JMeter 下载、安装、启动
JMeter
安装部署
依赖Java环境,所以首先得安装JDK。
爱吃java的羊儿
·
2024-02-01 07:34
软件测试
jmeter
1、KVM
安装部署
(1)yuminstallvirt-installqemu-kvmqemu-imglibvirtlibvirt-python.x86_64virt-managerpython-virtualenvlibvirt-client(2)yumgroupinstall-y"虚拟化主机|VirtualizationHost"yuminstall-yvirt-managerssh-Xip:port#带x11图
小短腿电工
·
2024-02-01 06:59
基于SpringBoot整合RocketMQ异步发送短信功能
引入依赖1.2编写配置1.3需求描述1.4Producer代码1.5Consumer代码二、阿里云短信服务2.1申请短信模板2.2短信配置2.3短信业务层代码前言上一篇文章记录了RocketMQ整体架构、
安装部署
南波塞文
·
2024-02-01 02:27
RocketMQ
消息中间件
SpringBoot
框架
java-rocketmq
spring
boot
rocketmq
ubuntu 20.04.4+uWSGI+Nginx
安装部署
Django+Vue的web前后端全过程记录(1-Django)
文章目录基本命令行安装虚拟环境及配置路径虚拟环境基本命令Xftp和FileZilla连接本地虚拟机查看虚拟机本地地址在使用sftp连接时,filezilla与虚拟机之间是通过ssh连接,所以需在虚拟机上安装ssh-server。连接成功,开始传输文件部署Django连接数据库有可能没有打开文件的权限到这里还没结束开启Mysql远程连接的权限一些可能发生的报错端口占用远程连接迁移本地数据库到虚拟机(
荻风溪畔
·
2024-02-01 00:25
Django
web笔记
笔记
ubuntu
nginx
vue
django
mysql
32个Java面试必考点-09(上)消息队列
Kafka
架构与原理
本课时主要讲解消息队列与数据库相关的知识,重点讲解三部分知识点:1.
Kafka
的架构与消息交互流程;2.数据库事务的4大特性和分类;3.MySQL相关的内容,比如索引、MySQL调优等。
机智阳
·
2024-01-31 21:38
java
面试
kafka
后端
架构
开发语言
为什么你的创业公司应该运行在Kubernetes上
有些公司仅仅使用scp部署简单的PHP应用程序,就能让公司走的很远,而有些公司的架构达到极限,不得不使用诸如Redis或者
Kafka
这样的基础组件作为内部通信,从而将系统拆分为不同的服务。
云原生学院
·
2024-01-31 21:23
Spring Cloud Bus消息总线
SpringCludBus目前支持RabbitMQ和
Kafka
。SpringCloudBus配合SpringCloudConfig使用可以实现配置的动态刷新。
七七真的是太棒了
·
2024-01-31 17:01
springcloud
微服务
RabbitMQ入门概念
1.2应用场景1.3AMQP协议与RabbitMQ工作流程1.4Docker
安装部署
RabbitMQ二、SpringBoot连接MQ配置2.1示例12.1示例2——发送实体一、RabbitMQ入门1.1rabbitmq
云村小威
·
2024-01-31 17:52
RabbitMQ
+
Redis
rabbitmq
分布式
java
docker
spring
boot
kafka
_example_01
1安装brewhttps://www.jianshu.com/p/2b209d74139c安装目录:/usr/local/Cellar/
kafka
/1.1.02运行修改:1.app登录成功返回ErrorCode
Kate_Blog
·
2024-01-31 16:44
kafka
集群部署(最新版本
kafka
_2.13-3.1.0)
集群环境:节点名ip地址OS版本部署服务broker信息
kafka
01192.168.96.10CentOSLinuxrelease7.9.2009(Core)jdk、zookeeper、
kafka
broker
小米bb
·
2024-01-31 15:55
笔记
kafka
分布式
zookeeper
数据湖技术Iceberg0.12预研文档
Iceberg0.12预研本次预研场景主要为
kafka
=>flinksql=>iceberg=>hive=>hdfs=>trino(presto)本次预研使用组件如下:名称版本描述flink1.12.1
我去探险了
·
2024-01-31 15:36
数据湖技术
hive
kafka
big
data
Prometheus详解(三)——Prometheus
安装部署
今天继续给大家介绍Linux运维相关知识,本文主要内容是Prometheus
安装部署
。在本文中,我们直接将Prometheus安装在了Kubernetes集群上,并没有在物理设备上部署。
永远是少年啊
·
2024-01-31 13:37
虚拟化运维
运维
linux
Prometheus
云原生
云计算
Docker离线
安装部署
RabbitMQ
一、首先确保系统环境有dockerdocker-version查看如果没有可以看我的另一篇离线安装docker的文章离线安装docker二、在有外网的地方下载好docker镜像1、拉取docker镜像dockerpullrabbitmq:management2、查看下载好的镜像dockerimages3、开始创建rabbitmq容器dockerrun-d-p5672:5672-p15672:156
易小染
·
2024-01-31 11:06
docker
docker
rabbitmq
linux
KAFKA
高可用架构涉及常用功能整理
KAFKA
高可用架构涉及常用功能整理1.
kafka
的高可用系统架构和相关组件2.
kafka
的核心参数2.1常规配置2.2特殊优化配置3.
kafka
常用命令3.1常用基础命令3.1.1创建topic3.1.2
李姓门徒
·
2024-01-31 11:07
Kafka
大数据
分布式
kafka
架构
分布式
消息
在Java中使用消息机制通常需要依赖于消息中间件,比如常用的ActiveMQ、RabbitMQ、
Kafka
等。下面我以使用ActiveMQ为例,简单介绍如何在Java中编写消息生产者和消费者的代码。
.:::.
·
2024-01-31 10:55
消息
【数据库】starrocks
安装部署
集群版
之前写过一篇427.【数据库】starrocks安装踩坑,今天把详细的安装步骤记录下来:一、环境准备starrocks安装包jdk8centos7服务器3台二、服务器互信任在三台服务器之间建立互信任,使得ssh连接时,无需输入密码,可参考170.【Linux】ssh-keyscan解决“离线环境”多节点互信任问题,里面的脚本可直接使用。互信任完成之后,就可以使用sync_scripts.sh脚本了
七镜
·
2024-01-31 10:26
Flink 添加 / 部署 Jar 包的若干注意事项
Flink添加/部署Jar包可根据Jar包的声明周期、作用范围选择不同的附属方式,从实际应用上来看,可以分成以下几种场景:普遍使用的框架或基础设施级别的Jar包,例如
Kafka
、Hive、Hudi等Connector
Laurence
·
2024-01-31 09:01
大数据专题
flink
jar
添加
部署
add
sql-client.sh
Kafka
源码分析(史上最全)1:源码的开发环境搭建
文章很长,建议收藏起来,慢慢读!Java高并发发烧友社群:疯狂创客圈奉上以下珍贵的学习资源:免费赠送经典图书:《Java高并发核心编程(卷1)》面试必备+大厂必备+涨薪必备加尼恩免费领免费赠送经典图书:《Java高并发核心编程(卷2)》面试必备+大厂必备+涨薪必备加尼恩免费领免费赠送经典图书:《NettyZookeeperRedis高并发实战》面试必备+大厂必备+涨薪必备加尼恩免费领免费赠送经典图
40岁资深老架构师尼恩
·
2024-01-31 09:29
java
kafka
面试
java
上一页
10
11
12
13
14
15
16
17
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他