E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Kafka工作流程
大数据-257 离线数仓 - 数据质量监控 监控方法 Griffin架构
目前已经更新到了:Hadoop(已更完)HDFS(已更完)MapReduce(已更完)Hive(已更完)Flume(已更完)Sqoop(已更完)Zookeeper(已更完)HBase(已更完)Redis(已更完)
Kafka
武子康
·
2025-01-18 10:29
大数据
离线数仓
大数据
数据仓库
java
后端
hadoop
hive
Springboot项目如何消费
Kafka
数据
目录一、引入依赖二、添加
Kafka
配置三、创建
Kafka
消费者(一)
Kafka
生产的消息是JSON字符串1、方式一2、方式二:需要直接访问消息元数据(二)
Kafka
生产的消息是对象Order四、创建启动类五
布朗克168
·
2025-01-18 10:25
Kafka
spring
boot
kafka
后端
Python 爬虫:获取网页数据的 5 种方法
博客内容包括:Java核心技术与微服务:涵盖Java基础、JVM、并发编程、Redis、
Kafka
、Spring等,帮助您全面掌握企业级开发技术。
王子良.
·
2025-01-18 07:35
经验分享
python
python
开发语言
爬虫
不得不了解的高效AI办公工具API
AI办公,即人工智能在办公领域的应用,是指利用人工智能技术来提高工作效率、优化
工作流程
、增强决策支持等。
·
2025-01-17 20:14
程序员
如何在 K8s 上部署 KRaft 模式
Kafka
集群?
首发:运维有术今天分享的主题是:不使用Helm、Operator,如何在K8s集群上手工部署一个开启SASL认证的KRaft模式的
Kafka
集群?
·
2025-01-17 19:07
后端
云原生周刊:Kubernetes v1.32 正式发布
无论是简化
工作流程
还是保障应用安全,Helmper都能为您提供高效且可靠的解决方
·
2025-01-17 19:37
云计算
【Redis进阶】Redis哨兵Sentinel
目录什么是哨兵机制为什么要引入哨兵机制图解哨兵
工作流程
1.监控2.故障转移3.通知客户端4.重新配置从服务器故障转移流程哨兵机制的配置哨兵机制的优缺点优点:缺点:什么是哨兵机制Redis哨兵机制(RedisSentinel
小智coding
·
2025-01-17 19:27
Redis
redis
sentinel
数据库
采用海豚调度器+Doris开发数仓保姆级教程(满满是踩坑干货细节,持续更新)
1.架构复杂性2.数据处理性能3.数据同步与更新4.资源利用率与成本6.生态系统与兼容性7.符合信创或国产化要求二、ODS层接入数据接入
kafka
实时数据踩坑的问题细节三、海豚调度器调度Doris进行报表开发创建带分区的表在
大模型大数据攻城狮
·
2025-01-17 19:56
海豚调度器从入门到精通
doris
海豚调度器
离线数仓
实时数仓
国产代替
信创大数据
flink数仓
kafka
直接对接nginx
很多时候我们要对nginx产生的日志进行分析都是通过flume监控nginx产生的日志,通过flume把日志文件发送该
kafka
,flume作为生产者,但是这种方式的缺点就是可能效率会比较慢,除此之外还可以使用
Lu_Xiao_Yue
·
2025-01-17 10:04
nginx
kafka
Next.js 15 重大更新解析
这次更新重点优化了开发
工作流程
、性能表现,并加强了安全性。现在就来深入了解这些新特性。自动化升级工具Next.js15引入了全新的codemodCLI工具,大大简化了版本升级流程。
·
2025-01-17 10:51
Spring Boot 和微服务:快速入门指南
博客内容包括:Java核心技术与微服务:涵盖Java基础、JVM、并发编程、Redis、
Kafka
、Spring等,帮助您全面掌握企业级开发技术。
王子良.
·
2025-01-17 09:56
Java
经验分享
spring
boot
微服务
后端
大数据框架之
kafka
详解
目录1
kafka
介绍1.1kalka是什么?1.2
Kafka
内部原理1.3为什么需要消息队列?
xingchensuiyue
·
2025-01-17 06:30
大数据
zookeeper
kafka
kafka
消息中间件的基础概念入门
消息中间件的主要作用解耦合异步通信负载均衡可靠性与持久性消息路由与调度削峰事务支持监控与审计跨平台和跨语言支持二、常用消息中间件对比2.1、RabbitMQ2.1.1、特点2.1.2、适用场景2.2、Apache
Kafka
2.2.1
全镇人的希望
·
2025-01-17 05:28
概念
消息平台
kafka
Kafuka查看版本的方法
kafka
查看版本方法:定位到
kafka
的安装目录,然后执行以下脚本find.
thinking-fish
·
2025-01-17 05:55
大数据
大数据
kafka
中间件 MetaQ
MetaQ(全称Metamorphosis)是一个高性能、高可用、可扩展的分布式消息中间件,其思路起源于LinkedIn的
Kafka
,但并不是
Kafka
的一个Copy。
Zero_pl
·
2025-01-17 04:43
中间件
Kafka
介绍
Apache
Kafka
是一个高性能、低延迟的分布式流处理平台,广泛用于构建实时数据管道和流式应用。以下是关于
Kafka
的详细介绍:核心概念•生产者(Producer):负责向
Kafka
集群发送消息。
Zero_pl
·
2025-01-17 04:43
kafka
Spring Boot教程之五十七:在 Apache
Kafka
上发布 JSON 消息
SpringBoot|如何在Apache
Kafka
上发布JSON消息Apache
Kafka
是一个发布-订阅消息系统。消息队列允许您在进程、应用程序和服务器之间发送消息。
潜洋
·
2025-01-17 03:33
Java中级
Spring
Boot
spring
boot
apache
kafka
有用过
kafka
的延迟队列功能的人吗
有用过
Kafka
的延迟队列功能的人吗?在当今的数据处理和消息传递领域,Apache
Kafka
已经成为了一个不可或缺的工具。它以其高吞吐量、低延迟和可扩展性而闻名。
xiamu_CDA
·
2025-01-17 03:33
kafka
分布式
RabbitMQ,RocketMQ,
Kafka
事务性,消息丢失,消息顺序性和消息重复发送的处理策略
消息队列常见问题处理分布式事务什么是分布式事务我们的服务器从单机发展到拥有多台机器的分布式系统,各个系统之前需要借助于网络进行通信,原有单机中相对可靠的方法调用以及进程间通信方式已经没有办法使用,同时网络环境也是不稳定的,造成了我们多个机器之间的数据同步问题,这就是典型的分布式事务问题。在分布式事务中事务的参与者、支持事务的服务器、资源服务器以及事务管理器分别位于不同的分布式系统的不同节点之上。分
90后小伙追梦之路
·
2025-01-17 01:48
面试
java
架构
kafka
rabbitmq
分布式
redis
数据库
中小企业在选任务管理工具时,怎样确保提升团队效能?
选择一款合适的任务管理工具,能够帮助中小企业优化
工作流程
、增强团队协作,从而在市场中占据更有利的地位。接下来,我们将深入探讨如何挑选适合中小企业的任务管理工具。
·
2025-01-17 00:44
团队管理团队协作
Rabbit Rocket
kafka
怎么实现消息有序消费和延迟消费的
在消息队列系统中,像RabbitMQ、RocketMQ和
Kafka
这样的系统,都支持不同的方式来实现消息的有序消费和延迟消费。
C18298182575
·
2025-01-16 23:03
kafka
分布式
caddy介绍及安装
参考文档:https://caddyserver.com一:caddy介绍Caddy是一款现代化的Web服务器,专为简化开发者和运维人员的
工作流程
而设计。
·
2025-01-16 23:28
dockercaddy
初学者如何用 Python 写第一个爬虫?
博客内容包括:Java核心技术与微服务:涵盖Java基础、JVM、并发编程、Redis、
Kafka
、Spring等,帮助您全面掌握企业级开发技术。
王子良.
·
2025-01-16 23:27
python
经验分享
python
开发语言
爬虫
大数据新视界 --大数据大厂之 从 Druid 和
Kafka
到 Polars:大数据处理工具的传承与创新
亲爱的朋友们,热烈欢迎你们来到青云交的博客!能与你们在此邂逅,我满心欢喜,深感无比荣幸。在这个瞬息万变的时代,我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客,正是这样一个温暖美好的所在。在这里,你们不仅能够收获既富有趣味又极为实用的内容知识,还可以毫无拘束地畅所欲言,尽情分享自己独特的见解。我真诚地期待着你们的到来,愿我们能在这片小小的天地里共同成长,共同进步。本博客的精华专栏:大数
青云交
·
2025-01-16 20:07
Polars
之道
大数据新视界
Polars
大数据处理
Druid
Kafka
快速引擎
技术突破
性能优势
数据库
Obsidian 与其他生产力工具集成
通过将Obsidian与Todoist、Google日历等应用程序连接起来,您可以创建一个无缝的
工作流程
,从而提高您的工作效率并确保您的所有任务和信息都同步。
MaximusCoder
·
2025-01-16 20:32
大学
经验分享
Obsidain
shell语法总结
目录命令执行变量定义和使用字符串操作条件判断循环结构函数定义和调用管道和重定向注释退出状态特殊变量条件表达式
工作流程
总结1.命令执
·
2025-01-16 17:25
聊聊Spring事件:一些自己的QA
回答:Spring的事件机制确实有点类似于一个轻量级的消息队列,但与完整的消息队列(如
Kafka
、RabbitMQ)相比,Spring的事件机制是为了在应用
·
2025-01-16 16:49
事件spring
大数据新视界 --大数据大厂之
Kafka
性能优化的进阶之道:应对海量数据的高效传输
亲爱的朋友们,热烈欢迎你们来到青云交的博客!能与你们在此邂逅,我满心欢喜,深感无比荣幸。在这个瞬息万变的时代,我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客,正是这样一个温暖美好的所在。在这里,你们不仅能够收获既富有趣味又极为实用的内容知识,还可以毫无拘束地畅所欲言,尽情分享自己独特的见解。我真诚地期待着你们的到来,愿我们能在这片小小的天地里共同成长,共同进步。本博客的精华专栏:大数
青云交
·
2025-01-16 16:51
Kafka
核心指南:构建高效消息系统之路
大数据新视界
Kafka
性能优化
大数据
磁盘
I/O
分区策略
数据压缩
人工智能
数据库
【1】
Kafka
快速入门-从原理到实践
文章目录一、引言二、
Kafka
的历史️三、
Kafka
的核心结构️(一)Broker(二)Topic(三)Partition(四)Producer(五)Consumer(六)Zookeeper四、
Kafka
不知名美食探索家
·
2025-01-16 15:15
kafka
分布式
spring-
kafka
中ContainerProperties.AckMode详解
Spring-
Kafka
:
Kafka
消费者确认模式详解在使用Spring-
Kafka
时,如何控制
Kafka
消费者对消息的确认是影响性能和数据安全的一个重要因素。
·
2025-01-16 15:55
Kafka
消息丢失如何处理?
今天给大家分享一个在面试中经常遇到的问题:
Kafka
消息丢失该如何处理?这个问题啊,看似简单,其实里面藏着很多“套路”。来,咱们先讲一个面试的“真实”案例。面试官问:“
Kafka
消息丢失如何处理?”
架构文摘JGWZ
·
2024-09-16 09:47
学习
【华为OD技术面试真题 - 技术面】- python八股文真题题库(4)
OD面试真题精选目录:2024华为OD面试手撕代码真题目录以及八股文真题目录文章目录华为OD面试真题精选**1.Python中的`with`**用途和功能自动资源管理示例:文件操作上下文管理协议示例代码
工作流程
解析优点
算法大师
·
2024-09-16 09:15
华为od
面试
python
【六】阿伟开始搭建
Kafka
学习环境
阿伟开始搭建
Kafka
学习环境概述上一篇文章阿伟学习了
Kafka
的核心概念,并且把市面上流行的消息中间件特性进行了梳理和对比,方便大家在学习过程中进行对比学习,最后梳理了一些
Kafka
使用中经常遇到的
Kafka
能源恒观
·
2024-09-16 08:09
中间件
学习
kafka
spring
Java面试题精选:消息队列(二)
一、
Kafka
的特性1.消息持久化:消息存储在磁盘,所以消息不会丢失2.高吞吐量:可以轻松实现单机百万级别的并发3.扩展性:扩展性强,还是动态扩展4.多客户端支持:支持多种语言(Java、C、C++、GO
芒果不是芒
·
2024-09-16 07:34
Java面试题精选
java
kafka
Kafka
是如何保证数据的安全性、可靠性和分区的
Kafka
作为一个高性能、可扩展的分布式流处理平台,通过多种机制来确保数据的安全性、可靠性和分区的有效管理。
喜欢猪猪
·
2024-09-16 07:00
kafka
分布式
效率神器来了:AI工具手把手教你快速提升工作效能
背景:OOPAI-免费问答学习交流-GPT自动化重复性任务Zapier:Zapier可以自动化多个应用程序之间的
工作流程
。
kkai人工智能
·
2024-09-16 04:38
人工智能
学习
媒体
ai
chatgpt
信息系统安全相关概念(下)
文章总览:YuanDaiMa2048博客文章总览上篇指路:信息系统安全相关概念(上)信息系统安全相关概念[下]信息系统风险评估安全风险评估信息系统等级保护网络安全法等级保护等级保护
工作流程
环境安全信息系统风险评估安全风险评估对信息系统整体安全态势的感知和对重大安全事件的预警
YuanDaima2048
·
2024-09-16 04:37
基础概念
课程笔记
安全
Shell脚本中sed使用
目录一、sed编辑器1、sed概述2、sed的
工作流程
3、sed命令的常见格式4、sed命令常用操作二、sed常用命令使用1、sed打印2、sed删除3、sed替换4、sed插入与增加4、sed剪切粘贴与复制粘贴一
jcrhl321
·
2024-09-16 02:00
linux
Kafka
详细解析与应用分析
Kafka
是一个开源的分布式事件流平台(EventStreamingPlatform),由LinkedIn公司最初采用Scala语言开发,并基于ZooKeeper协调管理。
芊言芊语
·
2024-09-15 20:33
kafka
分布式
小米嵌入式面试题目RTOS面试题目 嵌入式面试题目
第一章-非RTOSbootloader
工作流程
MCU启动流程通信协议,SPIIICMCU怎么选型,STM32F1和F4有什么区别外部RAM和内部RAM区别,怎么分配外部总线和内部总线区别MCU上的固件,
好家伙VCC
·
2024-09-15 20:33
面试
杂谈杂谈
面试
职场和发展
Kafka
基础与架构理解
目录前言
Kafka
基础概念消息队列简介:
Kafka
与传统消息队列(如RabbitMQ、ActiveMQ)的对比
Kafka
的组件
Kafka
的工作原理:消息的生产、分发、消费流程
Kafka
系统架构
Kafka
StaticKing
·
2024-09-15 19:27
KAFKA
kafka
影刀RPA与WPS文档协同办公:实现高效自动化处理的策略与实践
本文旨在探讨影刀RPA与WPS文档如何配合使用,以实现
工作流程
的自动化,提高办公效率,并为企业带来实际效益。引言影刀RPA作为一种自动化工具,能够模拟人类用户的行为,执行重复性高、规则性强的工作任务。
enter回车键
·
2024-09-15 15:02
影刀RPA
全面指南:用户行为从前端数据采集到实时处理的最佳实践
本文将详细介绍如何通过前端JavaScript代码采集用户行为数据、利用API和
Kafka
进行数据传输、通过Flink实时处理数据的完整流程。
数字沉思
·
2024-09-15 11:28
营销
流量运营
系统架构
前端
内容运营
大数据
Docker安装
Kafka
和
Kafka
-Manager
本文介绍如何通过Docker安装
kafka
与
kafka
界面管理界面一、拉取zookeeper由于
kafka
需要依赖于zookeeper,因此这里先运行zookeeper1、拉取镜像dockerpullwurstmeister
阿靖哦
·
2024-09-15 09:46
主流行架构
nexus,gitlab,svn,jenkins,sonar,docker,apollo,catteambition,axure,蓝湖,禅道,WCP;redis,
kafka
,es,zookeeper,dubbo
rainbowcheng
·
2024-09-15 09:43
架构
架构
服务器运维小技巧(二)——如何进行监控告警
但是“及时”的这一点很难做到,需要通过优化
工作流程
、建立预警系统,搭建自动化等行为快速响应。今天主要介绍如何通过服务器运维工具搭建监控预警的手段来辅助缩短响应时间。
baiolkdnhjaio
·
2024-09-14 23:00
网络安全
月度总结 | 2022年03月 | 考研与就业的抉择 | 确定未来走大数据开发路线
决定暂时放弃就业,先准备考研,买了数学和408的资料书3月9日-3月13日,因疫情原因,宿舍区暂封,这段时间在准备考研,发现内容特别多3月13日-3月19日,大部分时间在刷Hadoop、Zookeeper、
Kafka
「已注销」
·
2024-09-14 23:30
个人总结
hadoop
分布式消息队列
Kafka
分布式消息队列
Kafka
简介:
Kafka
是一个分布式消息队列系统,用于处理实时数据流。消息按照主题(Topic)进行分类存储,发送消息的实体称为Producer,接收消息的实体称为Consumer。
叶域
·
2024-09-14 22:55
大数据
分布式
kafka
scala
spark
K8S学习之PV&&PVC
如典型的mysql,
kafka
,zookeeper等等。在我们有比较优秀的商业存储的前提下,非常推荐使用有状态服务进行部署,计算和存储分离那是相当的爽的。
david161
·
2024-09-14 20:10
揭秘OozieBundle:架构组件与核心概念
揭秘OozieBundle:架构、组件与核心概念1.背景介绍在大数据领域,数据处理
工作流程
通常由多个复杂的作业组成,这些作业之间存在着依赖关系。
光剑书架上的书
·
2024-09-14 18:59
计算
大数据AI人工智能
计算科学
神经计算
深度学习
神经网络
大数据
人工智能
大型语言模型
AI
AGI
LLM
Java
Python
架构设计
Agent
RPA
上一页
4
5
6
7
8
9
10
11
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他