大数据架构数据仓库消息队列

Spring Boot 应用案例：打造股票价格自动通知平台

这个示例将涵盖SpringBoot的核心功能，包括Web模块、数据持久化、消息队列以及简单的用户订阅机制。项目结构和依赖首先，我们需要创建一个新的SpringBoot项目，并添加必要的依赖。
潘多编程·2024-08-24 17:36

从零到一建设数据中台 - 关键技术汇总

Flume、Sqoop、kettle数据分布式存储：HadoopHDFS离线批处理计算：MapReduce、Spark、Flink实时流式计算：Storm/SparkStreaming、Flink批处理消息队列
我码玄黄·2024-08-24 12:09

Apache Doris + Iceberg 快速搭建指南｜Lakehouse 使用手册（三）

湖仓一体（DataLakehouse）融合了数据仓库的高性能、实时性以及数据湖的低成本、灵活性等优势，能够更加便捷地满足各种数据处理分析的需求。
SelectDB技术团队·2024-08-24 10:25

RabbitMQ（面试篇）

目录MQ是什么MQ的优点消息队列有什么缺点什么是RabbitMQ？rabbitMQ的使用常见RabbitMQ基本概念大家一起加油！！！
在无清风·2024-08-24 04:40

【数据库和数据仓库】

数据仓库和数据库主要有以下区别：一、用途不同数据库：就像一个日常的储物间，主要用于存储和管理日常业务操作中的各种数据，比如电商网站中用户的下单信息、银行系统中客户的交易记录等。
W Y·2024-08-23 22:03

Java架构中的微服务设计模式详解

每个服务独立运行，具有自己的数据存储和业务逻辑，通过轻量级通信协议（如HTTP/REST、消息队列）进行交互。2.微服务设计原
省赚客app开发者·2024-08-23 05:18

RabbitMQ

RabbitMQ是一款广泛使用的开源消息中间件，它基于Erlang语言实现，并遵循高级消息队列协议（AMQP）。
Qzer_407·2024-08-22 19:50

RabbitMQ-消息队列之topic使用

1、安装rabbitmq怎么安装rabbitmq请查看之前课程，如果已经安装，请略过此步。2、创建vendor文件夹或是直接采用PHP框架mkdirvendor3、进入文件cdvendor4、安装php扩展composerrequirephp-amqplib/php-amqplib5、进入上级创建topic文件夹cd../mkdirtopic6、进入topic文件并创建生产者phpcdtopict
龙哥·三年风水·2024-08-22 18:19

简要剖析RocketMQ：原理、架构与实践细节

引言在分布式系统中，消息队列扮演着至关重要的角色，它解决了系统间的耦合、异步通信、流量削峰等问题。RocketMQ是由阿里巴巴开源的一个高性能、低延迟、可扩展的分布式消息中间件。
皮皮哥1号·2024-08-22 07:38

zookeeper+kafka消息队列群集部署

一、消息队列1.消息队列消息是应用间传送的数据消息队列是应用见的通信方式，消息发送后立即返回，由消息系统确保消息可靠传递。
这是九月·2024-08-22 00:54

什么是湖仓一体

在数据湖的基础之上引入事务层，把数据湖和数据仓库的优点有机结合在一起，形成了一个可以同时支持数据分析、数据科
修破立生·2024-08-21 21:03

数据仓库——事务、快照和累积快照事实表

事务、快照和累积快照事务事实表跟踪定义业务过程的个体行为，并且支持几种描述这种行为事实。可以提供丰富的分析型能力，时常充当原子数据的粒度化仓库快照事实表周期性地采样状态度量，这些度量与一系列事务的累积效果相当，但是这些事务的格式不易进行研累积快照事实表用来跟踪通过一系列处理步骤的个体项的进展情况，用于研究多数过程中里程碑或者事件的经过时间。这种事实表在单一行中关联多个不同的行为。事务事实表事务事实
墨染丶eye·2024-03-28 23:58

Kafka、ActiveMQ、RabbitMQ 及 RocketMQ区别比较

消息队列中间件是分布式系统中重要的组件，主要解决应用耦合、异步消息、流量削锋等问题。它可以实现高性能、高可用、可伸缩和最终一致性架构，是大型分布式系统不可缺少的中间件。
木西爷·2024-03-28 11:12

STM32 消息队列处理串口发送的报文

文章目录概要整体流程具体实现小结概要本文写自正在做的项目，需要使用串口2处理EasyModBus传输的报文，原本采用中断处理的方式，在屏幕，按键，感应器同时传输下，产生了丢包现象，偶发性的死机问题，所以改用消息队列进行缓存
S安东尼·2024-03-27 07:25

RabbitMQ的安装

例如秒杀活动，在短时间内访问量急剧增加，使用消息队列，当消息队列满了就拒绝响应，跳转到错误页面，这样就可以使得系统不会因为超负载而崩溃Linux下安装#拉取镜像dockerpullrabbitmq:3.8
白泽27·2024-03-26 00:44

春招面试高频题目总结

消息队列如何保证这个消息一定执行？不会丢失？持久化消息
小杰312·2024-03-22 03:19

服务器虚拟化和云平台,云平台和服务器虚拟化区别

云平台和服务器虚拟化区别内容精选换一换云硬盘(ElasticVolumeService,EVS)可以为云服务器提供高可靠、高性能、规格丰富并且可弹性扩展的块存储服务，可满足不同场景的业务需求，适用于分布式文件系统、开发测试、数据仓库以及高性能计算等场景
木子Hui·2024-03-20 05:14

大数据开发（Hive面试真题-卷二）

跟数据仓库区别？3、Hive架构？4、Hive数据倾斜以及解决方案？5、Hive如果不用参数调优，在map和reduce端应该做什么？6、Hive的三种自定义函数是什么？实现步骤与流程？
Key-Key·2024-03-20 05:14

大数据开发（Kafka面试真题-卷一）

2、请解释以下Kafka的工作原理和它与传统消息队列服务的不同之处？3、解释以下ApacheKafka的作用以及它与常见消息队列系统（如RabbitMQ）之间的区别？
Key-Key·2024-03-18 23:05

Redis 的数据类型及使用场景

List使用List的数据结构，可以做简单的消息队列的功
程序员JavaWind·2024-03-18 15:24

数据挖掘-数据预处理的必要性及主要任务

(2)数据集成：将数据由多个数据源合并成一个一致的数据存储，如数据仓库。(3)数据归约：可以通过如狙击、删除冗余特征或聚类来降低数据的规模。(4)数据变换：
嘣嘣嚓·2024-03-17 10:16

MySQL建表以及excel内容导入

一个数据库从逻辑上来说是由一个或多个表空间所组成，表空间是数据库中物理编组的数据仓库。每一个表空间是由段所组成，一个表空间存放一个或多个数据库的物理文件。一个数据库中的
jameszjd·2024-03-17 00:03

数据仓库的设计开发应用（三）

目录五、数据仓库的实施（一）数据仓库的创建（二）数据抽取转换加载六、数据仓库系统的开发（一）开发任务（二）开发方法（三）系统测试七、数据仓库系统的应用（一）用户培训（二）决策支持（三）维护评估 五、数据仓库的实施
Francek Chen·2024-03-16 14:22

JVM对象创建与内存分配机制分析

、执行方法六、对象内存分配七、对象内存回收可达性分析算法：总结前言最新的Java面试题，技术栈涉及Java基础、集合、多线程、Mysql、分布式、Spring全家桶、MyBatis、Dubbo、缓存、消息队列
旺仔爱Java·2024-03-15 15:16

Redis 除了做缓存，还能做什么？

消息队列：Redis自
舍人_1·2024-03-15 11:39

JVM级缓存本地缓存Caffeine

的优化方面淘汰算法W-TinyLFU三、Caffeine的业务使用总结前言最新的Java面试题，技术栈涉及Java基础、集合、多线程、Mysql、分布式、Spring全家桶、MyBatis、Dubbo、缓存、消息队列
旺仔爱Java·2024-03-15 06:32

03hive数仓安装与基础使用

hiveHive概述Hive是基于Hadoop的一个数据仓库工具。
daydayup9527·2024-03-14 13:39

Spark从入门到精通29:Spark SQL：工作原理剖析以及性能优化

SparkSQL工作原理剖析1.编写SQL语句只要是在数据库类型的技术里面，例如MySQL、Oracle等，包括现在大数据领域的数据仓库，例如Hive。
勇于自信·2024-03-11 00:20

深入理解Redis:工程师的使用指南

作为一款开源的、轻量级的NoSQL数据库，Redis在缓存、消息队列、会话存储等场景中得到了广泛应用。本篇博客将以高级工程师的视角，深入介绍Redis的特性、优势以及如何在实际项目中进行使用。
腹有诗书气自华777·2024-03-10 13:12

ETL策略

数据仓库平台，ETL是很重要一环，看ETL的发展史，最初使用表格，人工从系统下载，在excel匹配，然后加载到数据仓库平台，到后来开始出现ETL工具，大概分为两个派别，以ETL架构的datastage，
朱先生_hfm·2024-03-10 13:11

浅谈消息队列

消息队列由哪些角色组成？生产者（Producer）：负责产生消息。消费者（Consumer）：负责消费消息消息代理（MessageBroker）：负责存储消息和转发消息两件事情。
爱码的嘉·2024-03-09 13:11

RabbitMQ、kafaka、rocketmq等消息队列MQ消息堆积如何解决

文章目录概述解决方案消息堆积如何处理如何解决消息队列的延时以及过期失效问题？消息队列满了以后该怎么处理？有几百万消息持续积压几小时，怎么办？
思静语·2024-03-08 16:11

使用 Redis 进行高效数据缓存的 C# 实践

StackExchange.Redis2.连接到Redis服务器3.常用数据类型的操作4.数据缓存实践5.高级特性和性能优化6.错误处理和异常处理三、总结前言Redis是一种开源的内存数据库，广泛应用于缓存、会话管理和消息队列等场景
仰望大佬007·2024-03-06 21:18

【数据仓库作业】第1章 绪论

三、简述数据仓库的定义。四、简述数据仓库的特征。五、简述主题的定义。六、简述元数据的概念。七、简述数据挖掘的主要任务。八、简述数据挖掘的主要步骤。九、下列活动是否属于数据挖掘任务，并简述其理由。
Francek Chen·2024-03-06 06:28

幂等性设计

目录前言幂等性设计幂等性设计处理流程HTTP幂等性消息队列幂等性基于kafka前言幂等性设计，就是说，一次和多次请求某一个资源应该具有同样的副作用。为什么我们要有幂等性操作？
风清扬-独孤九剑·2024-03-05 04:25

Handler消息机制（四）：子线程可以创建Handler吗

默认情况下，ActivityThread类为我们创建的了主线程的Looper和消息队列，所以当你创建Handler之后发送消息的时候，消息的轮训和handle都是在ui线程进行的。
bug樱樱·2024-03-04 12:47

redis常见面试问题合集

Redis是一个开源的、基于内存的数据结构存储系统，它可以用作数据库、缓存和消息队列。Redis支持多种数据类型，包括字符串、列表、集合、有序集合和哈希表。Redis支持的数据类型有哪些？
V火居道士V·2024-03-04 01:20

Linux进程通信之共享内存

与其他IPC机制（如消息队列和信号量）不同，共享内存直接将一块内存映射到多个进程的地址空间中，使得它们可以
Tyro_wang·2024-03-03 18:10

分布式事务

分布式事务是指在分布式系统中，涉及多个参与者（数据库、消息队列等）的跨多个节点的事务操作。
你不懂、、、·2024-03-03 03:51

让数据用起来：数据中台建设的评估与选择（第4章）

开始构建企业级数据仓库，使用BI工具、大屏等。第三个阶段：数据驱动。加强业务与数据融合，利用大数据、机器学习、深度学习等技术进行精准营销、信用风险控制等。第四个阶段：运营优化。
小阳阳兄·2024-03-03 02:20

物联网常见协议之MQTT 详解

一、简述MQTT（MessageQueuingTelemetryTransport，消息队列遥测传输协议），是一种基于发布/订阅（publish/subscribe）模式的"轻量级"通讯协议，该协议构建于
BY组态·2024-03-01 23:39

分布式和微服务

每个微服务都专注于解决特定的业务问题，并通过消息队列进行互相通信。微服务架构的目标是提高系统的
你小汁完了·2024-02-28 14:56

消息队列-kafka

kafka和redis的区别数据类型和用途：Kafka：Kafka是一个分布式消息队列系统，主要用于高吞吐量的消息发布和订阅。它可以用于构建实时流处理应用、日志收集和传输、事件驱动架构等场景。
百晓生612·2024-02-28 08:48

Hive数据仓库行转列

查了很多资料发现网上很多文章都是转发和抄袭，有些问题。这里分享一个自己项目中使用的行转列例子，供大家参考。代码如下：SELECTmy_id,nm_cd_map['A']ASmy_cd_a,nm_cd_map['B']ASmy_cd_b,nm_cd_map['C']ASmy_cd_c,nm_num_map['A']ASmy_num_a,nm_num_map['B']ASmy_num_b,nm_num
XueminXu·2024-02-28 07:47

数据仓库和数据湖的区别

数据仓库和数据湖是两种不同的数据存储和管理架构，它们有以下区别：1.数据结构：数据仓库采用结构化的数据模型，通常是规范化的关系型数据库，其中数据以表格形式组织，使用预定义的模式和架构。
图灵追慕者·2024-02-28 02:10

在消息队列kafka多消费者组消费同一Topic场景下的idea调试debug断点进不去的解决方案

2.解决思路你在生产者端发送一条消息进入到kafka消息队列，
小白菜儿929·2024-02-26 09:21

【云学院干货】数据仓库服务：在冗余海量数据中找到正确决策

数据仓库服务：在冗余海量数据中找到正确决策目前数据仓库分析解决方案在金融，电信，零售等多个行业发展迅速，很多企业在关键决策中需要对自身海量数据进行多样化，深层次的分析。
舒意从生·2024-02-24 07:21

每天一个数据分析题（一百六十四）

关于OLAP系统，下列选项不正确的是（）A.是基于数据仓库的信息进行分析处理过程B.用户数量相对较少，其用户主要是业务决策人员与管理人员C.对响应时间要求非常高。
紫色沙·2024-02-22 22:43

大数据计算技术秘史（上篇）

其实在大数据技术兴起之前，对于用户来讲并没有存储和计算的区分，都是用一套数据库或数据仓库的产品来解决问题。而在数据量爆炸性增长后，情况就变得不一样了。
·2024-02-22 20:33

Docker安装RabbitMQ

RabbitMQ是实现高级消息队列协议(AMQP)的开源消息代理软件（有时称为面向消息的中间件）。RabbitMQ服务器是用Erlang编程语言编写的，并建立在OpenTel
tag心动·2024-02-22 13:01
上一页 11 12 13 14 15 16 17 18 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他