大数据架构数据仓库消息队列

数据库系统原理总结之——数据管理技术的发展

第八章数据管理技术的发展第八章数据管理技术的发展一、数据库技术发展★★二、数据仓库★★★三、数据挖掘的功能★★★四、大数据的定义★★五、大数据存储★六、NoSQL系统支持的数据存储模型★★★★七、MapReduce
润小仙女·2024-01-19 00:45

消息中间件作用

一：消息队列的主要作用是什么？
xmh-sxh-1314·2024-01-18 23:25

数据库内核那些事｜一文Get PolarDB IMCI如何对半结构化数据进行高效分析

InMemoryColumnIndex，IMCI）推出完备虚拟列与列式JSON等功能，可以快速处理大数据和支持多种数据类型（包括结构化与半结构化数据），并提供高效的数据分析、查询与流计算能力，适用于数据分析、数据仓库与扩展流计算等应用场景
阿里云瑶池数据库·2024-01-18 23:39

数据库的设计模式

2.StarSchema（星型模式）用途：用于数据仓库和商业智能应用。描述：一个中心事实表和多个维度表。事实表存储度量值或事务数据，维度表存
凌寒ᨐ舞·2024-01-18 23:37

为什么需要消息中间件?

1.消息中间件是什么消息队列（MQ）是一种系统间相互写作的通信机制，目前业界通常由两种方式来实现系统间通信，其中一种是基于远程过程调用的方式;另一种是基于消息队列的方式。
coffee_babe·2024-01-18 21:39

消息中间件面试题

目录一.为什么使用消息队列二.RabbitMQ1.RabbitMQ如何保证消息不丢失2.RabbitMQ消息的重复消费问题3.RabbitMQ延迟队列4.RabbitMQ消息堆积5.RabbitMQ高可用机制三
黑暗对我避而远之·2024-01-18 18:47

Hive入门

介绍Hive是一个基于Hadoop的数据仓库工具，它可以将结构化数据文件映射成一张表，然后通过类似SQL的查询语句来执行查询。
kongxx·2024-01-18 17:11

WebFlux

响应式web与阻塞式web组件对应关系优点:底层完全基于netty+reactor+springweb完成的一个全异步,非阻塞的web响应式框架底层:异步+消息队列(内存)+事件回调机制=整个系统使用少量资源处理大量请求组件对比
Angela龙·2024-01-18 15:18

是时候扔掉 Postman 了，试试 IntelliJ IDEA 自带的高能神器！

blog.csdn.net/love468092550主要分享JVM、Spring、SpringBoot、Cloud、IDEA、Dubbo、Redis、git、微服务、MySQL、集群、分布式、中间件、消息队列
IT修真院·2024-01-18 13:14

构建高效数据生态：数据库、数据仓库、数据湖、大数据平台与数据中台解析_光点科技

本文将深入探讨数据库、数据仓库、数据湖、大数据平台以及数据中台的功能和价值，帮助您构建一个符合自身业务需求的高效数据生态系统。
光点数据治理·2024-01-18 12:24

字节跳动大数据架构面经（超详细答案总结）

字节一面1面试官：简单的做个自我介绍吧面试官，您好！我叫xxx,xxxx年x月毕业于xxx学校，xx学历，目前就职于xxx公司xxx部门，职位为：大数据开发工程师，主要从事于xxx组件、平台的开发工作。工作以来，我先后参加了xxx项目、xxx项目以及xxx项目，积累了丰富的项目经验，同时，这x个项目都得到了领导的一致好评。我对Flink组件有着浓厚的兴趣，工作之余经常钻研技术、例如：Flink四大
Python栈机·2024-01-18 12:39

Excel 动态可视化图表分享

AIGCChatGPT职场案例AI绘画与短视频制作PowerBI商业智能68集数据库Mysql8.054集数据库Oracle21C142集Office2021实战应用Python数据分析实战，ETLInformatica数据仓库案例实战
阿里数据专家·2024-01-18 11:29

小程序paho.mqtt连接微消息队列 MQTT 版

最近在做一个小程序连接阿里云的微消息队列MQTT版，说实话，通过这次debug，发现阿里的技术文档很多方面不完善，对前端的SDK，文档只有js，好吧。只能靠自己鸟。
赚成美业·2024-01-18 11:52

【大数据】kafka

文章目录【后端目录贴】1.定义2.消息队列2.1使用消息队列的好处2.2消息队列的两种模式3.Kafka基础架构4.kafka使用4.1jar包下载(0.11.0.0版本)4.2部署5.Kafka架构深入
骑鱼过海的猫123·2024-01-18 09:34

nodejs+vue+ElementUi婚恋交友相亲网站yne25-vscode项目

同时，使用MySQL数据库，设计实体-联系图和数据表格，用于更好的存储和管理数据信息的数据仓库。通过使用关键技术研发本系统，并根据需求分析得出用户的主要需求，设计与实现本系统的功能模块。
QQ_402205496·2024-01-18 09:16

代理服务器（Broker）的Master-Slave 架构

在消息队列系统中，代理服务器（Broker）的架构可以采用Master-Slave架构，但并不是所有消息队列系统都使用这种架构。
heartfluttering·2024-01-18 08:06

技术选型｜开源大数据OLAP引擎最佳实践

现在ROLAP计算存储一体的数据仓库主要有三种，即StarRocks(D
浪尖聊大数据-浪尖·2024-01-18 08:14

数据仓库系列：StarRocks的简单试用及与clickhouse的对比

1.搭建测试环境dockerpullstarrocks/allin1-ubuntu:2.5.4dockerrun-p9030:9030-p8030:8030-p8040:8040-itdstarrocks/allin1-ubuntu:2.5.4dockerps2.简单测试2.1.使用mysqlclient连接mysql-P9030-h127.0.0.1-uroot--prompt="StarRoc
enjoy编程·2024-01-18 08:13

RabbitMQ(消息队列)浅记

消息队列PS:大二下学习RabbitMQ的随手小记一、什么是MQMQ(messagequeue)，从字面意思上看，本质是个队列，FIFO先入先出，只不过队列中存放的内容是message而已，还是一种跨进程的通信机制
芝士汉堡 ིྀིྀ·2024-01-18 08:05

linux发布微软消息队列,消息队列RabbitMQ入门与5种模式详解

1.RabbitMQ概述简介：MQ全称为MessageQueue，消息队列是应用程序和应用程序之间的通信方法；RabbitMQ是开源的，实现了AMQP协议的，采用Erlang(面向并发编程语言)编写的，
乐昂·2024-01-18 08:04

消息队列之RabbitMQ介绍

系列文章目录提示：这里可以添加系列文章的所有文章的目录，目录需要自己手动添加消息队列之RabbitMQ介绍提示：写完文章后，目录可以自动生成，如何生成可参考右边的帮助文档文章目录系列文章目录前言一、RabbitMQ
键盘敲烂~~~·2024-01-18 08:29

消息队列之RabbitMQ工作模式

系列文章目录提示：这里可以添加系列文章的所有文章的目录，目录需要自己手动添加消息队列之RabbitMQ工作模式提示：写完文章后，目录可以自动生成，如何生成可参考右边的帮助文档文章目录系列文章目录前言一、
键盘敲烂~~~·2024-01-18 08:25

银行数据仓库体系实践（1）--银行数据仓库简介

银行数据仓库简介数据仓库之父比尔（BillInmon）在1991年出版的“BuildingtheDataWarehouse”（《建立数据仓库》）一书中所提出的定义被广泛接受：数据仓库（DataWarehouse
南极找南·2024-01-18 07:32

Hive编程（一）

数据库操作：数据仓库的创建：createdatabase（ifnotexist）hivedwd；创建时添加键值对信息：createdabatasehivedwhwithdbproperties（‘owner
꧁༺朝花夕逝༻꧂·2024-01-18 07:29

Redis相关问题

1.缓存（点赞，秒杀，修改次数少的（新闻类型，分类菜单），存储验证码（定时删除））2.计数器3.排行榜（z-set）4.数据排重（set）5.消息队列（l-pop,r-pop，医院排号）6.分布式锁Redis
Adellle·2024-01-18 07:26

银行数据仓库体系实践（2）--系统架构

UML对系统架构的定义是：系统的组织结构，包括系统分解的组成部分，它们的关联性，交互，机制和指导原则，例如对系统群就是定义各子系统的功能和职责，如贷款系统群可能分为进件申请、核额、交易账务、贷后管理、管理台等子系统，对于系统就是定义各模块的功能和层次，例如管理台包括权限管理、用户管理、交易管理、逾期管理、统计分析等功能。技术架构是指从技术实现层面描述系统，主要是根据系统架构组成部分确定每层使用什么
南极找南·2024-01-18 06:59

阿里数据仓库搭建实践分享

内容来源：2017年7月8日，阿里云高级技术专家后稷在“阿里云—数据化运营实践分享【7上海站】”进行《阿里数据仓库搭建实践分享》演讲分享。
IT大咖说·2024-01-18 05:24

IO进程线程Day7

1>使用消息队列完成两个进程之间相互通信#includestructmsgbuf{longmtype;charmtext[1024];};#defineSIZE(sizeof(structmsgbuf)
yxgjbfddgijhhhj·2024-01-18 05:03

关联规则分析（Apriori算法

啤酒和尿布的关联规则故事沃尔玛公司数据仓库里集中了其各门店的详细原始交
天玑y·2024-01-18 02:09

rabbitmq基础教程（ui，java，springamqp）

Docker安装rabbitmq-CSDN博客任务一创建一个队列这样创建两个队列在amq.fanout交换机里面发送数据模拟发送数据发送消息，发现一下信息：所以得出理论，消息发送是先到交换机，然后由交换机路由到消息队列交换机是负责路由和转发消息的
村口曹大爷·2024-01-18 01:47

离线数仓二

数据仓库维度模型设计维度建模基本概念维度模型是数据仓库领域大师RalphKimall所倡导，他的《数据仓库工具箱》，是数据仓库工程领域最流行的数仓建模经典。
pauls·2024-01-18 00:26

Kafka详解

KAFKA1、消息队列（了解）1-1消息队列介绍英文名：MessageQueue，经常缩写为MQ。
中长跑路上crush·2024-01-17 23:02

Go新项目-调研关于go项目中redis的使用场景，lua实战（7）

社交网络7、最新列表8、消息系统9、地理位置10、搜索引擎常用命令实际场景1、缓存2、数据共享分布式3、分布式锁4、全局ID5、计数器6、限流7、位统计8、购物车9、用户消息时间线timeline10、消息队列
ifanatic·2024-01-17 23:45

数据仓库面试题

1思维导图&数仓常见面试题2题目1.数据仓库是什么？  
韩顺平的小迷弟·2024-01-17 21:53

离线数据仓库-关于增量和全量

数据同步策略数据仓库同步策略概述一、数据的全量同步二、数据的增量同步三、数据同步策略的选择数据仓库同步策略概述应用系统所产生的业务数据是数据仓库的重要数据来源，我们需要每日定时从业务数据库中抽取数据，传输到数据仓库中
Aimyon_36·2024-01-17 20:38

九：day01_ 消息队列01

第一章RabbitMQ概念1.1.1消息队列MQ全称MessageQueue（消息队列），是在消息的传输过程中保存消息的容器。多用于系统之间的异步通信。1.1.2消息两台计算机间传送的数据单位。
新手小菜鸟上路·2024-01-17 17:17

【消息队列】MQ 是什么？为什么用MQ？怎么实现MQ？

一、消息队列是什么？消息队列（MQ）是一种在分布式系统中，用于在应用程序之间传递消息的通信机制。它通常包含一个消息生产者、一个消息消费者和一个消息队列。
heartfluttering·2024-01-17 17:39

常用的消息队列和中间件都有哪些

常用的消息队列和中间件有以下几种：RabbitMQ：RabbitMQ是一个开源的消息队列中间件，使用Erlang语言编写。它具有可靠性、灵活性和易用性的特点，支持多种消息协议。
酷爱码·2024-01-17 16:08

GaussDB(DWS)查询优化技术大揭秘

GaussDB(DWS)查询优化技术大揭秘大数据时代，数据量呈爆发式增长，经常面临百亿、千亿数据查询场景，当数据仓库数据量较大、SQL语句执行效率低时，数据仓库性能会受到影响。
炒香菇的书呆子·2024-01-17 15:52

面试题总结-MQ总结

【1】说一下什么是MQ答：MQ是消息队列容器，常见的MQ技术有RabbitMQ,RocketMQ。解决微服务异步通信问题，场景如下：抢票、秒杀类场景：目的只有一个将并行场景转为串行场景来缓解并发压力。
酷寒的小蛮蛮·2024-01-17 13:22

消息中间件RabbitMQ

1.消息队列1.1.MQ的相关概念1.1.1.什么是MQMQ(messagequeue)，从字面意思上看，本质是个队列，FIFO先入先出，只不过队列中存放的内容是message而已，还是一种跨进程的通信机制
小鱼儿&·2024-01-17 11:03

rabbitmq-java基础详解

1、MQ定义MQ（MessageQueue）消息队列主要解决：异步处理、应用解耦、流量削峰等问题，是分布式系统的重要组件，从而实现高性能，高可用，可伸缩和最终一致性的架构，rabbitmq是消息队列中的一种
CAUC_lin·2024-01-17 11:30

RabbitMQ

RabbitMQ1.1RabbitMQ的特点1.2RabbitMQ基本概念1.3工作模式1.4RabbitMQ详细概念1.4.1Exchange(交换器)1.4.2Binding(绑定)1.4.3Queue(消息队列
解梦者·2024-01-17 11:25

RabbitMQ

7049160818834800677参考文献：RabbitMQ常见面试题总结|Java学习&面试指南-程序员大彬(topjavaer.cn)RabbitMQ一、简介：RabbitMQ是一个由erlang开发的消息队列
yz涣·2024-01-17 10:30

实现30分钟未支付则自动取消功能

延时任务实现方案：数据库轮询JDK延时队列时间轮算法Redis缓存消息队列数据库轮询数据库定时扫描筛选超时订单优点：简单、支持集群缺点：内存消耗大、存在延迟、数据库消耗极大（频繁查询）JDK延时队列（生产者消费者
小马龙·2024-01-17 10:47

day7:消息队列与共享内存

思维导图：消息队列原理：进程在内核空间中维护出消息队列，每个进程借由消息队列的msgid对消息队列进行读写操作，消息队列中的信息是一个结构体，存储着消息的种类（身份证）和消息的内容，多个进程间可以通过消息的种类来进行通讯
jacksheepskin·2024-01-17 09:28

Hive数据导出的四种方法

hive数据仓库有多种数据导出方法，我在本篇文章中介绍下面的四种方法供大家参考：Insert语句导出、Hadoop命令导出、Hiveshell命令导出、Export语句导出。
冬瓜的编程笔记·2024-01-17 08:31

hive除数取整

简介Hive是一个构建在Hadoop上的数据仓库基础设施，它提供了一个类似于SQL的查询语言，用于处理大规模的结构化数据。在Hive中，我们常常需要对数据进行数学运算，包括除法操作。
cuisidong1997·2024-01-17 08:30

HashData湖仓一体方案：方案概览与Hive数据同步

随着云计算、大数据、AI的发展和普及，各行各业的业务场景日益复杂，数据呈现出大规模、多样性的特点，企业对数据仓库的需求也进一步拓展至对多元化数据实时处理的场景。
HashData酷克数据·2024-01-17 07:55

kafka简单介绍和代码示例

“这是一篇理论文章，给大家讲一讲kafka”简介在大数据领域开发者常常会听到MQ这个术语，该术语便是消息队列的意思，Kafka是分布式的发布—订阅消息系统。
necessary653·2024-01-17 07:53
上一页 18 19 20 21 22 23 24 25 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他