etl+数据仓库第7页

从 AutoMQ Kafka 导出数据到 Databend

作者：韩山杰DatabendCloud研发工程师https://github.com/hantmacDatabend是使用Rust研发、开源的、完全面向云架构、基于对象存储构建的新一代云原生数据仓库，为企业提供湖仓一体化

Databend·2024-01-12 20:44

GBASE南大通用 GBase 8a 产品构建数仓系统架构

lGBASE南大通用GBase8a产品构建数仓应用的系统架构：架构技术实现特点适用场景独立数据仓库（集市）系统架构一套GBase8a物理集群适用于数据规模较小的业务场景适用于各业务之间数据互访较频繁的业务场景适用于单一独立的业务场景企业级数仓系统架构多套

GBASE数据库·2024-01-12 12:04

【数据库学习】hive

1，HIVEHadoop的数据仓库处理工具，数据存储在Hadoop兼容的文件系统（例如，AmazonS3、HDFS）中。

兔兔西·2024-01-12 08:50

【大数据面试】常见数仓建模面试题附答案

话数Science·2024-01-12 07:28

Hive解析json数组

在使用Hive搭建数据仓库，处理数据时，同传统数仓的结构化数据不同，我们经常会遇到一些非结构化的数据，json格式的字符串就是常见的一种类型。

风筝flying·2024-01-12 03:47

Hive数据库：嵌入、本地、远程全攻略（上）

Hive分布式数据仓库工具关系型数据库建立在关系模型之上的数据库称为关系型数据库(关系模型是由埃德加·科德于1970年提出的)，关系型数据库借助集合代数等数学概念处理数据库中的数据。

小伍_Five·2024-01-11 22:03

分析型数据库产品的排头兵GBase 8a

它是在GBase8a列存储数据库基础上开发的一款SharedNothing架构的分布式并行数据库集群，具备高性能、高可用、高扩展等特性，可以为各种规模数据管理提供高性价比的通用计算平台，并广泛用于支撑各类数据仓库系统

any_2311·2024-01-11 14:53

Hive（总）看完这篇，别说你不会Hive！

2.2HiveJDBC访问2.2.1启动hiveserver2服务2.2.2连接hiveserver2服务2.2.3注意2.3Hive常用交互命令2.4Hive其他命令操作2.5Hive常见属性配置2.5.1数据仓库位置配置

Archie_java·2024-01-11 03:22

【大数据进阶第三阶段之ClickHouse学习笔记】ClickHouse的简介和使用

1、ClickHouse简介ClickHouse是一种列式数据库管理系统（DBMS），专门用于高性能数据分析和数据仓库应用。

Allen_lixl·2024-01-10 20:41

数仓规范

转自：https://mp.weixin.qq.com/s/mGkYRj8iV5_QvNMjS7bpIQ数据仓库是为企业所有级别的决策制定过程，提供所有类型数据支持的战略集合。

听雪10·2024-01-10 15:37

系分笔记数据库技术之分布式数据库和数据仓库

文章目录1、概要2、分布式数据库3、数据仓库4、总结1、概要数据库设计是考试重点，常考和必考内容，本篇主要记录了知识点：分布式数据库和数据仓库。

说来世事不如闲~·2024-01-10 08:07

mysql-存储引擎

MyISAMmylsam是基于isam存储引擎，并对其扩展，它是web,数据仓库和其它应用环境下最常用的储存

一个喜欢烧砖的人·2024-01-10 06:17

git入门使用

git介绍git是一个分布式版本管理控制系统，而SVN不是分布式的，git没有一个全局的版本号，而SVN有一个确定的全局版本号；git与SVN的结构如下图：git工作区、暂存区和版本库（数据仓库Repository

xiaofeilongyu·2024-01-09 18:49

基于springboot的停车场管理系统-计算机毕业设计源码82061

摘要由于数据库和数据仓库技术的快速发展，停车场管理系统建设越来越向模块化、智能化、自我服务和管理科学化的方向发展。

vx_cxsj813·2024-01-09 16:01

【读书笔记】《 Hadoop构建数据仓库实践》第1章

02-《Hadoop构建数据仓库实践》.jpg第1章数据仓库简介1.1什么是数据仓库Inmon将数据仓库描述为一个面向主题的、集成的、随时间变化的、非易失的数据集合，用于支持管理者的决策过程。

笔名辉哥·2024-01-09 15:01

Hive基础知识（一）：Hive入门与Hive架构原理

Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张表，并提供类SQL查询功能。

依晴无旧·2024-01-09 13:25

Hive基础知识笔记（含MySQL metastore伪分布式安装配置流程）

Hadoop-Exercises/tree/master/src/main/java/Hive一、介绍1.Hive是一个构建在Hadoop平台上的用类似SQL的语句HQL来协助读写与管理分布式系统上大数据集的数据仓库框架

书忆江南·2024-01-09 13:52

Hive基础知识

1）Hive是基于Hadoop的一个数据仓库工具，将结构化的数据文件映射为一张数据库的数据表，并且提供类SQL查询功能。

巷子里的猫X·2024-01-09 13:52

大数据开发：Hive基础知识点介绍

Hive简介根据官方文档的定义，Hive是一种用类SQL语句来协助读写、管理那些存储在分布式存储系统上大数据集的数据仓库软件。Hive的特点Hive最大的特

加米谷大数据张老师·2024-01-09 13:52

基于hadoop的hive数据仓库基础操作知识整理

Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张表，并提供类SQL查询功能。

大包丫·2024-01-09 13:51

Hadoop的数据仓库Hive的基础知识和安装部署

1、数据仓库和Hive 数据仓库是为了协助分析报告，支持决策，为需要业务智能的企业提供业务流程的改进和指导，从而节省时间和成本，提高质量。

姠惢荇者·2024-01-09 13:21

Spark与Hive的集成与互操作

Spark提供了强大的分布式计算能力，而Hive是一个用于查询和管理大规模数据的数据仓库工具。本文将深入探讨如何在Spark中集成和与Hive进行互操作，以充分利用它们的强大功能。

晓之以理的喵~~·2024-01-09 11:30

阿里云大数据ACA及ACP复习题（81~100)

（B）A:大数据计算服务MaxComputeB:QuickBI数据可视化分析平台C:实时计算Flink版D:云原生数据仓库（分析型数据库）AnalyticDB**解析**：阿里云实时计算Flink版（AlibabaCloudRealtimeComputeforApacheFlink

周周的奇妙编程·2024-01-09 08:20

Hive操作命令上手手册

内容来自于《大数据Hive离线计算开发实战》Hive原理Hive是一个基于Hadoop的数据仓库和分析系统，用于管理和查询大型数据集。

枫叶梨花·2024-01-09 08:50

hive的基本操作

最近新学了hive，想通过写文章的方式对所学知识进行巩固，同时希望可以帮助到大家Hive是基于Hadoop的一个数据仓库工具1.创建数据库（创建方法是和Mysql一样的）createdatabase数据库名字

暴打小赵·2024-01-09 06:49

实验6 熟悉Hive的基本操作

一、实验目的（1）理解Hive作为数据仓库在Hadoop体系结构中的角色。（2）熟练使用常用的HiveQL。

Z.Q.Feng·2024-01-09 06:47

Hive基本操作

hive简单认识Hive是建立在HDFS之上的数据仓库，所以Hive的数据全部存储在HDFS上。

X晓·2024-01-09 06:45

MySql01：初识

1.mysql数据库2.配置环境变量3.列的类型和属性，索引，注释3.1类型3.2属性3.3主键(主键索引)3.4注释4.结构化查询语句分类：5.列类型--表列类型设置1.mysql数据库数据库：数据仓库

Bruce6379·2024-01-09 06:36

大数据开发-某外包公司

1.用过那些组件2.说下HDFS读写流程3.说下varchar和char区别4.说下数据库的事务5.spark的部署模式有哪些6.数据库和数据仓库的区别7.内部表和外部表的区别8.说下数据中台、数据仓库和数据湖的区别

劝学-大数据·2024-01-09 06:10

经典！自己要学的太多了！加油吧！！！

EnterpriseComputing)是稍时髦较好听的名词，主要是指企业信息系统,如ERP软件（企业资源规划）、CRM软件（客户关系管理）、SCM软件（供应链管理，即物流软件）,银行证券软件,财务软件,电子商务/政务（包括各种网站），数据仓库

johnson_d31·2024-01-08 23:13

大数据技术架构

工作角色分工，数据处理以数据仓库开发人员为主，数据分析以数据分析师为主，其他所有组件、系统、技术相关归为数据平台。2数据源大数据的数据来源虽然多，但不杂。

乘风踏羽·2024-01-08 17:47

greenplum 历史拉链表

3.1历史拉链表数据仓库定义：是一个面向主题的、集成的、相对稳定的、反映历史变化的数据集合，用于支持管理决策。历史拉链表：一种数据模型，主要是针对数据仓库设计中表存储数据的方式而定义的。

用心一·2024-01-08 11:48

【数据仓库与联机分析处理】数据仓库工具Hive

目录一、Hive简介（一）什么是Hive（二）优缺点（三）Hive架构原理（四）Hive和数据库比较二、MySQL的安装配置三、Hive的安装配置1、下载安装包2、解压并改名3、配置环境变量4、修改hive-env.sh文件四、配置Hive元数据存储到MySQL1、修改hive-site.xml文件2、上传MySQL连接驱动3、初始化Hive元数据库4、验证元数据一、Hive简介（一）什么是Hiv

Francek Chen·2024-01-08 08:42

Hadoop、Pig、Hive、Storm、NOSQL 学习资源收集【Updating】 (转)

我爱大海V5·2024-01-08 08:15

开源、云原生且实时分析型的现代数据仓库DataBend的介绍，及其与其它开源文件存储的结合使用实例

DataBend介绍Databend是一个开源、云原生且实时分析型的现代数据仓库，旨在提供高效的数据存储和处理能力。

小果运维·2024-01-08 07:14

FineBI实战项目一（3）：Kettle实现ETL到数据仓库

目前，finebi_shop_bi中是没有任何数据的，是一个空的数据库。而后续我们的所有数据分析都将在该数据库中进行。我们第一件事情就是要将「finebi_shop」数据库中的所有表抽取到「finebi_shop_bi」数据库中。要抽取并装载数据到「finebi_shop_bi」中，我们首先要在「finebi_shop_bi」中创建对应的表。1数据抽取业务分析我们已经大概熟悉了上面的6张表，这6张

不死鸟.亚历山大.狼崽子·2024-01-08 06:31

Hive入门

一、Hive概述1.1Hive简介Hive是基于Hadoop的一个数据仓库工具，它可以将结构化或半结构化的数据文件转化为一张数据库表，并提供简单的sql查询功能。

爱过java·2024-01-07 17:04

数据密集型应用系统设计--3.3 列式存储

虽然事实表通常超过100列，但典型的数据仓库查询往往一次只访问其中的4或5个。在大多数OLTP数据库中，存储以面向行的方式布局：来自表的一行的所有值彼此相邻存储。

下海的alpha·2024-01-07 17:45

有用的技术分享主题

SQLServer数据库和AgentJob集成化监控工具Airflow调度工具的安装和使用Tableau报表开发网络爬虫技术开发PythonGUI应用开发基于S3的数据湖架构设计和大数据开发Hive大数据仓库超大数据集去重解决方案

weixin_30777913·2024-01-07 10:42

Teradata数据库和Informatica ETL逻辑及视图、用户定义函数和存储过程迁移到AWS的Hive数据仓库基本流程

，我们需要注册AWS帐号，并启用EC2（ElasticCloudComputing，高性能云计算）、EMR（ElasticMap-Reduce，高性能大数据计算）、Redshift/Snowflake数据仓库和

weixin_30777913·2024-01-07 10:12

FineBI实战（2）：案例架构说明及数据准备

1系统架构基于MySQL搭建数据仓库基于Kettle进行数据处理帆软FineBI基于MySQL搭建的数据仓库进行数据分析2数据流程图通过Kettle将MySQL业务系统数据库中，将数据抽取出来，然后装载到

不死鸟.亚历山大.狼崽子·2024-01-07 08:25

【数据仓库与联机分析处理】多维数据模型

目录一、数据立方体二、数据模型（一）星形模型（二）雪花模式（三）事实星座模式三、多维数据模型中的OLAP操作（一）下钻（二）上卷（三）切片（四）切块（五）转轴数据仓库和OLAP工具是基于多维数据模型的，

Francek Chen·2024-01-07 07:05

SaaS中数据仓库实战：构建智能数据基础支持业务创新

在当今数字化时代，SaaS企业越来越重视数据的价值，而构建一个高效的数据仓库是实现数据驱动业务创新的关键一步。本文将深入探讨SaaS中数据仓库的实战应用，以及如何通过智能数据基础支持业务的持续发展。

benhuyun_dev·2024-01-07 07:05

Hive内部表和外部表的区别

主要体现在load与drop（是否同时删除元数据与数据）的操作上：创建表：Hive创建内部表时，会将数据移动到数据仓库指向的路径，hive管理数据的生命周期；Hive创建外部表时，仅记录数据所在的路径，

airyv·2024-01-07 06:44

ssm企业人事信息管理系统-98194，（免费领取源码）计算机毕业设计选题开题+程序定制+论文书写+答辩ppt书写包售后全流程

企业人事信息管理系统的设计与实现摘要由于数据库和数据仓库技术的快速发展，企业人事信息管理系统建设越来越向模块化、智能化、自我服务和管理科学化的方向发展。

vx_bscxy322·2024-01-07 05:21

Hive的基本的概述即使用参考

1.Hive的概述√意义：在于大幅度降低工程师学习MapReduce的学习成本，让好用（计算速度快）的MapReduce更方便的使用（使用简单）√基本概念：Hive是基于Hadoop的一个数据仓库工具，

C8H11O2N_4cd4·2024-01-07 02:29

2024.1.5 Hadoop各组件工作原理,面试题

4.数据库与数据仓库的区别?5.简述下数据仓库经典三层架构?6.请简述内部表和外部表的区别?

白白的wj·2024-01-06 23:34

《Hive系列》Hive详细入门教程

目录1Hive基本概念1.1什么是HiveHive简介Hive：由FaceBook开源用于解决海量结构化日志的数据统计工具Hive：基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张表

DATA数据猿·2024-01-06 17:55

Hive（一）概述

6.Hive配置7.关于小文件问题二.安装Hive三.Hive基本使用一.简介1.概述什么是HiveHive：由Facebook开源用于解决海量结构化日志的数据统计工具Hive是基于Hadoop的一个数据仓库工具

Jumanji_·2024-01-06 17:54

教你如何将本地虚拟机变成服务器，供其它电脑访问

场景：最近在做数据仓库的作业，需要团队协作，买不起阿里云服务器，所以想到能不能将我本地机上的虚拟机变成服务器，供其它同学的电脑访问。

吾浴西风·2024-01-06 16:01

推荐频道

etl+数据仓库