E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
数据仓库SNOWFLAKE
ETL详解--
数据仓库
技术
一、ETL简介ETL,是英文Extract-Transform-Load的缩写,用来描述将数据从来源端经过抽取(extract)、转换(transform)、加载(load)至目的端的过程,是
数据仓库
的生命线
小菠萝Mm
·
2024-01-13 07:45
数据仓库
etl
学习
数据库
年终总结各类表格模板Excel,大屏可视化,PPT总结等
AIGCChatGPT职场案例AI绘画与短视频制作PowerBI商业智能68集数据库Mysql8.054集数据库Oracle21C142集Office2021实战应用Python数据分析实战,ETLInformatica
数据仓库
案例实战
阿里数据专家
·
2024-01-13 06:15
ChatGPT实战案例
ChatGPT
与
Python
ChatGPT
excel
powerpoint
prompt
chatgpt
AIGC
oracle
数据仓库
研发规范
数据仓库
研发规范本文将介绍
数据仓库
研发规范的阶段规划、角色职责和整体流程。在大数据时代,规范地进行数据资产管理已成为推动互联网、大数据、人工智能和实体经济深度融合的必要条件。
左美美  ̄
·
2024-01-13 06:55
数据仓库
基于大数据与时间序列预测的的书籍数据分析(内含spark+hive+mysql+kettle+echart+tensorflow)
tensorflow简介(二)前端相关技术1.HTML简介2.echarts简介(三)相关数据库1.Mysql简介2.hive简介三.需求分析三.系统设计项目框架:系统目的:数据库设计:四.系统实现1.预处理:
数据仓库
左岸2420
·
2024-01-13 05:59
数据库
大数据
深度学习
大数据
spark
hive
mysql
tensorflow
echarts
Hive学习笔记(Hive数据的定义与操作)
管理表外部表修改表删除表分区表静态分区动态分区HiveQL数据操作向管理表中装载数据经查询语句向表中插入数据单个查询语句中创建表并加载数据导入数据导出数据Hive数据定义与操作HiveQL数据定义语言Hive
数据仓库
中的
ジ時光不老
·
2024-01-13 04:22
Hive学习
java
开发语言
后端
Hive数据定义(1)
hive数据定义是hive的基础知识,所包含的知识点有:
数据仓库
的创建、
数据仓库
的查询、
数据仓库
的修改、
数据仓库
的删除、表的创建、表的删除、表的修改、内部表、外部表、分区表、桶表、表的修改、视图。
冬瓜的编程笔记
·
2024-01-13 04:47
大数据
hive
hadoop
数据仓库
2022字节跳动【
数据仓库
工程师】日常实习面经-----一面
文章目录一,自我介绍二,问答阶段三,代码阶段四,反问五,总结背景:今年金三银四,看着大家都在疯狂找实习offer,不甘落后的我也信心满满(毫无把握)的去字节面试(现在想想真是胆大,都还没学扎实)一,自我介绍二,问答阶段shuffle阶段详细介绍回答环形缓冲区,分区排序,溢写磁盘,reduce再抽取归并等等计算单元和实际block存储单元不在一个机器节点上,这样会带来大量的IO操作,Hadoop如何
dyson不只是吹风机
·
2024-01-13 03:34
面试
数据仓库
大数据
第三阶段、
数据仓库
一、
数据仓库
的基本定义:1.
数据仓库
:简称DW或DWH,是数据库的一种概念上的升级,是为企业所有级别的决策制定过程,出于分析性报告和决策支持目的而创建。
ATPX4869l
·
2024-01-13 01:14
如何解决NAND系统性能问题?--NAND分类
一、故事引言想象一下,你正在管理一座神奇的
数据仓库
,这个仓库没有沉重的门、旋转的磁盘和机械手臂,而是由一群训练有素的“数据小飞侠”组成。
古猫先生
·
2024-01-13 01:15
NAND
大数据
linux
性能优化
服务器
从 AutoMQ Kafka 导出数据到 Databend
作者:韩山杰DatabendCloud研发工程师https://github.com/hantmacDatabend是使用Rust研发、开源的、完全面向云架构、基于对象存储构建的新一代云原生
数据仓库
,为企业提供湖仓一体化
Databend
·
2024-01-12 20:44
开源
数据库
GBASE南大通用 GBase 8a 产品构建数仓系统架构
lGBASE南大通用GBase8a产品构建数仓应用的系统架构:架构技术实现特点适用场景独立
数据仓库
(集市)系统架构一套GBase8a物理集群适用于数据规模较小的业务场景适用于各业务之间数据互访较频繁的业务场景适用于单一独立的业务场景企业级数仓系统架构多套
GBASE数据库
·
2024-01-12 12:04
数据库
GBASE南大通用
GBASE
雪花代码-html版
雪花代码动画效果代码body{background-color:#000000;}.
snowflake
{position:absolute;font-size:10px;color:#FFFFFF;text-shadow
Coisini_甜柚か
·
2024-01-12 11:53
游戏
html
javascript
前端
【数据库学习】hive
1,HIVEHadoop的
数据仓库
处理工具,数据存储在Hadoop兼容的文件系统(例如,AmazonS3、HDFS)中。
兔兔西
·
2024-01-12 08:50
数据库
学习
hive
【大数据面试】常见数仓建模面试题附答案
常见面试题
数据仓库
面试题-理论相关什么是
数据仓库
?如何构建
数据仓库
?概念模型、逻辑模型、物理模型分别介绍一下?SCD常用的处理方式有哪些?模型设计的思路?业务驱动?数据驱动?数仓架构为什么要分层?
话数Science
·
2024-01-12 07:28
面试
大数据
大数据
Hive解析json数组
在使用Hive搭建
数据仓库
,处理数据时,同传统数仓的结构化数据不同,我们经常会遇到一些非结构化的数据,json格式的字符串就是常见的一种类型。
风筝flying
·
2024-01-12 03:47
Hive数据库:嵌入、本地、远程全攻略(上)
Hive分布式
数据仓库
工具关系型数据库建立在关系模型之上的数据库称为关系型数据库(关系模型是由埃德加·科德于1970年提出的),关系型数据库借助集合代数等数学概念处理数据库中的数据。
小伍_Five
·
2024-01-11 22:03
hive
数据库
分析型数据库产品的排头兵GBase 8a
它是在GBase8a列存储数据库基础上开发的一款SharedNothing架构的分布式并行数据库集群,具备高性能、高可用、高扩展等特性,可以为各种规模数据管理提供高性价比的通用计算平台,并广泛用于支撑各类
数据仓库
系统
any_2311
·
2024-01-11 14:53
数据库
database
big
data
面试题:什么是雪花算法?啥原理?
SnowFlake
算法,是Twitter开源的分布式ID生成算法。其核心思想就是:使用一个64bit的long型的数字作为全局唯一ID。
xuxu1116
·
2024-01-11 11:47
面试题
java
面试题
雪花算法
分布式全局id
分布式全局id
snowflake
算法是twitter开源的分布式id生成算法,采用Scala语言实现,是把一个64位的long型的id,1个bit是不用的,用其中的41bits作为毫秒数,用10bits
程序员三木
·
2024-01-11 06:46
大后端
分布式
Hive(总)看完这篇,别说你不会Hive!
2.2HiveJDBC访问2.2.1启动hiveserver2服务2.2.2连接hiveserver2服务2.2.3注意2.3Hive常用交互命令2.4Hive其他命令操作2.5Hive常见属性配置2.5.1
数据仓库
位置配置
Archie_java
·
2024-01-11 03:22
大数据
hive
hadoop
数据仓库
【大数据进阶第三阶段之ClickHouse学习笔记】ClickHouse的简介和使用
1、ClickHouse简介ClickHouse是一种列式数据库管理系统(DBMS),专门用于高性能数据分析和
数据仓库
应用。
Allen_lixl
·
2024-01-10 20:41
大数据
ClickHouse
大数据
clickhouse
学习
数仓规范
转自:https://mp.weixin.qq.com/s/mGkYRj8iV5_QvNMjS7bpIQ
数据仓库
是为企业所有级别的决策制定过程,提供所有类型数据支持的战略集合。
听雪10
·
2024-01-10 15:37
系分笔记数据库技术之分布式数据库和
数据仓库
文章目录1、概要2、分布式数据库3、
数据仓库
4、总结1、概要 数据库设计是考试重点,常考和必考内容,本篇主要记录了知识点:分布式数据库和
数据仓库
。
说来世事不如闲~
·
2024-01-10 08:07
笔记
数据库
分布式
mysql-存储引擎
MyISAMmylsam是基于isam存储引擎,并对其扩展,它是web,
数据仓库
和其它应用环境下最常用的储存
一个喜欢烧砖的人
·
2024-01-10 06:17
git入门使用
git介绍git是一个分布式版本管理控制系统,而SVN不是分布式的,git没有一个全局的版本号,而SVN有一个确定的全局版本号;git与SVN的结构如下图:git工作区、暂存区和版本库(
数据仓库
Repository
xiaofeilongyu
·
2024-01-09 18:49
工具
git
基于springboot的停车场管理系统-计算机毕业设计源码82061
摘要由于数据库和
数据仓库
技术的快速发展,停车场管理系统建设越来越向模块化、智能化、自我服务和管理科学化的方向发展。
vx_cxsj813
·
2024-01-09 16:01
spring
boot
课程设计
后端
java
php
开发语言
python
【读书笔记】《 Hadoop构建
数据仓库
实践》第1章
02-《Hadoop构建
数据仓库
实践》.jpg第1章
数据仓库
简介1.1什么是
数据仓库
Inmon将
数据仓库
描述为一个面向主题的、集成的、随时间变化的、非易失的数据集合,用于支持管理者的决策过程。
笔名辉哥
·
2024-01-09 15:01
2021-06-25
Howdoesblue
snowflake
flowerfertilizeneedtohavewhatstepBluesnowitselfhasaverygoodfragrance,andatthesametimeinthesummerwithadifferentbluespectacles
Siddhaswarupana
·
2024-01-09 14:16
Hive基础知识(一):Hive入门与Hive架构原理
Hive是基于Hadoop的一个
数据仓库
工具,可以将结构化的数据文件映射为一张表,并提供类SQL查询功能。
依晴无旧
·
2024-01-09 13:25
大数据
hive
架构
hadoop
Hive基础知识笔记(含MySQL metastore伪分布式安装配置流程)
Hadoop-Exercises/tree/master/src/main/java/Hive一、介绍1.Hive是一个构建在Hadoop平台上的用类似SQL的语句HQL来协助读写与管理分布式系统上大数据集的
数据仓库
框架
书忆江南
·
2024-01-09 13:52
大数据
Hive
Hive基础知识
1)Hive是基于Hadoop的一个
数据仓库
工具,将结构化的数据文件映射为一张数据库的数据表,并且提供类SQL查询功能。
巷子里的猫X
·
2024-01-09 13:52
数据分析
hive
大数据
hadoop
大数据开发:Hive基础知识点介绍
Hive简介根据官方文档的定义,Hive是一种用类SQL语句来协助读写、管理那些存储在分布式存储系统上大数据集的
数据仓库
软件。Hive的特点Hive最大的特
加米谷大数据张老师
·
2024-01-09 13:52
大数据
数据库
hive
数据仓库
基于hadoop的hive
数据仓库
基础操作知识整理
Hive是基于Hadoop的一个
数据仓库
工具,可以将结构化的数据文件映射为一张表,并提供类SQL查询功能。
大包丫
·
2024-01-09 13:51
hadoop
hive
大数据
Hadoop的
数据仓库
Hive的基础知识和安装部署
1、
数据仓库
和Hive
数据仓库
是为了协助分析报告,支持决策,为需要业务智能的企业提供业务流程的改进和指导,从而节省时间和成本,提高质量。
姠惢荇者
·
2024-01-09 13:21
大数据
大数据
数据仓库
Hive
数据导入
Spark与Hive的集成与互操作
Spark提供了强大的分布式计算能力,而Hive是一个用于查询和管理大规模数据的
数据仓库
工具。本文将深入探讨如何在Spark中集成和与Hive进行互操作,以充分利用它们的强大功能。
晓之以理的喵~~
·
2024-01-09 11:30
Spark
spark
hive
大数据
阿里云大数据ACA及ACP复习题(81~100)
(B)A:大数据计算服务MaxComputeB:QuickBI数据可视化分析平台C:实时计算Flink版D:云原生
数据仓库
(分析型数据库)AnalyticDB**解析**:阿里云实时计算Flink版(AlibabaCloudRealtimeComputeforApacheFlink
周周的奇妙编程
·
2024-01-09 08:20
阿里云
大数据
云计算
Hive操作命令上手手册
内容来自于《大数据Hive离线计算开发实战》Hive原理Hive是一个基于Hadoop的
数据仓库
和分析系统,用于管理和查询大型数据集。
枫叶梨花
·
2024-01-09 08:50
Hive知识圈
hive
hadoop
数据仓库
hive的基本操作
最近新学了hive,想通过写文章的方式对所学知识进行巩固,同时希望可以帮助到大家Hive是基于Hadoop的一个
数据仓库
工具1.创建数据库(创建方法是和Mysql一样的)createdatabase数据库名字
暴打小赵
·
2024-01-09 06:49
hive
hive
数据库
mysql
实验6 熟悉Hive的基本操作
一、实验目的(1)理解Hive作为
数据仓库
在Hadoop体系结构中的角色。(2)熟练使用常用的HiveQL。
Z.Q.Feng
·
2024-01-09 06:47
实验报告
大数据技术与原理
实验报告
hive
大数据
Hive基本操作
hive简单认识Hive是建立在HDFS之上的
数据仓库
,所以Hive的数据全部存储在HDFS上。
X晓
·
2024-01-09 06:45
hive
big
data
mysql
MySql01:初识
1.mysql数据库2.配置环境变量3.列的类型和属性,索引,注释3.1类型3.2属性3.3主键(主键索引)3.4注释4.结构化查询语句分类:5.列类型--表列类型设置1.mysql数据库数据库:
数据仓库
Bruce6379
·
2024-01-09 06:36
数据库
mysql
大数据开发-某外包公司
1.用过那些组件2.说下HDFS读写流程3.说下varchar和char区别4.说下数据库的事务5.spark的部署模式有哪些6.数据库和
数据仓库
的区别7.内部表和外部表的区别8.说下数据中台、
数据仓库
和数据湖的区别
劝学-大数据
·
2024-01-09 06:10
个人面试真题记录
大数据
经典!自己要学的太多了!加油吧!!!
EnterpriseComputing)是稍时髦较好听的名词,主要是指企业信息系统,如ERP软件(企业资源规划)、CRM软件(客户关系管理)、SCM软件(供应链管理,即物流软件),银行证券软件,财务软件,电子商务/政务(包括各种网站),
数据仓库
johnson_d31
·
2024-01-08 23:13
嵌入式
嵌入式操作系统
wince
linux
手机游戏
j2me
大数据技术架构
工作角色分工,数据处理以
数据仓库
开发人员为主,数据分析以数据分析师为主,其他所有组件、系统、技术相关归为数据平台。2数据源大数据的数据来源虽然多,但不杂。
乘风踏羽
·
2024-01-08 17:47
数据平台
大数据
greenplum 历史拉链表
3.1历史拉链表
数据仓库
定义:是一个面向主题的、集成的、相对稳定的、反映历史变化的数据集合,用于支持管理决策。历史拉链表:一种数据模型,主要是针对
数据仓库
设计中表存储数据的方式而定义的。
用心一
·
2024-01-08 11:48
数据仓库
数据库
hive
【
数据仓库
与联机分析处理】
数据仓库
工具Hive
目录一、Hive简介(一)什么是Hive(二)优缺点(三)Hive架构原理(四)Hive和数据库比较二、MySQL的安装配置三、Hive的安装配置1、下载安装包2、解压并改名3、配置环境变量4、修改hive-env.sh文件四、配置Hive元数据存储到MySQL1、修改hive-site.xml文件2、上传MySQL连接驱动3、初始化Hive元数据库4、验证元数据一、Hive简介(一)什么是Hiv
Francek Chen
·
2024-01-08 08:42
大数据技术基础
数据仓库
hive
hadoop
mysql
Hadoop、Pig、Hive、Storm、NOSQL 学习资源收集【Updating】 (转)
目录[-](一)hadoop相关安装部署(二)hive(三)pig(四)hadoop原理与编码(五)
数据仓库
与挖掘(六)Oozie工作流(七)HBase(八)flume(九)sqoop(十)ZooKeeper
我爱大海V5
·
2024-01-08 08:15
Hadoop
hadoop
开源、云原生且实时分析型的现代
数据仓库
DataBend的介绍,及其与其它开源文件存储的结合使用实例
DataBend介绍Databend是一个开源、云原生且实时分析型的现代
数据仓库
,旨在提供高效的数据存储和处理能力。
小果运维
·
2024-01-08 07:14
运维
Databend
数据仓库
分析
深入了解
Snowflake
雪花算法:分布式唯一ID生成器
19年之后由于某些原因断更了三年,23年重新扬帆起航,推出更多优质博文,希望大家多多支持~古之立大事者,不惟有超世之才,亦必有坚忍不拔之志个人CSND主页——Micro麦可乐的博客《Docker实操教程》专栏以最新的Centos版本为基础进行Docker实操教程,入门到实战《RabbitMQ》本专栏主要介绍使用JAVA开发RabbitMQ的系列教程,从基础知识到项目实战《设计模式》专栏以实际的生活
Micro麦可乐
·
2024-01-08 07:27
开发技巧
分布式
snowflake算法
雪花算法
分布式唯一ID
FineBI实战项目一(3):Kettle实现ETL到
数据仓库
目前,finebi_shop_bi中是没有任何数据的,是一个空的数据库。而后续我们的所有数据分析都将在该数据库中进行。我们第一件事情就是要将「finebi_shop」数据库中的所有表抽取到「finebi_shop_bi」数据库中。要抽取并装载数据到「finebi_shop_bi」中,我们首先要在「finebi_shop_bi」中创建对应的表。1数据抽取业务分析我们已经大概熟悉了上面的6张表,这6张
不死鸟.亚历山大.狼崽子
·
2024-01-08 06:31
FineBI
finebi
上一页
4
5
6
7
8
9
10
11
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他