E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
clickhouse数据仓库
Hive基础知识笔记(含MySQL metastore伪分布式安装配置流程)
Hadoop-Exercises/tree/master/src/main/java/Hive一、介绍1.Hive是一个构建在Hadoop平台上的用类似SQL的语句HQL来协助读写与管理分布式系统上大数据集的
数据仓库
框架
书忆江南
·
2024-01-09 13:52
大数据
Hive
Hive基础知识
1)Hive是基于Hadoop的一个
数据仓库
工具,将结构化的数据文件映射为一张数据库的数据表,并且提供类SQL查询功能。
巷子里的猫X
·
2024-01-09 13:52
数据分析
hive
大数据
hadoop
大数据开发:Hive基础知识点介绍
Hive简介根据官方文档的定义,Hive是一种用类SQL语句来协助读写、管理那些存储在分布式存储系统上大数据集的
数据仓库
软件。Hive的特点Hive最大的特
加米谷大数据张老师
·
2024-01-09 13:52
大数据
数据库
hive
数据仓库
基于hadoop的hive
数据仓库
基础操作知识整理
Hive是基于Hadoop的一个
数据仓库
工具,可以将结构化的数据文件映射为一张表,并提供类SQL查询功能。
大包丫
·
2024-01-09 13:51
hadoop
hive
大数据
Hadoop的
数据仓库
Hive的基础知识和安装部署
1、
数据仓库
和Hive
数据仓库
是为了协助分析报告,支持决策,为需要业务智能的企业提供业务流程的改进和指导,从而节省时间和成本,提高质量。
姠惢荇者
·
2024-01-09 13:21
大数据
大数据
数据仓库
Hive
数据导入
Spark与Hive的集成与互操作
Spark提供了强大的分布式计算能力,而Hive是一个用于查询和管理大规模数据的
数据仓库
工具。本文将深入探讨如何在Spark中集成和与Hive进行互操作,以充分利用它们的强大功能。
晓之以理的喵~~
·
2024-01-09 11:30
Spark
spark
hive
大数据
阿里云大数据ACA及ACP复习题(81~100)
(B)A:大数据计算服务MaxComputeB:QuickBI数据可视化分析平台C:实时计算Flink版D:云原生
数据仓库
(分析型数据库)AnalyticDB**解析**:阿里云实时计算Flink版(AlibabaCloudRealtimeComputeforApacheFlink
周周的奇妙编程
·
2024-01-09 08:20
阿里云
大数据
云计算
Hive操作命令上手手册
内容来自于《大数据Hive离线计算开发实战》Hive原理Hive是一个基于Hadoop的
数据仓库
和分析系统,用于管理和查询大型数据集。
枫叶梨花
·
2024-01-09 08:50
Hive知识圈
hive
hadoop
数据仓库
hive的基本操作
最近新学了hive,想通过写文章的方式对所学知识进行巩固,同时希望可以帮助到大家Hive是基于Hadoop的一个
数据仓库
工具1.创建数据库(创建方法是和Mysql一样的)createdatabase数据库名字
暴打小赵
·
2024-01-09 06:49
hive
hive
数据库
mysql
实验6 熟悉Hive的基本操作
一、实验目的(1)理解Hive作为
数据仓库
在Hadoop体系结构中的角色。(2)熟练使用常用的HiveQL。
Z.Q.Feng
·
2024-01-09 06:47
实验报告
大数据技术与原理
实验报告
hive
大数据
Hive基本操作
hive简单认识Hive是建立在HDFS之上的
数据仓库
,所以Hive的数据全部存储在HDFS上。
X晓
·
2024-01-09 06:45
hive
big
data
mysql
MySql01:初识
1.mysql数据库2.配置环境变量3.列的类型和属性,索引,注释3.1类型3.2属性3.3主键(主键索引)3.4注释4.结构化查询语句分类:5.列类型--表列类型设置1.mysql数据库数据库:
数据仓库
Bruce6379
·
2024-01-09 06:36
数据库
mysql
大数据开发-某外包公司
1.用过那些组件2.说下HDFS读写流程3.说下varchar和char区别4.说下数据库的事务5.spark的部署模式有哪些6.数据库和
数据仓库
的区别7.内部表和外部表的区别8.说下数据中台、
数据仓库
和数据湖的区别
劝学-大数据
·
2024-01-09 06:10
个人面试真题记录
大数据
经典!自己要学的太多了!加油吧!!!
EnterpriseComputing)是稍时髦较好听的名词,主要是指企业信息系统,如ERP软件(企业资源规划)、CRM软件(客户关系管理)、SCM软件(供应链管理,即物流软件),银行证券软件,财务软件,电子商务/政务(包括各种网站),
数据仓库
johnson_d31
·
2024-01-08 23:13
嵌入式
嵌入式操作系统
wince
linux
手机游戏
j2me
数仓建设学习路线(二)模型建设(1)
OLAP概念全称OnLineAnalyticalProcessing,中文名联机分析处理系统,支持复杂的分析操作,侧重决策支持,并且提供直观易懂的查询结果,例如、
ClickHouse
、Doris、K
语兴数据
·
2024-01-08 18:58
数仓建设-学习路线
大数据
数据仓库
人工智能
大数据技术架构
工作角色分工,数据处理以
数据仓库
开发人员为主,数据分析以数据分析师为主,其他所有组件、系统、技术相关归为数据平台。2数据源大数据的数据来源虽然多,但不杂。
乘风踏羽
·
2024-01-08 17:47
数据平台
大数据
greenplum 历史拉链表
3.1历史拉链表
数据仓库
定义:是一个面向主题的、集成的、相对稳定的、反映历史变化的数据集合,用于支持管理决策。历史拉链表:一种数据模型,主要是针对
数据仓库
设计中表存储数据的方式而定义的。
用心一
·
2024-01-08 11:48
数据仓库
数据库
hive
【
数据仓库
与联机分析处理】
数据仓库
工具Hive
目录一、Hive简介(一)什么是Hive(二)优缺点(三)Hive架构原理(四)Hive和数据库比较二、MySQL的安装配置三、Hive的安装配置1、下载安装包2、解压并改名3、配置环境变量4、修改hive-env.sh文件四、配置Hive元数据存储到MySQL1、修改hive-site.xml文件2、上传MySQL连接驱动3、初始化Hive元数据库4、验证元数据一、Hive简介(一)什么是Hiv
Francek Chen
·
2024-01-08 08:42
大数据技术基础
数据仓库
hive
hadoop
mysql
Hadoop、Pig、Hive、Storm、NOSQL 学习资源收集【Updating】 (转)
目录[-](一)hadoop相关安装部署(二)hive(三)pig(四)hadoop原理与编码(五)
数据仓库
与挖掘(六)Oozie工作流(七)HBase(八)flume(九)sqoop(十)ZooKeeper
我爱大海V5
·
2024-01-08 08:15
Hadoop
hadoop
开源、云原生且实时分析型的现代
数据仓库
DataBend的介绍,及其与其它开源文件存储的结合使用实例
DataBend介绍Databend是一个开源、云原生且实时分析型的现代
数据仓库
,旨在提供高效的数据存储和处理能力。
小果运维
·
2024-01-08 07:14
运维
Databend
数据仓库
分析
olap/spark-tungsten:codegen
因为
clickhouse
没有codegen,这节课就拿我比较熟悉的spark的tungsten来当例子,tungsten会g
SakamataZ
·
2024-01-08 07:28
spark
大数据
分布式
《向量数据库指南》——传统数据库上的向量搜索插件
很多传统关系型数据库和搜索系统,如
ClickHouse
和Elasticsearch,都包含内置的向量搜索插件。
LCHub低代码社区
·
2024-01-08 06:19
《向量数据库指南》
向量数据库
Zilliz
Cloud
Milvus
Cloud
数据库
魔搭社区
AI原生云向量数据库
FineBI实战项目一(3):Kettle实现ETL到
数据仓库
目前,finebi_shop_bi中是没有任何数据的,是一个空的数据库。而后续我们的所有数据分析都将在该数据库中进行。我们第一件事情就是要将「finebi_shop」数据库中的所有表抽取到「finebi_shop_bi」数据库中。要抽取并装载数据到「finebi_shop_bi」中,我们首先要在「finebi_shop_bi」中创建对应的表。1数据抽取业务分析我们已经大概熟悉了上面的6张表,这6张
不死鸟.亚历山大.狼崽子
·
2024-01-08 06:31
FineBI
finebi
Hive入门
一、Hive概述1.1Hive简介Hive是基于Hadoop的一个
数据仓库
工具,它可以将结构化或半结构化的数据文件转化为一张数据库表,并提供简单的sql查询功能。
爱过java
·
2024-01-07 17:04
hive
数据密集型应用系统设计--3.3 列式存储
虽然事实表通常超过100列,但典型的
数据仓库
查询往往一次只访问其中的4或5个。在大多数OLTP数据库中,存储以面向行的方式布局:来自表的一行的所有值彼此相邻存储。
下海的alpha
·
2024-01-07 17:45
spark
大数据
分布式
ClickHouse
查询语句详解
ClickHouse
查询语句兼容大部分SQL语法,并且进行了更加丰富的扩展,查询语句模板如下:[WITHexpr_list|(subquery)]SELECT[DISTINCT[ON(column1,column2
万里长江雪
·
2024-01-07 16:39
面试
学习路线
阿里巴巴
clickhouse
sql
数据库
jvm
后端
有用的技术分享主题
SQLServer数据库和AgentJob集成化监控工具Airflow调度工具的安装和使用Tableau报表开发网络爬虫技术开发PythonGUI应用开发基于S3的数据湖架构设计和大数据开发Hive大
数据仓库
超大数据集去重解决方案
weixin_30777913
·
2024-01-07 10:42
sqlserver
数据库
数据仓库
big
data
etl
Teradata数据库和Informatica ETL逻辑及视图、用户定义函数和存储过程迁移到AWS的Hive
数据仓库
基本流程
,我们需要注册AWS帐号,并启用EC2(ElasticCloudComputing,高性能云计算)、EMR(ElasticMap-Reduce,高性能大数据计算)、Redshift/Snowflake
数据仓库
和
weixin_30777913
·
2024-01-07 10:12
笔记
迁移数据mysql到
clickhouse
场景:项目上需要将mysql表中数据迁移到
clickhouse
。
喜羊羊love红太狼
·
2024-01-07 08:04
clickhouse
clickhouse
FineBI实战(2):案例架构说明及数据准备
1系统架构基于MySQL搭建
数据仓库
基于Kettle进行数据处理帆软FineBI基于MySQL搭建的
数据仓库
进行数据分析2数据流程图通过Kettle将MySQL业务系统数据库中,将数据抽取出来,然后装载到
不死鸟.亚历山大.狼崽子
·
2024-01-07 08:25
FineBI
finebi
架构
【
数据仓库
与联机分析处理】多维数据模型
目录一、数据立方体二、数据模型(一)星形模型(二)雪花模式(三)事实星座模式三、多维数据模型中的OLAP操作(一)下钻(二)上卷(三)切片(四)切块(五)转轴
数据仓库
和OLAP工具是基于多维数据模型的,
Francek Chen
·
2024-01-07 07:05
大数据技术基础
数据仓库
大数据
SaaS中
数据仓库
实战:构建智能数据基础支持业务创新
在当今数字化时代,SaaS企业越来越重视数据的价值,而构建一个高效的
数据仓库
是实现数据驱动业务创新的关键一步。本文将深入探讨SaaS中
数据仓库
的实战应用,以及如何通过智能数据基础支持业务的持续发展。
benhuyun_dev
·
2024-01-07 07:05
数据仓库
spark
大数据
sass
Hive内部表和外部表的区别
主要体现在load与drop(是否同时删除元数据与数据)的操作上:创建表:Hive创建内部表时,会将数据移动到
数据仓库
指向的路径,hive管理数据的生命周期;Hive创建外部表时,仅记录数据所在的路径,
airyv
·
2024-01-07 06:44
大数据
数据仓库
大数据
hive
hadoop
内部表
ssm企业人事信息管理系统-98194,(免费领取源码)计算机毕业设计选题开题+程序定制+论文书写+答辩ppt书写 包售后 全流程
企业人事信息管理系统的设计与实现摘要由于数据库和
数据仓库
技术的快速发展,企业人事信息管理系统建设越来越向模块化、智能化、自我服务和管理科学化的方向发展。
vx_bscxy322
·
2024-01-07 05:21
课程设计
spring
boot
mysql
ssm
Hive的基本的概述即使用参考
1.Hive的概述√意义:在于大幅度降低工程师学习MapReduce的学习成本,让好用(计算速度快)的MapReduce更方便的使用(使用简单)√基本概念:Hive是基于Hadoop的一个
数据仓库
工具,
C8H11O2N_4cd4
·
2024-01-07 02:29
2024.1.5 Hadoop各组件工作原理,面试题
4.数据库与
数据仓库
的区别?5.简述下
数据仓库
经典三层架构?6.请简述内部表和外部表的区别?
白白的wj
·
2024-01-06 23:34
hadoop
hive
zookeeper
spark
数据仓库
mapreduce
hdfs
ClickHouse
的表引擎介绍(三)
TinyLog二、Memory三、MergeTree四、ReplacingMergeTree五、SummingMergeTree六、Integrations(集成引擎)-[**ODBC**](https://
clickhouse
.com
Java技术债务
·
2024-01-06 23:04
Java
ClickHouse
数据库
数据库
分布式存储
《Hive系列》Hive详细入门教程
目录1Hive基本概念1.1什么是HiveHive简介Hive:由FaceBook开源用于解决海量结构化日志的数据统计工具Hive:基于Hadoop的一个
数据仓库
工具,可以将结构化的数据文件映射为一张表
DATA数据猿
·
2024-01-06 17:55
Hive
hive
Hive(一)概述
6.Hive配置7.关于小文件问题二.安装Hive三.Hive基本使用一.简介1.概述什么是HiveHive:由Facebook开源用于解决海量结构化日志的数据统计工具Hive是基于Hadoop的一个
数据仓库
工具
Jumanji_
·
2024-01-06 17:54
大数据框架
hive
hadoop
big
data
教你如何将本地虚拟机变成服务器,供其它电脑访问
场景:最近在做
数据仓库
的作业,需要团队协作,买不起阿里云服务器,所以想到能不能将我本地机上的虚拟机变成服务器,供其它同学的电脑访问。
吾浴西风
·
2024-01-06 16:01
服务器
运维
湖仓架构的演进
1.
数据仓库
架构的历史演进起初,业界数据处理首选方式是数仓架构。通常数据处理的流程是把一些业务数据库,通过ETL的方式加载到DataWarehouse中,再在前端接入一些报表或者BI的工具去展示。
土豆马铃薯
·
2024-01-06 16:09
数据湖
架构
大数据
特性快闪:使用 Databend 玩转 Iceberg
ApacheOpenDAL(Incubating)Committerhttps://github.com/PsiACE几周前,Databricks和Snowflake召开了各自的年度大会,除了今年一路持续走红的AI,数据湖/
数据仓库
技术的发展仍然值得关注
Databend
·
2024-01-06 14:48
Iceberg
Databend使用入门
Databend官网:专注于打造全球最强云数仓,弹性、简单、低成本,支持mysql、
clickhouse
有线连接协议(白话就是可以直接用它们的客户端连接Databend服务)。
_hys
·
2024-01-06 14:48
数据库
docker
java
linux
如何对 Databend 进行基准测试
Databend建议使用hyperfine通过
ClickHouse
/MySQL客户端执行基准测试,本文将使用MySQL客户端来介绍它。前期准备:进行本地基准测试之前,必
Databend
·
2024-01-06 14:17
大数据
Databend 的安装配置和使用
介绍Databend是一个内置在Rust中的开源、弹性和工作负载感知的云
数据仓库
,为Snowflake提供了具有成本效益的替代方案,专门对最大的数据集进行复杂分析而设计。
有请小发菜
·
2024-01-06 14:47
Databend
数据库
mysql
sql
ClickHouse
为什么这么快?
ClickHouse
原理解析与实践
本篇文章主要在架构&使用上介绍
ClickHouse
的基本概念&基本查询,抛砖引玉,大家实践的路上多多交流。
袋鼠先森
·
2024-01-06 13:15
clickhouse
数据库
大数据
ClickHouse
为什么快
大数据量处理的方案分布式计算列式存储
ClickHouse
的性能数据的查询性能:不支持高并发,官方建议qps不超过100。单表查询更有优势,不推荐多表联合查询。
流年★似水
·
2024-01-06 13:45
ClickHouse
大数据
Clickhouse
为什么有这么高的性能
一、架构设计1、MPP架构(海量数据并行处理架构),sharenothing模式,每个节点访问自己的cpu、内存、磁盘,且与节点之间的数据访问并行。2、向量执行引擎,从寄存器硬件层面优化,采用数据并行,速度提升指数级别。采用cpu缓存作为临时交换数据,速度比内存交换数据还要快。3、列式存储和数据压缩4、支持sql查询,采用关系型模型描述数据5、支持表引擎,将数据存储抽象成独立的接口,根据实际应用场
sq0723
·
2024-01-06 13:43
clickhouse
大数据开发
大数据
clickhouse
Clickhouse
为什么这么快?
一说到
Clickhouse
,大家都知道它非常快,那么CH为什么这么快,是因为使用了向量化、列式数据库还是其它。下面我们一起来探索它的奥秘。
sileiH
·
2024-01-06 13:43
clickhouse
数据库
大数据
seatunnel部署遇到的一些问题及总结
环境:jdk1.8seatunnel2.3.3需求:想实现MYSQL到
CLICKHOUSE
同步问题:问题一:执行seatunnel本地案例提示如下且在apache-seatunnel-2.3.3/connectors
喜羊羊love红太狼
·
2024-01-06 13:12
setunnel
sentinel
上一页
9
10
11
12
13
14
15
16
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他