E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
数据建模数据仓库
基于大数据与时间序列预测的的书籍数据分析(内含spark+hive+mysql+kettle+echart+tensorflow)
tensorflow简介(二)前端相关技术1.HTML简介2.echarts简介(三)相关数据库1.Mysql简介2.hive简介三.需求分析三.系统设计项目框架:系统目的:数据库设计:四.系统实现1.预处理:
数据仓库
左岸2420
·
2024-01-13 05:59
数据库
大数据
深度学习
大数据
spark
hive
mysql
tensorflow
echarts
Hive学习笔记(Hive数据的定义与操作)
管理表外部表修改表删除表分区表静态分区动态分区HiveQL数据操作向管理表中装载数据经查询语句向表中插入数据单个查询语句中创建表并加载数据导入数据导出数据Hive数据定义与操作HiveQL数据定义语言Hive
数据仓库
中的
ジ時光不老
·
2024-01-13 04:22
Hive学习
java
开发语言
后端
Hive数据定义(1)
hive数据定义是hive的基础知识,所包含的知识点有:
数据仓库
的创建、
数据仓库
的查询、
数据仓库
的修改、
数据仓库
的删除、表的创建、表的删除、表的修改、内部表、外部表、分区表、桶表、表的修改、视图。
冬瓜的编程笔记
·
2024-01-13 04:47
大数据
hive
hadoop
数据仓库
2022字节跳动【
数据仓库
工程师】日常实习面经-----一面
文章目录一,自我介绍二,问答阶段三,代码阶段四,反问五,总结背景:今年金三银四,看着大家都在疯狂找实习offer,不甘落后的我也信心满满(毫无把握)的去字节面试(现在想想真是胆大,都还没学扎实)一,自我介绍二,问答阶段shuffle阶段详细介绍回答环形缓冲区,分区排序,溢写磁盘,reduce再抽取归并等等计算单元和实际block存储单元不在一个机器节点上,这样会带来大量的IO操作,Hadoop如何
dyson不只是吹风机
·
2024-01-13 03:34
面试
数据仓库
大数据
第三阶段、
数据仓库
一、
数据仓库
的基本定义:1.
数据仓库
:简称DW或DWH,是数据库的一种概念上的升级,是为企业所有级别的决策制定过程,出于分析性报告和决策支持目的而创建。
ATPX4869l
·
2024-01-13 01:14
如何解决NAND系统性能问题?--NAND分类
一、故事引言想象一下,你正在管理一座神奇的
数据仓库
,这个仓库没有沉重的门、旋转的磁盘和机械手臂,而是由一群训练有素的“数据小飞侠”组成。
古猫先生
·
2024-01-13 01:15
NAND
大数据
linux
性能优化
服务器
数据模型/
数据建模
的含义
我们可以从以下四个方面来了解(1)、业务模型(2)、构建表关系/表链接(3)、数学模型(4)、算法模型业务模型建立业务模型的重点是懂业务,即了解业务的整个过程。结合项目,就需要了解CMS系统以及具体业务,比如我们有采购、库存、销售、财务几个环节,各环节都有些流程,不同环节之间有哪些关联,以及行业及企业规范要求等,都属于业务的范畴我们建的模型大部分是业务模型,指标体系大多数的本质也是在反映业务本身,
王永翔
·
2024-01-12 23:04
数据建模
从 AutoMQ Kafka 导出数据到 Databend
作者:韩山杰DatabendCloud研发工程师https://github.com/hantmacDatabend是使用Rust研发、开源的、完全面向云架构、基于对象存储构建的新一代云原生
数据仓库
,为企业提供湖仓一体化
Databend
·
2024-01-12 20:44
开源
数据库
GBASE南大通用 GBase 8a 产品构建数仓系统架构
lGBASE南大通用GBase8a产品构建数仓应用的系统架构:架构技术实现特点适用场景独立
数据仓库
(集市)系统架构一套GBase8a物理集群适用于数据规模较小的业务场景适用于各业务之间数据互访较频繁的业务场景适用于单一独立的业务场景企业级数仓系统架构多套
GBASE数据库
·
2024-01-12 12:04
数据库
GBASE南大通用
GBASE
python数据分析0基础--学习掌握---附链接
数据分析通常包括数据清洗、数据整合、
数据建模
、数据可视化等步骤,旨在从大量数据中提取出可操作的信息,用于帮助企业或组织做出更明智的战略决策。数据分析在许多领域中
猿戴科
·
2024-01-12 09:47
机器学习
python
人工智能
Spark避坑系列(三)(Spark Core-RDD 依赖关系&持久化&共享变量)
大家想了解更多大数据相关内容请移驾我的课堂:大数据相关课程剖析及实践企业级大数据数据架构规划设计大厂架构师知识梳理:剖析及实践
数据建模
PySpark入坑系列第三篇,该篇章主要介绍spark的编程核心RDD
garagong
·
2024-01-12 09:13
大数据
spark
大数据
hadoop
分布式
数据处理
【数据库学习】hive
1,HIVEHadoop的
数据仓库
处理工具,数据存储在Hadoop兼容的文件系统(例如,AmazonS3、HDFS)中。
兔兔西
·
2024-01-12 08:50
数据库
学习
hive
2023 IoTDB Summit:天谋科技高级开发工程师张金瑞《筑其形:如何轻松搞定 IoTDB
数据建模
》...
12月3日,2023IoTDB用户大会在北京成功举行,收获强烈反响。本次峰会汇集了超20位大咖嘉宾带来工业互联网行业、技术、应用方向的精彩议题,多位学术泰斗、企业代表、开发者,深度分享了工业物联网时序数据库IoTDB的技术创新、应用效果,与各行业标杆用户的落地实践、解决方案,并共同探讨时序数据管理领域的行业趋势。我们邀请到天谋科技高级开发工程师,ApacheIoTDBPMCMember张金瑞参加此
Apache IoTDB
·
2024-01-12 07:55
iotdb
科技
【大数据面试】常见数仓建模面试题附答案
常见面试题
数据仓库
面试题-理论相关什么是
数据仓库
?如何构建
数据仓库
?概念模型、逻辑模型、物理模型分别介绍一下?SCD常用的处理方式有哪些?模型设计的思路?业务驱动?数据驱动?数仓架构为什么要分层?
话数Science
·
2024-01-12 07:28
面试
大数据
大数据
基于 Python 的数据分析与可视化
第二,用于企业研发,
数据建模
必备技能。针对日益复杂的项目需求,很多企业数据分析项目需要高阶数学建模,
百事没事阿
·
2024-01-12 06:06
python
数据分析
开发语言
自动化
数据挖掘
学习
windows
多协议数据库Navicat Premium中文
NavicatPremium具有强大的
数据建模
、查询、导入/导出、备份/恢复、同步、迁移等功能,满足开发者在数据库管理和开发过程中的各种需求。此外,NavicatPremi
*橙子
·
2024-01-12 06:05
应用软件
数据库
macos
Hive解析json数组
在使用Hive搭建
数据仓库
,处理数据时,同传统数仓的结构化数据不同,我们经常会遇到一些非结构化的数据,json格式的字符串就是常见的一种类型。
风筝flying
·
2024-01-12 03:47
Hive数据库:嵌入、本地、远程全攻略(上)
Hive分布式
数据仓库
工具关系型数据库建立在关系模型之上的数据库称为关系型数据库(关系模型是由埃德加·科德于1970年提出的),关系型数据库借助集合代数等数学概念处理数据库中的数据。
小伍_Five
·
2024-01-11 22:03
hive
数据库
分析型数据库产品的排头兵GBase 8a
它是在GBase8a列存储数据库基础上开发的一款SharedNothing架构的分布式并行数据库集群,具备高性能、高可用、高扩展等特性,可以为各种规模数据管理提供高性价比的通用计算平台,并广泛用于支撑各类
数据仓库
系统
any_2311
·
2024-01-11 14:53
数据库
database
big
data
Hive(总)看完这篇,别说你不会Hive!
2.2HiveJDBC访问2.2.1启动hiveserver2服务2.2.2连接hiveserver2服务2.2.3注意2.3Hive常用交互命令2.4Hive其他命令操作2.5Hive常见属性配置2.5.1
数据仓库
位置配置
Archie_java
·
2024-01-11 03:22
大数据
hive
hadoop
数据仓库
【大数据进阶第三阶段之ClickHouse学习笔记】ClickHouse的简介和使用
1、ClickHouse简介ClickHouse是一种列式数据库管理系统(DBMS),专门用于高性能数据分析和
数据仓库
应用。
Allen_lixl
·
2024-01-10 20:41
大数据
ClickHouse
大数据
clickhouse
学习
数仓规范
转自:https://mp.weixin.qq.com/s/mGkYRj8iV5_QvNMjS7bpIQ
数据仓库
是为企业所有级别的决策制定过程,提供所有类型数据支持的战略集合。
听雪10
·
2024-01-10 15:37
Spark避坑系列一(基础知识)
大家想了解更多大数据相关内容请移驾我的课堂:大数据相关课程剖析及实践企业级大数据数据架构规划设计大厂架构师知识梳理:剖析及实践
数据建模
剖析及实践数据资产运营平台Spark作为大数据领域离线计算的王者,在分布式数据处理计算领域有着极高的处理效率
garagong
·
2024-01-10 14:04
大数据
spark
大数据
分布式
系分笔记数据库技术之分布式数据库和
数据仓库
文章目录1、概要2、分布式数据库3、
数据仓库
4、总结1、概要 数据库设计是考试重点,常考和必考内容,本篇主要记录了知识点:分布式数据库和
数据仓库
。
说来世事不如闲~
·
2024-01-10 08:07
笔记
数据库
分布式
Spark避坑系列二(Spark Core-RDD编程)
大家想了解更多大数据相关内容请移驾我的课堂:大数据相关课程剖析及实践企业级大数据数据架构规划设计大厂架构师知识梳理:剖析及实践
数据建模
PySpark避坑系列第二篇,该篇章主要介绍spark的编程核心RDD
garagong
·
2024-01-10 08:19
大数据
spark
大数据
分布式
mysql-存储引擎
MyISAMmylsam是基于isam存储引擎,并对其扩展,它是web,
数据仓库
和其它应用环境下最常用的储存
一个喜欢烧砖的人
·
2024-01-10 06:17
个人笔记:分布式大数据技术原理(一)Hadoop 框架
大家想了解更多大数据相关内容请移驾我的课堂:大数据相关课程剖析及实践企业级大数据数据架构规划设计大厂架构师知识梳理:剖析及实践
数据建模
剖析及实践数据资产运营平台ApacheHadoop软件库是一个框架,
garagong
·
2024-01-09 22:15
大数据
分布式
大数据
mapreduce
hadoop
git入门使用
git介绍git是一个分布式版本管理控制系统,而SVN不是分布式的,git没有一个全局的版本号,而SVN有一个确定的全局版本号;git与SVN的结构如下图:git工作区、暂存区和版本库(
数据仓库
Repository
xiaofeilongyu
·
2024-01-09 18:49
工具
git
python匹配问题
脏数据匹配一般
数据建模
步骤中,数据清洗耗时占比80%以上,因为现实中接触到的数据相当脏,无法直接简单的用pandas的merge函数解决。
会python的小孩
·
2024-01-09 18:37
python
开发语言
前端
图像处理
爬虫
基于springboot的停车场管理系统-计算机毕业设计源码82061
摘要由于数据库和
数据仓库
技术的快速发展,停车场管理系统建设越来越向模块化、智能化、自我服务和管理科学化的方向发展。
vx_cxsj813
·
2024-01-09 16:01
spring
boot
课程设计
后端
java
php
开发语言
python
【读书笔记】《 Hadoop构建
数据仓库
实践》第1章
02-《Hadoop构建
数据仓库
实践》.jpg第1章
数据仓库
简介1.1什么是
数据仓库
Inmon将
数据仓库
描述为一个面向主题的、集成的、随时间变化的、非易失的数据集合,用于支持管理者的决策过程。
笔名辉哥
·
2024-01-09 15:01
Hive基础知识(一):Hive入门与Hive架构原理
Hive是基于Hadoop的一个
数据仓库
工具,可以将结构化的数据文件映射为一张表,并提供类SQL查询功能。
依晴无旧
·
2024-01-09 13:25
大数据
hive
架构
hadoop
Hive基础知识笔记(含MySQL metastore伪分布式安装配置流程)
Hadoop-Exercises/tree/master/src/main/java/Hive一、介绍1.Hive是一个构建在Hadoop平台上的用类似SQL的语句HQL来协助读写与管理分布式系统上大数据集的
数据仓库
框架
书忆江南
·
2024-01-09 13:52
大数据
Hive
Hive基础知识
1)Hive是基于Hadoop的一个
数据仓库
工具,将结构化的数据文件映射为一张数据库的数据表,并且提供类SQL查询功能。
巷子里的猫X
·
2024-01-09 13:52
数据分析
hive
大数据
hadoop
大数据开发:Hive基础知识点介绍
Hive简介根据官方文档的定义,Hive是一种用类SQL语句来协助读写、管理那些存储在分布式存储系统上大数据集的
数据仓库
软件。Hive的特点Hive最大的特
加米谷大数据张老师
·
2024-01-09 13:52
大数据
数据库
hive
数据仓库
基于hadoop的hive
数据仓库
基础操作知识整理
Hive是基于Hadoop的一个
数据仓库
工具,可以将结构化的数据文件映射为一张表,并提供类SQL查询功能。
大包丫
·
2024-01-09 13:51
hadoop
hive
大数据
Hadoop的
数据仓库
Hive的基础知识和安装部署
1、
数据仓库
和Hive
数据仓库
是为了协助分析报告,支持决策,为需要业务智能的企业提供业务流程的改进和指导,从而节省时间和成本,提高质量。
姠惢荇者
·
2024-01-09 13:21
大数据
大数据
数据仓库
Hive
数据导入
Spark与Hive的集成与互操作
Spark提供了强大的分布式计算能力,而Hive是一个用于查询和管理大规模数据的
数据仓库
工具。本文将深入探讨如何在Spark中集成和与Hive进行互操作,以充分利用它们的强大功能。
晓之以理的喵~~
·
2024-01-09 11:30
Spark
spark
hive
大数据
阿里云大数据ACA及ACP复习题(81~100)
(B)A:大数据计算服务MaxComputeB:QuickBI数据可视化分析平台C:实时计算Flink版D:云原生
数据仓库
(分析型数据库)AnalyticDB**解析**:阿里云实时计算Flink版(AlibabaCloudRealtimeComputeforApacheFlink
周周的奇妙编程
·
2024-01-09 08:20
阿里云
大数据
云计算
Hive操作命令上手手册
内容来自于《大数据Hive离线计算开发实战》Hive原理Hive是一个基于Hadoop的
数据仓库
和分析系统,用于管理和查询大型数据集。
枫叶梨花
·
2024-01-09 08:50
Hive知识圈
hive
hadoop
数据仓库
hive的基本操作
最近新学了hive,想通过写文章的方式对所学知识进行巩固,同时希望可以帮助到大家Hive是基于Hadoop的一个
数据仓库
工具1.创建数据库(创建方法是和Mysql一样的)createdatabase数据库名字
暴打小赵
·
2024-01-09 06:49
hive
hive
数据库
mysql
实验6 熟悉Hive的基本操作
一、实验目的(1)理解Hive作为
数据仓库
在Hadoop体系结构中的角色。(2)熟练使用常用的HiveQL。
Z.Q.Feng
·
2024-01-09 06:47
实验报告
大数据技术与原理
实验报告
hive
大数据
Hive基本操作
hive简单认识Hive是建立在HDFS之上的
数据仓库
,所以Hive的数据全部存储在HDFS上。
X晓
·
2024-01-09 06:45
hive
big
data
mysql
MySql01:初识
1.mysql数据库2.配置环境变量3.列的类型和属性,索引,注释3.1类型3.2属性3.3主键(主键索引)3.4注释4.结构化查询语句分类:5.列类型--表列类型设置1.mysql数据库数据库:
数据仓库
Bruce6379
·
2024-01-09 06:36
数据库
mysql
大数据开发-某外包公司
1.用过那些组件2.说下HDFS读写流程3.说下varchar和char区别4.说下数据库的事务5.spark的部署模式有哪些6.数据库和
数据仓库
的区别7.内部表和外部表的区别8.说下数据中台、
数据仓库
和数据湖的区别
劝学-大数据
·
2024-01-09 06:10
个人面试真题记录
大数据
经典!自己要学的太多了!加油吧!!!
EnterpriseComputing)是稍时髦较好听的名词,主要是指企业信息系统,如ERP软件(企业资源规划)、CRM软件(客户关系管理)、SCM软件(供应链管理,即物流软件),银行证券软件,财务软件,电子商务/政务(包括各种网站),
数据仓库
johnson_d31
·
2024-01-08 23:13
嵌入式
嵌入式操作系统
wince
linux
手机游戏
j2me
大数据技术架构
工作角色分工,数据处理以
数据仓库
开发人员为主,数据分析以数据分析师为主,其他所有组件、系统、技术相关归为数据平台。2数据源大数据的数据来源虽然多,但不杂。
乘风踏羽
·
2024-01-08 17:47
数据平台
大数据
Task 5:作者信息关联
5.1任务说明学习主题:作者关联(
数据建模
任务),对论文作者关系进行建模,统计最常出现的作者关系;学习内容:构建作者关系图,挖掘作者关系学习成果:论文作者知识图谱、图关系挖掘5.2数据处理步骤将作者列表进行处理
希娅_d503
·
2024-01-08 14:47
数据库系统原理(五)
课程三:
数据建模
与数据库设计5.1为什么要
数据建模
与数据库设计?对用户需求的理解,包括数据需求和处理规则需求的理解。
牧樵
·
2024-01-08 13:42
数据库系统原理
数据库
greenplum 历史拉链表
3.1历史拉链表
数据仓库
定义:是一个面向主题的、集成的、相对稳定的、反映历史变化的数据集合,用于支持管理决策。历史拉链表:一种数据模型,主要是针对
数据仓库
设计中表存储数据的方式而定义的。
用心一
·
2024-01-08 11:48
数据仓库
数据库
hive
上一页
4
5
6
7
8
9
10
11
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他