E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Hive数据仓库
最全数仓实践:总线矩阵设计_数仓总线矩阵(2)
在这种多维体系结构(MD)的
数据仓库
架构中,主导的思想便是分步建立
数据仓库
,并由数据集市组合成企业的
数据仓库
。
2401_84170391
·
2025-02-26 15:09
程序员
矩阵
大数据
spark
linux 打包解压命令
创建一个名为arc
hive
.tar的tar包:tar-cvfarc
hive
.tar/path/to/directory/这里:c表示创建新的归档文件。v表示在打包过程中显示文件。f指定归档文件的名称。
luoluosheng07
·
2025-02-26 14:03
linux
linux
服务器
运维
数据仓库
面试题集锦(附答案和数仓知识体系),面试必过
3、如何构建
数据仓库
?
m0_60635001
·
2025-02-26 13:20
2024年程序员学习
数据仓库
面试
spark
Hadoop 基础原理
NameNode持久化机制MapReduce底层原理示例Hadoop是一个由Apache基金会开发的分布式系统基础架构,主要解决海量数据的存储和计算问题,广义上Hadoop指的是Hadoop生态圈,包含HDFS、
Hive
disgare
·
2025-02-26 11:38
数据库
hadoop
大数据
分布式
nodejs npm run build 打包压缩zip文件
步骤1:安装npminstallarc
hive
r-D步骤2:根目录下新建zip.js,内容如下constfs=require('fs')constarc
hive
r=require('arc
hive
r')
xiaoxiao_0721
·
2025-02-26 10:36
vue
本地Oracle数据库复制数据到Apache
Hive
的Linux服务器集群的分步流程
我们已经有安装Apache
Hive
的Linux服务器集群,它可以连接到一个OracleRDS数据库,需要在该Linux服务器上安装配置sqoop,然后将OracleRDS数据库中所有的表数据复制到
Hive
weixin_30777913
·
2025-02-26 10:34
数据库
大数据
hive
Hologres 介绍
Hologres是阿里云提供的一款实时数据分析平台,它结合了
数据仓库
(DataWarehouse)和流式计算(StreamProcessing)的优势,专为大规模数据分析和实时数据处理而设计。
黄毛火烧雪下
·
2025-02-26 10:04
数据分析
preview_220624,Day08_DM层建设实战,
解释从理论层面来说,数据集市是一个小型的部门或工作组级别的
数据仓库
。一些公司早期的数据集市后期可能会演变成为数仓系统。本项目中在数据集市层面主要进行粗粒度汇总,也可以将这些功能下放至DWS层完成。
啊六六六
·
2025-02-26 04:51
Python
大数据
数据挖掘
数据仓库
MySQL 8 公用表表达式(CTE)—— WITH关键字深入用法
更多介绍请查看官网:https://dev.mysql.com/blog-arc
hive
/mysql-8-0-labs-recursive-common-table-expressions-in-mysql-cte
gmHappy
·
2025-02-25 19:45
大数据学习
java
web
Java
mysql
数据库
with递归
jar、war、pom
1.jar定义与用途用途:默认打包类型,生成JAR文件(JavaArc
hive
),适用于普通Java应用或库。场景:开发工具类库(如commons-lang.jar)。
JIU_WW
·
2025-02-25 13:33
jar
java
架构师论文《论湖仓一体架构及其应用》
软考论文-系统架构设计师摘要作为某省级商业银行数据中台建设项目技术负责人,我在2020年主导完成了从传统
数据仓库
向湖仓一体架构的转型。
pccai-vip
·
2025-02-25 12:28
架构
软考论文
MAC电脑 初始化 开发环境(Java + Node)
1.后端1.1Java下载地址https://www.oracle.com/cn/java/technologies/javase/javase8-arc
hive
-downloads.html1.2Maven
Kevin_K2
·
2025-02-25 08:57
macos
java
开发语言
centOS 7.9 安装JDK MYSQL
jdk:JavaArc
hive
Downloads-JavaSE17.0.12andearlierCentOS安装JDK17教程(完整版)-秦胜飞-博客园sudoyumupdatewgethttps://
he25819
·
2025-02-25 07:23
centos
java
mysql
显卡3050ti等安培架构的GPU安装paddlepaddle
官网原话如果您使用的是安培架构的GPU,推荐使用CUDA11.2如果您使用的是非安培架构的GPU,推荐使用CUDA10.2,性能更优其他配套确定软件版本后,到官网下载对应版本的软件CUDA:CUDAToolkitArc
hive
社会闲散人员中的代码爱好者
·
2025-02-24 14:49
python
环境搭建
python
人工智能
深度学习
Oracle 19C DataGuard GAP 修复过程(RECOVER STANDBY DATABASE FROM SERVICE)
DGGAP主要分为以下两类情况:主库归档日志存在,可以通过配置FetchArc
hive
Log(FAL)参数,自动解决归档GAP;主库归档日志丢失,需要人工干预来修复;不同Oracle版本的GAP修复方式也不尽相同
莳花微语
·
2025-02-24 13:17
Oracle
oracle
数据库
ADG
利用Python imaplib和email模块 读取邮件文本内容及附件内容
python使用imap接收邮件的过程探索https://www.cnblogs.com/yhlx/arc
hive
/2013/03/22/2975817.html#!
aobian2884
·
2025-02-24 12:06
python
《
数据仓库
与数据挖掘》自测
试卷一一、选择题(每题2分,共20分)1.
数据仓库
的主要特征不包括以下哪一项?
破坏神在行动
·
2025-02-24 05:48
数据仓库与数据挖掘
数据仓库
数据挖掘
银行数据类系统建设
数据仓库
建设
数据仓库
的概念
数据仓库
是大批量数据的存储系统,在如今PB级数据量的大数据时代,传统数据库由于数据量的限制,无法存储如此庞大的数据量,因此对于需求海量数据的机构大都会将数据存储在
数据仓库
中,用以取数和分析
奔跑的白鸥
·
2025-02-24 04:09
银行数据应用
数据仓库
spark
大数据
hive
运维
hive
锁相关showlocks;查看锁unlocktable表名;释放锁发现释放不了锁,执行下面set
hive
.support.concurrency=false;set
hive
.txn.manager
花泽啸
·
2025-02-23 23:04
Hive
hive
【003
hive
基础】
hive
的数据类型
文章目录一.数据类型1.基础数据类型2.复杂数据类型二.显式转换与隐式转换三.
hive
的读时模式一.数据类型1.基础数据类型2.复杂数据类型array:有序相同数据类型的集合。
roman_日积跬步-终至千里
·
2025-02-23 22:29
#
hive
hive
大数据
hadoop
【
Hive
】学习路线:架构、运维、Hsql实战、源码分析
文章目录一.
Hive
基础学习1.基础知识2.安装与配置3.数据存储与表结构二.
hive
运维三.
Hive
实战1.
Hive
SQL基础2.高级查询与数据分析3.数据存储优化4.性能调优四.
Hive
源码分析一.
roman_日积跬步-终至千里
·
2025-02-23 22:25
#
hive
hive
学习
架构
【ETL】从理论到实践的数据处理流程及其工具的应用
在大数据时代,随着企业数据量的快速增长,ETL不仅要满足传统
数据仓库
的需求,还要应对实时数
絆人心
·
2025-02-23 19:10
etl
数据仓库
python
数据分析
数据挖掘
数据库
24道
数据仓库
面试八股文(答案、分析和深入提问)整理
回答在
数据仓库
(DW)中,ODS(OperationalDataStore)层到DW层的ETL(Extract,Transform,Load)过程主要包括以下几个步骤:提取(Extract):从ODS层提取原始数据
守护海洋的猫
·
2025-02-23 16:11
数据仓库
面试
职场和发展
python
pg使用 arc
hive
_cleanup_command 自动清理归档日志
清理归档日志的方式1.使用arc
hive
_cleanup_command自动清理归档日志PostgreSQL提供了arc
hive
_cleanup_command参数,用于自动清理归档日志。
eaglesstone
·
2025-02-23 14:29
postgresql数据库
数据库
postgresql
LINUX 安装mysql5.6.50 RPM
,记录一下安装过程的碰见的各种问题1.下载安装包抖店云上的系统是CentOS7.964位,因此下载Redhat7系统下面的安装包下载地址:https://downloads.mysql.com/arc
hive
s
a21768541
·
2025-02-23 10:06
数据库
mysql
Hive
排序函数源码解密:字节跳动面试官的底层三连问
Hive
排序函数源码解密:字节跳动面试官的底层三连问作为数据工程师,理解
Hive
排序函数的源码就像掌握汽车的发动机原理。本文通过字节跳动内部技术文档,为你揭示三大排序函数的源码级实现差异。
数据大包哥
·
2025-02-23 06:31
#
Hive
#
大厂SQL面试指南
hive
hadoop
数据仓库
笔记-Ubuntu本地镜像源配置
操作1、先在外网拿到安装包cd/var/cache/apt/arc
hive
s2、复制至内网将所有deb复制至内网根目录下mkdir/ak/downloadchmod777-R/ak/download/3
丶花落谁家
·
2025-02-23 02:03
笔记
ubuntu
apt
大数据MaxCompute教程(阿里云离线数仓项目)学习笔记20231127
1
数据仓库
概念
数据仓库
定义(DataWarehouse),是为企业所有决策制定过程,提供所有系统数据支持的战略集合。
多刷亿点题⑧
·
2025-02-22 22:54
云原生
数据仓库
大数据-257 离线数仓 - 数据质量监控 监控方法 Griffin架构
目前已经更新到了:Hadoop(已更完)HDFS(已更完)MapReduce(已更完)
Hive
(已更完)Flume(已更完)Sqoop(已更完)Zookeeper(已更完)HBase(已更完)Redis
m0_74823705
·
2025-02-22 21:50
面试
学习路线
阿里巴巴
大数据
架构
spark sql随记
1、sparksql访问
hive
将
hive
-site.xml放入到${SPARK_HOME}/conf下如果是sparkonyarn的cluster模式,由于driver是运行于哪个executor未知
cxy1991xm
·
2025-02-22 21:18
spark
数据技术的进化史:从
数据仓库
到数据中台再到数据飞轮
数据技术介绍:1.
数据仓库
(DataWarehouse)概念与起源:
数据仓库
是20世纪90年代初期兴起的一种数据管理和分析技术。
Earth explosion
·
2025-02-22 15:28
spark
大数据
分布式
【面试系列】TypeScript高频面试题及详细解答
⭐️全流程数据技术实战指南:全面讲解从数据采集到数据可视化的整个过程,掌握构建现代化数据平台和
数据仓库
的核心技术和方法。文章目录常见的初级面试题1.什么是TypeSc
野老杂谈
·
2025-02-22 11:01
全网最全IT公司面试宝典
面试
typescript
编程语言
前端
apk文件放到Linux服务器 nginx不支持apk ipa文件下载设置
修改/usr/local/nginx/conf目录下的mime.types增加如下配置,重启nginx生效application/vnd.android.package-arc
hive
apk;//安卓application
云上上云
·
2025-02-22 11:00
服务器
linux
nginx
在虚拟机上安装MySQL和
Hive
文章目录零、学习目标一、
Hive
概述(一)
Hive
的SQL-HQL(二)数据库与
数据仓库
(三)
Hive
的适用场景二、下载、安装和配置MySQL(一)下载MySQL组件压缩包(二)将MySQL组件压缩包上传到虚拟机
酒城译痴无心剑
·
2025-02-22 06:23
数据库编程世界
hive
mysql
数据库
Python 的 WebSocket 实现详解
大数据技术:涵盖Hadoop(HDFS)、
Hive
、Spark、Fli
王子良.
·
2025-02-22 03:23
经验分享
python
websocket
网络协议
网络
Oracle 12c 并发统计信息收集功能:技术解析与实践指南
对于大规模数据库或
数据仓库
环境,这种串行模式可能导致统计信息收集耗时过长,影响维护窗口效率。
安呀智数据
·
2025-02-22 01:28
Oracle
并发统计信息收集
oracle
12c19c21c
oracle
数据库
SQLMesh 系列教程7- 详解 seed 模型
在本文中,我们介绍了Seed模型的定义及其在实际项目中的应用,展示了如何通过简单的SQL查询创建Seed模型,并将其加载到
数据仓库
中。通过一个电
梦想画家
·
2025-02-22 00:17
#
python
数据分析工程
sqlmesh
数据工程
Linux命令终极指南:从入门到精通掌握150+核心指令
易读大小cd~#切换到用户家目录(ChangeDirectory)cd-#返回上一个工作目录2.文件操作touchfile.txt#创建空文件或更新时间戳cp-arvsrcdest#递归复制保留属性(Arc
hive
放氮气的蜗牛
·
2025-02-21 23:43
深度博客
linux
运维
服务器
V4L2采集图像基本流程
参考http://blog.csdn.net/tsuibeyond/article/details/50654823http://www.cnblogs.com/surpassal/arc
hive
/2012
yuyangyg
·
2025-02-21 19:14
linux
图像处理
ubuntu
V4L2
【大数据技术】搭建完全分布式高可用大数据集群(MySQL+
Hive
)
搭建完全分布式高可用大数据集群(MySQL+
Hive
)apache-
hive
-3.1.3-bin.tar.gzmysql-connector-java-8.0.30注:请在阅读本篇文章前,将以上资源下载下来
Want595
·
2025-02-21 09:11
Python大数据采集与分析
大数据
分布式
mysql
【AI大数据】数据中台的数据分析与挖掘:从数据到业务的决策
文章目录1.前言2.基本概念术语说明2.1数据模型及其实体关系实体(Entity)属性(Attribute)实体关系(EntityRelationships)2.2
数据仓库
2.3分析引擎2.4噪声数据2.5
AI天才研究院
·
2025-02-21 08:34
DeepSeek
R1
&
大数据AI人工智能大模型
自然语言处理
人工智能
语言模型
编程实践
开发语言
架构设计
Linux下安装压缩包版MySQL记录
dev.mysql.com/downloads/mysql/操作系统选Linux-Generic,OS版本根据自己系统处理器架构和glibc版本选择,然后下载筛选结果中的CompressedTARArc
hive
蝶衣哦
·
2025-02-21 05:43
mysql
linux
数据库
【大数据分析】Spark SQL查询:使用SQL命令
对于使用关系型数据库或分布式数据库的用户可能更容易和更自然地使用SQL,比如
Hive
。在SparkSQL编写SQL命令时,它们将被转换为DataFrame上的操作。
sword_csdn
·
2025-02-21 02:58
Spark
spark
数据分析
sql
为AI聊天工具添加一个知识系统 之113 详细设计之54 Chance:偶然和适配 之2
和它在实操中的三种槽(占据槽,请求槽和填充槽,实时数据库(source)中数据(流入ETL的一个正序流程行列并发靶向整形绑定变量)是如何通过“命名所依的AI行为”、“分类所缘的因果结构”和“求实所据的机器特征”(元
数据仓库
一水鉴天
·
2025-02-21 00:15
软件智能
智能制造
人工语言
开发语言
人工智能
mysql8.4+mysql router读写分离
community-router8.4下载mysql_shellmysql-shell-9.0.1-linux-glibc2.17-x86-64bit.tar.gz下载地址:https://downloads.mysql.com/arc
hive
s
Alex_z0897
·
2025-02-21 00:42
mysql
数据库
安装配置MAVEN
安装配置MAVEN1.获取安装包下载apache-maven-3.8.1-bin.zip,下载地址:https://arc
hive
.apache.org/dist/maven/maven-3/3.8.1
ByteVoyager
·
2025-02-20 11:21
maven
java
MapReduce 读取
Hive
ORC ArrayIndexOutOfBoundsException: 1024 异常解决
个人博客地址:MapReduce读取
Hive
ORCArrayIndexOutOfBoundsException:1024异常解决|一张假钞的真实世界在MR处理ORC的时候遇到如下异常:Exceptioninthread"main"java.lang.ArrayIndexOutOfBoundsException
一张假钞
·
2025-02-20 09:33
mapreduce
hive
大数据
Anaconda 配置镜像源
Anaconda安装包可以到https://mirrors.tuna.tsinghua.edu.cn/anaconda/arc
hive
/下载。
猿代码_xiao
·
2025-02-20 06:37
python
pytorch
python
深度学习
linux安装python开发环境
安装Anaconda下载Anacondawgethttps://repo.anaconda.com/arc
hive
/Anaconda3-5.3.0-Linux-x86_64.sh安装AnacondabashAnaconda3
燃冰结晶
·
2025-02-20 05:30
linux
python
linux
install
python
jupyter
python
web开发环境
(一)大数据---Hadoop整体介绍(架构层)----(组件(3)
==================================================================基础的技术包含数据的采集、数据预处理、分布式存储、NoSQL数据库、
数据仓库
2401_84166965
·
2025-02-19 16:15
程序员
大数据
hadoop
架构
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他