E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
数据仓库hadoop大数据
MaxCompute全套攻略
概况介绍大数据计算服务(MaxCompute,原名ODPS,产品地址:https://www.aliyun.com/product/odps)是一种快速、完全托管的TB/PB级
数据仓库
解决方案。
JQW_FY
·
2023-10-13 13:08
大数据
大数据
阿里巴巴大数据计算平台MaxCompute全套攻略
大数据计算服务(MaxCompute,原名ODPS)是一种快速、完全托管的TB/PB级
数据仓库
解决方案。
chulicheng5417
·
2023-10-13 13:36
大数据
运维
java
建立hive-solr外部映射表 用于solr4版本
hive-solr4使用Hive读写solr4,由于市面上没有solr4这个版本的组件于是我自己根据hive-solr5的代码改了一个(一)Hive+Solr简介Hive作为Hadoop生态系统里面离线的
数据仓库
胖子捏肚子
·
2023-10-13 13:55
【Vue】之Vuex的入门使用,取值,修改值,同异步请求处理---保姆级别教学
可以想象为一个“前端数据库”(
数据仓库
),让其在各个页面上实现数据的共享包括状态,并且可操作1.2Vuex的核心概念State(状态)
Love-Java.
·
2023-10-13 09:46
vue.js
前端
javascript
elementui
前端框架
hive小文件合并机制_转:Hive小文件合并
但是在
数据仓库
中,越是上层的表其汇总程度就越高,数据量也就越小。而且这些表通常会按日期进行分区,随着时间的推移,HDFS的文件数目就会逐渐增加。
亿码数码
·
2023-10-13 08:56
hive小文件合并机制
hive小文件合并机制_hive小文件合并
但是在
数据仓库
中,越是上层的表汇总程度就越高,数据量也就越小,而且这些表通常会有日期分区,随着时间的推移,HDFS的文件数目就会逐步增加。
大Victor
·
2023-10-13 08:56
hive小文件合并机制
软件设计师学习笔记(六)数据库技术基础(一)
数据库技术基础(一)一、数据库基本概念1、数据库体系结构1、分布式数据库特点2、分布式数据库透明性2、三级模式结构——三级模式和两级映射3、
数据仓库
二、数据库设计过程三、概念设计阶段1、概念设计过程2、
ؓ初尘
·
2023-10-13 00:23
软件设计师学习笔记
学习
经验分享
软件设计师笔记之数据库系统基础
(1)数据库模型(概念模式、外模式、内模式)(2)数据模型,ER图,规范化(3)数据操作(4)数据库语言(5)数据库管理系统的功能和特征(6)数据库的控制功能(7)
数据仓库
和分布式数据库基础知识数据库系统的考点主要集中在
Zcoder`Blog
·
2023-10-13 00:50
数据库
软件设计师笔记总结
数据库系统
软件设计师
软考2019
笔记整理
Dremio:新一代数据湖仓引擎
数据湖仓2.1、什么是数据湖仓2.2、数据湖仓的历史和演变2.3、开放数据对数据湖和湖仓的重要性2.4、数据湖仓的作用2.5、数据湖仓如何工作2.6、数据湖仓的元素2.7、数据湖仓与云数据湖2.8、云
数据仓库
对许
·
2023-10-12 15:03
数据仓库
大数据
云计算
主流的商业智能BI工具推荐,学会数据分析没难度
百度百科解释是商业智能(BusinessIntelligence,简称:BI),又称商业智慧或商务智能,指用现代
数据仓库
技术、线上分析处理技术、数据挖掘和数据展现技术进行数据分析以实现商业价值。
明月说数据
·
2023-10-12 15:02
big
data
人工智能
BI工具
使用kettle工作流程
Kettle是一个用于数据集成和数据管理的开源工具,主要用于数据库、
数据仓库
和商业智能领域的数据转换和同步。
明算科
·
2023-10-12 12:53
数据处理
etl
数据仓库
Hive(林子雨课程慕课)
文章目录9.
数据仓库
Hive9.1
数据仓库
的概念9.2Hive简介9.3SQL语句转换为MapReduce作业的基本原理9.4Impla9.4.1Impala简介9.4.2Impala系统架构9.4.3Impala
几窗花鸢
·
2023-10-12 12:51
大数据应用
hadoop
数据仓库
hive
hadoop
大数据笔记--Hive(第一篇)
和数据库的比较3、特点①、优点②、缺点二、Hive的安装1、概述2、安装步骤3、Hive运行日志4、参数配置一、Hive1、概述Hive原本时有Facebook公司开发后来贡献给了Apache的一套用于进行
数据仓库
管理的机制
是小先生
·
2023-10-12 05:02
大数据05-Hive
hive
big
data
hadoop
为什么BI对企业这么重要?
通常,该过程涉及将您的公司数据收集到
数据仓库
或其他存储库中,并使用专门设计的工具来分析数据。
喜欢下厨的数据分析师
·
2023-10-12 02:26
数据仓库
与数据湖的联系与区别
一、
数据仓库
1,定义
数据仓库
是从广泛的运营和外部数据源中积累的组织数据的大型存储库。数据经过结构化、过滤并已针对特定目的进行处理。
晓之以理的喵~~
·
2023-10-11 22:03
数据库
数据分析
大数据
数据仓库
数据库
数据挖掘
数据仓库
与数据湖的区别以及数据入湖方式
数据仓库
与数据湖的区别1)从使用对象来看,
数据仓库
主要是给BI分析的数据分析师使用的,而数据湖是给AI处理的数据科学家使用,
数据仓库
也可以给AI使用,但是侧重点是BI.2)从数据处理的过程来看,
数据仓库
是
一米大六的八个
·
2023-10-11 22:21
数据仓库
大数据
hive 知识总结
编辑社区公告教程下载分享问答JD登录注册01hive介绍与安装1hive介绍与原理分析Hive是一个基于Hadoop的开源
数据仓库
工具,用于存储和处理海量结构化数据。
添柴少年yyds
·
2023-10-11 21:17
hive
hadoop
数据仓库
实施运维面试题
为什么要用数仓
数据仓库
是一种分析数据库,用于存储和处理数据,以便对数据进行分析。
数据仓库
有两个主要功能:存储分析数据和处理分析数据。
Geneartion_Z
·
2023-10-11 18:44
linux
数据库
运维
hadoop
大数据
高频时序
数据仓库
天软课堂将在本周四添加新主题--天软超高频行情数据。针对市场上高频行情数据处理业务的相关痛点,直观的在线演示如何通过天软高频数仓及高性能计算能力,将其逐个击破,期待各位老师的参会。
Tinysoft_SH
·
2023-10-11 16:24
大数据
数据库
数据库开发
数据库架构
数据仓库
Vuex.
可以想象为一个“前端数据库”(
数据仓库
),让其在各个页面上实现数据的共享包括状态,并且可操作作用:用来管理整个spa项目Vuex主要由四部分组成:1.State:单一状态树2.Getters:状态获取3
zw._123
·
2023-10-11 16:48
前端
css3
javascript
大数据原理与技术(八):
数据仓库
Hive
Hive是基于Hadoop的
数据仓库
软件,可与将结构化的数据文件映射为数据库表,并提供类SQL查询功能。Hive将SQL语句转化成MapReduce任务进行处理,适用于大型分布式数据集的查询管理。
昊In
·
2023-10-11 12:29
笔记
hive
大数据
Hive实战(03)-深入了解Hive JDBC:在大数据世界中实现数据交互
在大数据领域,Hive作为一种
数据仓库
解决方案,为用户提供了一种SQL接口来查询和分析存储在Hadoop集群中的数据。
JavaEdge.
·
2023-10-11 12:23
Hive
大数据
hive
交互
悠星网络基于阿里云分析型数据库PostgreSQL版的数据实践
悠星网络基于阿里云分析型数据库PostgreSQL版的数据实践说到“大数据”,当下这个词很火,各行各业涉及到数据的,目前都在提大数据,提
数据仓库
,数据挖掘或者机器学习,但同时另外一个热门的名词也很火,那就是
阿里云技术
·
2023-10-11 10:03
分析型数据库
PostgreSQL
AnalyticDB
mpp架构 mysql,MPP架构知识整理
什么是MPPMassivelyParallelProcessing,即大规模并行处理一般用来指多个SQL数据库节点搭建的
数据仓库
系统。
筱筱吖
·
2023-10-11 10:51
mpp架构
mysql
数据仓库
的MPP架构
数据仓库
的MPP架构1.MPP架构的大数据计算引擎Impala、ClickHouse、Druid、Doris,采用MPP架构的很多OLAP引擎号称:亿级秒开2.MPP架构MPP是系统架构角度的一种服务器分类方法
美美的大猪蹄子
·
2023-10-11 10:17
大数据
大数据
Hive内部表、外部表、分区表、桶表概述
Hive是基于Hadoop的一个
数据仓库
,可以将结构化的数据文件映射为一张表,并提供类sql查询功能,Hive底层将sql语句转化为mapreduce任务运行。
千释炎
·
2023-10-11 10:56
Analysis Services 建立
数据仓库
实例-ssas
AnalysisServices建立
数据仓库
实例-ssas环境配置好SqlServer2019-》SqlServerSSMS(管理工具)-》visualstudio第一,最好按照这个顺序安装。
何以问_
·
2023-10-11 07:07
数据仓库
数据仓库
python数据导入hive_hive常用功能:Hive数据导入导出方式
作为
数据仓库
的Hive,存储着海量用户使用的数据。在平常的Hive使用过程中,难免对遇到将外部数据导入到Hive或者将Hive中的数据导出来。今天主要就来学习一下Hive的几种数据导入和导出的方式。
摆摊卖爱情
·
2023-10-11 06:04
python数据导入hive
postgresql、mysql自己整理txt的一些小知识(持续更新)
whichpython#liunx数据库系统OLTP主要是业务操作数据库,工作简单只需要简单的事务能力就行,用户数量为上千个,库的大小也只有100MB-GB,但是时间要求很高,具有实时性OLAP主要是用于分析决策的
数据仓库
平淡中的乐趣
·
2023-10-11 03:20
笔记
基础
postgresql
mysql
持续更新
git
Hadoop大数据
综合案例1-Hadoop2.7.3伪分布式环境搭建
Hadoop大数据
招聘网数据分析综合案例
Hadoop大数据
综合案例1-Hadoop2.7.3伪分布式环境搭建
Hadoop大数据
综合案例2-HttpClient与Python招聘网数据采集
Hadoop大数据
综合案例
CDHong.it
·
2023-10-11 00:26
Hadoop大数据
大数据
hadoop
linux
数据库
大数据学习(2)Hadoop-分布式资源计算hive(1)
哲学语录:承认自己的无知,乃是开启智慧的大门如果觉得博主的文章还不错的话,请点赞+收藏⭐️+留言支持一下博>主哦1.1什么是Hive1)Hive简介Hive是由Facebook开源,基于Hadoop的一个
数据仓库
工具
viperrrrrrr
·
2023-10-11 00:19
大数据
hadoop
学习
hive
该如何设计数仓的汇总层(DWS)
关于
数据仓库
的分层,似乎大家都有一个共同的认识。但涉及到每一层该如何去建模,可能每个人都有自己的理解。
大数据技术与数仓
·
2023-10-10 23:28
林子雨 慕课答案2021新版
第一章大数据技术原理与应用—第1讲大数据概述(林子雨老师)课后习题_努力搬砖头的博客-CSDN博客第二章大数据技术原理与应用—第2讲大数据处理架构Hadoop(林子雨老师)课后习题_努力搬砖头的博客-CSDN博客_
hadoop
S_h_a_
·
2023-10-10 23:40
计算机本科课程
大数据
数据仓库
,Hive中使用 != 或 <>符号进行条件过滤时的坑
最近在建设
数据仓库
,处理数据的过程中,经常反复使用hive的HQL语句,尽管HQL和SQL语言有很多相同之处,但也并不是说HQL就能通用SQL的语法。在使用过程中要尤为注意。
雾岛与鲸
·
2023-10-10 19:51
hive
数据仓库
hive
hadoop
MPP和hadoop
特别是在企业
数据仓库
建设中,MPP架构与Hadoop架构代表两类典型的技术路线选型,事实上,在2015年左右甚至有人认为基于Hadoop体系的数仓将彻底取代基于MPP数据库的数仓。
方璧
·
2023-10-10 18:03
hadoop
大数据
分布式
系统架构设计:11 论湖仓一体架构及其应用
目录一湖仓一体(Lakehouse)1
数据仓库
2数据湖3
数据仓库
和数据湖4湖仓一体(Lakehouse)
Jackilina_Stone
·
2023-10-10 18:01
系统架构设计师
大数据
系统架构
Flink系列之Flink的应用场景(一)
ApacheFlinkisaframeworkanddistributedprocessingengineforstatefulcomputationsoverunboundedandboundeddatastreamsDT时代,人们对于数据的要求越来越严格,从开始的大数据到现在慢慢转变成快数据,我们很多公司都是基于Hadoop生态搭建自己的
数据仓库
当_下
·
2023-10-10 11:23
Python操作Hive
数据仓库
2、Python连接Hive
数据仓库
1、Python如何连接Hive?
对许
·
2023-10-10 11:32
#
Python
#
Hive
#
数据分析
数据仓库
python
hive
Hive面试常见基础问题
答:Hive是一个开源的
数据仓库
工具,用于处理和分析大规模结构化数据。它能够创建、修改和查询表结构,支持多种数据类型和查询操作,同时提供数据汇总和数据查询的功能。Hive和MySQL有什么不同?
饭九钦vlog
·
2023-10-10 10:24
笔记
spark sql如何行转列
在
数据仓库
中,行转列通常称为”变形”(Pivoting)或“透视”(Pivoting),可使用SparkSQL的pivot语句实现。
大模型大数据攻城狮
·
2023-10-10 06:04
spark
sql
大数据
商业数据的获取与清洗
目录分析需求的数据化数据描述内部数据外部数据逻辑描述表态数据动态数据数据词典数据源前期准备PowerBI获取外部数据方法一:直接抓取表格数据方法二:使用示例抓取数据方法三:抓取JSON格式方法四:批量抓取数据MySQL内部获取可视化连接软件NAVICAT数据库与
数据仓库
数据库
数据仓库
举例数据的导入导入
熬不了夜哇
·
2023-10-09 21:22
数据可视化分析
PowerBI
数据分析
json
中国移动对大数据分析需求猛增 成转型必备工具
北京时间5月14日早间消息(张月红)中国移动业务支撑系统部信息管理处处长陶涛,多年来一直在中国移动公司总部工作,负责
数据仓库
系统的建设。
cigang4063
·
2023-10-09 18:21
大数据
人工智能
深度解析数据湖存储方案Lakehouse架构
简介:从
数据仓库
、数据湖的优劣势,湖仓一体架构的应用和优势等多方面深度解析Lakehouse架构。
阿里云云栖号
·
2023-10-09 08:33
云栖号技术分享
架构
数据仓库
数据库
2023.4.14 CSDN数开实习面试
4.14CSDN数开实习面试(20min)1.自我介绍2.你是潮汕人,知道我们公司在哪嘛,为何不在广州深圳找,找这个工作是出于岗位还是城市3.项目数据量4.数据库与
数据仓库
的区别5.知道scd嘛(反复确认了一下没听错
wang_jun_xin
·
2023-10-09 06:45
面试
数据仓库
flume
kafka
阶段项目总结
通过对互联网的舆论信息进行采集和分析,可以满足用户对网络舆情的检测和热点的追踪项目价值实现了从互联网上采集海量的数据,基于这个海量的数据,以及用户定制的主题,进行数据分析提供了热点发现,数据走势技术栈数据端:离线部分
数据仓库
的构建离线统计分析实时统计分析技术栈
The_Boy_le
·
2023-10-09 05:32
hadoop
zookeeper
redis
spark
kafka
hive初识
数据仓库
:DataWarehouse简写为DW
数据仓库
面向分析(大而全、准确性):是面向主题、集成、不可修改、反映历史变化用于数据分析,辅助管理决策数据库面向事务(一致性、时效性)为什么分区?
The_Boy_le
·
2023-10-09 05:02
数据仓库
数据库
数据挖掘
数据仓库
——分层原理
目录一、什么是
数据仓库
二、数仓建模的意义,为什么要对
数据仓库
分层?
纠结安然猿
·
2023-10-08 23:05
数据仓库
数据库
大数据
数据分析与建模挖掘- 数据获取
在这里插入图片描述数据获取手段
数据仓库
检测与抓取填写日志埋点计算
数据仓库
分析仅靠运行的数据库无法完成数据更改减少冗余需要把用户的操作过程如实记录并长期保留将所有业务数据经汇总处理构成
数据仓库
(DW)全部事实记录
志䦀zy
·
2023-10-08 14:36
从小纸条到大软件:足球科技进化史(一)
回想起来,
数据仓库
的概念也不过才诞生在90年代初期由BillInmon(
数据仓库
之父)提出。在足球领域用数据来作为决策
weixin_30836759
·
2023-10-08 12:36
大数据
前端
ViewUI
基于Springboot的党员信息管理系统毕业设计源码161528
摘要由于数据库和
数据仓库
技术的快速发展,学校党员信息系统建设越来越向模块化、智能化、自我服务和管理科学化的方向发展。
weixin_61498557
·
2023-10-07 21:39
spring
boot
java
idea
php
mysql
上一页
18
19
20
21
22
23
24
25
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他