E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
数据仓库方法论
写出高质量代码的秘诀:Golang中的测试驱动开发(TDD)
测试驱动开发(TDD)是一种广受欢迎的
方法论
,它有着充分的理由。本文将探讨TDD是什么,为什么它是必要的,以及如何在Golang中应用TDD,Golang是一门以效率和简洁著称的编程语言。
Go中国
·
2023-11-15 16:52
golang
驱动开发
tdd
开发语言
后端
政府补贴政策这么多,ITSS信息技术服务标准到底是什么?
2009年,工业和信息化部高瞻远瞩、审时度势,成立ITSS指导协调组和工作组,ITSS横空出世,逐渐形成ITSS独有的
方法论
。
CYCO
·
2023-11-15 16:08
ITSS
人工智能
物联网
big
data
大数据清洗、转换工具——ETL工具概述
ETL的实现架构但在
数据仓库
中,ETL有几个特点,一是数据同步,它不是一次性倒完数据就拉到,
阿拉伯梳子
·
2023-11-15 15:54
办公应用
企业信息化
大数据
etl
数据仓库
3个管理误区,新晋管理者一定要避免!
然后再给大家分享5个团队管理
方法论
。一、管理的误区1.凡事亲力亲为很多新任管理者,看到下属有不懂的或者做的不好的地方,就亲自动手去解决。
智办事
·
2023-11-15 14:22
智办事:企业管理
管理
团队管理
企业管理
职场
职场发展
企业管理如何才能更高效?
智办事是以“目标+事”为中心的企业数字化管理工具,深度整合目标管理、项目管理、任务协同、风险管理、工作流程标准化和绩效管理,融合阿里巴巴管理
方法论
和数字技术,赋能组织数
智办事
·
2023-11-15 14:52
智办事:企业管理
企业管理
管理
项目管理
目标管理
职场
Hive
数据仓库
建模
1、基于Hive
数据仓库
建模
数据仓库
的发展大致经历了这样的三个过程:报表——>集市——>仓库简单报表阶段:这个阶段,系统的主要目标是解决一些日常的工作中业务人员需要的报表,以及生成一些简单的能够帮助领导进行决策所需要的汇总数据
小洲C
·
2023-11-15 10:01
#
hive
服务器
java
运维
hive olap
数据仓库
_我在hive上搭建
数据仓库
一般将hive作为大数据中离线数据的存储,并把hive作为构建
数据仓库
的环境。可我们也要了解一个事实,hive不支持行级操作,无法像RMDB那样进行updata、delete,add操作。
weixin_39875192
·
2023-11-15 10:00
hive
olap
数据仓库
Hive中的数据分层
理论上一般分为三个层:ODS数据运营层、DW
数据仓库
层、ADS数据服务层。基于这个基础分层之上,再提交信息的层次,来满足不同的业务需求。
小申.
·
2023-11-15 10:54
大数据
hive
数据仓库
Hive
数据仓库
Hive
数据仓库
1什么是
数据仓库
数据仓库
,英文名称为DataWarehouse,可简写为DW或DWH。
数据仓库
,是为企业所有级别的决策制定过程,提供所有类型数据支持的战略集合。
Lv_Hulk
·
2023-11-15 10:23
Hive
数据仓库的特点
数据库和数据仓库的区别
元数据介绍
数据仓库架构分层
星型模型和雪花模型
大数据管理与分析 第六章 Hive和
数据仓库
Hive和
数据仓库
数据仓库
和OLAP
数据仓库
是独立的
数据仓库
多层架构Hive基本工作原理Hive的组成模块Hive的数据模型数据的物理分布
数据仓库
和OLAP定义:
数据仓库
是一个面向主题的、集成的、时变的
黄昏贩卖机
·
2023-11-15 10:22
大数据管理与分析
数据仓库
hive
数据库
Hive
数据仓库
基础知识
2数据库三范式2.1首先看第一范式(1NF):2.2第二范式(2NF)2.3第三范式(3NF)3维度建模模型3.1星型模型和雪花模型3.1.1星型模型3.1.2雪花模型4
数据仓库
分层设计1事实表、维度表首先我们来看两个名词
赵广陆
·
2023-11-15 10:20
hive
java
大数据
es
数据湖架构
与传统的
数据仓库
不同,数据湖采用扁平化结构,将数据存储在原始形式下,不需要进行预处理或转化。这使得数据湖能够同时支持多种分析和处理方式,包括机器学习、数据挖掘、ETL等。
溟有常青木
·
2023-11-15 07:47
python
python
大数据调度系统对比
0.前言有了数据平台,有了
数据仓库
,那就需要一个系统来调度和管理数仓的任务,因此调度系统的地位可见之重要。
Impl_Sunny
·
2023-11-14 21:01
调度管理
#
对比&选型
调度系统
Azkaban
数据仓库
笔记
目录第二章
数据仓库
第三章数据预处理第四章特征化和区分数据挖掘第五章关联规则挖掘第六章分类挖掘第七章聚类挖掘第二章
数据仓库
1、B树索引考题:为何B树等在数据库中广泛使用的索引技术无法直接被引入
数据仓库
?
0xac001d09
·
2023-11-14 15:28
期末
数据挖掘
数据仓库
工作汇报怎么写?建议收藏
整体思路与模块:背景/事件成果展示推动落实的
方法论
收获与成长存在的不足及改进措施下一步工作安排支持(选)一、背景/事件对于区分“功能性总结”和“应付性总结”,在背景/事件方面有一个关键点是报告是否具有逻辑性
逸尘谈PM
·
2023-11-14 15:47
职场
项目管理
思维导图
PMP
职业
npdp
职场和发展
工作汇报
数据仓库
基础信息
数据仓库
数据仓库
概述什么是数据库什么是数据集市什么是
数据仓库
数据仓库
和数据库的对比什么是数据湖数据存储架构数据处理工具聚焦如何把数据搬到湖里关注如何对湖中的数据进行分析、挖掘、利用数据湖和
数据仓库
的对比
数据仓库
的特点
数据仓库
是集成的
数据仓库
的数据是稳定的
daladalabao
·
2023-11-14 11:50
数据仓库
BI系统是如何进行数据分析的?
现在的BI系统可以对接很多类型的
数据仓库
,大大提高了效率。下一步就是找到可能影响数据质量的问题,消除错误和重复数据,这在Smartbi中可以很容易实现,建立自助数据集即可。
思迈特Smartbi
·
2023-11-14 10:44
数据仓库
大数据
数据分析
数据库理论 —— 数据库设计六大范式
前言笔者遇到范式是在
数据仓库
建模时,以前对范式的理解比较浅显,且只了解前三范式,对后面三个范式并不了解,趁此机会和大家一起把其他范式学习下。
扫地增
·
2023-11-14 10:24
数据仓库
数据库
范式理论
大数据
Hive工具的介绍(一)
一、Hive是什么要了解Hive是什么得先了解一下数仓(
数据仓库
)的概念,什么又是
数据仓库
呢?
xiaoxie_advent
·
2023-11-14 09:15
大数居
hadoop
数据仓库
大数据
Hive
数据仓库
、数仓分层 01
1.
数据仓库
的基本概念
数据仓库
,英文名称为DataWarehouse,可简写为DW或DWH。
数据仓库
的目的是构建面向分析的集成化数据环境,为企业提供决策支持(DecisionSupport)。
啊策策
·
2023-11-14 06:17
Hive
数据仓库
数仓主要特征
数仓分层
数仓分层的好处
,方便定位问题2,减少重复开发:规范数据分层,通过中间层数据,能够减少极大的重复计算,增加计算一次的结果的重复性3,隔离原始数据:不论是数据的异常还是数据的敏感性,使真实数据与统计数据解耦开数据集市和
数据仓库
的区别
Alienware^
·
2023-11-14 06:17
数据仓库
数据仓库
数仓分层总结
数据仓库
分为四层ods、dwd、dws、adsods层上是一些原始的数据,存放原始数据,直接加载原始日志、数据(事件表),保持数据原貌不作处理,也就是做一个备份的作用,不要解析数据创建支持LZO压缩的表
月升11
·
2023-11-14 06:41
数据仓库
hive
大数据
数据仓库
数据仓库
之数仓分层及hive分层
目录一、
数据仓库
之数仓分层(一)为什么要分层?
javastart
·
2023-11-14 06:09
数据仓库
数据仓库
数据库
大数据
简单搞定数仓搭建:数仓分层
我们建议将
数据仓库
分为三层,自下而上为:数据引入层(ODS,OperationDataStore)、数据公共层(CDM,CommonDataModel)和数据应用层(ADS,ApplicationDataService
白枭
·
2023-11-14 06:08
数仓
bigdata
大数据开发
数据建模
数据仓库
数仓分层介绍
常见的数据分层ODS层:源数据层DW层:
数据仓库
层(也叫作集团数据中心)DA(app)层:数据应用层更加细分的数仓分层方案1ODS数据源2DW
数据仓库
2.1DWD明细层:2.2DWB基础数据层:2.3DWS
程少亭
·
2023-11-14 06:36
数据仓库
big
data
etl
数仓(一)数据分层
文章目录数据分层好处数据运营层
数据仓库
层数据应用层事实表`(FactTable)`维表层(`Dimension`)表命名规则聚合粒度以及加工频率字段说明抽取方式字段命名规范数据表名命名规范表分区字段说明任务命名规范大厂分层架构爱奇艺
666呀
·
2023-11-14 06:05
数仓
数据仓库
数据挖掘
big
data
【
数据仓库
】数仓分层方法
2.减少重复开发3.方便数据血缘追踪4.把复杂问题简单化5.屏蔽原始数据的异常6.
数据仓库
的可维护性二.如何进行数仓分层?
roman_日积跬步-终至千里
·
2023-11-14 06:01
数据仓库
数据仓库
spark
大数据
Spring 学习笔记 —— AOP
AOP简介AOP(Aspect-OrientedProgramming,面向切面编程):是一种新的
方法论
,是对传统OOP(Object-OrientedProgramming,面向对象编程)的补充.AOP
q42368773
·
2023-11-14 01:08
spring
2022春软件工程课后作业(3.23)
(为什么软件开发
方法论
让你觉得糟糕)初看这篇文章,由于看的是翻译过的文章,感觉较为的生涩一下子没能抓住作者想要表达的观点。后再反复阅读与回看原文,大概了解了可能想要表达的意思,在这里稍微做一些反馈。
Crush4747
·
2023-11-14 01:47
软件工程
软件工程
GO的优雅终止姿势
另外根据《云原生十二要素
方法论
》第9条:快速启动和优雅终止可最大化健壮性,也推荐各位遵守实践。Faststartupandshutdownare
有态度的马甲
·
2023-11-13 23:42
java
oa办公
etcd
unix
信号处理
【大数据技术】爆肝3天 7个章节 Hive 3.1.3详解
大数据技术之Hive01hive入门1.1什么是Hive1)Hive简介Hive是由Facebook开源,基于Hadoop的一个
数据仓库
工具,可以将结构化的数据文件映射为一张表,并提供类SQL查询功能。
左美美  ̄
·
2023-11-13 21:10
大数据
(十一)Hive
数据仓库
的使用
目录一、目的及要求:目的:要求:二、环境要求:所需环境:集群规划:三、详细步骤:步骤一:启动步骤二:
数据仓库
的使用1、查看表信息2、hive常用命令3、Hive的数据模型_内部表;4、Hive的数据模型
T.machine
·
2023-11-13 21:06
Hive数据仓库的使用
云存储技术
Hive建表语法和参数记录
Hive是一个基于Hadoop的
数据仓库
工具,可以将结构化数据映射到HDFS存储(建表对应在HDFS建了一个文件夹),并提供类SQL查询语言-HiveQL,Hive可以将HQL语句转换为MR任务执行。
Forge_ahead
·
2023-11-13 20:11
work_efficiency
Study
hive
hadoop
数据仓库
数仓hive锁(Hive Lock)
昨天
数据仓库
hive中一张中间表lock,导致所有依赖这个表的任务失败。影响挺大,借此总结一下以备后面查用。
Vincer_DB
·
2023-11-13 16:34
大数据
hive
hive锁
大数据系统建模
方法论
简谈
基本上只要详细了解企业业务战略线就能得出总线矩阵,它对应着企业每一个业务单元,提取业务单元中的一致性维度和事实量值组组合成企业总线矩阵也就是多维分析模型;总线矩阵也是BI项目实施交付的必要成果之一,它与
数据仓库
的概念模型非常吻合
Vincer_DB
·
2023-11-13 16:30
spark
大数据
分布式
Day10:YARN与Hive入门
:MapJoin知识点06:YARN:功能与应用场景知识点07:YARN:集群架构知识点08:YARN:MR提交运行流程知识点09:YARN:资源管理配置知识点10:YARN:任务调度机制知识点11:
数据仓库
的介绍知识点
人间清醒vv子
·
2023-11-13 12:08
hive
yarn
大数据
数据仓库
【大数据之Hive】
一、Hive基本概念Hive是基于Hadoop的一个
数据仓库
工具,可以将结构化的数据文件映射为一张表,并提供类SQL查询功能。
JMFFFFF
·
2023-11-13 12:37
hive
大数据
hadoop
详解
数据仓库
之拉链表(原理、设计以及在Hive中的实现)
近几天也会安排朋友圈点赞赠书活动(ง•̀_•́)ง0x00前言本文将会谈一谈在
数据仓库
中拉链表相关的内容,包括它的原理、设计、以及在我们大数据场景下的实现方式。
小小哭包
·
2023-11-13 12:29
大数据
数据仓库
拉链表
HIVE
【
数据仓库
-Hive】笔记(未完)
文章目录PART1
数据仓库
-PART2Hive的基本概念一.Hive简介二.Hive架构三.Hive与Hadoop的关系四.Hive与传统数据库对比五.Hive的安装六.Hive的交互方式PART3Hive
Mercy92
·
2023-11-13 08:45
大数据
AIGC ChatGPT 4 总结出
数据仓库
中各不同类型表区别
在
数据仓库
中最常用的是,全量表,增量表,拉链表,切片表,那么这个表设计之间的关系及区别是什么呢?我们一起来让ChatGPT4来帮我们总结一下。
阿里数据专家
·
2023-11-13 05:41
ChatGPT实战案例
ChatGPT
AIGC
数据仓库
人工智能
chatgpt
大数据
spark
python自动化测试(3)- 自动化框架及工具
1、概述手续的关于测试的
方法论
,都是建立在之前的文章里面提到的观点:功能测试不建议做自动化接口测试性价比最高接口测试可以做自动化后面所谈到的测试自动化也将围绕着接口自动化来介绍。
测试猿廖廖
·
2023-11-13 03:53
自动化
压力测试
javascript
测试工具
开发语言
tomcat
python
python自动化测试(4)-使用第三方python库技术实现
1概述关于测试的
方法论
,都是建立在之前的文章里面提到的观点:功能测试不建议做自动化接口测试性价比最高接口测试可以做自动化做好接口自动化,一定要有透过界面看到数据本质的能力后面所谈到的测试自动化也将围绕着接口自动化来介绍
测试猿廖廖
·
2023-11-13 03:53
python
开发语言
前端
devops
数据结构
pytest
2023.11.13 hive
数据仓库
之分区表与分桶表操作,与复杂类型的运用
目录0.hadoophive的文档1.一级分区表2.一级分区表练习23.创建多级分区表4.分区表操作5.分桶表6.分桶表进行排序7.分桶的原理8.hive的复杂类型9.array类型:又叫数组类型,存储同类型的单数据的集合10.struct类型:又叫结构类型,可以存储不同类型单数据的集合11.map类型:又叫映射类型,存储键值对数据的映射(根据key找value)0.hadoophive的文档hi
白白的wj
·
2023-11-13 02:01
数据仓库
hive
hadoop
数据库篇-MySQL
安装在操作系统中的一种
数据仓库
、软件。b.数据库分类关系型数据库:SQL(StructuredQueryLanguage)。
小吴的知识仓库
·
2023-11-12 23:50
MySQL
数据库
java
mysql
《ClickHouse原理解析与应用实践》读书笔记(1)
1.1传统BI系统之殇为了解决数据孤岛的问题,人们提出了
数据仓库
的概念。即通过引入一个专门用于分析类场景的数据库,将分散的数据统一汇聚到一处。于20世纪90年代,有人第一次提出了BI(商业智能)
Aiky哇
·
2023-11-12 14:15
clickhouse
读书笔记
大数据
clickhouse
NLOS论文速览 | IEEE SENS J 2023, Multi-domain Features Based NLOS Target Localization Method for MIMO UW
注1:本文系“最新论文速览”系列之一,致力于简洁清晰地介绍、解读最新的顶会/顶刊论文NLOS论文速览|IEEESENSJ2023,多域特征基于MIMOUWB雷达的NLOS目标定位
方法论
文链接:https
R.X. NLOS
·
2023-11-12 11:40
#
无线感知/雷达成像论文速递
#
计算成像/非视距成像论文速递
论文速览
IEEE
Sens
J
NLOS
UWB
MIMO
神策数据《2023 中国客户旅程编排(CJO)应用指南》预领取通知
基于对数字化转型时代触点红利与企业发展的深入洞察,神策数据围绕客户旅程编排(CustomerJourneyOrchestration,简称CJO)进行全面研究,旨在为更多企业数字化转型过程中重塑客户体验、挖掘增量机会、节省长期投入等提供科学有效的
方法论
指导
神策数据
·
2023-11-12 07:01
基于 MTAOO
方法论
,看连锁餐饮品牌如何落地 CJO 理念、实现精细化用户运营
移动互联网时代的流量红利已经消失,企业亟需在数字化转型时代抓住触点红利,基于客户旅程编排(CustomerJourneyOrchestration,简称CJO)为用户提供个性化、全渠道一致的体验。在此背景下,连锁餐饮品牌已经将「落地CJO理念、提升用户全生命周期交互体验管理」作为新的增长点,并全力推进。本文将基于神策数据服务某连锁餐饮企业的真实实践,从绘制、埋点、分析、编排、优化五个步骤详细拆解用
神策数据
·
2023-11-12 07:01
用户运营
产品运营
【Java虚拟机】JVM垃圾回收器详解
1.什么是垃圾收集器垃圾回收算法是内存回收的
方法论
,垃圾收集器则是内存回收的具体实现目前Java规范中并没有对垃圾收集器的实现有任何规范不同的厂商、不同的版本的虚拟机提供的垃圾收集器是不同的,主要讨论的是
互联网小阿祥
·
2023-11-11 23:43
JVM
jvm
java
算法
1707.ICCV.Neural Person Search Machines检测加识别 论文阅读笔记
NeuralPersonSearchMachines(NPSM)一个新颖的end-to-end的(检测+reid)行人搜索识别
方法论
文贡献:1.提出了一种NPSM框架(基于LSTM记忆递归网络attention
xuluohongshang
·
2023-11-11 22:00
行人重识别
行人重识别
NPSM
person-rei
论文阅读笔记
上一页
47
48
49
50
51
52
53
54
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他