数据仓库方法论第47页

知乎热议：数据仓库、数据湖、湖仓一体，究竟有什么区别？

来源：知乎作者：十叶心全文共14108个字，建议阅读20分钟一、基本概念1.1数仓发展历史数据湖是以集中方式存储各种类型数据，提供弹性的容量和吞吐能力，能够覆盖广泛的数据源，支持多种计算与处理分析引擎直接对数据进行访问的统一存储平台。它能够实现数据分析、机器学习，数据访问和管理等细粒度的授权、审计等功能。数据湖对存取的数据没有格式类型的限制，数据产生后，可以按照数据的原始内容和属性，直接存储到数据

浪尖聊大数据-浪尖·2023-11-22 13:30

数据仓库工具之Hive的架构原理

1.Hive的本质Hive是基于Hadoop的一个数据仓库工具，它的本质是将HQL语句转化成MapReduce程序.在它的底层,HDFS负责存储数据,YARN负责进行资源管理,MapReduce负责数据处理

GuangHui·2023-11-22 13:05

阿里大数据工程师：教你如何快速的搭建数据库

数据仓库，是为企业所有级别的决策制定过程，提供所有类型数据支持的战略集合。它是单个数据存储，出于分析性报告和决策支持目的而创建。

yoku酱·2023-11-22 13:03

服务器能不能用普通硬盘,服务器硬盘是什么与普通硬盘区别

如果说服务器是网络数据的核心，那么服务器硬盘就是这个核心的数据仓库，所有的软件和用户数据都存储在这里。对用户来说，储存在服务器上的硬盘数据是特别宝贵的，因此硬盘的可靠性是特别重要的。

老先队员·2023-11-22 10:39

C/C++ 性能优化背后的方法论：TMAM

开发过程中我们多少都会关注服务的性能，然而性能优化是相对比较困难，往往需要多轮优化、测试，属于费时费力，有时候还未必有好的效果。但是如果有较好的性能优化方法指导、工具辅助分析可以帮助我们快速发现性能瓶颈所在，针对性地进行优化，可以事半功倍。性能优化的难点在于找出关键的性能瓶颈点，如果不借助一些工具辅助定位这些瓶颈是非常困难的，例如：c++程序通常大家可能都会借助perf/bcc这些工具来寻找存在性

vivo互联网技术·2023-11-22 10:37

学习篇-《解决问题的七步法》学习笔记

分享麦肯锡咨询公司经常帮助客户解决各种各样的复杂问题的统一方法论—七步问题解决法。第一步：定义问题。明确要解决的是什么问题。第二步：分解问题。

谭一谭·2023-11-22 10:47

越早具备成长型思维，离成功越近

本文来自公众号：思麦狂奔，如果觉得文章有点意思，请关注我，主要写个人能力提升方法论和海外故事下面内容源自brilliant.org的一个视频，我翻译后重新做了结构整理，它是一个讲“道”的视频，但我仍然认为这个视频对我很有启发

思麦狂奔·2023-11-22 09:40

投资中的黄金生存法则

但是，有没有一些普适、可行的方法论能帮助我们触及投

郭知行_在成长·2023-11-22 08:38

求人，求知

意味着你认为他那里有你所需要但不具备的资源，这个资源可以是方法论、财力、权利等等。“求人”丢人吗？是不是需要放下你的自尊心，是不是需要冒着被低看的风险和冷眼对待？

Inker·2023-11-22 07:19

浅谈数据仓库建设中的数据建模方法

周三保([email protected])IBM软件部信息技术专家.简介：本文的主要内容不是介绍现有的比较流行的主要行业的一些数据模型，而是将笔者在数据仓库建设项目中的一些经验，在这里分享给大家。

wer0735·2023-11-22 06:27

数据仓库

一.各种名词解释1.1ODS是什么？ODS层最好理解，基本上就是数据从源表拉过来，进行etl，比如mysql映射到hive，那么到了hive里面就是ods层。ODS全称是OperationalDataStore，操作数据存储.“面向主题的”，数据运营层，也叫ODS层，是最接近数据源中数据的一层，数据源中的数据，经过抽取、洗净、传输，也就说传说中的ETL之后，装入本层。本层的数据，总体上大多是按照源

qq_44949002·2023-11-22 06:23

数据仓库架构之详解Kappa和Lambda

目录一、前言二、架构详解1Lambda架构1.1Lambda架构组成1.2Lambda特点1.3Lambda架构的优点1.4Lambda架构的不足2Kappa架构2.1Kappa架构的核心组件2.2Kappa架构优点2.3Kappa架构的注意事项三、区别对比四、选择时考虑因素一、前言在大数据处理领域，有两种突出的数据架构已成为处理大量数据的流行选择：Lambda架构和Kappa架构。这两种架构为实

醉酒的戈多·2023-11-22 06:45

数据仓库模式之详解 Inmon 和 Kimball

目录一、前言二、企业信息工厂（Inmon）2.1概念2.2主要组件2.3流程三、多维数据仓库（Kimball）3.1概念3.2核心组件3.3流程四、异同及用途对比4.1异同对比4.2特征比较一、前言大部分关于数据仓库构建与讨论

醉酒的戈多·2023-11-22 06:41

经验、数学和理论（上）

经验、数学和理论——经济学方法论简论自亚当•斯密的巨著《国富论》于1776年发表以来，经济学即开始了一个逐渐发展、丰富、深化的过程；而1890年马歇尔的伟大著作《经济学原理》的出版则标志着现代经济学开始形成自己的理论体系

徐玉鹏文件·2023-11-22 04:37

【全干货/方法论/新手向】仙女养成计划 - 护肤篇

四年妆龄学姐护肤经验分享（一）为什么要护肤女孩子过了20-22岁之后胶原蛋白开始流失，身体机能逐步下降。最直观的感受就是：以前随随便便熬夜，偶尔来个通宵皮肤依旧白皙光滑有弹性。现在一熬夜就爆痘、发黄、黑眼圈，还伴随着气血不调，内分泌紊乱，被迫一两个通宵可能就全身哪儿哪儿不舒服。妹子，你的身体告诉你，是时候好好保养了。（二）护肤的好处1.首先我们要明确一点：护肤品不是药品！不能治疗皮肤问题！如果皮肤

妖酱_not_found·2023-11-22 03:47

《财富自由之路》读书笔记—46.如何才能练就融会贯通的能力？

方法论总是相通的。“信息”若要成为“知识”，需要具备两个条件，而绝大多数的信

云上游景观·2023-11-22 03:39

去精准地努力

关于职业发展规划，有很多的方法论，教你如何去探索自己，比如了解性格、兴趣、盘点能力、探索信念和价值观；在探索了自己以后，还要去探索自己的愿景和使命，希望达成的目标；然后盘点自己的现

我是Dragon·2023-11-22 02:40

#教育增长圈#操盘手训练营5期8组-春林-Day3-操盘手必备条件

【承载能力】从0到1的项目管理体系搭建、多项目平行管理【流程搭建】公司内部产品规划及设计（系统化产品营销、行业格局演进、战略方法论及咨

是春林啊·2023-11-22 01:18

数据中台架构原理与开发实战：数据中台面临的挑战与解决方案

作者：禅与计算机程序设计艺术1.背景介绍数据中台是一种以数据仓库、数据湖、数据集市和分析平台等多种技术组件组合而成的大型IT系统，能够提供企业数据存储、加工、分析、应用的综合化服务，能够实现“智能4.0

禅与计算机程序设计艺术·2023-11-21 23:38

银行数字化转型导师坚鹏：数字化转型背景下的银行柜员提升之道

l 不清楚银行数字化运营工作的核心方法论？l 不清楚银行数字化运营工作能够带来什么？课程特色：针对性强、实用性强、创新性强学员收获:l 学习银行数字化运营的理念及知识。

银行数字化转型导师坚鹏·2023-11-21 23:42

数据湖学习笔记No.03（数据仓库）

数据仓库资料链接：https://cloud.fynote.com/share/d/f3WMWzN数据分析业务痛点分析业务系统数据：存放在关系数据库中用户日志数据：用户在系统中产生javaweb为什么需要大数据

SEUsmith·2023-11-21 22:34

万字详解大数据架构新概念

▲点击上方“老于的笔记”关注公众号回复1，免费获取B端运营地图正文来了随着近几年数据湖概念的兴起，业界对于数据仓库和数据湖的对比甚至争论就一直不断。

于连林_·2023-11-21 22:53

践行阳明心学日精进第三十天

学习到：（提炼方法论）《只因目中无人》这本书中提到创业者要学会放权，不能一手抓所有巨无细事，多鼓励下属，多表扬员工

顔兮·2023-11-21 21:27

数仓理论基础

数据仓库的主体hive两种建模方式：ER和维度ER模型实体关系模型：将复杂的数据抽象为实体和关系。实体表示一个对象，关系指的是两个实体之间的关系，比如学生和班级之间的从属关系。

Made in Program·2023-11-21 19:15

《复盘》：向自己过去的经验和教训学习，就是一种复盘

这两天，我在阅读陈中的《复盘：对过去的事情做思维演练》一书时才知道，原来是柳传志第一个将复盘的概念引入企业管理中，成为联想三大方法论之一。在联想每一个重大决策的背后，都有复盘的身影。

覃梅子·2023-11-21 17:35

数据仓库理论

修改记录时间内容2020年9月13日第一次发布推荐书：《数据仓库工具书》（纯理论）、大数据之路-阿里巴巴大数据实践、一、数仓相关概念数据仓库：英文DataWareHouse，数据仓库是面向主题，为分析数据而设计的

宇宙中的Philip·2023-11-21 17:43

【教育学发展6多元化-马克思主义教育学】

有鲜明的阶级性2、教育起源与生产劳动3、教育目的：培养全面发展的人4、教育途径：教育与生产劳动相结合5、教育具有社会制约性和相对独立性（教育与政治、经济、文化的关系）6、用辩证唯物主义和历史唯物主义的方法论研究教育优点奠定科学的方法论基础缺点教条

默学森·2023-11-21 16:31

读《敏捷革命Scrum》：来一场“说干就干”的冲刺

——作者/01/这是一本从人类行为学和心理学角度讲述Scrum哲学而非具体方法论的书。看这本书的意义，对我而言，在于大体上了解到了Scrum是怎么回事。敏捷变革是指用跨部门的小团队进行产品的快速迭代。

绿皮游园会·2023-11-21 16:43

一级集训营第12期_第六组第一次笔记_王上

公司业务研究框架及主要方法论一、公司研究的目的1.PE投资机构：理解公司运营状态、核心资源、发展潜力—落地与未来业绩和推出具体来看（1）业绩能否增长是否手头有资源？发展潜力如何？

依依东望_851f·2023-11-21 14:09

【347】孔子四忧---学论语《述而篇》

②学之不讲告诉学习要反复的学习和讨论，中庸告诉我们一整套完整的学习方法论：

白丁2009·2023-11-21 14:33

考研思想政治理论大纲

自觉学习和运用马克思主义（二）世界的物质性及其发展规律1、世界的物质性世界观、方法论

路漫漫其远，吾求索·2023-11-21 14:28

大数据更是一种思维方式革命

图片发自App在方法论的层面，大数据是一种全新的思维方式。按照大数据的思维方式，我们做事情的方式与方法需要从根本上改变。

一阳归来·2023-11-21 14:01

数据仓库_模型设计_学习目录

主要会记录一些`数仓建设方法论`和工作技巧目录：

广阔天地大有可为·2023-11-21 13:47

数据中台从规划到落地的不同阶段

要构建一套数据中台服务于企业内部和外部运营，需要有成熟的建设方法论作为指导。数据中台建设方法论可分为高阶规划、系统设计、开发实施、试运行和持续运营5个阶段。

Impl_Sunny·2023-11-21 13:38

数据仓库高级面试题

数仓高内聚低耦合是怎么做的定义高内聚：强调模块内部的相对独立性，要求模块内部的元素尽可能的完成一个功能，不混杂其他功能，从而使模块保持简洁，易于理解和管理。低耦合：模块之间的耦合度要尽可能的低，避免模块之间的复杂依赖，使得每个模块都可以独立存在，从而减少模块间的相互影响，提高系统的可维护性。做到低耦合、高内聚一般复杂的公共逻辑可以采用抽象类和抽象方法的方式下沉到共有模块中，然后由相关子类去实现抽象

小小哭包·2023-11-21 13:16

GreenPlum数据库调研及架构介绍

docs-cn.greenplum.org/v6/admin_guide/intro/arch_overview.htmlGreenplum数据库是一种大规模并行处理（MPP）数据库服务器，其架构特别针对管理大规模分析型数据仓库以及商业智能工作负载而设计

Aiky哇·2023-11-21 11:48

精准测试之过程与实践 | 京东云技术团队

•其他定义精准测试是中国自己有知识产权的完全的理论体系，它同时关注功能点和代码相关逻辑这样一个方法论，是一种灰盒的测试模式。最开始在

京东云技术团队·2023-11-21 10:30

地产品牌营销五指神功

8年来，本人策划涉及媒体、IT家电、陶瓷、工业园、房地产业和银行等领域，学会了用方法论来指导作战，以不变应万变，一招致胜！所谓“五指神功”，就是5年来我对策划领域不断出窍、开窍、归窍的结果，是对在市场

问津才子·2023-11-21 10:51

pyspark案例系列5-Spark ETL将MySQL数据同步到Hive

文章目录一.需求二.解决方案2.1全量同步2.2增量同步备注：Spark2.4.0一.需求最近做数据仓库项目的时候，觉得sqoop有点慢，然后想尝试使用Spark来做ETL。

只是甲·2023-11-21 10:33

pyspark案例系列6-将Hive表数据写入MySQL

文章目录一.需求二.解决方案一.需求我们做数据仓库的时候，一般是将源系统的数据(如MySQL)抽取到Hive中，然后在Hive中做ETL后，最后将处理完的数据从Hive再抽回到MySQL。

只是甲·2023-11-21 10:33

比昂全集（The Complete Works of W. R. Bion）阅读笔记（准备）

其中一个原因可能和方法论有关。Bion有很好的视角，对人类心灵Psyche从根本上思考。比昂全集来到书架上也有一段时间了。后来，又加入一本ThreePapersofW.R.Bion。

若宁Rena·2023-11-21 08:47

浅谈JVM GC算法、垃圾收集器及如何选择

引言GC算法（引用计数/复制/标记清除/标记整理）是内存回收的方法论，垃圾收集器就是算法的落地实现。目前还没有完美的收集器，只是针对具体应用最合适的收集器，进行分代收集。

chuixue24·2023-11-21 08:13

首席新媒体黎想教程：线上活动推广执行手册——第二篇

这篇运营手册只是在“道”的层面给了大家一些方法论。要想策划出刷屏的爆款活动，还需要掌握更多的“术”。这就需要我们泡在各种活动案例中，每当看到爆款活动出现时，

首席新媒体·2023-11-21 07:44

Deep Patient: An Unsupervised Representation to Predict the Future of Patients from the Electroni...

特别是，使用三层去噪自动编码器堆栈来捕获来自西奈山数据仓库的约700,000名患者的汇总EHR中的分层规律性和依存关系。结果就是我们称为“深层患者”的表示。我们通过评估患者

一二两清酒·2023-11-21 07:14

底层逻辑越坚固，解决问题能力越强！

只有底层逻辑，在面临环境变化时，能够应用到新的变化里面，会产生出适应新环境的方法论。底层逻辑+环境变量=方法论。一个做鞋子的可能永远干不掉卖水果的。因为他们之间没有太多相同之处。

亚婷123·2023-11-21 06:36

2021-01-07

【书籍/章节】一年顶十年/贵人【标题】遇贵人的方法论【字数】765【正文】出门遇贵人，是对一个人美好的祝愿，我们都希望有贵人相助。怎样才能常遇贵人？

王晋爱讲书·2023-11-21 06:45

AIGC ChatGPT4对Gbase数据库进行总结

AIGCChatGPT职场案例AI绘画与短视频制作PowerBI商业智能68集数据库Mysql8.054集数据库Oracle21C142集Office2021实战应用Python数据分析实战，ETLInformatica数据仓库案例实战

阿里数据专家·2023-11-21 05:26

Being-Doing-Having

比如，我得先有了长远的目标和详细的方法论，才能开始走出第一步，最后才能成功。（虽然这样的顺序没错，但往往有人就是没开始）比如，我得有时间了，才能去健身，成为一个别人眼中自律的人。

伊娃_疗愈写作·2023-11-21 05:35

论中华香烟和玉溪香烟文化母体

春节回家，一直在看华杉老师在写的《华与华方法论》，在文章中，华老师多次提到“文化母体”，何谓文化母体，即人类社会周而复始，循环往复的戏剧，它存在与人的常识中，比如王老吉就利用中国人“上火”的文化母体，足力健老人鞋超级符号就利用

江河聊营销·2023-11-21 01:23

推荐频道

数据仓库方法论