E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
数仓主要特征
易上火季的有效“去火”?
阴虚质是体内津液、精血等阴液亏少,以阴虚内热为
主要特征
的体质。这种体质的人群形体瘦长,手足心热,平
白家祥
·
2023-12-28 09:55
知乎实时
数仓
架构演进
从智能商业的角度来讲,数据的结果代表了用户的反馈,获取结果的及时性就显得尤为重要,快速的获取数据反馈能够帮助公司更快的做出决策,更好的进行产品迭代,实时
数仓
在这一过程中起到了不可替代的作用。
yoku酱
·
2023-12-27 19:34
Flink实时电商
数仓
之Doris框架(七)
主要实现的功能有:实时看板面向企业内部分析师和管理者的报表面向用户或者客户的高并发报表分析即席查询统一
数仓
构建:替换了原来由Spark,Hive,Kudu,Hbase等旧框架数据湖联邦查询:通过外表的方式联邦分析位于
十七✧ᐦ̤
·
2023-12-27 16:47
flink
大数据
doris
DataFunSummit:2023年数据湖架构峰会-核心PPT资料下载
面对如此大规模的数据,无论是分析型场景、流批一体、增量
数仓
都得益于湖仓一体等数据湖技术的发展而变得越来越容易解决。从核心架构、性能优化、湖仓一体、最佳实践等方面带来数据湖的最新技术和内容实践经验总结。
百家峰会
·
2023-12-27 16:03
大数据
数据湖
数据治理
架构
数据湖
大数据
数据治理
抑郁&抑郁症:傻傻分不清楚?
抑郁症是一种以显著而持久的心境低落为
主要特征
的情感性精神障碍,是心境障碍的主要类型,行为减少和快感缺失是抑郁症的核心特征,主要是精神病学领域的关注内容。
天马心理工作室
·
2023-12-27 15:40
从报表需求到报表开发的流程
报表开发背后涉及到需求调研和
数仓
开发的支持。二、目标梳理从报表需求提出到报表需求实现整个生
qq_36120059
·
2023-12-27 12:55
数据仓库
报表
数据仓库
finebi
基于Kettle和帆软Finereport的血缘解析
开发人员排查数据质量问题步骤:首先和业务人员对接了解是哪里数据不准确,要定位是哪张报表,然后查看报表后面数据来源,然后一路排查
数仓
。往往定位到数据问题耗时比较高,开发断层导致找到相关任务比较难。
qq_36120059
·
2023-12-27 12:55
finereport
数据仓库
血缘解析
数据仓库
浅谈数据仓库运营
二、目标提高数据仓库存储性能和开发质量以及数据质量三、数据运营指标3.1开发质量表名规范性:检验数据库表名是否按照
数仓
表名规范,表名是否按照词根翻译字段名规范性:检验表字段名是否按照词根中文进行翻译字段类型规范性
qq_36120059
·
2023-12-27 12:53
数据仓库
数据仓库
电商数据分析-03-电商数据采集
第1章数据仓库概念数据仓库规划1.1
数仓
搭建我们这里所说的数据仓库,是基于大数据体系的,里面包含标签类目,区别于传统的数据仓库。下面我们来将这张图分解,逐个做简要分析。
IT从业者张某某
·
2023-12-27 11:14
数据分析入门到进阶
数据分析
电商数据分析-02-电商业务介绍及表结构
参考电商业务简介大数据项目之电商
数仓
、电商业务简介、电商业务流程、电商常识、业务数据介绍、电商业务表、后台管理系统可以把excel复制为markdown的网站举个例子:1.1电商业务流程电商的业务流程可以以一个普通用户的浏览足迹为例进行说明
IT从业者张某某
·
2023-12-27 11:14
数据分析入门到进阶
数据分析
中国楼市,最有想象空间的10大片区!(最详细最权威最专业的分析)
中国城市化处于“2.0时代”进入,其
主要特征
是:人口增量和资本增量流入中心城市、大都市区和城市群,城市发展呈现“强者永远强、弱者永远弱”的马太效应。
方黄君
·
2023-12-27 09:51
第一章 中小学心理发展与教育
小学生心理发展的
主要特征
是快速性协调性开放性可塑性中学生心理发展的
主要特征
是过渡性动荡性社会性隐蔽性智力发展的最好时机是小学表情变化如同晴雨表的时期是小学形成良好的品德时期是初中最近发展区是指实际的发展水平与潜在的发展水平之间的差距精神分析学派的代表弗洛伊德提出心理发展理论是人格发展理论认知主义学派的代表人物皮亚杰提出心理发展理论是认知发展理论维果茨基提出心理发展理论是文化
大熊负离子
·
2023-12-27 08:15
数据库开发常见面试题
ORACLE和kettle1、DeleteTruncateDrop区别2、DML、DDL3、经常使用到得函数4、KETTLE内存溢出解决方案5、kettle中黄色的锁,绿色的对勾,红色的停止代表的意思6、
数仓
架构
'接受现实'
·
2023-12-27 06:54
数据库开发
etl
数据库
hive学习笔记
一、Hive基本概念1.1hive是什么hive是基于hadoop的一个
数仓
分析工具,hive可以将hdfs上存储的结构化的数据,映射成一张表,然后让用户写HQL(类SQL)来分析数据telupdown138383843813451567138383843953451567138383844012411657713838384413453157571383838434353551567567
不爱吃鱼的馋猫
·
2023-12-27 06:05
hive
大数据
hadoop
渣男属于什么垃圾
渣男垃圾分类,环保从我做起第一类:可回收垃圾:直男这类男人的
主要特征
为——不解风情,一根筋第二类:可回收垃圾:舔狗舔狗听起来很不好听其实我们只要在前面加个“小”字就行小舔狗?
女阅精选
·
2023-12-26 22:52
大数据实战项目 -- 实时
数仓
文章目录一、实时数据1.1日志采集器1.1日志生成器1.3日志分发器1.4采集流脚本二、实时采集2.1项目搭建2.2Kafka数据获取2.3Redis数据去重2.4ES数据存储2.5精准一次性消费2.6Kibana可视化配置2.7发布数据接口三、实时监控3.1Canal3.1.1配置MySQL3.1.2安装canal3.2CanalODS层数据分流3.3Maxwell3.4MaxwellODS层数
L小Ray想有腮
·
2023-12-26 18:53
BigData
电商
数仓
笔记7_数据仓库系统(
数仓
搭建-DWD层,
数仓
搭建-DWS层,
数仓
搭建-DWT层,
数仓
搭建-ADS层)
电商
数仓
一、
数仓
搭建-DWD层1、DWD层(用户行为日志)(1)日志解析思路(2)get_json_object函数使用(3)启动日志表(4)页面日志表(5)动作日志表(6)曝光日志表(7)错误日志表(
明灭18
·
2023-12-26 17:47
笔记
大数据
hadoop
hive
电商
数仓
笔记6_数据仓库系统(
数仓
搭建-ODS层,
数仓
搭建-DIM层)
电商
数仓
一、
数仓
搭建-ODS层1、ODS层(用户行为数据)(1)创建日志表ods_log(2)Shell中单引号和双引号区别(3)ODS层日志表加载数据脚本2、ODS层(业务数据)(1)ODS层业务表首日数据装载脚本
明灭18
·
2023-12-26 17:17
笔记
数据仓库
hive
hadoop
大数据
四、电商数据仓库系统——第5章 数据仓库设计
5.1数据仓库分层规划优秀可靠的
数仓
体系,需要良好的数据分层结构。合理的分层,能够使数据体系更加清晰,使复杂问题得以简化。以下是该项目的分层规划。5.2数据仓库构建流程以下是构建数据仓库的完整流程。
怕被各位卷死
·
2023-12-26 17:47
离线电商数仓5.0搭建
大数据
hadoop
kafka
分布式
hdfs
电商
数仓
项目----笔记七(
数仓
DIM层)
所谓的维度层其实就是分析数据的角度,维度层保存的表其实是分析数据的角度,比如:--性别,年龄,品牌,品类这层的表主要用于统计分析,因此DIM层的数据存储格式为orc列式存储+snappy压缩(时间短)orc列式存储的好处:查询的时候不需要扫描全部的数据,而只需要读取每次查询涉及的列,这样可以将I/O消耗降低N倍,另外可以保存每一列的统计信息(min、max、sum等),实现部分的谓词下推。由于每一
zmx_messi
·
2023-12-26 17:16
笔记
感知教材《藤野先生》
抓住清国留学生的
主要特征
:将长辫盘在头顶,来描写他们不男不女,不伦不类的丑恶形象。这里的标致极了意思是漂亮极了,这里是反语,用来讽刺。但
lqz_6091
·
2023-12-26 15:32
闪存控制器FMC的读取、擦除和编程(GD32f30x)
FMC也提供了页擦除,整片擦除,以及32位整字/16位半字/位编程等闪存操作
主要特征
◼高达3M字节的片上闪存可用于存储指令或数据;◼在闪存的前256K字节空间内,CPU执行指令零等待,在此范围外,CPU
m0_61973119
·
2023-12-26 13:12
兆易创新
网络
linux
运维
数据结构
stm32
常用园林植物之【花叶冷水花】
学名:PileacadiereiGagnep.etGuill别名:白斑叶冷水花、金边山羊血生活型:多年生草本或半灌木
主要特征
:高15-40cm,全株无毛。具匍匐根茎,茎肉质。
林夕金令
·
2023-12-26 08:05
Flink电商实时
数仓
(六)
交易域支付成功事务事实表从topic_db业务数据中筛选支付成功的数据从dwd_trade_order_detail主题中读取订单事实数据、LookUp字典表关联三张表形成支付成功宽表写入Kafka支付成功主题执行步骤设置ttl,通过Intervaljoin实现左右流的状态管理获取下单明细数据:用户必然要先下单才有可能支付成功,因此支付成功明细数据集必然是订单明细数据集的子集。要注意:Interv
十七✧ᐦ̤
·
2023-12-26 07:25
flink
数据库
java
1.1信息与信息的特征
二、信息的
主要特征
1.普遍性信息普遍存在于自然界和人类社会发展的始终。2.依附性一方面,所有的信息都必须依附于某种载体,但是,
梦紫霄
·
2023-12-26 07:26
汝阳县柏树乡枣林小学杨妞巜新教育实验》随笔
他从新教育的概念、形成背景、发展历程、发展愿景、基本理念、十大行动
主要特征
、影响和贡献等方面对新教育进行了深一下浅出的解读。让我对巜新教育实验》有了更
e2714acdbcd9
·
2023-12-26 04:04
打造绿色计算数智动力 HashData 入选“绿色计算最具价值解决方案”
酷克数据(HashData)作为国内云原生
数仓
领军企业,受邀参加本次大会,为观众呈现了HashData云
数仓
的技
HashData酷克数据
·
2023-12-26 00:53
postgresql
数据库
创新铸就卓越 HashData再度荣获 IT168技术卓越奖
12月20日,由国内专业数据库及架构技术社区ITPUB、IT垂直门户IT168联合主办的“2023技术卓越奖”评选结果正式揭晓,酷克数据基于云原生架构打造的HashData云
数仓
,凭借创新的技术架构、强大的性能表现
HashData酷克数据
·
2023-12-26 00:53
数据库
数据分析
大数据
C++软件开发基础知识
1.C和C++a)C是面向过程的语言,是一个结构化的语言,考虑如何通过一个过程对输入进行处理得到输出;C++是面向对象的语言,更加抽象,
主要特征
是“封装、继承和多态”。
xiannvlei
·
2023-12-25 23:57
c++
上班感觉胸闷?没准是心脏病的前兆
闷,
主要特征
就是感觉气不够用、呼吸费力,深呼吸会觉得缓解。无论是冬天还是夏天,其实最容易感受到闷的时候不是在家里,而是在上班的时候。
艾诺体检_216c
·
2023-12-25 18:22
幸福里基于 Flink & Paimon 的流式
数仓
实践
幸福里业务是一种典型的交易、事务类型的业务场景,这种业务场景在实时
数仓
建模中遇到了诸多挑战。
浪尖聊大数据-浪尖
·
2023-12-25 10:45
flink
大数据
设计模式之门面模式详解
其
主要特征
是定义了一个高层接口,让子系统更容易使用,属于结构型模式。在我们日常编码中也在无意中大量的使
扶我起来!我还能码!
·
2023-12-25 09:26
设计模式
设计模式
java
Flink实时电商
数仓
(五)
FlinkSQL的joinRegularjoin普通join,两条流的数据都时存放在内存的状态中,如果两条流数据都很大,对内存压力很大。IntervalJoin:适合两条流到达时间有先后关系的;一条流的存活时间短,一条流的存活时间长。LookupJoin:适合主流特别大,从流特别小的情况;主流数据没到达一条,就会去查询从流的每一条数据。主流数据不存储在内存中。语法:主流使用时必须有处理时间,pro
十七✧ᐦ̤
·
2023-12-25 02:27
flink
大数据
Flink电商实时
数仓
(四)
日志数据结构业务数据:数据都是MySQL中的表格数据,使用FlinkSQL处理日志数据:分为page页面日志(页面信息,曝光信息,动作信息,报错信息)和启动日志(启动信息,报错信息),使用FlinkStreamAPI处理五种日志数据:“start”;启动信息“err”;错误信息“display”;曝光信息“action”;动作信息“page”;页面信息"actions":[{"action_id"
十七✧ᐦ̤
·
2023-12-25 02:57
flink
vscode
大数据
【黑马甄选离线
数仓
day10_会员主题域开发_DWS和ADS层】
day10_会员主题域开发会员主题_DWS和ADS层DWS层开发门店会员分类天表:维度指标:指标:新增注册会员数、累计注册会员数、新增消费会员数、累计消费会员数、新增复购会员数、累计复购会员数、活跃会员数、沉睡会员数、会员消费金额维度:时间维度(天、周、月)涉及表:门店会员分类天表表字段的组成:维度字段+指标结果字段建表语句:CREATETABLEIFNOTEXISTSdws.dws_mem_
LKL1026
·
2023-12-25 01:58
黑马甄选离线数仓项目
大数据
数据库
sql
数据仓库
airflow源码精读 四
AirflowCoreAirflow工作流的
主要特征
是所有工作流都在Python代码中定义。
dll007
·
2023-12-24 22:59
调度系统
python
智慧档案库房建设之三维可视化八防十防解决方案
智慧档案馆以数字化、网络化、智能化为
主要特征
,通过高效、便捷、安全的管理方式,为档案管理者和用户提供优质的档案服务。
盛世宏博智慧档案
·
2023-12-24 19:44
智慧档案馆
人工智能
温湿度
档案
监控
2019-05-23
其他时间都在编写法院
数仓
重构项目建设方案。下午王伟离职,涉及到薪资结算不合理问题,他很生气,我建议他不要纠结这些小事,他貌似也没听进去。下午听了一个讲健康安全的课程,感觉很实用。晚11点半就寝。
bigtian
·
2023-12-24 15:11
电商
数仓
项目----笔记六(
数仓
ODS层)
ODS层的设计要点如下:(1)ODS层的表结构设计依托于从业务系统同步过来的数据结构。(2)ODS层要保存全部历史数据,故其压缩格式应选择压缩比较高的,此处选择gzip。(3)ODS层表名的命名规范为:ods_表名_单分区增量全量标识(inc/full)。同样的,需要将用户行为数据表和业务数据表放到ODS层。日志表DROPTABLEIFEXISTSods_log_inc;CREATEEXTERNA
zmx_messi
·
2023-12-24 12:38
笔记
电商
数仓
项目----笔记五(
数仓
架构和建模)
ODS:数据源DWD:加工数据DWS:统计数据ADS:分析数据DIM:维度层(大家都有可能用得上的部分)ER模型数据仓库之父BillInmon提出的建模方法是从全企业的高度,用实体关系(EntityRelationship,ER)模型来描述企业业务,并用规范化的方式表示出来,在范式理论上符合3NF。1)实体关系模型实体关系模型将复杂的数据抽象为两个概念——实体和关系。实体表示一个对象,例如学生、班
zmx_messi
·
2023-12-24 11:35
笔记
基于Hue,Dolphinscheduler,HIVE分析数据仓库层级实现及项目需求案例实践分析
目录一、
数仓
各个层级及作用1,ODS层(OperationDataStore-源数据层)2,DW层(DataWarehouse-数据仓库层)(1)DWD(DataWarehouseDetail-明细数据层
Len°
·
2023-12-24 11:32
Hadoop
hadoop
big
data
hive
人类心理发展特征与心理健康(7)
人类心理发展的
主要特征
二、人类心理发展的年龄特征(四)学龄(童年)期儿童心理发展的特征学龄期是从6、7岁到11、12岁,又称童年期,此阶段的儿童,他们大部分的时间在小学接受初等教育,从事以学习为主要形式的各种活动
邵真
·
2023-12-24 06:30
常用园林植物之【锦叶榄仁】
学名:TerminaliamantalyTriciolor别名:花叶榄仁、银边榄仁、彩叶榄仁、雪花榄仁生活型:落叶乔木
主要特征
:树高可达20m,主干直立,浑圆挺直,生性强健,冠幅可达8m,树冠呈伞形,层次分明
林夕金令
·
2023-12-24 05:00
技本功|Hive优化之监控(三)
Hive是大数据领域常用的组件之一,主要是大数据离线
数仓
的运算,关于Hive的性能调优在日常工作和面试中是经常涉及的一个点,因此掌握一些Hive调优是必不可少的技能。
云掣YUNCHE
·
2023-12-24 03:15
技术文档
数据库
运维
hive
大数据
mysql
技本功|Hive优化之Spark执行引擎参数调优(二)
Hive是大数据领域常用的组件之一,主要是大数据离线
数仓
的运算,关于Hive的性能调优在日常工作和面试中是经常涉及的的一个点,因此掌握一些Hive调优是必不可少的一项技能。
云掣YUNCHE
·
2023-12-24 03:44
技术文档
spark
hive
翡翠原石:一块表现平常的大马坎原石,成品起货相当的漂亮!
大马坎翡翠原石
主要特征
为色串皮,雾串皮,雾裹色,雾吃色,皮肉难分。今天分享的这块大马坎原石,皮壳上无明显的裂纹表现,但是有几条小小的细裂纹还是能模糊看见,像这般裂纹表现的原石,基本上裂纹是不会深入
a446f3af2168
·
2023-12-24 03:00
去中心化,一场反哺式互联网产业再进化
文\孟永辉去中间化是"互联网+"时代的
主要特征
。
孟永辉
·
2023-12-23 14:24
【
数仓
_01】用户行为采集平台
1、
数仓
基础知识1.1描述1.2需求分析1.3选型考虑因素1.4项目流程设计1.5具体版本1.6集群规模2、用户行为数据生成2.1目标数据2.2埋点3、模拟数据3.1使用说明3.2集群日志生成脚本4、用户行为数据采集模块
温欣2030
·
2023-12-23 10:43
hadoop
肉鸡腺肌胃炎发病率高达98%,造成生长不良、过料、消瘦,应该这样治疗
但近几年一种以鸡生长不良、消瘦、整齐度差、腺胃肿大如乳白色球、腺胃黏膜溃疡、脱落、肌胃糜烂为
主要特征
的传染病,根据市场调查及大量的出诊总结,当前腺肌胃炎病呈顽固性流行,虽然这个病大家都有足够的认识,还是有很多的鸡场预防观念淡薄
水产人家
·
2023-12-23 06:57
九型人格之2号性格的权威关系
上一篇文章中说了2号性格的
主要特征
。这次介绍一下2号性格的权威关系。2号性格者喜欢权力,也希望得到当权者的爱。
我值得拥有最美好的一切
·
2023-12-23 02:35
上一页
5
6
7
8
9
10
11
12
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他