E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
数仓命名规范
web开发代码规范和类的
命名规范
(pink老师笔记——品学优购项目)
代码规范1.概述欢迎使用品优购代码规范,这个是我借鉴京东前端代码规范,组织的品优购内部规范。旨在增强团队开发协作、提高代码质量和打造开发基石的编码规范,以下规范是团队基本约定的内容,必须严格遵循。HTML规范基于W3C、苹果开发者等官方文档,并结合团队业务和开发过程中总结的规范约定,让页面HTML代码更具语义性。图片规范了解各种图片格式特性,根据特性制定图片规范,包括但不限于图片的质量约定、图片引
芒果水蜜桃
·
2023-12-29 04:39
前端学习笔记
web前端练手项目
前端
css
html
鸿蒙APP的代码规范
遵循鸿蒙系统的
命名规范
,包括包名、类名、变量名等。使用有意义的命名,避免使用缩写。2.代码结构:模块化设计,将代码划分为
super_Dev_OP
·
2023-12-29 02:45
harmonyos
代码规范
华为
常见的hooks
BEM:BEM是一种针对css的前端
命名规范
,是块(Block),元素(Element),修饰符(Modifier)的简写。
Repeater、
·
2023-12-28 22:12
前端
javascript
开发语言
Python
命名规范
中的[单/双]&[前导/后缀]下划线小结
如图所示出处SingleandDoubleUnderscoresinPythonNames
CSU迦叶
·
2023-12-28 21:32
Python
python
分享7个Python实战项目代码,让你分分钟晋级大老!快收藏_python编程作品
听两个聊天机器人互相聊天:3、分析唐诗的作者是李白还是杜甫:4、彩票随机生成35选7:5、自动写检讨书:6、屏幕录相机,抓屏软件:7、制作Gif动图:一、Python入门二、Python爬虫三、数据分析四、数据库与ETL
数仓
五
老-程序员
·
2023-12-28 19:38
编程
Python爬虫
代码
python
开发语言
代码作品
银行
数仓
建模方法论
随着金融行业的不断发展,银行业务越来越复杂,数据量也越来越大。为了更好地管理和利用这些数据,银行数据仓库体系应运而生。在前面的文章中,我们介绍了银行数据仓库体系的基础知识,本篇文章将重点介绍银行数据仓库体系实践(7)—数据模型设计及流程。一、数据模型设计数据模型设计是银行数据仓库体系的核心,它是对银行业务进行抽象和概括的过程。在设计数据模型时,需要考虑以下几个方面:业务需求:数据模型的设计必须符合
添柴少年yyds
·
2023-12-28 18:56
数据挖掘
数据仓库
人工智能
ODS DW APP DIM
数仓
ODS:通过ETL工具从源端系统抽取数据,存入ODS层;DW:从ODS层数据进行抽取并按主题进行分类存储;DWD(数据明细层):会对ODS的数据做一定的清洗和汇总,然后生成DWM中间表;DWM(数据中间层):对DWD中的数据按照一定维度进行汇总后,放到DWS中的一张表;DWS(数据服务层):从DWM中间表中按主题进行高度汇总业务宽表,满足各项业务需要;APP:依据DWS中的宽表数据,进行应用(可视
p1i2n3g4
·
2023-12-28 17:41
大数据
数据仓库
数据库
数据挖掘
数据库开发规范参考
一.
命名规范
数据库对象名称必须使用小写字母并用下划线规范数据库对象名称禁止使用MySQL保留关键字数据库对象命名要做到见名识义,并且最好不要超过32个字符对于临时表,最好以tmp为前缀,以日期为后缀进行特别标识对于备份表必须以
艾希逐月
·
2023-12-28 15:09
数据库
数据库
mysql
开发规范
数据仓库 基本信息
数据仓库基本理论数据仓库(英语:DataWarehouse,简称
数仓
、DW),是一个用于存储、分析、报告的数据系统。
许一世流年 绝不嵩手 cium
·
2023-12-28 11:46
数据仓库
spark
大数据
ETL项目实战--学习笔记
Extract,数据抽取=>抽取的是其他数据源中的数据T:Transform,数据转换=>将数据转换为统一的格式,消除异常值,缺失值,对于错误的逻辑进行修改L:Load,数据加载=>将不同数据源的数据处理后加载到
数仓
或者输出到指定位置
祈愿lucky
·
2023-12-28 11:46
大数据
etl
学习
笔记
知乎实时
数仓
架构演进
从智能商业的角度来讲,数据的结果代表了用户的反馈,获取结果的及时性就显得尤为重要,快速的获取数据反馈能够帮助公司更快的做出决策,更好的进行产品迭代,实时
数仓
在这一过程中起到了不可替代的作用。
yoku酱
·
2023-12-27 19:34
Maven之插件入门
官方文档:https://maven.apache.org/guides/plugin/guide-java-plugin-development.html
命名规范
-maven-plugin创建项目生成项目方式一
微风至夏
·
2023-12-27 18:18
#
Maven
maven
插件
Flink实时电商
数仓
之Doris框架(七)
主要实现的功能有:实时看板面向企业内部分析师和管理者的报表面向用户或者客户的高并发报表分析即席查询统一
数仓
构建:替换了原来由Spark,Hive,Kudu,Hbase等旧框架数据湖联邦查询:通过外表的方式联邦分析位于
十七✧ᐦ̤
·
2023-12-27 16:47
flink
大数据
doris
DataFunSummit:2023年数据湖架构峰会-核心PPT资料下载
面对如此大规模的数据,无论是分析型场景、流批一体、增量
数仓
都得益于湖仓一体等数据湖技术的发展而变得越来越容易解决。从核心架构、性能优化、湖仓一体、最佳实践等方面带来数据湖的最新技术和内容实践经验总结。
百家峰会
·
2023-12-27 16:03
大数据
数据湖
数据治理
架构
数据湖
大数据
数据治理
从报表需求到报表开发的流程
报表开发背后涉及到需求调研和
数仓
开发的支持。二、目标梳理从报表需求提出到报表需求实现整个生
qq_36120059
·
2023-12-27 12:55
数据仓库
报表
数据仓库
finebi
基于Kettle和帆软Finereport的血缘解析
开发人员排查数据质量问题步骤:首先和业务人员对接了解是哪里数据不准确,要定位是哪张报表,然后查看报表后面数据来源,然后一路排查
数仓
。往往定位到数据问题耗时比较高,开发断层导致找到相关任务比较难。
qq_36120059
·
2023-12-27 12:55
finereport
数据仓库
血缘解析
数据仓库
浅谈数据仓库运营
二、目标提高数据仓库存储性能和开发质量以及数据质量三、数据运营指标3.1开发质量表名规范性:检验数据库表名是否按照
数仓
表名规范,表名是否按照词根翻译字段名规范性:检验表字段名是否按照词根中文进行翻译字段类型规范性
qq_36120059
·
2023-12-27 12:53
数据仓库
数据仓库
电商数据分析-03-电商数据采集
第1章数据仓库概念数据仓库规划1.1
数仓
搭建我们这里所说的数据仓库,是基于大数据体系的,里面包含标签类目,区别于传统的数据仓库。下面我们来将这张图分解,逐个做简要分析。
IT从业者张某某
·
2023-12-27 11:14
数据分析入门到进阶
数据分析
电商数据分析-02-电商业务介绍及表结构
参考电商业务简介大数据项目之电商
数仓
、电商业务简介、电商业务流程、电商常识、业务数据介绍、电商业务表、后台管理系统可以把excel复制为markdown的网站举个例子:1.1电商业务流程电商的业务流程可以以一个普通用户的浏览足迹为例进行说明
IT从业者张某某
·
2023-12-27 11:14
数据分析入门到进阶
数据分析
数据库开发常见面试题
ORACLE和kettle1、DeleteTruncateDrop区别2、DML、DDL3、经常使用到得函数4、KETTLE内存溢出解决方案5、kettle中黄色的锁,绿色的对勾,红色的停止代表的意思6、
数仓
架构
'接受现实'
·
2023-12-27 06:54
数据库开发
etl
数据库
hive学习笔记
一、Hive基本概念1.1hive是什么hive是基于hadoop的一个
数仓
分析工具,hive可以将hdfs上存储的结构化的数据,映射成一张表,然后让用户写HQL(类SQL)来分析数据telupdown138383843813451567138383843953451567138383844012411657713838384413453157571383838434353551567567
不爱吃鱼的馋猫
·
2023-12-27 06:05
hive
大数据
hadoop
Java学习:合法的Java标识符规则
2.Java中的名称
命名规范
包名:多单词组成时所有字母都小写:xxxyyyzzz类名、接口名:多单词组成时,所有单词的首字母大写:XxxYyyZzz变量名、方法名:多单词组成时,第一个单词首字母小写,第二个单词开
时之彼岸Φ
·
2023-12-27 03:19
Java学习
java
开发语言
【Java】变量
命名规范
Java是一种区分字母的大小写的语言,所以我们在定义变量名的时候应该注意区分大小写的使用和一些规范,接下来我们简单的来讲讲Java语言中包、类、变量等的
命名规范
。
老九君
·
2023-12-26 21:53
大数据实战项目 -- 实时
数仓
文章目录一、实时数据1.1日志采集器1.1日志生成器1.3日志分发器1.4采集流脚本二、实时采集2.1项目搭建2.2Kafka数据获取2.3Redis数据去重2.4ES数据存储2.5精准一次性消费2.6Kibana可视化配置2.7发布数据接口三、实时监控3.1Canal3.1.1配置MySQL3.1.2安装canal3.2CanalODS层数据分流3.3Maxwell3.4MaxwellODS层数
L小Ray想有腮
·
2023-12-26 18:53
BigData
电商
数仓
笔记7_数据仓库系统(
数仓
搭建-DWD层,
数仓
搭建-DWS层,
数仓
搭建-DWT层,
数仓
搭建-ADS层)
电商
数仓
一、
数仓
搭建-DWD层1、DWD层(用户行为日志)(1)日志解析思路(2)get_json_object函数使用(3)启动日志表(4)页面日志表(5)动作日志表(6)曝光日志表(7)错误日志表(
明灭18
·
2023-12-26 17:47
笔记
大数据
hadoop
hive
电商
数仓
笔记6_数据仓库系统(
数仓
搭建-ODS层,
数仓
搭建-DIM层)
电商
数仓
一、
数仓
搭建-ODS层1、ODS层(用户行为数据)(1)创建日志表ods_log(2)Shell中单引号和双引号区别(3)ODS层日志表加载数据脚本2、ODS层(业务数据)(1)ODS层业务表首日数据装载脚本
明灭18
·
2023-12-26 17:17
笔记
数据仓库
hive
hadoop
大数据
四、电商数据仓库系统——第5章 数据仓库设计
5.1数据仓库分层规划优秀可靠的
数仓
体系,需要良好的数据分层结构。合理的分层,能够使数据体系更加清晰,使复杂问题得以简化。以下是该项目的分层规划。5.2数据仓库构建流程以下是构建数据仓库的完整流程。
怕被各位卷死
·
2023-12-26 17:47
离线电商数仓5.0搭建
大数据
hadoop
kafka
分布式
hdfs
电商
数仓
项目----笔记七(
数仓
DIM层)
所谓的维度层其实就是分析数据的角度,维度层保存的表其实是分析数据的角度,比如:--性别,年龄,品牌,品类这层的表主要用于统计分析,因此DIM层的数据存储格式为orc列式存储+snappy压缩(时间短)orc列式存储的好处:查询的时候不需要扫描全部的数据,而只需要读取每次查询涉及的列,这样可以将I/O消耗降低N倍,另外可以保存每一列的统计信息(min、max、sum等),实现部分的谓词下推。由于每一
zmx_messi
·
2023-12-26 17:16
笔记
Java——枚举
get方法,但是不要提供set方法二、自定义类实现枚举不需要提供set方法,因为枚举对象值通常只需要读对枚举对象/属性使用final+static共同修饰,实现底层的优化枚举对象名通常使用全部大写,常量的
命名规范
枚举对象根据需要
云来喜
·
2023-12-26 13:54
笔记
java
Flink电商实时
数仓
(六)
交易域支付成功事务事实表从topic_db业务数据中筛选支付成功的数据从dwd_trade_order_detail主题中读取订单事实数据、LookUp字典表关联三张表形成支付成功宽表写入Kafka支付成功主题执行步骤设置ttl,通过Intervaljoin实现左右流的状态管理获取下单明细数据:用户必然要先下单才有可能支付成功,因此支付成功明细数据集必然是订单明细数据集的子集。要注意:Interv
十七✧ᐦ̤
·
2023-12-26 07:25
flink
数据库
java
Java--包,访问修饰符,多态数组,==和equals,hashcode,toString
包的
命名规范
:com.公司名.项目名.业务模块名访问修饰符Java共有四种访问修饰符,用于控制方法和属性(成员变量)的访问权限(范围):1.公开级别:public修饰,对外公开。
Summer冬天
·
2023-12-26 07:15
Java基础
java
开发语言
打造绿色计算数智动力 HashData 入选“绿色计算最具价值解决方案”
酷克数据(HashData)作为国内云原生
数仓
领军企业,受邀参加本次大会,为观众呈现了HashData云
数仓
的技
HashData酷克数据
·
2023-12-26 00:53
postgresql
数据库
创新铸就卓越 HashData再度荣获 IT168技术卓越奖
12月20日,由国内专业数据库及架构技术社区ITPUB、IT垂直门户IT168联合主办的“2023技术卓越奖”评选结果正式揭晓,酷克数据基于云原生架构打造的HashData云
数仓
,凭借创新的技术架构、强大的性能表现
HashData酷克数据
·
2023-12-26 00:53
数据库
数据分析
大数据
幸福里基于 Flink & Paimon 的流式
数仓
实践
幸福里业务是一种典型的交易、事务类型的业务场景,这种业务场景在实时
数仓
建模中遇到了诸多挑战。
浪尖聊大数据-浪尖
·
2023-12-25 10:45
flink
大数据
关于 package 和 import
-语法结构:package包名;3、包名的
命名规范
friendsu
·
2023-12-25 04:13
java
Flink实时电商
数仓
(五)
FlinkSQL的joinRegularjoin普通join,两条流的数据都时存放在内存的状态中,如果两条流数据都很大,对内存压力很大。IntervalJoin:适合两条流到达时间有先后关系的;一条流的存活时间短,一条流的存活时间长。LookupJoin:适合主流特别大,从流特别小的情况;主流数据没到达一条,就会去查询从流的每一条数据。主流数据不存储在内存中。语法:主流使用时必须有处理时间,pro
十七✧ᐦ̤
·
2023-12-25 02:27
flink
大数据
Flink电商实时
数仓
(四)
日志数据结构业务数据:数据都是MySQL中的表格数据,使用FlinkSQL处理日志数据:分为page页面日志(页面信息,曝光信息,动作信息,报错信息)和启动日志(启动信息,报错信息),使用FlinkStreamAPI处理五种日志数据:“start”;启动信息“err”;错误信息“display”;曝光信息“action”;动作信息“page”;页面信息"actions":[{"action_id"
十七✧ᐦ̤
·
2023-12-25 02:57
flink
vscode
大数据
【黑马甄选离线
数仓
day10_会员主题域开发_DWS和ADS层】
day10_会员主题域开发会员主题_DWS和ADS层DWS层开发门店会员分类天表:维度指标:指标:新增注册会员数、累计注册会员数、新增消费会员数、累计消费会员数、新增复购会员数、累计复购会员数、活跃会员数、沉睡会员数、会员消费金额维度:时间维度(天、周、月)涉及表:门店会员分类天表表字段的组成:维度字段+指标结果字段建表语句:CREATETABLEIFNOTEXISTSdws.dws_mem_
LKL1026
·
2023-12-25 01:58
黑马甄选离线数仓项目
大数据
数据库
sql
数据仓库
Java语言基础
1.代码注释单行注释//注释内容多行注释/**/文档注释2.变量与常量2.1标识符与关键字2.1.1标识符简单理解为一个名字,用来标识类名、变量名、方法名、数组名等公认
命名规范
(1)类名:通常用名词,第一个单词首字母大写
起飞的锤子
·
2023-12-24 17:00
2019-05-23
其他时间都在编写法院
数仓
重构项目建设方案。下午王伟离职,涉及到薪资结算不合理问题,他很生气,我建议他不要纠结这些小事,他貌似也没听进去。下午听了一个讲健康安全的课程,感觉很实用。晚11点半就寝。
bigtian
·
2023-12-24 15:11
电商
数仓
项目----笔记六(
数仓
ODS层)
(3)ODS层表名的
命名规范
为:ods_表名_单分区增量全量标识(inc/full)。同样的,需要将用户行为数据表和业务数据表放到ODS层。
zmx_messi
·
2023-12-24 12:38
笔记
电商
数仓
项目----笔记五(
数仓
架构和建模)
ODS:数据源DWD:加工数据DWS:统计数据ADS:分析数据DIM:维度层(大家都有可能用得上的部分)ER模型数据仓库之父BillInmon提出的建模方法是从全企业的高度,用实体关系(EntityRelationship,ER)模型来描述企业业务,并用规范化的方式表示出来,在范式理论上符合3NF。1)实体关系模型实体关系模型将复杂的数据抽象为两个概念——实体和关系。实体表示一个对象,例如学生、班
zmx_messi
·
2023-12-24 11:35
笔记
基于Hue,Dolphinscheduler,HIVE分析数据仓库层级实现及项目需求案例实践分析
目录一、
数仓
各个层级及作用1,ODS层(OperationDataStore-源数据层)2,DW层(DataWarehouse-数据仓库层)(1)DWD(DataWarehouseDetail-明细数据层
Len°
·
2023-12-24 11:32
Hadoop
hadoop
big
data
hive
技本功|Hive优化之监控(三)
Hive是大数据领域常用的组件之一,主要是大数据离线
数仓
的运算,关于Hive的性能调优在日常工作和面试中是经常涉及的一个点,因此掌握一些Hive调优是必不可少的技能。
云掣YUNCHE
·
2023-12-24 03:15
技术文档
数据库
运维
hive
大数据
mysql
技本功|Hive优化之Spark执行引擎参数调优(二)
Hive是大数据领域常用的组件之一,主要是大数据离线
数仓
的运算,关于Hive的性能调优在日常工作和面试中是经常涉及的的一个点,因此掌握一些Hive调优是必不可少的一项技能。
云掣YUNCHE
·
2023-12-24 03:44
技术文档
spark
hive
系统验收交付支撑:系统代码编写规范(word74页)
一、基本原则二、格式规范三、
命名规范
四、注释规范五、编程规范六、编程技巧软件全部资料获取:软件项目开发全套文档下载-CSDN博客
打码人的日常分享
·
2023-12-24 00:22
软件开发文档
数据库
源代码管理
web安全
oracle
mysql
Python基本数据类型详解,新手小白入门必学
文章目录1.注释2.输出3.变量4.
命名规范
5.变量的定义方式1.字符串类型2.数字类型3.List列表类型4.tuple元组类型的定义5.Dict字典类型6.set集合类型7.数据类型转换8.自动类型转换
python零基础入门小白
·
2023-12-23 15:22
python
开发语言
学习
计算机网络
学习方法
经验分享
Matlab变量
命名规范
Matlab变量
命名规范
在Matlab中,变量命名不仅仅是为了方便程序编写和阅读,也是为了保证程序的可读性和可维护性。良好的变量
命名规范
可以让程序员更好地理解代码意图,并且增加代码的可读性。
天使问过的键盘
·
2023-12-23 14:45
matlab
开发语言
2019 web前端最新学习路线图:萌新变大神之路
样式初始化、CSS引入方式和特效2.CSS3新增选择器及新增属性、HTLM5新特性、HTML5新增标签、弹性盒模型、CSS3置换缩放因子、转换起点、位移属性3.企业大型项目CSS组件化开发、BAT企业元素
命名规范
前端小芳
·
2023-12-23 12:53
C++第二章:变量和基本内置类型
类型转换含有无符号类型的表达式1.4字面值常量整形和浮点型字面值字符和字符串字面值转义序列指定字面值的类型二、变量2.1变量的定义初始化列表初始化默认初始化2.2变量声明和定义的关系extern关键字2.3标识符变量
命名规范
仰望—星空
·
2023-12-23 12:08
C++
c++
学习
开发语言
上一页
6
7
8
9
10
11
12
13
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他