E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
数仓命名规范
Java核心技术
下java开发环境搭建Linux下java开发环境搭建第一个Java程序Java开发工具开发工具atom的使用开发工具Eclipse开发工具IntelliJIDEA关键字和保留字Java标识符Java
命名规范
weixin_51551879
·
2024-01-03 20:03
java
property's synthesized getter follows Cocoa naming convention for returning 'owned' objects
YouownanyobjectyoucreateYoucreateanobjectusingamethodwhosenamebeginswith“alloc”,“new”,“copy”,or“mutableCopy”(forexample,alloc,newObject,ormutableCopy).一定要注意
命名规范
like7xiaoben
·
2024-01-03 20:25
IOS
Doris
数仓
使用规范(经验版)
第一部分:字符集规范【强制】数据库字符集指定utf-8,并且只支持utf-8。命令规范【建议】库名统一使用小写方式,中间用下划线(_)分割,长度62字节内【建议】表名称大小写敏感,统一使用小写方式,中间用下划线(_)分割,长度64字节内第二部分:建表规范【强制】确保每个tablet大小为1-3G之间。举例:假设表内单分区数据量在100G,按天分区,bucket数量100个。【强烈建议】不要使用Au
hf200012
·
2024-01-03 19:30
数据库
java
前端
Doris
大数据
电商
数仓
可视化1--数据导入
1、数据来源介绍以及数据文件下载1、业务数据业务数据往往产生于事务型过程处理,所以一般存储在关系型数据库中,如mysql、oracle业务数据源:用户基本信息、商品分类信息、商品信息、店铺信息、订单数据、订单支付信息、活动信息、物流信息等2、埋点数据埋点日志相对业务数据是用于数据分析、挖掘需求,一般以日志形式存储于日志文件中,随后通过采集落地分布式存储介质中如hdfs、hbase用户行为日志:用户
bigdata从入门到放弃
·
2024-01-03 18:53
数据仓库
linux
hadoop
大数据
java
数据仓库
我的大数据之路:2023年度总结
2023年度最值得骄傲的事从0到1搭建了离线
数仓
体系,针对Hadoop生态组件的原理和特性有了深入的理解。
话数Science
·
2024-01-03 18:07
大数据
面试
大数据
面试
spark
【大数据】Doris
数仓
使用规范原则
第一部分:字符集规范【强制】数据库字符集指定utf-8,并且只支持utf-8。命令规范【建议】库名统一使用小写方式,中间用下划线(_)分割,长度62字节内【建议】表名称大小写敏感,统一使用小写方式,中间用下划线(_)分割,长度64字节内第二部分:建表规范【强制】确保每个tablet大小为1-3G之间。举例:假设表内单分区数据量在100G,按天分区,bucket数量100个。【强烈建议】不要使用Au
奔向理想的星辰大海
·
2024-01-03 16:48
大数据
云原生
技术研发
大数据
数据库
前端代码风格指南
文章目录一、
命名规范
1、项目文件命名1.1、项目名1.2、目录名1.3、图像文件名1.4、HTML文件名1.5、CSS文件名1.6、JavaScript文件名2、Vue组件命名2.1、单文件组件名2.2
一只小白菜~
·
2024-01-03 10:45
javascript
vue相关
前端
javascript
vue.js
数睿通2.0:高效的数据处理,主数据与数据表功能全面升级
引言八天很短,七天很长,数睿通2.0数据中台也随之迎来了新一轮的版本迭代,本次更新主要包括:主数据模型(可视化建模)主数据派发(支持派发主数据到下游数据表,rabbitMq,kafka,接口)数据表(
数仓
分层表信息展示
小螺旋丸
·
2024-01-03 10:51
大数据
数据库
大数据
数据中台
Flink实时电商
数仓
(十)
common模块回顾appBaseApp:作为其他子模块中使用Flink-StreamAPI的父类,实现了StreamAPI中的通用逻辑,在其他子模块中只需编写关于数据处理的核心逻辑。BaseSQLApp:作为其他子模块中使用Flink-SQLAPI的父类。在里面设置了使用SQLAPI的环境、并行度、检查点等固定逻辑。bean:存放其他子模块中使用到的javaBean对象,因为如果一直使用json
十七✧ᐦ̤
·
2024-01-03 09:50
flink
大数据
Hive自定义函数支持国密SM4解密
当前项目背景需要使用到国密SM4对加密后的数据进行解密,Hive是不支持的,尝试了华为DWS
数仓
,华为只支持在DWS中的SM4加密解密,不支持外部加密数据DWS解密新建Maven工程只需要将引用的第三方依赖打到
4935同学
·
2024-01-03 08:03
Hive
Java
hive
hadoop
数据仓库
计算机毕业设计吊打导师hadoop+spark+hive知识图谱医生推荐系统 医生数据分析可视化大屏 医生爬虫 医疗可视化 医生大数据 机器学习 大数据毕业设计
mapreduce对mysql中的医生数据进行数据分析,使用高德地图解析地理位置,并将结果转入.csv文件同时上传到hdfs文件系统;3.使用hive建库建表,导入.csv数据集;4.一半指标使用离线
数仓
计算机毕业设计大神
·
2024-01-03 07:53
Laravel 变量
命名规范
FollowLaravelnamingconventionsFollowPSRstandards.Also,follownamingconventionsacceptedbyLaravelcommunity:WhatHowGoodBadControllersingularArticleControllerArticlesControllerRoutepluralarticles/1article/
kimcastle
·
2024-01-03 04:33
数据仓库
命名规范
详解
一、
数仓
中为什么要在数据开发过程中强调遵守
数仓
开发
命名规范
呢?
孤城暮雨@
·
2024-01-03 04:17
数据仓库
hive
hadoop
数据库
sql
database
数据库架构
Azkaban+Spark资源调度
本文以利用Azkaban+Spark构建
数仓
的DWS层和ADS层为例!!!
孤城暮雨@
·
2024-01-03 04:46
spark
大数据
分布式
.NET Core 之 二 异步编程 async和await
杨中科老师视频笔记.NET5教程,.NetCore2021视频教程,杨中科主讲_哔哩哔哩_bilibili一、异步编程同步点餐和异步点餐核心:不等二、异步方法:用async关键字修饰的方法,方法
命名规范
尽量用
酷悦悦
·
2024-01-03 02:40
.NET
.net
JS基础知识
//var定义变量//const定义常量varnum;constpai=3.1415926;js的
命名规范
1、.JS中严格区分大小写2、命名的时候可以使用$、_、数字、字母,但是数字不能作为名字的第一位
筱贰_梁
·
2024-01-02 15:35
Spark内容分享(二十):网易基于 Kyuubi + Spark 内核优化以及实践
AQE–History2.AQE–Shuffle3.AQE-SmallReducePartition4.AQE–SkewedReducePartition5.AQE–OptimizePlanKyuubi+Spark
数仓
类任务优化实践
之乎者也·
·
2024-01-02 10:21
Spark
内容分享
大数据(Hadoop)内容分享
spark
大数据
分布式
03.QT
命名规范
及快捷键(部分)
一、
命名规范
1.类名大驼峰规则:首字母大写,单词和单词之间首字母大写。2.变量名小驼峰规则:首字母小写,单词和单词之间首字母大写。
Hey小孩
·
2024-01-02 09:44
QT
qt
最容易出错的 Hive Sql 详解
前言在进行
数仓
搭建和数据分析时最常用的就是sql,其语法简洁明了,易于理解,目前大数据领域的几大主流框架全部都支持sql语法,包括hive,spark,flink等,所以sql在大数据领域有着不可替代的作用
奔跑者-辉
·
2024-01-02 07:30
hive
hive
sql
大数据
java
命名规范
在上学校java课的时候,上到java
命名规范
,发现记得不太清了,整理了一下发出来java命名规则包(packages):一个唯一包名的前缀总是全部小写的ASCII字母并且总是一个顶级域名,通常是com
学姐抱抱.
·
2024-01-02 07:55
java
UI
命名规范
头部header登录login背景background导航栏nav注册register用户user菜单栏tab编辅eidt图片img内容content删除delete广告banner左中右left/center/right返回back图标icon标题title下载download注释note底部foote弹出pop搜索search模块mod提示信息msg按钮button控件前缀复选框chk命名按扭
candybob
·
2024-01-01 13:50
Flink的优势
主要应用场景包括实时
数仓
、实时大屏、实时推荐、实时报表、实时风控和实时监控,当然还有其他一些应用场景。总之,实时计算的业务需求,一般都会用Flink进行开发。
有味青年
·
2024-01-01 13:01
笔记
Python3
命名规范
1、模块模块尽量使用小写命名,首字母保持小写,尽量不要用下划线(除非多个单词,且数量不多的情况)#正确的模块名importdecoderimporthtml_parser#不推荐的模块名importDecoder2、类名类名使用驼峰(CamelCase)命名风格,首字母大写,私有类可用一个下划线开头classFarm():passclassAnimalFarm(Farm):passclass_Pr
Home_Tang
·
2024-01-01 10:26
Impala导出csv文件
场景:当
数仓
环境为大数据集群(impala),临时从
数仓
取数导出为csv文件使用impala-shell命令把文件导出为本地csv文件--正常导出impala-shell-q"SELECT*FROMyour_table
n_avo7_i
·
2023-12-31 18:34
大数据
linux
sql
详解Lambda和Kappa架构的区别
二、架构详解1、随着大数据的发展,人们逐渐对系统的实时性提出了要求,为了计算一些实时指标,就在原来离线
数仓
的基础上增加了一个实时计
小枫@码
·
2023-12-31 18:55
架构师
架构
CSS-BEM
命名规范
BEM分别代表着:Block(块)、Element(元素)、Modifier(修饰符),是一种组件化的CSS命名方法和规范,由俄罗斯Yandex团队所提出。详见:http://getbem.com/introduction/
vavid
·
2023-12-31 05:19
零基础学Java第三天
boolean2.声明整型和浮点和布尔类型的数据一个变量数据类型变量名字=初始化的值;inta=234;floatf1=34.5f;doubled1=782.9;booleanb1=true;3.变量名字的
命名规范
师范大学通信大怨总
·
2023-12-31 05:56
Java零基础学习
java
开发语言
实时
数仓
应用价值(下)
博客浅析研发支出费用化和资本化的区别-CSDN博客商业银行数据资产估值白皮书,推荐系统源码下载-CSDN博客用友BIP数据资产入表解决方案白皮书,推荐系统源码下载-CSDN博客六、具体五种方案的解析业界常见的实时
数仓
方案有这几种
Michael_Shentu
·
2023-12-31 00:46
大数据
数据库
人工智能
深度学习
253常用控件
命名规范
与消息提示的完整用法
一、控件的
命名规范
Label标签——》lblGroupBox分组框——》grpTextBox文本框——》txtPanel面板容器——》pnlListBox列表框——》lstRadioButton单选按钮
漠漠彡
·
2023-12-30 13:07
Flink实时电商
数仓
(九)
用户注册汇总表需求分析统计各窗口的注册用户数,写入Doris思路分析读取kafka用户注册主题数据转换数据结构string->JSONObject->javaBean使用user_info表中的数据代表用户注册设置水位线开窗聚合写入Doris具体实现创建用户注册统计类继承BaseApp,设置端口,并行度,kafka消费者组,kafka主题(Topic_user_register)启动zookeep
十七✧ᐦ̤
·
2023-12-30 11:16
flink
大数据
Flink实时电商
数仓
(八)
用户域登录各窗口汇总表主要任务:从kafka页面日志主题读取数据,统计七日回流用户:之前活跃的用户,有一段时间不活跃了,之后又开始活跃,称为回流用户当日独立用户数:同一个用户当天重复登录,只算作一个独立用户。思路分析读取kafka页面主题数据转换数据结构:String->JSONObject过滤数据,uid不为null登录的两种情况用户打开应用后自动登录用户打印应用后没有登录,浏览后跳转到登录页面
十七✧ᐦ̤
·
2023-12-30 09:55
flink
linq
数据库
AI大模型时代下运维开发探索第二篇:基于大模型(LLM)的数据仓库
在SREWorks社区聚集了很多进行运维
数仓
建设的同学,大家都会遇到类似的挑战和问题:
数仓
中存储大量数据消耗成本,但很多存储的数据却并没有消费。
阿里云大数据AI技术
·
2023-12-30 07:39
原型模式
数据中台-架构、构建与体系建设
构建与体系建设数据中台架构数据中台构建方法论技术体系数据体系服务体系运营体系数据中台功能架构数据中台技术架构企业构建数据中台评估统计分析阶段决策支持阶段数据驱动阶段运营优化阶段数据汇集-打破企业数据孤岛数据开发-提取数据价值数据体系建设贴源数据层ODS(OperationalDataStore)统一
数仓
层
Ybb_studyRecord
·
2023-12-30 03:53
数据中台
架构
大数据
运维
html的class
命名规范
(前端类名取名)
常见class关键词need-to-insert-img布局类:header,footer,container,main,content,aside,page,section包裹类:wrap,inner区块类:region,block,box结构类:hd,bd,ft,top,bottom,left,right,middle,col,row,grid,span列表类:list,item,field主
Rebirth_Wang
·
2023-12-29 20:43
Flink实时电商
数仓
之DWS层
需求分析关键词统计关键词出现的频率IK分词进行分词需要引入IK分词器,使用它时需要引入相关的依赖。它能够将搜索的关键字按照日常的使用习惯进行拆分。比如将苹果iphone手机,拆分为苹果,iphone,手机。org.apache.dorisflink-doris-connector-1.17com.janeluoikanalyzer测试代码如下:publicclassIkUtil{publicsta
十七✧ᐦ̤
·
2023-12-29 17:19
flink
大数据
长文解读 "数据仓库" 面试必备知识
数仓
分层
数仓
简介1.数据仓库和数据库的区别数据仓库:数据量特别的大,TB~PB级别会保留历史数据一般使用OLAP分析(On-LineAnalyticalProcessing),联机分析处理(聚合操作),
you的日常
·
2023-12-29 15:28
数据库优化
在业务层,可通过加机器就加性能禁止存大文件不灵活、浪费资源、格式转换故效率低二、
命名规范
库名、表名、字段名:小写、下划线,不超32字符,见名如意,禁止拼音英文混用表名t_xx,唯一索引
啊_sam
·
2023-12-29 14:16
mysql
mysql
数据仓库-
数仓
优化小厂实践
根据自己的实践整理一些
数仓
相关的优化。二、优化1、简易架构图2、ODS层优化2.1分段式解析随着业务增长,数据量也不断增加,凌晨任务经常基线预警、破线,导致数据不能正常产出,影响运营人员分析数据。
大数据点滴
·
2023-12-29 09:25
#
数据仓库
数据仓库
web开发代码规范和类的
命名规范
(pink老师笔记——品学优购项目)
代码规范1.概述欢迎使用品优购代码规范,这个是我借鉴京东前端代码规范,组织的品优购内部规范。旨在增强团队开发协作、提高代码质量和打造开发基石的编码规范,以下规范是团队基本约定的内容,必须严格遵循。HTML规范基于W3C、苹果开发者等官方文档,并结合团队业务和开发过程中总结的规范约定,让页面HTML代码更具语义性。图片规范了解各种图片格式特性,根据特性制定图片规范,包括但不限于图片的质量约定、图片引
芒果水蜜桃
·
2023-12-29 04:39
前端学习笔记
web前端练手项目
前端
css
html
鸿蒙APP的代码规范
遵循鸿蒙系统的
命名规范
,包括包名、类名、变量名等。使用有意义的命名,避免使用缩写。2.代码结构:模块化设计,将代码划分为
super_Dev_OP
·
2023-12-29 02:45
harmonyos
代码规范
华为
常见的hooks
BEM:BEM是一种针对css的前端
命名规范
,是块(Block),元素(Element),修饰符(Modifier)的简写。
Repeater、
·
2023-12-28 22:12
前端
javascript
开发语言
Python
命名规范
中的[单/双]&[前导/后缀]下划线小结
如图所示出处SingleandDoubleUnderscoresinPythonNames
CSU迦叶
·
2023-12-28 21:32
Python
python
分享7个Python实战项目代码,让你分分钟晋级大老!快收藏_python编程作品
听两个聊天机器人互相聊天:3、分析唐诗的作者是李白还是杜甫:4、彩票随机生成35选7:5、自动写检讨书:6、屏幕录相机,抓屏软件:7、制作Gif动图:一、Python入门二、Python爬虫三、数据分析四、数据库与ETL
数仓
五
老-程序员
·
2023-12-28 19:38
编程
Python爬虫
代码
python
开发语言
代码作品
银行
数仓
建模方法论
随着金融行业的不断发展,银行业务越来越复杂,数据量也越来越大。为了更好地管理和利用这些数据,银行数据仓库体系应运而生。在前面的文章中,我们介绍了银行数据仓库体系的基础知识,本篇文章将重点介绍银行数据仓库体系实践(7)—数据模型设计及流程。一、数据模型设计数据模型设计是银行数据仓库体系的核心,它是对银行业务进行抽象和概括的过程。在设计数据模型时,需要考虑以下几个方面:业务需求:数据模型的设计必须符合
添柴少年yyds
·
2023-12-28 18:56
数据挖掘
数据仓库
人工智能
ODS DW APP DIM
数仓
ODS:通过ETL工具从源端系统抽取数据,存入ODS层;DW:从ODS层数据进行抽取并按主题进行分类存储;DWD(数据明细层):会对ODS的数据做一定的清洗和汇总,然后生成DWM中间表;DWM(数据中间层):对DWD中的数据按照一定维度进行汇总后,放到DWS中的一张表;DWS(数据服务层):从DWM中间表中按主题进行高度汇总业务宽表,满足各项业务需要;APP:依据DWS中的宽表数据,进行应用(可视
p1i2n3g4
·
2023-12-28 17:41
大数据
数据仓库
数据库
数据挖掘
数据库开发规范参考
一.
命名规范
数据库对象名称必须使用小写字母并用下划线规范数据库对象名称禁止使用MySQL保留关键字数据库对象命名要做到见名识义,并且最好不要超过32个字符对于临时表,最好以tmp为前缀,以日期为后缀进行特别标识对于备份表必须以
艾希逐月
·
2023-12-28 15:09
数据库
数据库
mysql
开发规范
数据仓库 基本信息
数据仓库基本理论数据仓库(英语:DataWarehouse,简称
数仓
、DW),是一个用于存储、分析、报告的数据系统。
许一世流年 绝不嵩手 cium
·
2023-12-28 11:46
数据仓库
spark
大数据
ETL项目实战--学习笔记
Extract,数据抽取=>抽取的是其他数据源中的数据T:Transform,数据转换=>将数据转换为统一的格式,消除异常值,缺失值,对于错误的逻辑进行修改L:Load,数据加载=>将不同数据源的数据处理后加载到
数仓
或者输出到指定位置
祈愿lucky
·
2023-12-28 11:46
大数据
etl
学习
笔记
知乎实时
数仓
架构演进
从智能商业的角度来讲,数据的结果代表了用户的反馈,获取结果的及时性就显得尤为重要,快速的获取数据反馈能够帮助公司更快的做出决策,更好的进行产品迭代,实时
数仓
在这一过程中起到了不可替代的作用。
yoku酱
·
2023-12-27 19:34
Maven之插件入门
官方文档:https://maven.apache.org/guides/plugin/guide-java-plugin-development.html
命名规范
-maven-plugin创建项目生成项目方式一
微风至夏
·
2023-12-27 18:18
#
Maven
maven
插件
上一页
7
8
9
10
11
12
13
14
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他