E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
数仓命名规范
数开中:SQL递归函数使用场景(70天)
数仓
(DataWarehouse)中,SQL递归函数的使用场景多出现在需要处理具有层级或树状结构的数据时。这类数据可能包括商品分类、用户行为路径(如点击流中的页面跳转)、促销活动层级等。
大数据飞总
·
2024-08-21 20:29
sql
sql
数据库
大数据
Java学习笔记之Java基础语法01-变量与常量
4.2数据类型1.分类2.基本数据类型(四类八种)3.变量初始化细节4.3计算机中的数据存储4.4练习练习1练习2练习34.5标识符1.硬性要求:2.命名原则A.小驼峰命名法B.大驼峰命名法C.阿里巴巴
命名规范
细节
神马都会亿点点的毛毛张
·
2024-03-24 04:51
编程笔记
编程实战
java
学习
笔记
某项目公司-——ETL工程师岗位——二面
1.自我介绍2.如果给你一个
数仓
项目,你应该从那些方面向你的上级汇报。3.对自己的未来职业生涯规划。4.平常下班之后做那哪些事情。5.对于写PPT,写文档这块是否可以。
劝学-大数据
·
2024-03-20 06:46
个人面试真题记录
etl工程师
数据仓库
03hive
数仓
安装与基础使用
hiveHive概述Hive是基于Hadoop的一个数据仓库工具。可以将结构化的数据文件映射为一张表,并提供完整的sql查询功能,本质上还是一个文件底层是将sql语句转换为MapReduce任务进行运行本质上是一种大数据离线分析工具学习成本相当低,不用开发复杂的mapreduce应用,十分适合数据仓库的统计分析hive可以用来进行数据提取、转化、加载,这是一种可以存储、查询和分析存储在hadoop
daydayup9527
·
2024-03-14 13:39
hadoop_hive
运维
hadoop
Objective-C开发编程规范
使用空格而不是制表符Tab2.2每一行的最大长度2.3函数的书写2.4函数调用2.5@public和@private标记符2.6协议(Protocols)2.7闭包(Blocks)2.8数据结构的语法糖三
命名规范
github_38569411
·
2024-03-12 20:12
iOS开发
编码规范
ETL策略
ETL架构的datastage,informatica,以ELT为代表的ODI,再到后来的批处理方式,SQL编码方式,但是其本质还是抽取数据,处理,再加载到目标平台,常用的方式:1.初始化:当我们建立
数仓
平台时候
朱先生_hfm
·
2024-03-10 13:11
etl
数据仓库
Spark-sql Adaptive Execution动态调整分区数量,调整输出文件数
背景:在
数仓
任务中,经常要解决小文件的问题。
不想起的昵称
·
2024-03-02 15:03
hive
spark
hive
数据仓库
EMR StarRocks实战——Mysql数据实时同步到SR
下文主要介绍如何使用Flink平台和E-MapReduceStarRocks,通过CTAS&CDAS功能实现实时
数仓
中TP(TransactionProcessi
爱吃辣条byte
·
2024-02-28 09:49
#
StarRocks
数仓建设
大数据
数据仓库
数据库设计
设计准则1.
命名规范
数据库表名、字段名、索引名需要
命名规范
,一
·
2024-02-25 20:16
数据库mysql
java基础--常用的包
包的命名本文先了解包的
命名规范
和包的命名规则,并列举相关例子!命名规则只能包含数字、字母、下划线、小圆点,但是不能用数字开头,不能是关键字或保留字。
董小姐orz(娜)
·
2024-02-20 23:50
java基础
java
开发语言
Databend 开源周报第 132 期
Databend是一款现代云
数仓
。专为弹性和高效设计,为您的大规模分析需求保驾护航。自由且开源。即刻体验云服务:https://app.databend.cn。
·
2024-02-20 10:50
数据库
透彻理解实时
数仓
的支撑技术:Upsert Kafka 和 Flink 动态表(Dynamic Table)
博主历时三年精心创作的《大数据平台架构与原型实现:数据中台建设实战》一书现已由知名IT图书品牌电子工业出版社博文视点出版发行,点击《重磅推荐:建大数据平台太难了!给我发个工程原型吧!》了解图书详情,京东购书链接:https://item.jd.com/12677623.html,扫描左侧二维码进入京东手机购书页面。动态表本质上是一条流(stream),upsert-kafka映射的数据表底层存储的
Laurence
·
2024-02-20 10:23
大数据专题
upsert-kafka
flink
动态表
原理
解释
更新
计算机网络-H3C网络端口基础信息与配置
1.1
命名规范
H3C的端口命名主要是根据端口的速率来进行区分的。基本都是千兆速率往上的,百兆的端口比较多用于二层傻瓜交换机或者不能CLI管理的。
不喜欢热闹的孩子
·
2024-02-20 07:11
程序人生
JVS智能BI的ETL数据集实践:数据自动化分析的秘诀
数据集管理与界面介绍在整体的
数仓
架构中,数据集是在线加工的标准数据形态,数据集配置的过程就似对数据进行加工、清晰、关联、建模的过程,建模完成后,可通过手动数据执行或者周期性的
jonyleek
·
2024-02-20 05:59
低代码
数据库
gitee
java
大数据
etl
我该建
数仓
、大数据平台还是数据中台?看完脑子终于清醒了
一、层出不穷的新名词现在各种新名词层出不穷:顶层的有数字城市、智慧地球、智慧城市、城市大脑;企业层面的有数字化转型、互联网经济,数字经济、数字平台;平台层面的有物联网,云计算,大数据,5G,人工智能,机器智能,深度学习,知识图谱;技术层面的有数据仓库、数据集市、大数据平台、数据湖、数据中台、业务中台、技术中台等等。总之是你方唱罢他登场,各种概念满天飞…在比拼新经济的过程中,其实比拼的是流量也就是用
zl1zl2zl3
·
2024-02-20 05:30
大数据
中台
大数据
中台
【Qt】环境安装与初识
目录一、Qt背景介绍二、搭建Qt开发环境三、新建工程四、Qt中的
命名规范
五、QtCreator中的快捷键六、QWidget基础项目文件详解6.1.pro文件解析6.2widget.h文件解析6.3widget.cpp
GG_Bond20
·
2024-02-20 01:19
Qt
qt
c++
VUE开发规范
VUE开发规范(仅作参考)编程规约
命名规范
项目命名全部采用小写方式,以中划线分隔。
GaoJamie
·
2024-02-20 00:41
#
Vue.js
vue.js
前端
javascript
什么是onedata?如何使用onedata?
这是
数仓
构建的基
时代新人0-0
·
2024-02-19 21:54
数据仓库
数据仓库
大数据
hive
mv: 无法获取“/opt/module/hadoop/logs/hadoop-atguigu-nodemanager-hadoop102.out.1“ 的文件状态(stat): 没有那个文件或目录
最近在回顾之前做过的离线
数仓
项目,在启动hadoop时出现了如下错误:hadoop102:mv:无法获取"/opt/module/hadoop/logs/hadoop-atguigu-nodemanager-hadoop102
时代新人0-0
·
2024-02-19 21:53
hadoop
hadoop
大数据
rust学习笔记-hello_world()
1.rust程序后缀名为:.rs文件
命名规范
:多个单词之间用_分割2.编译:在命令行中运行rustctest.rs其中test为文件名运行:在命令行中输入.\main.exe(.
二队长
·
2024-02-19 16:17
rust
Apache DolphinScheduler
数仓
任务管理规范
前言:大数据领域对多种任务都有调度需求,以离线
数仓
的任务应用最多,许多团队在调研开源产品后,选择ApacheDolphinScheduler(以下简称DS)作为调度场景的技术选型。
DolphinScheduler社区
·
2024-02-19 16:16
大数据
Apache DolphinScheduler
数仓
任务管理规范
前言:大数据领域对多种任务都有调度需求,以离线
数仓
的任务应用最多,许多团队在调研开源产品后,选择ApacheDolphinScheduler(以下简称DS)作为调度场景的技术选型。
·
2024-02-19 16:01
数据库
[HTML]Web前端开发技术25(HTML5、CSS3、JavaScript )JavaScript基础消息对话框告警框确认框提示框
命名规范
1标识符2关键字3保留字注释标识符和变量——喵喵画网页
目录前言JavaScript程序代码消息对话框消息对话框-告警框消息对话框-确认框消息对话框-提示框JavaScript注释标识符和变量
命名规范
1.标识符2.关键字3.保留字课后练习网页标题:HTML属性的事件处理器的应用网页标题
猫佛
·
2024-02-19 15:06
html
前端
html5
计算机学习
javascript
css3
DDL 毫秒级同步,Light Schema Change 的设计与实现|新版本揭秘
在OLAP的业务场景中,SchemaChange是一个相对常见的业务需求,当上游数据源维度发生变化时,通常需要将
数仓
中的表结构进行相应的变更。
·
2024-02-19 15:19
Flink 细粒度滑动窗口性能优化
大数据技术AIFlink/Spark/Hadoop/
数仓
,数据分析、面试,源码解读等干货学习资料118篇原创内容公众号1、概述1.1细粒度滑动的影响当使用细粒度的滑动窗口(窗口长度远远大于滑动步长)时,
hyunbar
·
2024-02-19 13:39
Flink
大数据
flink
java
数据库
数据系统架构-10.
数仓
开发平台
数仓
开发平台1.背景数据仓库是存储各种数据的仓库,形同于现实当中存储货物的仓库,不可避免的存在“乱放”、“不方便存取”、“浪费空间”等情况。
·
2024-02-19 11:45
大数据系统架构数据仓库
揭秘JVS-智能BI数据集管理:让你的数据处理更高效!
数据集管理与界面介绍在整体的
数仓
架构中,数据集是在线加工的标准数据形态,数据集配置的过程就似对数据进行加工、清晰、关联、建模的过程,建模完成后,可通过手动数据执行或者周期性的
·
2024-02-19 11:41
数据集etl数据可视化大数据
Hive调优——count distinct替换
离线
数仓
开发过程中经常会对数据去重后聚合统计,而对于大数据量来说,count(distinct)操作消耗资源且查询性能很慢,以下是调优的方式。
爱吃辣条byte
·
2024-02-15 10:58
#
Hive
hive
数据仓库
解决“该项目不在请确认该项目位置,然后重试” 文件无法删除问题
经常出现文件删掉了,文件夹无法删除,出现“该项目不在请确认该项目位置,然后重试”的场景问题描述提示:这里描述项目中遇到的问题:一、文件或文件夹名称不符合Windows
命名规范
;比如名称中含有..等特殊符号
Aussise
·
2024-02-15 09:03
学习
怎样写python代码:
比如
命名规范
,每一行的长度,看似是细节,但是很多时候细节决定成败。为啥不用这个神器检查一下Pylint库,它能快速帮你查缺补漏。今天的这篇是这
大白python
·
2024-02-14 22:09
数仓
面试
0.自我介绍答:1).简单的自我介绍,突出自己优势2).项目介绍3).项目中承担的工作和模块。4).长的帅或漂亮,前四条都可以忽略1.什么是数据仓库?如何构建数据仓库?可参考:漫谈|大牛带你从0到1构建数据仓库实战(如果这个问题回答的好,后面很多问题都不需要再问)答:数据仓库是一个面向主题的(SubjectOriented)、集成的(Integrate)、相对稳定的(Non-Volatile)、反
China_mr001
·
2024-02-14 21:46
《Docker极简教程》--Docker镜像--Docker镜像的管理
一、镜像标签与版本管理1.1标签的作用与
命名规范
标签在Docker镜像中具有标识和版本控制的作用,可以帮助用户识别和管理不同版本的镜像。
喵叔哟
·
2024-02-14 06:04
Docker极简教程
docker
elasticsearch
容器
Java学习笔记(四)
1.1算数运算符1.2关系运算符[比较运算符]1.3逻辑运算符1.4赋值运算符1.5三元运算符二、运算符优先级三、标识符的命名规则和规范3.1标识符概念3.2标识符的命名规则(必须遵守)3.3标识符的
命名规范
四
不期而遇__
·
2024-02-14 03:27
学习
笔记
java
「Java」变量与运算符
标识符标识符的命名规则由26个英文字母大小写,0-9,_和$组成数字不可以开头不可以使用关键字和保留字,但能包含关键字和保留字Java中严格区分大小写,长度无限制标识符不能包含空格标识符的
命名规范
包名:
PinHsin
·
2024-02-13 09:15
java
python
大数据
android 代码规范
规范建议本文档参考《阿里巴巴Java开发手册》撰写而成.撰写人:Simon,撰写时间:2022/1/26一、
命名规范
命名原则:单一,简洁,易懂任何变量名建议采用驼峰命名法TextViewtvName=findViewbyId
ProgrammerOz
·
2024-02-13 04:41
【产品质量】版本
命名规范
版本阶段描述【Alpha版】此版本表示该软件在此阶段主要是以实现软件功能为主,通常只在软件开发者内部交流,一般而言,该版本软件的Bug较多,需要继续修改。【Beta版】该版本相对于α版已有了很大的改进,消除了严重的错误,但还是存在着一些缺陷,需要经过多次测试来进一步消除,此版本主要的修改对像是软件的UI。【RC版】该版本已经相当成熟了,基本上不存在导致错误的BUG,与即将发行的正式版相差无几。【R
奔跑的小小鱼
·
2024-02-12 23:55
Rust函数入门与函数重载
函数基础声明和调用函数在Rust中,函数的声明使用fn关键字,按照惯例,函数和变量名使用snakecase
命名规范
,即所有字母都是小写的,单词之间使用下划线分开。fnmain(){println!
好奇的菜鸟
·
2024-02-12 15:08
Rust
rust
开发语言
后端
《CSS 简易速速上手小册》第8章:CSS 性能优化和可访问性(2024 最新版)
文章目录8.1CSS文件的组织和管理8.1.1基础知识8.1.2重点案例:项目样式表结构8.1.3拓展案例1:使用BEM
命名规范
8.1.4拓展案例2:利用Sass混入创建响应式工具类8.2提高网页加载速度的技巧
江帅帅
·
2024-02-12 06:37
《CSS
简易速速上手小册》
css
性能优化
前端
人工智能
数据分析
数据挖掘
web3
测试编码规范
建立单独的包来存放测试代码只要能独立于项目代码之外方便不维护就行1.测试类和测试方法
命名规范
测试类测试类名Test例:HelloWorldTest侧重于说明被测试类的的名称测试方法Tes
Jaylan-233
·
2024-02-12 03:46
软件测试
单元测试
2019-1-21考核总结
命名规范
:标识符变量、常量、方法、对象、类的名字叫做标识符标识符由字母、数字、下划线、美元符号组成不能以数字开头命名:类名首字母大写;变量、方法及对象首字母小写;大写中间字母的首字母;常数用大写;包名全小写
张仁杰_强化班
·
2024-02-12 00:28
ClickHouse常用表引擎
有点像
数仓
中的缓慢变化维度。创建TinyLog引擎表只需要在
寒 暄
·
2024-02-11 22:23
#
---ClickHouse
数据库
大数据
ClickHouse
clickhouse 21.x生产实践优化
clickhouse1时间字段类型建表时能用数值型或日期时间型表示的字段就不要用字符串,全String类型在以Hive(hbase)为中心的
数仓
建设中常见,但ClickHouse环境不应受此影响。
架构师老狼
·
2024-02-11 18:28
Databend 开源周报第 131 期
Databend是一款现代云
数仓
。专为弹性和高效设计,为您的大规模分析需求保驾护航。自由且开源。即刻体验云服务:https://app.databend.cn。
·
2024-02-11 18:59
数据库
离线
数仓
(一)【
数仓
概念、需求架构】
前言今天开始学习
数仓
的内容,之前花费一年半的时间已经学完了Hadoop、Hive、Zookeeper、Spark、HBase、Flume、Sqoop、Kafka、Flink等基础组件。
让线程再跑一会
·
2024-02-11 11:58
离线数仓
大数据
rem基础+媒体查询+Less基础
一,rem基础二,媒体查询2.1什么是媒体查询2.2语法规范2.3媒体查询+rem实现元素动态大小的变化2.4引入资源(理解)三,Less基础1维护css的弊端2Less介绍3Less变量变量
命名规范
4Less
Mon trésor.88
·
2024-02-10 23:42
html
前端
代码规范(注意)
1、页面布局代码标准,css、js文件样式统一外链的形式;2、css样式重置,分类形式,公用样式放在base.css,常见的样式放在common.css3、文件目录:(1)存放其他图片文件
命名规范
:images
依耳私语
·
2024-02-10 23:03
介绍个小工具 - ABAP Cleaner
这个就要说一说CleanCode的概念了,它从
命名规范
、格式、
SAP-nkGavin
·
2024-02-10 11:30
SAP
ABAP性能优化
SAP
ABAP
Clean
Code
ABAP
Cleaner
计算机毕业设计PyFlink+Hadoop+Hive民宿数据分析可视化大屏 民宿推荐系统 民宿爬虫 民宿大数据 知识图谱 机器学习 大数据毕业设计
selenium自动化爬虫框架采集民宿数据约10万条存入.csv文件作为数据集;2.使用pandas+numpy或MapReduce对数据进行数据清洗,生成最终的.csv文件并上传到hdfs;3.使用hive
数仓
技术建表建库
计算机毕业设计大神
·
2024-02-10 10:56
二阶段作业笔记
(
命名规范
:姓名全拼_序号.txt例如:张三,zhangsan_01.txt)touch/tmp/mizida{1..3}.txt2在/tmp下创建1个目录。
十七遇你_dc8d
·
2024-02-10 10:00
实时计算框架 Flink 在教育行业的应用实践
若想实现大规模数据的“即席查询”,就须用实时计算框架构建实时
数仓
来实现。本文通过一个教育行业的应用案例,剖析业务系统对实时计
Java架构师CAT
·
2024-02-10 09:20
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他