数仓命名规范第6页

Go 语言命名规范：清晰、简洁、一致

Go语言命名规范：清晰、简洁、一致Go语言是一门注重简洁和一致性的编程语言，良好的命名规范是代码可读性和维护性的关键因素之一。

java搬砖工-苤-初心不变·2024-01-19 20:04

华为外包数据库面试问题分享20211225

数仓的东西了解多少。数据库开发支持这方面你做过哪些。你现在的工作中的SQL开发，具体是作了哪些。你的工作意愿是哪个方向（这么问是因为知道了我没做过DBA）在数仓的设

钦䲹·2024-01-19 16:05

某小外包公司线上面试-大数据开发

1.数仓和数据库的区别2.数仓建模3.hive用到的函数4.rank,dense_rank,row_number的区别5.hive数据倾斜的原因有哪些7.如何理解数据质量？

劝学-大数据·2024-01-19 16:03

Java命名规范规则、手册、工具

Java代码写的好不好，一个很关键的因素就是命名规范，就像我们高考答题一样，先不管答案的正确与否，字迹工整就有个印象分，比如英语作文不会的抄阅读理解，这种小技巧，必须有一个工整的字体作为支撑。

三花学编程·2024-01-19 14:26

【vue中文件及文件夹命名规范详细介绍】

vue中文件及文件夹命名规范详细介绍1.介绍2.命名规范3.文件夹名4.路由和子文件夹5.单文件组件的大写字母6.测试文件7.约定性书写1.介绍在Vue项目中，合理的文件和文件夹命名对于代码维护和团队协作非常重要

程序员不想YY啊·2024-01-19 14:43

SpringBoot 的 Starter 快速集成机制

命名规范官方开发的starter遵循类似的命名模式：spring-boot-starter-*第三方starter命名应当遵循:thirdpartyprojec

右耳菌·2024-01-19 08:25

基于 Hologres+Flink 的曹操出行实时数仓建设

本文整理自曹操出行实时计算负责人林震基于Hologres+Flink的曹操出行实时数仓建设的分享，内容主要分为以下六部分：曹操出行业务背景介绍曹操出行业务痛点分析Hologres+Flink构建企业级实时数仓曹操出行实时数仓实践曹操出行业务成果分析未来展望一

Apache Flink·2024-01-19 08:54

FineBI实战项目一（25）：实战项目一总结

实在项目使用mysql做数仓库的ODS层，这仅仅是带领大家入门，用mysql做数仓存在很多问题。

不死鸟.亚历山大.狼崽子·2024-01-19 02:39

数仓架构图

阿里巴巴的数据团队把表数据模型分为三层：操作数据层（ODS）、公共维度模型层（DM）和应用数据层（DS），其中公共维度模型层包括明细数据层（DWD）和汇总数据层（DWS）。模型层次关系如9.9所示。image.png公共维度模型层（CDM）：存放明细事实数据、维表数据及公共指标汇总数据其中明细事实数据、维表数一般根据ODS层数据加工生成：公共指标汇总数据般根据维表数据和明细事实数据加工生成。CDM

liuxiaolin·2024-01-19 01:27

Hologres + Flink 流式湖仓建设

Flink流式湖仓建设1Flink+Hologres特性1.2实时维表Lookup1.3高性能实时写入与更新1.4多流合并1.5Hologres作为Flink的数据源1.6元数据自动发现与更新2传统实时数仓分层方案

Direction_Wind·2024-01-18 21:56

白山云基于StarRocks数据库构建湖仓一体数仓的实践

背景随着每天万亿级别的业务数据流向数据湖，数据湖的弊端也逐渐凸显出来，例如：数据入湖时效性差：数据湖主要依赖于离线批量计算，通常不支持实时数据更新，因此无法保证数据的强一致性，造成数据不及时、不准确；查询性能差：在传统架构下，数据湖的查询速度较差，小时粒度的数据查询往往需要数分钟才能得到响应，在多个业务方同时执行数据湖查询任务时，查询响应慢的劣势更加明显；查询体验差：数据存储在多个地方，在进行联邦

StarRocks_labs·2024-01-18 17:04

软件工程 -- 数据流图的画法

1.1数据流图的概念1.2数据流图的基本符号2.示例：工厂订单报表2.1数据流图有4种成分分析2.2开始画数据流图2.2.1顶层数据流图2.2.2第0层数据流图2.2.3第1层数据流图2.3补充:数据流图命名规范

大渔歌_·2024-01-18 15:49

技术选型｜开源大数据OLAP引擎最佳实践

一、开源OLAP综述二、开源数仓解决方案三、ClickHouse介绍四、StarRocks介绍五、Trino介绍六、客户案例01开源OLAP综述如今的开源数据引擎多种多样，不同种类的引擎满足了我们不同的需求

浪尖聊大数据-浪尖·2024-01-18 08:14

数仓项目6.0配置大全（hadoop/Flume/zk/kafka/mysql配置）

配置背景我使用的root用户，懒得加sudo所有文件夹在/opt/module所有安装包在/opt/software所有脚本文件在/root/bin三台虚拟机：hadoop102-103-104分发脚本fenfa，放在~/bin下,chmod777fenfa给权限#!/bin/bash#1.判断参数个数if[$#-lt1]thenechoXXXXXXXXXNoArguementXXXXXXXXX!

Int mian[]·2024-01-18 06:57

第二节变量、注释、数据类型

变量变量命名规范：只能是数字、字母、下划线。只能以字母、下划线开头。不能是python关键字、内置函数名。建议：见名知意使用小写字母、下划线、数字组成。多词组成的变量名用下划线分割，不使用驼峰命名法。

谷晓光·2024-01-18 05:40

如何设计实时数据平台（设计篇）

在上篇设计篇中，我们首先从两个维度介绍实时数据平台：从现代数仓架构角度看待实时数据平台，从典型数据处理角度看待实时数据处理；接着我们会探讨实时数据平台整体设计架构、对具体问

longLiveData·2024-01-18 05:11

离线数仓二

数据仓库维度模型设计维度建模基本概念维度模型是数据仓库领域大师RalphKimall所倡导，他的《数据仓库工具箱》，是数据仓库工程领域最流行的数仓建模经典。

pauls·2024-01-18 00:26

尚硅谷离线数仓之采集平台

1.用户行为日志数据流向流程图如下，其中红框表示用户行为日志数据的流向图。1.1行为日志内容行为日志主要包括以下几个内容页面浏览记录动作记录曝光记录启动记录错误记录页面浏览记录动作记录曝光记录启动记录1.2用户行为日志格式页面日志启动日志页面日志，以页面浏览为单位，即一个页面浏览记录，生成一条页面埋点日志。一条完整的页面日志包含，一个页面浏览记录，用户在该页面所做的若干个动作记录，若干个该页面的曝

韩顺平的小迷弟·2024-01-17 21:56

数据仓库面试题

1思维导图&数仓常见面试题2题目1.数据仓库是什么？

韩顺平的小迷弟·2024-01-17 21:53

Python系列（3）—— 变量

变量一、变量命名规范二、变量赋值三、变量的数据类型四、变量的作用域五、变量类型转换Python编程中，变量是存储数据的容器。它们用于存储各种数据类型，如整数、浮点数、字符串、列表、字典等。

隐私无忧·2024-01-17 21:04

python基础教学day9-总结

3.声明函数"""1)语法def函数名（参数列表）：函数体2)说明def-声明函数的关键字函数名-是标识符，不能是关键字-（要求）PEP8命名规范（所有字母小写

初学者009·2024-01-17 17:24

2024.1.16 用户画像day01 - 项目介绍

技术选型:技术架构:项目架构:二.名词解释一.项目介绍整体流程:项目介绍-elasticSearch-业务数据源导入-离线指标开发-Flume实时采集-Nginx日志埋点数据-结构化流实时指标-制作报表数仓开发用户画像实时开发

白白的wj·2024-01-17 15:40

关于CarbonData+Spark SQL的一些应用实践和调优经验分享

行业亟需一个高效、统一的融合数仓，从海量数据中快速获取有效信息，从而洞察机遇、规避风险。

weixin_34075551·2024-01-17 15:31

数仓数据含有特殊字符，如何更方便的导出成excel文件

如果遇到数据中含有特殊字符,"\n","\r","\t",或者其他的特殊分隔符在数据导出时造成错位，都用sql替换，但是需求是导出的数据要保持原有内容格式，就不能替换剔除这些特殊字符，这种情况下使用json方式1，在hive数仓建一个临时的

第一次看海·2024-01-17 15:00

spark sql实践开发后端引擎

-------------“何以解忧，唯有暴富”需求开发一个系统，主要是将数仓中治理完用于检索的数据灌入Elasticsearch中，一般情况，开源的一些系

第一次看海·2024-01-17 14:28

springcloud gateway正确路由配置 uri找不到服务？

经过查阅资料得知其命名不符合gateway的命名规范，因而无法识别。规范详情见下文。

蓝天白云下遛狗·2024-01-17 12:40

ElasticSearch使用篇

二、创建索引格式:PUT/索引名称索引命名规范：以小写英文字母命名索引不要使用驼峰命名法则

季风泯灭的季节·2024-01-17 11:47

linux修改文件名的三种方法

有时候我们需要将文件名改为更具描述性的名称，或者根据特定的命名规范进行调整。本文将介绍三种常用的方法，分别是使用mv命令、使用rename命令和使用Shell脚本。

学了Java不会用·2024-01-17 10:59

C语言中的命名规则（期末版）

本文将详细介绍C语言中的命名规则，包括标识符的命名规范、命名风格和命名约定等方面。二、标识符的命名规范在C语言中，标识符是用来表示变量、函数、常量等的名称。

颖(๑>؂<๑）鹏·2024-01-17 04:17

如何通过outlet在SAP Spartacus的产品明细页面插入自定义UI

创建一个新的module：nggmmyOutlets再基于该module创建一个Component，注意module的命名规范：在生成的MyOutletsModule里，导入OutletRefModule

JerryWang_汪子熙·2024-01-16 23:54

多租户体系实现

文章目录核心思路方案选择设计考量安全性扩展性通用性易用性具体实现租户信息透传透传变量名命名规范应用内透传应用间透传数据层租户隔离MySQL存储方案：多租户Mybatis插件Mybatis插件特点使用多租户

倜傥村的少年·2024-01-16 21:44

QT串口助手入门到精通

1.2Kits(构建套件)1.3Details(类的信息)1.4汇总二、常用操作2.1显示文件分类2.2代码分栏三、代码分析四、总结系列文章目录一、.pro文件二、.h文件（头文件）三、.cpp文件（源文件）及命名规范系列文章目录一

redhat_yan·2024-01-16 18:13

关于MyBatis传值出现空值的一种解决方法

当写玩查询方法时，运行后缺出现获取的值为null的情况，针对这种情况的其中一个解决方法就是看你的实体类的命名规范，必须使用驼峰命名法，并且不能两个字母同时大写....比如这种命名方式会使他在编译的时候将首个字母大写变成

＜＇））））＞＜·2024-01-16 16:32

MySQL 团队开发规范

数据库对象命名规范数据库对象数据库对象是数据库的组成部分，常见的有以下几种：表（Table）、索引（Index）、视图（View）、图表（Diagram）、缺省值（Default）、规则（Rule）、触发器

没米吃的耗子·2024-01-16 08:19

SpringBoot的启动器——spring-boot-starter介绍和常见启动器说明

文章目录SpringBoot的启动器——spring-boot-starter介绍和常见启动器说明1、Starter是什么2、Starters命名规范3、SpringBoot提供的一些启动器（starter

fpl1116·2024-01-16 07:13

Hive使用shell调用命令行特殊字符处理

1.场景分析数据处理常用hive-e的方式，通过脚本操作数仓，过程中常常遇到特殊字符的处理，如单双引号、反斜杠、换行符等，现将特殊字符用法总结使用如下，可直接引用，避免自行测试的繁琐。

tuoluzhe8521·2024-01-16 07:17

ClickHouse - 01

批处理会将源业务系统中的数据通过数据抽取工具（例如Sqoop）将数据抽取到HDFS中，这个过程可以使用MapReduce、Spark、Flink技术对数据进行ETL清洗处理，也可以直接将数据抽取到Hive数仓中

ArthurHC·2024-01-16 02:17

数据库, 数据仓库, 数据集市，数据湖，数据中台

数据仓库和数据库的区别作者：南宫蓉出处：简书第一篇：数据仓库概述第二篇：数据库关系建模作者：穆晨出处：CNBLOS数据仓库、数据湖、数据集市、和数据中台的故事作者：Murkey学习之旅出处：csdn数据中台和数仓的关系作者

cxzhq2002·2024-01-16 01:26

mysql/oracle 数据库delete操作太慢（where ... in ...），不加索引，一招让性能提升百倍

比如在数仓项目中，软删虽然更快更安全，但是缺点也很多：1、软删造成数据冗余，甚至快速膨胀的后果。比如一些中间表，只是作为中转站，过两天数据就分配其他表了，不硬删的话就会造成数据快速膨胀。

大壮001·2024-01-15 23:30

亚信安慧AntDB-S流式数据库实现企业数智化转型

AntDB-S流式数据库是一项针对实时数仓等场景的创新技术，旨在取代传统的流式处理引擎，从而简化开发和测试过程。该流式数据库具备强大的ACID特性和高可用性，为企业降低了流式业务开发和维护的成本。

亚信安慧AntDB数据库·2024-01-15 14:11

国产开源优秀新一代MPP数据库StarRocks入门之旅-数仓新利器（上）

概述背景ApacheDoris官方地址https://doris.apache.org/ApacheDorisGitHub源码地址https://github.com/apache/incubator-dorisApacheDoris是一个现代化的MPP分析型数据库产品。仅需亚秒级响应时间即可获得查询结果，有效地支持实时数据分析。ApacheDoris的分布式架构非常简洁，易于运维，并且可以支持1

IT小神·2024-01-15 13:45

数仓选型必列入考虑的OLAP列式数据库ClickHouse(中)

实战案例使用背景ELK作为老一代日志分析技术栈非常成熟，可以说是最为流行的大数据日志和搜索解决方案；主要设计组件及架构如下：而新一代日志监控选型如ClickHouse、StarRocks特别是近年来对ELK地位发起较大的挑战，不乏有许多的大公司如携程，快手已开始把自己的日志解决方案从ES迁移到了Clickhouse，将日志从ES迁移到ClickHouse可以节省更多的服务器资源，总体运维成本更低，

IT小神·2024-01-15 13:45

国产开源优秀新一代MPP数据库StarRocks入门之旅-数仓新利器（中）

概述背景ApacheDoris官方地址ApacheDorisApacheDorisGitHub源码地址GitHub-apache/incubator-doris:ApacheDoris(Incubating)isanMPP-basedinteractiveSQLdatawarehousingforreportingandanalysis.ApacheDoris是一个现代化的MPP分析型数据库产品。

Firstlucky77·2024-01-15 13:42

软件系统部署方案书（Word）

一、引言（一）编写目的二、外部设计（一）标识符和状态（二）约定1．数据库涉及字符规范2．字段命名规范（三）专门指导（四）支持软件三、服务器环境搭建与应用部署（一）JDK安装与配置（二）数据库安装（三）数据库管理工具

软件项目资料查询库·2024-01-15 13:10

大数据开发之Hive(基本概念、安装、数据类型、DDL数据定义、DML数据操作)

但是面对海量的数据和负责的业务逻辑，开发人员要编写MR对数据进行统计分析难度极大，所以就产生了Hive这个数仓工具。Hive可以帮助开发人员将SQL语句转化为MapReduce在yarn上跑。

Key-Key·2024-01-15 12:04

大数据开发之Hive（详细版，最后有实战训练）