数仓命名规范

25种代码坏味道总结

好的代码应该命名规范、可读性强、扩展性强、健壮性......而不好的代码又有哪些典型特征呢？
如来神掌十八式·2023-06-22 23:50

火山引擎DataLeap：如何构建一套完整、易用的数据标准体系

一方面，统一的数据标准可以在复杂的业务场景下，帮助团队对齐数据口径，提升数据在分析、诊断等场景的质量与效率；另一方面，数仓团队与分析师团队也需要沉淀一套敏捷、可控的数据标准指标管理流程，以便后续在指标口径的增加
字节数据平台·2023-06-22 22:34

火山引擎Dataleap治理实践：如何降低数仓建设成本

背景存储与计算资源是数仓建设的基础，也是数仓建设中的重要成本支出。而随着数仓建设规模逐渐扩大、时间跨度逐渐拉长，将不可避免的出现数据表、任务、字段的冗余。
BigDataDigest·2023-06-22 15:57

Java标识符规范

凡是自己可以起名字的地方都叫标识符定义合法标识符规则：由26个英文字母大小写，0-9，_或$组成数字不可以开头不可以使用关键字和保留字，但能包含关键字和保留字java中严格区分大小写，长度无限制标识符不能包含空格java中的名称命名规范
念犯困·2023-06-22 13:08

Flink系列 - 实时数仓之FlinkCDC实现动态分流实战（十）

  自从Flink出了FlinkCDC之后，我们对数据库日志的采集就变得方便了许多了，除去了MaxWell、Cannel、OGG等第三方组件的繁琐配置，目前实现CDC有两种方式：HQL实现和DataStreamAPI实现(推荐)。  想更深入的了解CDC可以通过此链接进行学习：  1.文档->https://ververica.github.io/flink-cdc-connectors/mast
小飞牛_666·2023-06-22 13:08

python语言在命名上是什么敏感的_一文轻松掌握python语言命名规范规则

一文轻松掌握python语言命名规范规则,下划线,变量,开头,方法,多个一文轻松掌握python语言命名规范规则易采站长站，站长之家为您整理了一文轻松掌握python语言命名规范规则的相关内容。
weixin_39820185·2023-06-22 12:20

数仓|Hive性能调优（二）

7、优化SQL处理join数据倾斜(1)空值或无意义值这种情况很常见，比如当事实表是日志类数据时，往往会有一些项没有记录到，我们视情况会将它置为null，或者空字符串、-1等。如果缺失的项很多，在做join时这些空值就会非常集中，拖累进度。因此，若不需要空值数据，就提前写where语句过滤掉。需要保留的话，将空值key用随机方式打散，例如将用户ID为null的记录随机改为负值：selecta.ui
Distantfbc·2023-06-22 08:48

Jenkins持续集成构建平台使用指南

目录目录...21、系统参数...32、授权策略...53、构建管理...63.1构建命名规范...63.1.1任务视图命名...63.1.2任务命名...63.2参数化构建...73.2.1构建参数列表
进击的雷神·2023-06-22 08:45

hadoop shell操作HDFS文件

一.常用的hadoopshell文件路径需要自己有才行，示例中的文件路径是本人自己的文件路径，不是公共文件路径，如何建立自己的数仓，查看本人大数据单机学习环境搭建相关文章1.1查看创建删除#列出当前hdfs
赫加青空·2023-06-22 08:08

[建议收藏] Mysql+ETLCloud CDC+Doris实时数仓同步实战

一、业务需求及其痛点随着数字化转型，企业需要对各种销售及营销数据进行实时同步分析，例如销售订单信息，库存信息，会员信息，设备状态信息等等，这些统计分析信息可以实时同步到Doris中进行分析和统计，Doris作为分析型数据库特别适合于对海量数据的存储和分析，我们只需要把MySQL的表单数据实时同步到Doris即可以实现实时数据分析能力。二、ApacheDoris介绍ApacheDoris是一个现代化
苛子·2023-06-22 06:26

Hive中数据库和表的操作(HSQL)

数仓管理工具Hive可以将HDFS文件中的结构化数据映射成表，利用HSQL对表进行分析，HSQL的底层运行机制，默认是MapReduce计算，也可以替换成Spark、Tez、Flink计算结果存储在HDFS
时下握今·2023-06-22 05:19

大牛书单 | 大数据存储方向好书分享

TEG书知道本期特邀腾讯云数仓数据湖产品负责人堵俊平、腾讯云数据库负责人林晓斌、腾讯TEG云架构平台部数据块中心高级工程师王银虎，腾讯TEG计费平台部账户中心专家工程师潘安群为大家带来大数据方向好书推荐
dbLenis·2023-06-22 03:41

【Hive实战】Hive治理方向探讨（请留意见）

路径实际不存在表级路径应是分区路径的前缀内部表使用非内部表路径外部表使用内部表路径表的属性个数异常按时间维度规整表附录分析语句识别分区数识别分区层级存储相关编解码信息存储路径表属性分区属性附录hive元数据数仓表
顧棟·2023-06-22 03:10

mq主题与分组命名规范

1.TopicTopic是消息发送和订阅的基本单位，一个Topic包含若干条相同主题的消息。Topic命名的规范可以考虑以下几点：Topic命名应该简洁明了，能够表达出该主题的业务含义。Topic命名应该避免使用特殊字符和中文等不易处理的字符，可以使用英文字母、数字和下划线等符号。Topic命名时可以考虑加入一些业务相关的信息，例如:tc_operate_transactionaltc_opera
Forevermark993·2023-06-21 18:36

结构化css

它强调使用一致的命名规范、模块化的代码结构和层次化的样式规则。以下是一些常见的结构化CSS方法和技术：1.命名约定：使用有意义、一致的类名和ID命名约定，以便更好地理解和维护代码。
扁豆肉丝·2023-06-21 17:50

Apache Flink X Apache Doris 构建极速易用的实时数仓架构

本篇内容主要分为四个部分：实时数仓需求和挑战基于ApacheDoris和ApacheFlink构建实时数仓用户案例与最佳实践分享新版本特性点击查看直播回放和演讲PPT一、实时数仓需求和挑战在数据流的角度上
·2023-06-21 14:18

Flink 在 讯飞 AI 营销业务的实时数据分析实践

本篇内容主要分为四个部分：业务简介数仓演进场景实践未来展望点击查看直播回放&演讲PDF一、业务简介构建实时数据分析平台是为了更好的解决业务对更高数据时效性的需求，先简单介绍一下业务流程。
·2023-06-21 14:14

知乎实时数仓架构演进

从智能商业的角度来讲，数据的结果代表了用户的反馈，获取结果的及时性就显得尤为重要，快速的获取数据反馈能够帮助公司更快的做出决策，更好的进行产品迭代，实时数仓在这一过程中起到了不可替代的作用。
·2023-06-21 14:37

知乎实时数仓架构演进

从智能商业的角度来讲，数据的结果代表了用户的反馈，获取结果的及时性就显得尤为重要，快速的获取数据反馈能够帮助公司更快的做出决策，更好的进行产品迭代，实时数仓在这一过程中起到了不可替代的作用。
·2023-06-21 14:37

知乎实时数仓架构演进

从智能商业的角度来讲，数据的结果代表了用户的反馈，获取结果的及时性就显得尤为重要，快速的获取数据反馈能够帮助公司更快的做出决策，更好的进行产品迭代，实时数仓在这一过程中起到了不可替代的作用。
·2023-06-21 14:06

尘锋信息基于 Apache Paimon 的流批一体湖仓实践

尘锋信息基于ApachePaimon构建流批一体湖仓，主要分享：整库入湖，TB级数据近实时入湖基于Flink+Paimon的数仓批ETL建设基于Flink+Paimon的数仓流ETL建设数仓OLAP与数据地图点击进入
·2023-06-21 12:48

数据仓库(11)什么是大数据治理，数据治理的范围是哪些

主数据管理即数据本身的管理，对于数据本身，基于数据仓库，我们做了数据的分层、数据域的划分、基于维度建模的架构、命名规范、
·2023-06-21 12:46

数据仓库(08)数仓事实表和维度表技术

所谓的事实表和维度表技术，指的就是如何和构造一张事实表和维度表，是的事实表和维度表，可以涵盖现在目前的需要和方便后续下游数据应用的开发。事实表，就是一个事实的集合。事实来自业务过程的度量，基本上以数量值表示。事实表行对应一个事实，一个事实对应一个物理可以观察的事件，例如，再零售事件中，销售数量与总额是数据事实，与销售事件不相关的度量不可以放在同一个事实表里面，如员工的工资。事实表是实际发生的度量，
·2023-06-21 12:14

数据仓库(10)数仓拉链表开发实例

拉链表是数据仓库中特别重要的一种方式，它可以保留数据历史变化的过程，这里分享一下拉链表具体的开发过程。维护历史状态，以及最新状态数据的一种表，拉链表根据拉链粒度的不同，实际上相当于快照，只不过做了优化，去除了一部分不变的记录，通过拉链表可以很方便的还原出拉链时点的客户记录。这里用商品价格的变化作为例子，具体的开发过程要按实际的来，不能照搬代码，编程重要的是了解背后的思路和原理，而不是ctrl+c和
·2023-06-21 12:14

数据仓库(03)数仓建模之星型模型与维度建模

  维度建模是一种将数据结构化的逻辑设计方法，也是一种广泛应用的数仓建模方式，它将客观世界划分为度量和上下文。
·2023-06-21 12:12

数据仓库(01)什么是数据仓库，数仓有什么特点

  这里会介绍数据仓库的理解，什么是数据仓库技术，数据仓库的作用。  数据仓库，英文名称为DataWarehouse，可简写为DW或DWH。数据仓库，是为企业所有级别的决策制定过程，提供所有类型数据支持的战略集合。它是单个数据存储，出于分析性报告和决策支持目的而创建。为需要业务智能的企业，提供指导业务流程改进、监视时间、成本、质量以及控制。  我简单的做一个比喻，数据仓库就是可以理解就是一个使用仓
·2023-06-21 12:40

数据仓库(12)数据治理之数仓数据管理实践心得

这边文章聊聊自己对数据治理开发实践的一些思路，就是聊聊怎么开始去做数据治理这件事情。说起数据治理，有时候虽然看了很多文章，看了很多的介绍，了解数据治理的理论，但是实际上需要我们去搞的时候，就会踩很多的坑。这里记一下自己做数据治理的一些思路，做做笔记，也分享给需要的同学。当然，想要做数据治理，想要学习了解，一下数据治理的范围，理论等，最好可以看看别人怎么做的，了解数据治理可以参考：数据仓库(11)什
·2023-06-21 12:00

14:面向对象，基础

定义：1、代码中可以通过class关键字，自定义一个数据类型2、基本语法：class类型名称:类型中的代码3、类型名称命名规范：见名知意、驼峰命名法【一个或多个单词组成，每个单词首字母大写】2、对
寻水的_鱼·2023-06-21 10:39

大数据电商数据仓库系统搭建 附离线安装包

一、数仓理论1、数据仓库概念数据仓库（DataWarehouse），是为企业所有决策制定过程，提供所有系统数据支持的战略集合。
wespten·2023-06-21 09:42

CSS 书写顺序&&BEM命名规范

一、css书写顺序样式属性顺序（按照先后顺序排序）1、定位属性：positiondisplayfloatlefttoprightbottomoverflowclearz-index2、自身属性：widthheightpaddingbordermarginbackground3、文字样式：font-familyfont-sizefont-stylefont-weightfont-varientcol
Tone@·2023-06-21 04:03

电商数仓（用户行为采集平台）数据仓库概念、用户行为日志、业务数据、模拟数据、用户行为数据采集模块、日志采集Flume

1、数据仓库概念数据仓库（DataWarehouse），是为企业制定决策，提供数据支持的。可以帮助企业，改进业务流程、提高产品质量等。数据仓库的输入数据通常包括：业务数据、用户行为数据和爬虫数据等。业务数据：就是各行业在处理事务过程中产生的数据。比如用户在电商网站中登录、下单、支付等过程中，需要和网站后台数据库进行增删改查交互，产生的数据就是业务数据。业务数据通常存储在MySQL、Oracle等数
星光下的赶路人star·2023-06-21 01:17

浅谈数仓的数据治理

绝大数公司建立数仓之初是没有考虑好数据治理怎么做的，因为数据部门刚开始成立，必然要有一些“数据驱动”的成果，而数据治理不能很好的体现这些业绩。
产品经理自我修养·2023-06-20 23:37

详述Hive企业级优化

一、问题背景hive离线数仓开发，一个良好的数据任务，它的运行时长一般是在合理范围内的，当发现报表应用层的指标数据总是产出延迟，排查定位发现是有些任务执行了超10小时这样肯定是不合理的，此时就该想想如何优化数据任务链路
产品经理自我修养·2023-06-20 23:36

Python命名规范（基于PEP8代码规范）

===命名规范===基于pep8命名规范1.模块：使用全小写命名，尽量不用下划线（除非多个单词用下划线分开）eg:importdecoderimporthtml_parser2.类名：使用大驼峰命名法，
My apologies·2023-06-20 16:27

跟我一起总结【数据仓库】之——实施经验

本次的分享涵盖了交付物、数据仓库设计、需求变更及处理方法、问题记录1.交付物：《库表检查记录》《API接口文档》《数据架构图》《数仓资源访问方式》数据库类型、数据库位置，面向的是不会使用数据库的客户。
SunWuKong_Hadoop·2023-06-20 15:28

QT-4-常用类和组件

命名规范（熟悉）1.类名、枚举必须使用大驼峰命名法（帕斯卡命名法），即每个单词的首字母大写，例如ComputerInfo.h；Qt自带的类都是以Q开头的。
不欺暗室__·2023-06-20 13:18

flink 实时数仓构建与开发[记录一些坑]

记-flink实时数仓搭建、开发、维护笔记业务场景描述数仓架构数仓分层odsdimdwddws数仓建模注意项数仓建模开发规范命名规范问题与原因分析1、debezium采集pg表，数据类型问题2、业务库出现大批量刷表数据
cg6·2023-06-20 08:24

数仓架构、模型设计与优化、开发规范

数仓模型设计与开发规范数仓架构数据存储设计开发规范表名定义规范字段命名（字段类型）规范指标一致性规范维度一致性规范离线数仓模型构建的简单见解1、业务数据与架构变化情况说明2、数据分层说明2.1ods层模型说明
cg6·2023-06-20 08:23

Databend 开源周报 第 97 期

Databend是一款现代云数仓。专为弹性和高效设计，为您的大规模分析需求保驾护航。自由且开源。即刻体验云服务：https://app.databend.cn。
Databend·2023-06-20 06:39

Databend 开源周报第 96 期

Databend是一款现代云数仓。专为弹性和高效设计，为您的大规模分析需求保驾护航。自由且开源。即刻体验云服务：https://app.databend.cn。
Databend·2023-06-20 03:16

Databend 开源周报第 93 期

Databend是一款现代云数仓。专为弹性和高效设计，为您的大规模分析需求保驾护航。自由且开源。即刻体验云服务：https://app.databend.cn。
Databend·2023-06-20 03:46

Databend 开源周报 第 83 期

Databend是一款现代云数仓。专为弹性和高效设计，为您的大规模分析需求保驾护航。自由且开源。即刻体验云服务：https://app.databend.com。
Databend·2023-06-20 03:45

Databend 开源周报第 91 期

Databend是一款现代云数仓。专为弹性和高效设计，为您的大规模分析需求保驾护航。自由且开源。即刻体验云服务：https://app.databend.cn。
Databend·2023-06-20 03:45

Databend 开源周报第 92 期

Databend是一款现代云数仓。专为弹性和高效设计，为您的大规模分析需求保驾护航。自由且开源。即刻体验云服务：https://app.databend.cn。
Databend·2023-06-20 03:45

QT入门基础知识

C++图像用户界面应用程序框架QT在1991年由奇趣科技开发QT的优点跨平台,几乎支持所有平台接口简单，容易上手一定程度上简化了内存回收机制有很好的社区氛围可以进行嵌入式开发QWidgetQT注意事项命名规范类名首字母大写
殷培文enen·2023-06-20 03:29

消息推送平台的实时数仓？！flink消费kafka消息入到hive

大家好，3y啊。好些天没更新了，并没有偷懒，只不过一直在安装环境，差点都想放弃了。上一次比较大的更新是做了austin的预览地址，把企业微信的应用和机器人消息各种的消息类型和功能给完善了。上一篇文章也提到了，austin常规的功能已经更新得差不多了，剩下的就是各种细节的完善。不知道大家还记不记得我当时规划austin时，所画出的架构图：现在就剩下austin-datahouse这个模块没有实现了，
·2023-06-19 20:18

每日一道面试题之介绍一下Java Bean并谈谈它的命名规范~

JavaBean介绍：JavaBean是一种用于创建可重用组件的约定，它通常用于在不同的Java应用程序和框架之间传输和保存数据。在用户界面中，JavaBean通常表示用于显示或输入数据的表单控件。在企业应用程序中，JavaBean通常表示业务对象或数据处理对象，它们封装着应用中的数据和业务逻辑。JavaBean将一些数据封装在一起，以提供更加简便的访问，其主要目的是将业务应用程序的业务逻辑与视图
从未止步..·2023-06-19 19:27

新闻速递 | KaiwuDB 亮相 DTCC 2022 线上大会并发表系列主题演讲

本届大会以“数据智能价值创新”为主题，邀请超百位行业专家，重点围绕时序数据库、图数据技术、实时数仓技术与应用实践、云原生数据库、大数据平台与数据安全等内容展开分享和探讨。
·2023-06-19 19:01

实时数仓Hologres 新一代弹性计算组实例技术揭秘

随着实时数仓在业务生产系统的普及，资源弹性、资源隔离等保障业务稳定性方面的技术需求开始变得越来越迫切。
·2023-06-19 17:56

阿里云实时数仓Hologres年度发布，解读数仓新趋势

简介：阿里云实时数仓Hologres年度发布，解读数仓新趋势。
·2023-06-19 17:22
上一页 41 42 43 44 45 46 47 48 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他