数仓命名规范

一键实现 Oracle 数据整库同步至 Apache Doris

在实时数据仓库建设或迁移的过程中，用户必须考虑如何高效便捷将关系数据库数据同步到实时数仓中来，ApacheDoris用户也面临这样的挑战。
·2023-08-23 12:48

“数仓”-MPP与 MR的区别

5G场景网络数据延时的URLLCMPP:多数据快速，单点并行查询秒级。MR:分布式任务查询，海量数据小时级。mpp计算引擎--simd(单指令多源数)--ssvm(动态编译)--smp(算子并行)--llmp()一、大数据处理框架主流的大数据处理框架包括以下三类五种：1、仅批处理框架：ApacheHadoop2、仅流处理框架：ApacheStorm、ApacheSamza3、混合框架：Apache
西山创罪梦不觉·2023-08-23 11:05

无法形容的一天

#今日纪实1.上午梳理了一下数仓的流程，只是了解了个大概，剩下的时间不是在走神就是在漫无目的地浏览网页2.下午，宿舍打扫卫生，也算是今天比较大的收获了，毕竟看着干净整洁的宿舍，谁会不开心呢？
易younger·2023-08-23 09:05

【实践案例分享】Apache Doris在美团外卖数仓中的应用实践

本文将介绍Doris在美团外卖数仓的实践。序言本文侧重于以Doris引擎为“发动机”的数仓生产架构的改进与思考。
木东居士·2023-08-23 09:34

Databend 开源周报第 107 期

Databend是一款现代云数仓。专为弹性和高效设计，为您的大规模分析需求保驾护航。自由且开源。即刻体验云服务：https://app.databend.cn。
Databend·2023-08-23 08:01

美团增量数仓建设新进展

本篇内容主要分为四个部分：1.建设背景2.核心能力设计与优化3.业务实践4.未来展望Tips：点击「阅读原文」免费领取5000CU*小时Flink云资源01美团增量数仓的建设背景美团数仓架构的诞生是基于这样的技术假设
Apache Flink·2023-08-23 07:34

基于阿里云 Flink+Hologres 搭建实时数仓

摘要：本文作者阿里云Hologres高级研发工程师张高迪&阿里云Flink技术内容工程师张英男，本篇内容将为您介绍如何通过实时计算Flink版和实时数仓Hologres搭建实时数仓。
Apache Flink·2023-08-23 07:33

Apache Paimon 实时数据湖 Streaming Lakehouse 的存储底座

内容主要分为四个部分：流计算邂逅数据湖PaimonCDC实时入湖Paimon不止CDC入湖总结与生态点击查看原文视频&演讲PPT一、流计算邂逅数据湖流计算1.0实时预处理流计算1.0架构截止到现在也是非常主流的实时数仓中的一个实时预处理的功能
Apache Flink·2023-08-23 07:58

CDH集群离线配置python3环境，并安装pyhive、impyla、pyspark

背景：项目需要对数仓千万级数据进行分析、算法建模。
yunpeng.zhou·2023-08-23 06:55

1004 CSS基础选择器

标签选择去标签名多个标签：标签1,标签22.类选择器.类名class="red"样式点定义，结构类调用，一个或多个，开发最常用不能用标签名，用英文，不要用数字，长名字用中间线隔开star-string命名规范
mingming00·2023-08-23 04:04

数仓第5篇:『数据魔法』ETL

目录导读：一、数据同步之道01.sqoop02.DataX03.kettle04.canal05.StreamSets二、ETL之技术栈2.1工具2.2语言三、ETL加载策略01.增量02.全量03.拉链四、结束语导读：ETL，是英文Extract-Transform-Load的缩写，用来描述将数据从来源端经过抽取(extract)、转换(transform)、加载(load)至目的端的过程。ET
浊酒南街·2023-08-22 23:16

Flink + Iceberg 的数仓增量生产 ETL 以及在美团的落地实践

一、美团数仓架构图如上图，是美团最新的数仓架构图。
KK架构·2023-08-22 23:46

MySQL—数仓ETL开发中常用到的日期函数

在数据仓库ETL开发中，当以增量的方式进行数据同步时，会将数据表中的时间字段作为增量字段获取增量数据。对于MySQL数据库来说，总结了以下日期表示以及需要注意的问题。一、需要注意的问题：查看MySQL数据库的时区，以下MySQL的时间是utc时间，与北京时间相差8个小时，所以在进行ETL开发时，要将表字段转换成北京时间（在utc时间基础上加8个小时即为北京时间）二、utc时间转为北京时间的函数：c
一克拉的小蚂蚁·2023-08-22 23:16

零代码ETL+聚水潭，实现销售出库单同步到数仓

一、聚水潭单据同步需求聚水潭作为领先的电商ERP有很多快销、零售企业使用，同时作为以订单为核心的电商ERP系统企业还需要在本地配合其他业务系统一起使用完全整个业务的协同和财务结算，作为中大型企业随着业务发展企业会在聚水潭中沉淀大量的业务数据，这些数据需要接取到本地业务系统如金碟云星空、用友NC中进行发货、生成凭证、统计分析等需求，如果这些数据没有同步将会影响企业的业务运行，阻碍企业的业务创新能力。
苛子·2023-08-22 23:15

零代码ETL+聚水潭，实现销售出库单同步到数仓

一、聚水潭单据同步需求聚水潭作为领先的电商ERP有很多快销、零售企业使用，同时作为以订单为核心的电商ERP系统企业还需要在本地配合其他业务系统一起使用完全整个业务的协同和财务结算，作为中大型企业随着业务发展企业会在聚水潭中沉淀大量的业务数据，这些数据需要接取到本地业务系统如金碟云星空、用友NC中进行发货、生成凭证、统计分析等需求，如果这些数据没有同步将会影响企业的业务运行，阻碍企业的业务创新能力。
苛子·2023-08-22 23:13

Pytest常用操作

2.pytest执行操作在这里介绍主函数执行法在pytest文件夹中新创建一个文件（注意命名规范也要满足）：improt
weixin_48826751·2023-08-22 18:23

测试框架pytest教程（6）钩子函数hook开发pytest插件

pytest的hook是基于Python的插件系统实现的，使用特定的命名规范和装饰器来定义钩子函数。你可以在pytest插件或conftest文件中定义这些钩子函数。
东方不败之鸭梨的测试笔记·2023-08-22 16:00

人群圈选效率提升 30 倍，云积天赫基于 Apache Doris 构建统一数仓的实践

ApacheDoris在部分业务中使用，并在使用过程中逐渐发掘出ApacheDoris更多强大之处以及优势，最终决定全面应用ApacheDoris，基于ApacheDoris来构建云积互动企业级实时离线统一数仓
·2023-08-22 15:47

IP地址(IPV4,IPV6) 域名

目录1IP地址1.1IPV41.2NAT1.3IPV62域名2.1根服务器2.2DNS2.3命名规范1IP地址对于连入互联网的每一台设备(电脑,手机,手表,汽车...)都要赋予其一个唯一的识别标识,即IP
太阳之神aboluo·2023-08-22 12:36

云上 Index：看「简墨」如何为云原生打造全新索引

拓数派首款数据计算引擎PieCloudDBDatabase是一款全新的云原生虚拟数仓。
·2023-08-22 11:01

性能全面飙升！StarRocks 在贝壳找房的极速统一实践

随着数据和业务规模的增长，传统数仓的分析能力面临很大的挑战，贝壳需要引入新兴的数据湖技术来支撑业务的发展。
·2023-08-22 10:45

Apache Paimon 实时数据湖 Streaming Lakehouse 的存储底座

内容主要分为四个部分：流计算邂逅数据湖PaimonCDC实时入湖Paimon不止CDC入湖总结与生态点击查看原文视频&演讲PPT一、流计算邂逅数据湖流计算1.0实时预处理流计算1.0架构截止到现在也是非常主流的实时数仓中的一个实时预处理的功能
·2023-08-22 10:14

Java学习笔记——（20）标识符命名规则和规范

方法和类等命名时使用的字符序列成为标识符凡是自己可以起名字的地方都叫标识符标识符的命名规则（必须遵守）由26个英文字母大小写，0-9，_或$组成数字不可以开头不可以使用关键字和保留字Java中严格区分大小写，长度无限制标识符不能包含空格标识符命的命名规范
小丶象·2023-08-22 01:18

python 编程规范有哪些？

Python编程规范主要包括代码布局、命名规范、注释规范、函数编写规范等多个方面，下面给出一些常见的编程规范及其示例代码。
2301_77342543·2023-08-22 00:59

大数据背景和概念

现在市场回归理性后：普通岗：大数据/数仓开发，实际上除超一线城市之外，尚存很多大型企业转型期信息化、互联网（物联网IOT）还在发展，数据还在爆发式增长，仍大有可为。精英岗/管理岗：大数
2301_77342543·2023-08-22 00:29

【数仓建设系列之二】数仓基本概念介绍

随着移动互联网的快速发展，数据的生产也成几何式的增长，传统意义上的数据库已经无法满足日益增长的需求，建设一个好的数仓，不仅可以为企业的决策和发展带来具有价值的指导意义，同时也能够将企业产生的所有数据充分利用起来
码猿小站·2023-08-21 23:32

git 怎么给自己的分支命名_Git分支管理及命名规范

Git分支管理及命名规范发布时间：2018-05-1711:24,浏览次数：2056,标签：Git一、分支分类Git主分支(保留分支)：master、releaseGit辅助分支(临时分支)：dev-*
温卡龙·2023-08-21 16:47

腾讯云对象存储联合DataBend云数仓打通数据湖和数据仓库

随着数字化进程不断深入，数据呈大规模、多样性的爆发式增长。为满足更多样、更复杂的业务数据处理分析的诉求，湖仓一体应运而生。在Gartner发布的《HypeCycleforDataManagement2021》中，湖仓一体（Lakehouse）首次被纳入到技术成熟度曲线中。伴随多场景的成功落地，腾讯云对象存储打造基于云技术的湖仓一体解决方案。将数据仓库构建在数据湖上，打通数据仓库和数据湖两套体系，构
·2023-08-21 15:18

什么是BEM命名规范？为什么要使用BEM命名规范？

聚沙成塔·每天进步一点点⭐专栏简介⭐BEM命名规范⭐为什么使用BEM命名规范？
几何心凉·2023-08-21 09:20

常见编程命名规范

匈牙利命名法：变量类型缩写+大驼峰，如intiMyAge，Windows编程常用驼峰命名法(camelCase，小驼峰)：面向对象语言(如Java、C#)变量、方法常用帕斯卡命名法(CamelCase，大驼峰)：常被面向对象语言(如Java、C#)类常用下划线命名法(under_score_case)：C、Python变量常用短横线命名法(kebab-case)：Web前端语言(如CSS)变量常用
stevobm·2023-08-20 23:14

尚硅谷大数据项目《在线教育之离线数仓》笔记002

视频地址：尚硅谷大数据项目《在线教育之离线数仓》_哔哩哔哩_bilibili目录P025P026P027P028P029P030P031P032P033P034P035P036P037P038P025在
upward337·2023-08-20 16:31

第一周晨考自测（1.0）

第一天：1.变量名的命名规则和规范变量名命名规则：由字母（大小写），数字，下划线（_），美元符号（$）组成不能以数字开头不能使用关键字和保留字变量名命名规范：当有多个字母组成时，使用驼峰写法（分为两种：
mez_Blog·2023-08-20 16:12

python命名规范

在python开发过程中需要注意的命名规范，有需要的小伙伴可以查看下。1.模块命名（1）模块推荐使用小写命名。（2）除非有很多字母，尽量不要用下划线。
1024猿·2023-08-20 14:04

Java单元测试实践-理论-＞实践-＞Sonar集成

本文说明了单元测试与集成测试的区别，并从单元测试命名规范，编写(Given-When-Then)，单元测试工具（mock工具及断言工具），以及maven插件实现单元测试和集成测试的分开执行方面进行了实践
IccBoY·2023-08-20 12:35

Lua 语言笔记（一）

1.变量命名规范弱类型语言(动态类型语言)，定义变量的时候，不需要类型修饰而且，变量类型可以随时改变每行代码结束的时候，要不要分号都可以变量名由数字，字母下划线组成，不能以数字开头，也不能是保留字,而且不可以使用特殊字符变量名区分大小写
HuntFalcon·2023-08-20 06:51

前端基础开发文档

⽂件命名规范⽂件名不能含有空格⽂件名建议只使⽤⼩写字⺟，不使⽤⼤写字⺟。（但⽐如说像github的说明类⽂件，README，则应该全部使⽤⼤写
沈神奇·2023-08-20 00:52

MyBatis快速入门

MyBatis框架支持3.2.1老项目添加MyBatis3.2.2新项目去添加MyBatis3.3设置MyBatis配置信息3.3.1设置数据库连接的相关信息3.3.2设置MyBatisxml保存路径和XML命名规范
你不应该热爱·2023-08-20 00:21

任务调度之时间轮实现 | 京东云技术团队

前言在生活中太阳的东升西落，鸟类的南飞北归，四级的轮换，每天的上下班，海水的潮汐，每月的房租车贷等等，如果用程序员的视角看，这就是一个个的定时任务，在日常的开发工作中也有很多的定时任务场景：数仓系统凌晨进行的数据同步订单
·2023-08-19 15:17

数仓分层架构

1分层实现数据仓库一般分为三层，自上而下分别为数据贴源层（ODS，OperationDataStore）、数据公共层（CDM，CommonDataModel）和数据应用层（ADS，ApplicationDataService）。1.1ODS层（数据贴源层）贴源层，与业务库保持一致，不做任何处理1.2CDM层（数据公共层）数据公共层CDM（CommonDataModel，又称通用数据模型层），包括D
三石先生已存在·2023-08-19 12:38

DTCC 2023即将启幕 明天见！

、ChinaUnix两大技术社区主办的第14届中国数据库技术大会（DTCC2023）将在北京举行作为国内云原生数据仓库代表厂商，酷克数据受邀亮相DTCC2023，与广大数据库领域从业人士共同分享云原生数仓发展趋势
HashData酷克数据·2023-08-19 09:52

数据库变革：HashData云数仓实现事务级实时性

酷克数据资深解决方案架构师陈义贤在“数据库内核•技术创新”专场发表题为“分布式数仓的TP能力探索—HashDataUnionStore”的演讲，介绍HashData以Logisdatabase的思路在分布式数据仓库提升
HashData酷克数据·2023-08-19 08:21

【零基础学会uniapp系列】7.3 组件的编写规范

封装组件教程组件文件的命名规范：参考7.2的内容，以能够实现easycom为标准，来进行命名。
落花生花·2023-08-19 07:40

数仓建模—OneID

简介：这个和上面的更新问题有点像，上面更新问题我们可以保证一个自然人的OneID不发生变化，但是选择问题会导致发生变化，但是这个问题是图计算中无法避免的，我们举个例子，假设我们有用户的两个ID(A_ID,C_ID)，但是这两个ID在当前是没有办法打通的，所以我们就会为这个两个ID生成两个OneID,也就是(A_OneID,B_OneID)，所以这个时候我们知道因为IDMapping不上，所以我们认
大数据00·2023-08-19 05:45

1.8万字详解实时数仓建设方案及大厂案例

一、实时数仓建设背景关注公号：数元斋1.实时需求日趋迫切目前各大公司的产品需求和内部决策对于数据实时性的要求越来越迫切，需要实时数仓的能力来赋能。
少晗·2023-08-19 03:39

java包名命名规范

Java包名命名规则是在Java语言编程中具有一定重要性的一项规则，用于划分程序命名空间。它包括：1、命名空间必须以字母或数字开头（不能以下划线或美元符号开头）；2、命名空间只能包含字母、数字和下划线（不能包含空格或特殊字符）；3、所有的英文字母都必须是小写；4、各个单词之间用.来进行分割；5、每个命名空间的长度必须小于255个字符；6、包名应该尽量提供有意义的结构，避免出现乱码和乱七八糟的结构；
冰阔落好喝Wow·2023-08-18 22:44

Java的命名规范

Java的命名规范:一、包命名包名命名，统一使用小写字母。包名名的路径建议符合所有开发的系统模块的定义，以便看了包名就明白是哪个模块，从而直接到对应包里找相应的实现。
冰阔落好喝Wow·2023-08-18 22:44

数据库变革：HashData云数仓实现事务级实时性

酷克数据资深解决方案架构师陈义贤在“数据库内核•技术创新”专场发表题为“分布式数仓的TP能力探索—HashDataUnionStore”的演讲，介绍HashData以Logisdatabase的思路在分布式数据仓库提升
·2023-08-18 20:18

SQL规范

命名规范一般原则保证名字独一无二且不是保留字。SQL的保留字很多，如SELECT,WHE
竹鼠不要中暑·2023-08-18 18:09

CSS命名规范—BEM

背景：最近上了一个前端项目，技术栈是angular+ionic。在听别的前端人员讨论的时候听到一个词叫BEM，当时听不懂，所以才有了这篇文章，适合前端初学者。BEM是什么BEM指的谁块（Block）、元素（Element）、修饰符（modifier），它是Yandex团队提出的一种前端命名方法论，可以让你的CSS类对别的开发人员来说更加有意义，能够一看类名就知道对应的内容。Block指的是被划分的
日知一智·2023-08-18 14:33

基于 BEM 规范实现简单的全局 scss

该文章是在学习小满vue3课程的随堂记录示例均采用，且包含typescript的基础用法前言BEM是css常用的命名规范BEM：block(块)、element(元素)、modify(修饰符)以namespace-block
Unique·Blue·2023-08-18 11:43
上一页 30 31 32 33 34 35 36 37 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他