E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
数仓电商项目
【北漂的第4个月】
不过认识了基础
数仓
的很多小伙伴。整个月都在努力做好一个小兵的角色,治丹变成了我们的leader,其实对未来的大方向还是挺迷茫的。中秋回家烫了个头,见了见柴,李辉,还帮做了个建模比赛。
深海suke
·
2023-03-15 15:43
[实战系列]SelectDB Cloud Flink Connector 最佳实践
而云原生实时
数仓
的出现,让传统的数据仓库无论是成本、灵活性还是开放性等方面都显露出不足。拥有高性能、高可用性、可伸缩性、高安全性等特征的云原生数据库,正在成为企业的首选。
hf200012
·
2023-03-15 07:04
doris
SelectDB
flink
[实战系列]SelectDB Cloud Datax 数据写入最佳实践
新一代云原生实时
数仓
SelectDBCloud作为一款运行于多云之上的云原生实时数据仓库,致力于通过开箱即用的能力为客户带来简单快速的
数仓
体验。
hf200012
·
2023-03-15 07:03
大数据
doris
SelectDB
实时
数仓
入门训练营:Hologres 数据导入/导出实践
简介:《实时
数仓
入门训练营》由阿里云研究员王峰、阿里云高级产品专家刘一鸣等实时计算Flink版和Hologres的多名技术/产品一线专家齐上阵,合力搭建此次训练营的课程体系,精心打磨课程内容,直击当下同学们所遇到的痛点问题
阿里开发者
·
2023-03-15 07:25
SQL
分布式计算
DataWorks
关系型数据库
Java
数据库连接
分布式数据库
数据库
流计算
Spark
[实战系列]SelectDB Cloud Kafka Connect 最佳实践张家锋
新一代云原生实时
数仓
SelectDBCloud作为一款运行于多云之上的云原生实时数据仓库,致力于通过开箱即用的能力为客户带来简单快速的
数仓
体验。
hf200012
·
2023-03-15 07:15
kafka
大数据
分布式
Doris
selectdb
[实战系列]SelectDB Cloud Spark Connector 最佳实践
新一代云原生实时
数仓
SelectDBCloud作为一款运行于多云之上的云原生实时数据仓库,致力于通过开箱即用的能力为客户带来简单快速的
数仓
体验。
hf200012
·
2023-03-15 07:14
大数据
DolphinScheduler2.0版本升级3.0版本方案
1.升级背景因项目需要使用数据质量模块功能,可以为
数仓
提供良好的数据质量监控功能。
缤纷的世界
·
2023-03-15 02:13
数据库
java
sql
apache
大数据
AntDB“超融合+流式实时
数仓
”,谈传统数据库与流计算的有机融合
(一)前言据统计,在信息化时代的今天,人们一天所接触到的信息量,是古人一辈子所能接收到的信息量的总和。当今社会中除了信息量“多”以外,人们对信息处理的“效率”和“速度”的要求也越来越高。譬如,对于很多企业决策者来说,在当前的经济形势下需要尽一切可能降本增效。过去每周看看经营报表的习惯,现在慢慢转变为利用实时可视化的方式来随时分析企业当前的经营状况。数据库作为信息的核心载体,在过去的半个世纪中,基本
亚信安慧AntDB数据库
·
2023-03-15 02:46
国产数据库
AntDB
AISWare
AntDB
数据库
antdb数据库
antdb
大数据
墨天轮发布数据库行业报告,亚信科技AntDB“超融合+流式实时
数仓
”开启新纪元
近日,知名数据库社区墨天轮发布《2022中国数据库行业年度分析报告》,亚信科技全新发布的“超融合+流式实时
数仓
”数据库AntDB入选报告并被业界广泛关注。
亚信安慧AntDB数据库
·
2023-03-15 02:15
国产数据库
AntDB
AISWare
AntDB
数据库
antdb
大数据
科技
开源网页版可拖拽BI工具2-DataEase(介绍与安装使用)
SpringBoot实战
电商项目
mall(50k+star)地址:github.com/macrozh
LuckyTHP
·
2023-03-15 01:33
开源
css
html
漫谈数据治理之二:思想上的体系化
数据的滚雪球效应现代
数仓
体系中,数据数量的高速增长已经不是什么新鲜事了,在大数据的作用被业界所认知到后,几乎所有对于业务有价值的行为,都将以数据的形式被收集。
晓阳的数据小站
·
2023-03-14 15:54
数据开发
浅谈一个新人的大数据之路
第一章,大数据之路浅谈
数仓
&数据集市&数据湖**数据仓库**:英文名称为DataWarehouse,可简写为DW或DWH。数据仓库,是为企业所有级别的决策制定过程,提供所有类型数据支持的战略集合。
CCCCCColdkl
·
2023-03-14 14:57
Apache Hudi简介、与Kudu、Hive、 HBase对比
数据实时处理和实时的数据实时分为处理的实时和数据的实时,即席分析是要求对数据实时的处理,马上要得到对应的结果,Flink、SparkStreaming是用来对实时数据的实时处理,数据要求实时,处理也要迅速,数据不实时,处理也不及时的场景则是我们的
数仓
四月天03
·
2023-03-14 11:47
数据湖(Delta
Hudi
Iceberg)
hive
hadoop
big
data
kettle8.0源码编译
kettle作为一款开源etl工具,在数据仓库领域的应用还算是比较广泛的,做过
数仓
的朋友应该都知道,在做etl开发的时候,对于参数变量的引用是时常出现的场景,对于一些公共的变量,kettle的做法是启动的时候默认读取用户目录下一个
paopaodaxia
·
2023-03-14 01:49
2019-10-17 消息队列的应用场景
,我们利用消息队列之后我们可以在注册之后,我们可以把发送邮件和短信放到消息队列里.这个时候我们该返回什么就接着返回,然后后台在接到这两个消息的时候自己去异步执行.极大的节约了响应时间,和成本.2.解耦
电商项目
中我们使用这个消息队列在订单这块
割肉喂鹰丶
·
2023-03-13 16:47
hcj小兔鲜
电商项目
详解(一)
1项目目录2项目代码准备seo三大标签:titledescriptionkeywordsbase.css/*清除默认样式的代码*//*去除常见标签默认的margin和padding*/body,h1,h2,h3,h4,h5,h6,p,ul,ol,li,dl,dt,dd,input{margin:0;padding:0;}/*內减模式*/*{box-sizing:border-box;}/*设置网页
南方以南_
·
2023-03-12 20:21
前端
web前端
css
html
前端
简单分析Vue路由--前端小白也能开发vue
电商项目
(2)
写完路由部分,四连打击让我深思,一起来学习一下vue的翅膀Vue-Router吧~这是一个基于vue&axios&mock&token&stylus&Cube-UI的
电商项目
demo,面向vue初学者,
大张技术栈
·
2023-03-12 18:51
hive迷案之数据异常
经过:2018-04-02凌晨,
数仓
同学收到数据质量报警,某个字段的唯一性检查没有通过。一般情况下,这种问题是由脏数据引起的。然而这一次排查发现上游数据没有问题,于是
数仓
同学尝试直接
群演_
·
2023-03-12 14:49
【Vue+DRF生鲜电商】32.商品操作后计数更改,热搜榜关键字功能实现
专题:Vue+DjangoRESTframework前后端分离生鲜电商Vue+DjangoRESTframework打造前后端分离的生鲜
电商项目
(慕课网视频)。
吾星喵
·
2023-03-12 10:28
产品课程练习-接手项目
目前
电商项目
虽然处于边缘位置,电商主要是流量和转化生意,我们的其他项目有那么多的流量资源,如果
Amazing_H
·
2023-03-12 04:53
电商数据仓库项目简介
项目简介基于hadoop生态搭建的电商数据仓库,整体功能架构包含数据采集、
数仓
搭建、数据导出、数据可视化等。
如虎添
·
2023-03-12 02:40
flink 学习笔记 — 基于 Flink 实时
数仓
的简单实践
作为一个实时计算的框架,Flink在实时
数仓
中发挥着越来越重要的作用。这里将以简单的案例,实现一个简单的
数仓
数据流。
飞不高的老鸟
·
2023-03-11 22:56
原来Canal也可以做HA?
前言在做实时
数仓
时,数据量往往比较大的,如果使用Canal来监听MySQL的状态当Canal是单节服务时,服务器挂掉是就会造成数据丢失,这时Canal恰好可以配置HA这样就能解决单点问题,但是依赖于zookeeper
大数据老哥
·
2023-03-11 22:26
富家女不是你想象中的样子
公司最近新做了一个
电商项目
,整个团队都是新人。因为大家共用一个办公室,所以见面会打招呼,慢慢就都认识了。年纪都很小,性格都挺好的,大家相处也挺愉快的。
芍药夏日花开
·
2023-03-11 19:17
Hive 拉链表实践
应用场景现假设有如下场景:一个企业拥有5000万会员信息,每天有20万会员资料变更,需要在
数仓
中记录会员表的历史变化以备分析使用,即
000X000
·
2023-03-11 03:00
数据仓库
数据建模
HIVE
hive
big
data
hadoop
Hive
拉链表实践
数仓
项目-拉链表技术精解
数仓
项目-拉链表技术精解一、拉链表的使用场景在数据仓库的模型设计的过程中,通常我们会碰到那种非常大的业务基础信息表,如用户表;假如一个用户表有10亿条记录,50个列,就算使用orc压缩,但张表的存储也会超过
yiluohan0307
·
2023-03-11 03:29
Linux系统
hive
拉链表
缓慢变化维
历史拉链表实战
应用场景现假设有如下场景:一个企业拥有5000万会员信息,每天有20万会员资料变更,需要在
数仓
中记录会员表的历史变化以备分析使用,即每天都要保留一个快照供查询,
大数据技术与数仓
·
2023-03-11 03:53
Hive
数据仓库
数据仓库
详细记录拉链表的实现过程
面试中被问到了,想了会儿思路混乱没答好,还是理解的不够深刻,重新好好理解记录一下~拉链表的用途,主要是用来在
数仓
中记录业务库数据的全部历史信息和当前最新信息,也就是用来实现对渐变维的记录。
atwdy
·
2023-03-11 03:23
数仓相关
拉链表
数据仓库
Flink系列之Flink的应用场景(二)
从接触
数仓
就开始听说ETL,ETL也始终贯传
数仓
仓库,问大家一个问题,ETL在
数仓
领域家喻户晓的原因是因为它简单吗?答案是:恰恰是因为其复杂和重要。那么ETL解决了什么问题呢?我们为什么需要ETL?
当_下
·
2023-03-10 23:26
vue element admin 二次开发_Vue学习路线
学习路线内容1.2019黑马web前端开发全套视频教程基础班+就业班【PC端后台
电商项目
】难度:初中级【强烈推荐】2.Vue全家桶实战从零独立开发企业级电商系统【PC端前台
电商项目
】难度:中级3.VueElement
weixin_39731456
·
2023-03-10 19:41
vue
element
admin
二次开发
vue小米商城源代码
hive整理-按照题目顺序--一
2.3
数仓
分层3.hive底层原理,sql执行过程3.1hive执行顺序3.2.1Hive执行流程3.2.1
wuli玉shell
·
2023-03-10 09:51
Hive
Hive-清洗出最新一个分区中新增和变化的数据
背景:大数据清晰后的大量数据(明细数据)同步到接口或者业务端使用问题描述每次全量同步费时又费力解决方案:将hive
数仓
中最近两个分区的数据取新增和变化后,同步到目标表中(支持更新)即可涉及hive关键字
_猫屎不是咖啡_
·
2023-03-10 09:50
hive
大数据
数据仓库面试题总结
根据尚硅谷电商
数仓
4教程进行总结目录1Hadoop常用压缩方式2HDFS存在大量小文件的问题与处理3flume零点漂移问题4数据冗余的优缺点5同步策略6关系建模与维度建模7维度建模的四个过程8数据分层9LZO
迪奥不及你的美
·
2023-03-10 07:33
hive
hadoop
订单系统搭建
作为一个
电商项目
,最为重要的就是订单了。订单直接关系着收益指标,一个完善的订单系统对后期营销及激励策略是尤为重要的。
blankpaper
·
2023-03-10 03:02
企业
数仓
拉链表制作
一、拉链表定义记录每条信息的生命周期,一旦一条记录的生命周期结束,就重新开始一条新的记录,并把当前日期放入生效开始日期。如果当前信息至今有效,在生效结束日其中填入一个极大值(如:9999-99-99)生效日期=某个日期二、为什么要做拉链表拉链表适合于:数据会发生变化,但是大多数的数据是不变的,即缓慢变化维比如:订单信息从未支付、已支付、未发货、已完成等状态经历了一周,大部分时间是不变化的,如果数据
比格肖
·
2023-03-09 18:05
数仓
建设保姆级教程,离线和实时一网打尽(理论+实战)
本文大纲:因内容较多,带目录的PDF查看是比较方便的:
数仓
建设保姆级教程PDF文档一、
数仓
基本概念1.数据仓库架构我们在谈
数仓
之前,为了让大家有直观的认识,先来谈
数仓
架构,“架构”是什么?
园陌
·
2023-03-09 16:58
100道面试必问,别再绕圈圈了
从某
电商项目
负责人的算起,再到后来的首席架构师,我前前后后面试了至少300多位求职者。不敢说成功入职的每个同事都发展得特别好,但大部分人来说还是很不错的。过硬的技术功底是最起码的考核要求。
java耿
·
2023-03-09 15:29
微信小程序Java
电商项目
开发感悟
本人之前一直是做支付项目,对
电商项目
这一块不是很熟悉,从事该项目后才慢慢的对电商有了粗浅的认知,为了加深自己对项目的认知度编写该篇感悟,在项目进行过程中发现了很多自己的不足包括(沟通、协调、编码等),借此文章改进自己
邹刘名
·
2023-03-09 13:43
强烈推荐一个开源微
电商项目
luban-mall
**前言**`luban-mall`项目脱胎于开源
电商项目
`mall`,并在这一开源醒目的基础上由鲁班学院以**伯乐老师**为代表等进行了项目增强和完善。
少时锦年
·
2023-03-09 08:10
为什么MySQL不推荐使用uuid或者雪花id作为主键?
点击上方蓝色字体,选择“标星公众号”优质文章,第一时间送达关注公众号后台回复pay或mall获取实战项目资料视频点击此链接:一套SpringCloud
电商项目
,拿来即用(附详细教程和文档)!
公众号-老炮说Java
·
2023-03-09 00:16
数据库
mysql
java
大数据
python
50000字,
数仓
建设保姆级教程,离线和实时一网打尽(理论+实战) 上
文档大纲:一、
数仓
基本概念1.数据仓库架构我们在谈
数仓
之前,为了让大家有直观的认识,先来谈
数仓
架构,“架构”是什么?这个问题从来就没有一个准确的答案。
浪尖聊大数据-浪尖
·
2023-03-01 07:14
数据仓库
数据库
scipy
makefile
crm
50000字,
数仓
建设保姆级教程,离线和实时一网打尽(理论+实战) 下
文档大纲:本文上半部分之前已经发过了,传送门:50000字,
数仓
建设保姆级教程,离线和实时一网打尽(理论+实战)上此篇文章是整个文档的下半部分,将接着上半部分从第五章开始。
浪尖聊大数据-浪尖
·
2023-03-01 07:14
数据仓库
scipy
relativelayout
powerdesigner
大数据
【SQL开发实战技巧】系列(二十二):
数仓
报表场景☞ 从分析函数效率一定快吗聊一聊结果集分页和隔行抽样实现方式
系列文章目录【SQL开发实战技巧】系列(一):关于SQL不得不说的那些事【SQL开发实战技巧】系列(二):简单单表查询【SQL开发实战技巧】系列(三):SQL排序的那些事【SQL开发实战技巧】系列(四):从执行计划讨论UNIONALL与空字符串&UNION与OR的使用注意事项【SQL开发实战技巧】系列(五):从执行计划看IN、EXISTS和INNERJOIN效率,我们要分场景不要死记网上结论【SQ
赵延东的一亩三分地
·
2023-03-01 07:06
Oracle开发运维实战
分页查询
随机抽样
分析函数优化
merge调优
数据仓库
【平台
数仓
设计——2023】
平台
数仓
设计——2023前言一、选取大数据平台1、CDH大数据平台2、HDP大数据平台3、CDP大数据平台4、各种云数据中台二、选取调度平台1、DolphinScheduler(海豚调度)2、AzKaban3
BigData_LYT
·
2023-02-27 18:44
数据仓库
自学软件测试没有测试项目实战经验找不到工作,应该怎么办?
这里小编给大家找了一些常用的项目合集,,这些项目涵盖商城项目,app项目,
电商项目
,银行项目,医药项目,金融项目可以说非常之全面。
鱼鱼说测试
·
2023-02-26 08:56
面试
接口自动化测试
软件测试
测试工具
python
压力测试
我从银行
数仓
项目学到了什么
|后台回复“银行
数仓
”,下载论文数据分析当下十分流行,但能把数据分析出花来的,本文算的上先驱。做
数仓
的朋友,年底汇报时,写不出总结,在老板面前无功可表时,学学这。
dbLenis
·
2023-02-26 07:24
数据仓库
数据可视化
jdbc
db2
jwt
银行
数仓
体系发展之路
银行的数字化实践必须建设好
数仓
体系。数据仓库是一个面向主题的、集成的、相对稳定的、反映历史变化的数据集合,用于支持管理决策。
易观
·
2023-02-26 07:54
离线
数仓
04—— 用户行为数据同步
文章目录第1章实时
数仓
同步数据第2章离线
数仓
同步数据2.1用户行为数据同步2.1.1数据通道2.1.2日志消费Flume配置概述2.1.3日志消费Flume配置实操2.1.4日志消费Flume测试2.1.5
就是这个范~
·
2023-02-26 07:54
离线数仓
kafka
hadoop
大数据
维度建模详解
合并2事实表设计2.1明细事实表(dwd)2.1.2案例:2.1.3存储方案2.1.4事实拉链表示例:2.2聚合事实表(dws)2.2.1分类2.2.2案例3数据集市4业务数据案例4.1数据采集4.2
数仓
设计
Fouradam
·
2023-02-26 07:23
数据仓库
【实时
数仓
】介绍、需求分析、统计架构分析和ods层日志行为数据采集
文章目录一电商实时
数仓
介绍1普通实时计算与实时2实时电商
数仓
分层二实时
数仓
需求分析1离线计算与实时计算的比较2应数场景(1)日常统计报表或分析图中需要包含当日部分(2)实时数据大屏监控(3)数据预警或提示
OneTenTwo76
·
2023-02-26 07:23
实时数仓
架构
大数据
数据库
上一页
41
42
43
44
45
46
47
48
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他