E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
数仓电商项目
快速搭建springcloud项目
springcloud项目从0开始的搭建过程以及其中需要注意的问题,不涉及具体的理论内容以及微服务项目中的五大问题和具体解决办法的插件或手段.五大问题的具体解决办法在本合集中分别进行逐一讲解本文模拟了
电商项目
中的订单微服务模块和商品微服务模块
这么大的太阳你热不热
·
2023-04-06 17:35
springcloud
spring
cloud
数据库
java
新一代
数仓
架构-Snowflake弹性
数仓
作业:张剑本文是基于国外论文snowflake
数仓
(TheSnowflakeElasticDataWarehouse)翻译而成,翻译中有错误地方,还望海涵。曾经在过往记忆微信公众号发布过。
一弦思华年
·
2023-04-06 16:00
数据仓库
大数据
数据仓库
olap
云原生
瞰见 | 初创1个月就融到3亿美金,ClickHouse 你凭什么?
-北岛或许是受巴菲特参投的纳斯达克热门公司-云上
数仓
Snowflake的催化,开源数据库ClickHouse社区也终于在2021年8月注册成立了商业化公司,紧接着不到2个月的时间内,以惊人的速度完成了A
OpenTEKr
·
2023-04-06 15:35
狄安瞰源
数据仓库
数据库
database
Github标星35K+超火的Spring Boot实战项目,附超全教程文档
今天给大家推荐一个Github上面超火的SpringBoot实战
电商项目
mall,目前在Github上面已经有35k+Star。该项目拥有全套教程,对学习者特别友好。全套教程的获取方式已经放在文末!
互联网Java进阶架构
·
2023-04-06 14:27
正确设计Hologres实时
数仓
,性能提升10倍+
本文将会讲述阿里巴巴零售通数据平台如何优化Hologres实时
数仓
,达到性能提升10倍+的效果,完美支撑双11营销活动、实时数据大屏等核心场景。
阿里云Hologres
·
2023-04-06 14:47
ETL中遇到的小问题:Invalid column type
时间:2019-08-23背景:业务需求,需将Mysql源库中一表A同步到
数仓
oracle中,工具依然选用pentahokettle8.2。问题:没想到被遇到的一个小问题耽误了许久。步入正题。
小糊涂神52vol
·
2023-04-06 12:38
# 在线教育项目——
数仓
实战(三)之访问咨询主题看板(全量流程)
文章目录1.需求分析2.业务数据准备3.建模分析4.建模操作4.1数据存储格式和压缩方案4.2全量和增量4.3Hive分区4.4建模操作5.Hive的基础优化(目前无需更改)5.1HDFS的副本数量5.2yarn的基础配置5.3MapReduce基础配置5.4Hive的基础配置5.5Hive压缩的配置5.6Hive的执行引擎切换6.数据采集7.数据清洗转换8.数据分析9.数据导出1.需求分析将调研
爱吃薄荷糖的喵喵
·
2023-04-06 12:10
Hadoop
数仓
数据库
大数据
hadoop
hive
ETL工具与调度工具的区别(一)
简而概之就是,将数据从数据源进行抽取、进行清洗转换、最后加载到
数仓
模型中,在数据仓库中起到了承前启后的作用。常见的ETL工具有:kettle、RestCloud、informat
Moia Control
·
2023-04-06 10:52
数据仓库
hive
etl工程师
数据仓库模型说明
1.
数仓
概述数据仓库的建设是一个过程,而不是一个项目。在这个过程中我们需要形成自己的规范,以方便管理和维护。
高广超
·
2023-04-06 09:02
【袋鼠云】标签系统
文章目录客户画像标签建设的演进1.业务单元独立作战2.离线
数仓
统一建设3.实时数据多维补充4.标签产品化管理5.数据智能化管理标签体系设计与加工一、标签体系设计1.数据梳理2.基于OLP模型体系化梳理标签
七号大米
·
2023-04-06 03:49
项目实战
数据库
数据仓库
数据挖掘
订单超时未支付自动关闭实现方案
一.场景生活中,12306购票、京东、淘宝购物下单,都会遇到请在30分钟内进行支付的场景,互联网
电商项目
的订单系统都需要解决订单超时问题。
青年人责任
·
2023-04-06 03:13
java
intellij
idea
大数据架构师须知—基础知识点
大数据架构师须知—基础知识点结合BI,Reporting,Ad-hoc,ETL
数仓
分析等场景,从体系化的角度来分析OLAP系统的核心技术点,分为谈存储,谈计算,谈优化器,谈趋势4个章节。
kalvin_y_liu
·
2023-04-06 03:38
数据科学
爱奇艺的
数仓
架构
首先介绍一下爱奇艺公司整体的业务情况以及数据仓库1.0的设计和出现的问题,针对
数仓
1.0的缺陷,是如何演进到
数仓
2.0架构以及
数仓
2.0需要解决的问题和需要达成的目标。
javastart
·
2023-04-06 01:31
数据仓库
数据仓库
数据库
数据挖掘
如何设置python2,python3,并添加环境变量
公众号后续将会持续更新clickhouse,sparkstreaming,flink,
数仓
建模,用户画像,实时计算,推荐系统,实时
数仓
等内容,感兴趣的朋友可以关注不定期会有朋友的面经分享1、添加python2
大数据私房菜
·
2023-04-05 23:14
Python
数仓
Hive和分布式计算引擎Spark多整合方式实战和调优方向
优质资源分享学习路线指引(点击解锁)知识定位人群定位Python实战微信订餐小程序进阶级本课程是pythonflask+微信小程序的完美结合,从项目搭建到腾讯云部署上线,打造一个全栈订餐系统。Python量化交易实战入门级手把手带你打造一个易扩展、更安全、效率更高的量化交易系统@目录*概述SparkonHiveHiveonSpark概述编译Spark源码配置调优思路编程方向分组聚合优化join优化
qq_43479892
·
2023-04-05 22:23
python
hive
spark
python
计算机
万字详解大数据架构新概念
有人说数据湖是下一代大数据平台,各大云厂商也在纷纷的提出自己的数据湖解决方案,一些云
数仓
产品也增加了和数据湖联动的特性。但是数据仓库和数据湖的区别到底是什么,是技术路线之争?是数据管理方式之争?
开源Linux
·
2023-04-05 17:20
大数据
架构
数据湖:网易严选的数据湖实践
1.数据湖vs数据仓库2.数据湖的优势五、落地实践六、数据集成七、
数仓
建设八、特征工程九、未来规划一、业务背景网易严选在2017年中开始搭建自己的大数据体系,如今该体系已经支撑了严选的商业分析、搜索、推荐
Freedom3568
·
2023-04-05 17:09
数据中台
数据仓库
数据仓库
数据挖掘
数据中台
数据湖
架构
hive hsql 漏斗模型_191_
数仓
项目_dwd层_Hive读取索引文件问题
该项目以国内电商巨头实际业务应用场景为依托,紧跟大数据主流需求,对电商
数仓
的常见实战指标以及难点实战指标进行了详尽讲解,让你迅速成长,获取最前沿的技术经验。
weixin_39746794
·
2023-04-05 14:31
hive
hsql
漏斗模型
Flink-Flink新闻
数仓
实时项目(新闻指标计算、Flink知识的练手小项目)
新闻实时项目1项目需求分析和架构设计背景某新闻网站每天会曝光很多新闻话题,当用户浏览网站的新闻时会产生大量的访问日志。为了更好的分析用户行为,并对舆情进行监控,现在需要实现一个新闻热搜实时分析系统。需求(1)采集搜狗新闻网站用户浏览日志信息。(2)统计分析搜狗排名最高的前10名新闻话题。分组聚合后求前10(3)统计分析每天哪些时段用户浏览新闻量最高。分组聚合后求max(4)统计分析每天曝光搜狗新闻
:Concerto
·
2023-04-05 13:07
flink
数仓项目
大数据
大数据项目实战之数据仓库:
数仓
数据同步策略——第3章
数仓
环境准备
文章目录第3章
数仓
环境准备3.1Hive安装部署3.2Hive元数据配置到MySQL3.2.1拷贝驱动3.2.2配置Metastore到MySQL3.3启动Hive3.3.1初始化元数据库3.3.2启动
yiluohan0307
·
2023-04-05 10:10
大数据项目实战之数据仓库
大数据
数据仓库
hive
【Vue+DRF生鲜电商】25.商品添加购物车接口功能,Vue和购物车联调
专题:Vue+DjangoRESTframework前后端分离生鲜电商Vue+DjangoRESTframework打造前后端分离的生鲜
电商项目
(慕课网视频)。
吾星喵
·
2023-04-05 06:36
2.Hadoop环境配置之虚拟机安装配置
1.VMware1.1VMware安装一台电脑本身是可以装多个操作系统的,但是做不到多个操作系统切换自如,所以我们需要一款软件帮助我们达到这个目的,不然
数仓
项目搭建不起来。
Mr李小四
·
2023-04-04 22:43
Hadoop大数据技术
hadoop
windows
大数据
Databend 开源周报 第 79 期
Databend是一款强大的云
数仓
。专为弹性和高效设计。自由且开源。即刻体验云服务:https://app.databend.com。
Databend
·
2023-04-04 21:10
开源
java
服务器
Databend 开源周报第 80 期
Databend是一款现代云
数仓
。专为弹性和高效设计,为您的大规模分析需求保驾护航。自由且开源。即刻体验云服务:https://app.databend.com。
Databend
·
2023-04-04 21:10
数据库
Databend 开源周报 第 82 期
Databend是一款现代云
数仓
。专为弹性和高效设计,为您的大规模分析需求保驾护航。自由且开源。即刻体验云服务:https://app.databend.com。
Databend
·
2023-04-04 21:10
数据库
Databend 开源周报 第 83 期
Databend是一款现代云
数仓
。专为弹性和高效设计,为您的大规模分析需求保驾护航。自由且开源。即刻体验云服务:https://app.databend.com。
Databend
·
2023-04-04 21:10
数据库
Databend 开源周报第 84 期
Databend是一款现代云
数仓
。专为弹性和高效设计,为您的大规模分析需求保驾护航。自由且开源。即刻体验云服务:https://app.databend.com。
Databend
·
2023-04-04 21:10
数据库
Databend 开源周报 第 85 期
Databend是一款现代云
数仓
。专为弹性和高效设计,为您的大规模分析需求保驾护航。自由且开源。即刻体验云服务:https://app.databend.com。
Databend
·
2023-04-04 21:10
数据库
Databend 开源周报第 81 期
Databend是一款现代云
数仓
。专为弹性和高效设计,为您的大规模分析需求保驾护航。自由且开源。即刻体验云服务:https://app.databend.com。
Databend
·
2023-04-04 21:40
数据库
Databend 开源周报 第 75 期
Databend是一款强大的云
数仓
。专为弹性和高效设计。自由且开源。即刻体验云服务:https://app.databend.com。
Databend
·
2023-04-04 21:39
开源
Databend 开源周报第 76 期
英文版移步:https://databend.rs/blog/2023-01-11-databend-weeklyDatabend是一款强大的云
数仓
。专为弹性和高效设计。自由且开源。
Databend
·
2023-04-04 21:39
开源
rust
开发语言
Databend 开源周报 第 77 期
Databend是一款强大的云
数仓
。专为弹性和高效设计。自由且开源。即刻体验云服务:https://app.databend.com。
Databend
·
2023-04-04 21:39
开源
github
数据库
Databend 开源周报 第 78 期
Databend是一款强大的云
数仓
。专为弹性和高效设计。自由且开源。即刻体验云服务:https://app.databend.com。
Databend
·
2023-04-04 21:39
开源
数据库
大数据
Databend 开源周报 #68
Databend是一款强大的云
数仓
。专为弹性和高效设计,自由且开源。即刻体验云服务:https://app.databend.com。
Databend
·
2023-04-04 21:09
weekly
Databend 开源周报 #70
Databend是一款强大的云
数仓
。专为弹性和高效设计,自由且开源。即刻体验云服务:https://app.databend.com。
Databend
·
2023-04-04 21:09
mysql
数据库
java
Databend 开源周报 #72
Databend是一款强大的云
数仓
。专为弹性和高效设计,自由且开源。即刻体验云服务:https://app.databend.com。
Databend
·
2023-04-04 21:09
大数据
基于 Databend 和腾讯云 COS 打造新型云
数仓
本篇文章向大家演示如何使用Databend基于腾讯云COS构建新式
数仓
及其计算能力。如果你也在找一个低成本、高性能、支持弹性的
数仓
,Databend可以为大家提供一个基于对象存储的云原生
数仓
解决方案。
Databend
·
2023-04-04 21:38
数据仓库
Databend 开源周报 #66
Databend是一款强大的云
数仓
。专为弹性和高效设计,自由且开源。即刻体验云服务:https://app.databend.com。
Databend
·
2023-04-04 21:38
开源
Databend 开源周报 #67
Databend是一款强大的云
数仓
。专为弹性和高效设计,自由且开源。即刻体验云服务:https://app.databend.com。
Databend
·
2023-04-04 21:38
rust
开发语言
后端
Databend 社区积极拥抱 Rust 生态(202111回顾)
Databend旨在成为一个开源、弹性、可靠的无服务器
数仓
,查询快如闪电,与弹性、简单、低成本的云服务有机结合。数据云的构建,从未如此简单!
Databend
·
2023-04-04 21:08
Databend
Databend 设计概述 | 白皮书
Databend是一个开源的、完全面向云架构的新式
数仓
,它提供快速的弹性扩展能力,并结合云的弹性、简单性和低成本,使DataCloud构建变得更加容易。
Databend
·
2023-04-04 21:08
Databend
Databend 开源周报第 87 期
Databend是一款现代云
数仓
。专为弹性和高效设计,为您的大规模分析需求保驾护航。自由且开源。即刻体验云服务:https://app.databend.com。
Databend
·
2023-04-04 21:31
大数据
dataworks
1数据集成数据同步,抽数,导数离线
数仓
,离线同步1.数据源从哪里来,到哪里去可以是数据库,也可以是别的,比如FTP,ES等2.表来源表目标表3.字段映射关系4.同步方式/同步逻辑比如从mysql到hive
懒得幽默
·
2023-04-04 18:43
hive
【Flink】(二)详解 Flink 运行架构
如果你也对数据中台、数据建模、数据分析以及Flink/Spark/Hadoop/
数仓
开发感兴趣,可以关注我的动态https://blog.csdn.net/BeiisBei,让我们一起挖掘
云 祁
·
2023-04-04 17:46
#
----
Flink
flink
大数据
ML:阿里云计算平台之搜索推荐演讲分享《多场景智能推荐助力业务增长》、《阿里云智能推荐应用实践:PAI-EasyRec Framework》、《新一代
数仓
架构漫谈》
ML:阿里云计算平台之搜索推荐演讲分享《多场景智能推荐助力业务增长》、《阿里云智能推荐应用实践:PAI-EasyRecFramework》、《新一代
数仓
架构漫谈》目录《多场景智能推荐助力业务增长》开箱即用
一个处女座的程序猿
·
2023-04-04 16:39
ML
AI
阿里云
云计算
大数据
Java中几种分布式锁的实现
db_lock代码缺陷2、redis实现锁实现原理实现步骤实现代码3、zookeeper实现锁引入zookeeper依赖客户端锁实现的思路四、总结一、前言分布式锁在实际中应用非常之广泛,对于互联网项目
电商项目
小刘同学要加油呀
·
2023-04-04 15:33
Java
java
分布式锁
zookeeper
redis
实时
数仓
建设思考与方案记录
前言随着我司业务飞速增长,实时
数仓
的建设已经提上了日程。虽然还没有正式开始实施,但是汲取前人的经验,做好万全的准备总是必要的。
浪尖聊大数据-浪尖
·
2023-04-04 12:40
大数据
java
数据库
分布式
hadoop
实时
数仓
|架构设计与技术选型
下面我就来讲解下我做的项目(实时
数仓
)是如何进行选型的。一、技术选型当我们在选择技术时需要根据客户的需求来进行选择。
大数据老哥
·
2023-04-04 12:06
大数据项目
#
实时数仓
Flink
实时数仓
架构
阿里云实时
数仓
搭建与组件选型
一、实时
数仓
分层规范1.1分层需求分析建设实时
数仓
的目的,主要是增加数据计算的复用性。每次新增加统计需求时,不至于从原始数据进行计算,而是从半成品继续加工而成。
任错错
·
2023-04-04 12:01
Flink
数据仓库
实时
数仓
到底是什么呢?与传统
数仓
有什么区别?
数仓
,即存放数据的仓库,包括全量数据、历史数据。
log_lnA
·
2023-04-04 12:50
大数据
hive
hadoop
上一页
35
36
37
38
39
40
41
42
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他