E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
数仓(
Databend 开源周报 第 75 期
Databend是一款强大的云
数仓
。专为弹性和高效设计。自由且开源。即刻体验云服务:https://app.databend.com。
Databend
·
2023-04-04 21:39
开源
Databend 开源周报第 76 期
英文版移步:https://databend.rs/blog/2023-01-11-databend-weeklyDatabend是一款强大的云
数仓
。专为弹性和高效设计。自由且开源。
Databend
·
2023-04-04 21:39
开源
rust
开发语言
Databend 开源周报 第 77 期
Databend是一款强大的云
数仓
。专为弹性和高效设计。自由且开源。即刻体验云服务:https://app.databend.com。
Databend
·
2023-04-04 21:39
开源
github
数据库
Databend 开源周报 第 78 期
Databend是一款强大的云
数仓
。专为弹性和高效设计。自由且开源。即刻体验云服务:https://app.databend.com。
Databend
·
2023-04-04 21:39
开源
数据库
大数据
Databend 开源周报 #68
Databend是一款强大的云
数仓
。专为弹性和高效设计,自由且开源。即刻体验云服务:https://app.databend.com。
Databend
·
2023-04-04 21:09
weekly
Databend 开源周报 #70
Databend是一款强大的云
数仓
。专为弹性和高效设计,自由且开源。即刻体验云服务:https://app.databend.com。
Databend
·
2023-04-04 21:09
mysql
数据库
java
Databend 开源周报 #72
Databend是一款强大的云
数仓
。专为弹性和高效设计,自由且开源。即刻体验云服务:https://app.databend.com。
Databend
·
2023-04-04 21:09
大数据
基于 Databend 和腾讯云 COS 打造新型云
数仓
本篇文章向大家演示如何使用Databend基于腾讯云COS构建新式
数仓
及其计算能力。如果你也在找一个低成本、高性能、支持弹性的
数仓
,Databend可以为大家提供一个基于对象存储的云原生
数仓
解决方案。
Databend
·
2023-04-04 21:38
数据仓库
Databend 开源周报 #66
Databend是一款强大的云
数仓
。专为弹性和高效设计,自由且开源。即刻体验云服务:https://app.databend.com。
Databend
·
2023-04-04 21:38
开源
Databend 开源周报 #67
Databend是一款强大的云
数仓
。专为弹性和高效设计,自由且开源。即刻体验云服务:https://app.databend.com。
Databend
·
2023-04-04 21:38
rust
开发语言
后端
Databend 社区积极拥抱 Rust 生态(202111回顾)
Databend旨在成为一个开源、弹性、可靠的无服务器
数仓
,查询快如闪电,与弹性、简单、低成本的云服务有机结合。数据云的构建,从未如此简单!
Databend
·
2023-04-04 21:08
Databend
Databend 设计概述 | 白皮书
Databend是一个开源的、完全面向云架构的新式
数仓
,它提供快速的弹性扩展能力,并结合云的弹性、简单性和低成本,使DataCloud构建变得更加容易。
Databend
·
2023-04-04 21:08
Databend
Databend 开源周报第 87 期
Databend是一款现代云
数仓
。专为弹性和高效设计,为您的大规模分析需求保驾护航。自由且开源。即刻体验云服务:https://app.databend.com。
Databend
·
2023-04-04 21:31
大数据
dataworks
1数据集成数据同步,抽数,导数离线
数仓
,离线同步1.数据源从哪里来,到哪里去可以是数据库,也可以是别的,比如FTP,ES等2.表来源表目标表3.字段映射关系4.同步方式/同步逻辑比如从mysql到hive
懒得幽默
·
2023-04-04 18:43
hive
【Flink】(二)详解 Flink 运行架构
如果你也对数据中台、数据建模、数据分析以及Flink/Spark/Hadoop/
数仓
开发感兴趣,可以关注我的动态https://blog.csdn.net/BeiisBei,让我们一起挖掘
云 祁
·
2023-04-04 17:46
#
----
Flink
flink
大数据
ML:阿里云计算平台之搜索推荐演讲分享《多场景智能推荐助力业务增长》、《阿里云智能推荐应用实践:PAI-EasyRec Framework》、《新一代
数仓
架构漫谈》
ML:阿里云计算平台之搜索推荐演讲分享《多场景智能推荐助力业务增长》、《阿里云智能推荐应用实践:PAI-EasyRecFramework》、《新一代
数仓
架构漫谈》目录《多场景智能推荐助力业务增长》开箱即用
一个处女座的程序猿
·
2023-04-04 16:39
ML
AI
阿里云
云计算
大数据
实时
数仓
建设思考与方案记录
前言随着我司业务飞速增长,实时
数仓
的建设已经提上了日程。虽然还没有正式开始实施,但是汲取前人的经验,做好万全的准备总是必要的。
浪尖聊大数据-浪尖
·
2023-04-04 12:40
大数据
java
数据库
分布式
hadoop
实时
数仓
|架构设计与技术选型
下面我就来讲解下我做的项目(实时
数仓
)是如何进行选型的。一、技术选型当我们在选择技术时需要根据客户的需求来进行选择。
大数据老哥
·
2023-04-04 12:06
大数据项目
#
实时数仓
Flink
实时数仓
架构
阿里云实时
数仓
搭建与组件选型
一、实时
数仓
分层规范1.1分层需求分析建设实时
数仓
的目的,主要是增加数据计算的复用性。每次新增加统计需求时,不至于从原始数据进行计算,而是从半成品继续加工而成。
任错错
·
2023-04-04 12:01
Flink
数据仓库
实时
数仓
到底是什么呢?与传统
数仓
有什么区别?
数仓
,即存放数据的仓库,包括全量数据、历史数据。
log_lnA
·
2023-04-04 12:50
大数据
hive
hadoop
企业级-实时
数仓
架构图
往期类似文章:实时
数仓
之Kappa架构与Lambda架构_奔跑者-辉的博客-CSDN博客实时
数仓
之实际落地如何选型和构建_奔跑者-辉的博客-CSDN博客目录1基于Flink的滴滴实时
数仓
实践2实时OLAP
奔跑者-辉
·
2023-04-04 12:16
架构
大数据
数仓
模型之维度建模
目录1、
数仓
架构原则2、如何搭建一个好的
数仓
2.1建模方法2.2建模解决的痛点2.3
数仓
系统满足的特性2.4
数仓
架构设计3、维度建模4、案例5、问题讨论今天我们来聊聊在
数仓
模型中举足轻重的维度建模。
奔跑者-辉
·
2023-04-04 12:16
数仓建模
数据仓库
数据挖掘
人工智能
浅谈
数仓
建模
大数据的
数仓
建模是通过建模的方法更好的组织、存储数据,以便在性能、成本、效率和数据质量之间找到最佳平衡点。
奔跑者-辉
·
2023-04-04 12:46
数仓建模
servlet
第一部分:Spark基础篇
CSDN博客第二部分:Spark进阶篇_奔跑者-辉的博客-CSDN博客第三部分:Spark调优篇_奔跑者-辉的博客-CSDN博客第一部分:Flink基础篇_奔跑者-辉的博客-CSDN博客(*建议收藏*)实时
数仓
之
奔跑者-辉
·
2023-04-04 12:46
spark
spark
大数据
分布式
2.东软跨境电商
数仓
项目技术选型
东软跨境电商
数仓
项目技术选型、框架版本选型、服务器选型、集群规划文章目录东软跨境电商
数仓
项目技术选型、框架版本选型、服务器选型、集群规划1.数据采集传输技术选型1.1DataX和Sqoop比较1.2Maxwell
Mmj666
·
2023-04-04 12:10
东软睿购跨境电商数仓项目
数据仓库
big
data
hive
实时
数仓
之实际落地如何选型和构建
往期类似文章:实时
数仓
之Kappa架构与Lambda架构_奔跑者-辉的博客-CSDN博客企业级-实时
数仓
架构图_奔跑者-辉的博客-CSDN博客第一部分:Spark基础篇_奔跑者-辉的博客-CSDN博客第一部分
奔跑者-辉
·
2023-04-04 11:01
架构
大数据
架构
数仓
选型必列入考虑的OLAP列式数据库ClickHouse(中)
优质资源分享学习路线指引(点击解锁)知识定位人群定位Python实战微信订餐小程序进阶级本课程是pythonflask+微信小程序的完美结合,从项目搭建到腾讯云部署上线,打造一个全栈订餐系统。Python量化交易实战入门级手把手带你打造一个易扩展、更安全、效率更高的量化交易系统实战案例使用背景ELK作为老一代日志分析技术栈非常成熟,可以说是最为流行的大数据日志和搜索解决方案;主要设计组件及架构如下
李自提
·
2023-04-04 10:21
it
数据库
flask
database
计算机
本地数据仓库项目(一) —— 本地
数仓
搭建详细流程
1准备1.1本地虚拟机器准备使用本地搭建三台机器,搭建
数仓
,模拟实际平台数据仓库的搭建。
不以物喜2020
·
2023-04-04 10:04
大数据数仓
数据仓库
hive
hadoop
kafka
sql
作业帮实时
数仓
架构中的Doris是如何发挥神威的,一文玩儿透(建议收藏)
关注公众号,获取更多技术好文~摘要:今天分享的内容是Doris在作业帮实时
数仓
架构中的应用及实践分享时间:2021年6月05日内容分享:利敏摘要整理:皮卡丘主要内容:1、作业帮业务与背景2、基于Doris
学而知之@
·
2023-04-04 06:47
大数据
数据库
数据分析
java
编程语言
Doris 实时
数仓
建设实践
概述Drois从早期的百度项目,到开源ApacheDoris,到商业化的StarRocks,到各大云服务商,陆续上线,作为新一代的OLAP解决方案,在应用场景上表现得非常好整理对近期对Doris实时
数仓
建设的一些思考背景公司有很多业务线
食得落
·
2023-04-04 06:30
数据中台
数据中台
实时数仓
Doris
【Doris】新东方在线教育实时
数仓
的落地实践
背景介绍在传统数据仓库方面,通常以T+1离线批量计算为主,按照
数仓
建模方式,把要处理的业务按照主题域划分,构建各种数据模型,来满足公司经营分析,财务分析等各种公司管理层的数据需求。
九层之台起于累土
·
2023-04-04 06:25
【BigData】
【Doris】
大数据
hadoop
分布式
数据库
数据仓库
【Doris】美团外卖实时
数仓
建设实践
**导读:**本文主要介绍一种通用的实时
数仓
构建的方法与实践。实时
数仓
以端到端低延迟、SQL标准化、快速响应变化、数据统一为目标。
九层之台起于累土
·
2023-04-04 06:25
【BigData】
【Doris】
大数据
数据库
分布式
hadoop
Apache Doris 1.1 特性揭秘:Flink 实时写入如何兼顾高吞吐和低延时
导读:随着数据实时化需求的日益增多,数据的时效性对企业的精细化运营越来越重要,使得实时
数仓
在这一过程中起到了不可替代的作用。
hf200012
·
2023-04-04 06:21
Doris
flink
大数据
apache
doris
Apache Flink X Apache Doris构建极速易用的实时
数仓
架构
今天给大家带来的分享是《ApacheFlinkXApacheDoris构建极速易用的实时
数仓
架构》。下面是我们的个人介绍:我是ApacheDorisContributor和阿里云MVP。
wangleigiser
·
2023-04-04 05:14
apache
flink
架构
数据分层初理解
功能.png在数据流上来看,数据在
数仓
中的流动应当是单向的,从上游到下游,在单层中的数据,也应
板蓝根泡泡面
·
2023-04-04 04:04
DataX同步数据到StarRocks问题记录
调度平台使用DS海豚,
数仓
没有选择Hadoop,而是选择了StarRocks。技术选型及整体架构,今天不讲,后面再专门写专栏。今天主要记录下数据归集时候遇到的
凉茶冰
·
2023-04-04 03:48
大数据
数据库
datax
StarRocks
Flink + Iceberg 全场景实时
数仓
的建设实践
整理|路培杰(Flink社区志愿者)摘要:ApacheFlink是目前大数据领域非常流行的流批统一的计算引擎,数据湖是顺应云时代发展潮流的新型技术架构,以Iceberg、Hudi、Delta为代表的解决方案应运而生,Iceberg目前支持Flink通过DataStreamAPI/TableAPI将数据写入Iceberg的表,并提供对ApacheFlink1.11.x的集成支持。本文由腾讯数据平台部
Apache Flink
·
2023-04-04 03:23
运维
大数据
分布式
编程语言
hadoop
Python小案例(九)PySpark读写数据
pyspark就是为了方便python读取Hive集群数据,当然环境搭建也免不了
数仓
的帮忙,常见的如开发企业内部的JupyterLab。
HsuHeinrich
·
2023-04-04 02:56
数据分析
python
hive
[开源]一个面向
数仓
开发人员的低代码工具,零代码开发API服务
一、开源项目简介介绍狭义上说,DBAPI是一个面向
数仓
开发人员的低代码工具,只需在页面上编写sql,并配置好参数,就可以自动生成http接口。
公众号:肉眼品世界
·
2023-04-04 01:39
开源
低代码
大数据平台建设方法论集合
建设的方法论云原生大数据的方法论低代码数据中台的方法论大数据SRE运维方法论批流一体化建设的方法论数据治理的方法论湖仓一体化建设的方法论数据分析挖掘方法论数字化转型方法论数据服务建设方法论元数据管理方法论知识图谱建设方法论
数仓
建模的方法论人工智能建设方法论从
猿与禅
·
2023-04-03 23:19
大数据
大数据
方法论
建设方案
数据中台
数据治理
万字详解大数据架构新概念:湖仓一体
有人说数据湖是下一代大数据平台,各大云厂商也在纷纷的提出自己的数据湖解决方案,一些云
数仓
产品也增加了和数据湖联动的特性。但是数据仓库和数据湖的区别到底是什么,是技术路线之争?是数据管理方式之争?
公众号:肉眼品世界
·
2023-04-03 17:51
数据仓库
数据库
大数据
编程语言
hadoop
数仓
实战 - 滴滴出行
项目大致流程:1、项目业务背景1.1目的本案例将某出行打车的日志数据来进行数据分析,例如:我们需要统计某一天订单量是多少、预约订单与非预约订单的占比是多少、不同时段订单占比等数据海量–大数据hive比MySQL慢很多1.2项目架构用户打车的订单数据非常庞大。所以我们需要选择一个大规模数据的分布式文件系统来存储这些日志文件,此处,我们基于Hadoop的HDFS文件系统来存储数据。为了方便进行数据分析
海星?海欣!
·
2023-04-03 17:54
#
大数据-数据仓库
大数据
hive
hadoop
数据建模方法论
集成的:
数仓
系统和
sinadrew
·
2023-04-03 15:05
数仓
大数据
星环科技TDH多模型统一架构VS CDH架构
比如为了做
数仓
需要Hive,为了做精确查询需要Hbase,为了做搜索业务需要Elasticsearch等等。那客户为了实现图计算和分析,需
星环科技
·
2023-04-03 11:36
大数据
大数据平台
数据库
大数据
科技
2018/11/20
由于盘面如预期运行,因此上周五的多
数仓
位尽管今天也进入调整,但并未进行调仓。今天收盘上证已经站上2700,并且收了个光头阳,不出意外明天会继续上行。创业板指也会去构造小级别的第二类卖点。
Roadmanz
·
2023-04-03 09:54
得物供应链复杂业务实时
数仓
建设之路
1背景得物供应链业务是纷繁复杂的,我们既有JIT的现货模式中间夹着这大量的仓库作业环节,又有到仓的寄售,品牌业务,有非常复杂的逆向链路。在这么复杂的业务背后,我们需要精细化关注人货场车的效率和成本,每一单的及时履约情况,要做到这一点我们需要各粒度和维度的数据来支撑我们的精细化管理。1.1业务早期业务早期,业务反馈我们后台管理系统某些报表查询慢。查询代码可知,如下图:这种现象一般表现为:大表JOIN
「已注销」
·
2023-04-03 07:54
数据库
大数据时代的小数据神器 - asqlcell
数据分析开始从过去的采样抽查变成全量整体,原先被抽样丢弃的隐藏信息的价值也随之突现,数据拥有者可以发现新的关联信息,找到更细维度的特征,做出更精准的预测...一说到大数据体系建设,各种高大上的概念自然就开始满天飞,
数仓
熊主任
·
2023-04-03 06:32
Python
大数据
数据分析
jupyter
python
大数据培训实时
数仓
实践以及架构的演进
从智能商业的角度来讲,数据的结果代表了用户的反馈,获取结果的及时性就显得尤为重要,快速的获取数据反馈能够帮助公司更快的做出决策,更好的进行产品迭代,实时
数仓
在这一过程中起到了不可替代的作用。
零度下的温柔
·
2023-04-03 05:48
big
data
架构
数据仓库
详解用户画像与实时
数仓
的架构与实践
用户画像与实时数据分析是互联网企业的数据核心。知乎数据赋能团队以ApacheDoris为基础,基于云服务构建高响应、低成本、兼顾稳定性与灵活性的实时数据架构,同时支持实时业务分析、实时算法特征、用户画像三项核心业务流,显著提升对于时效性热点与潜力的感知力度与响应速度,大幅缩减运营、营销等业务场景中的人群定向成本,并对实时算法的准确率及业务核心指标带来明显增益。关键词:数据仓库,ApacheDori
浪尖聊大数据-浪尖
·
2023-04-03 05:03
架构
大数据
人工智能
ChatGPT使用案例之写代码
但是正如我们提到的又惊又喜,可能开心的是可以解放一部分劳动力,将自己的精力从繁琐无聊的一些任务中脱离出来,但是担心的又是如果ChatGPT真的能做到写代码,那我们开发的小伙伴又何去何从呢,引用之前在[
数仓
建模
不二人生
·
2023-04-03 04:59
ChatGPT
#
ChatGPT
实战案例
chatgpt
上一页
28
29
30
31
32
33
34
35
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他