实时数仓

知乎实时数仓架构演进

从智能商业的角度来讲，数据的结果代表了用户的反馈，获取结果的及时性就显得尤为重要，快速的获取数据反馈能够帮助公司更快的做出决策，更好的进行产品迭代，实时数仓在这一过程中起到了不可替代的作用。
阿里云云栖号·2019-12-23 04:57

Blink 有何特别之处？菜鸟供应链场景最佳实践

阿里妹导读：菜鸟供应链业务链路长、节点多、实体多，使得技术团队在建设供应链实时数仓的过程中，面临着诸多挑战，如：如何实现实时变Key统计？如何实现实时超时统计？如何进行有效地资源优化？
阿里云云栖号·2019-12-21 03:24

美团点评基于 Flink 的实时数仓建设实践

flink.png引言近些年，企业对数据服务实时化服务的需求日益增多。本文整理了常见实时数据组件的性能特点和适用场景，介绍了美团如何通过Flink引擎构建实时数据仓库，从而提供高效、稳健的实时数据服务。此前我们美团技术博客发布过一篇文章《流计算框架Flink与Storm的性能对比》，对Flink和Storm俩个引擎的计算性能进行了比较。本文主要阐述使用Flink在实际数据生产上的经验。实时平台初期
美团技术团队·2019-12-13 14:49

聚水潭是如何基于AnalyticDB for PostgreSQL 构筑海量实时数仓平台的

聚水潭数据仓库业务介绍上海聚水潭网络科技有限公司成立于2014年。聚水潭创建之初，以电商SaaSERP切入市场，凭借出色的产品和服务，快速获得市场领先地位。随着客户需求的不断变化，如今聚水潭已经发展成为以SaaSERP为核心，集多种商家服务为一体的SaaS协同平台，为全国33万多家电商企业提供全面的信息化解决方案。来自阿里巴巴旗下商家服务市场的最新数据显示，聚水潭已是企业ERP类目中使用商家数最多
阿里云云栖号·2019-12-13 06:21

应用案例 | Blink 有何特别之处？菜鸟供应链场景最佳实践

image本文授权转自阿里技术官方公众号（ali_tech）：菜鸟供应链业务链路长、节点多、实体多，使得技术团队在建设供应链实时数仓的过程中，面临着诸多挑战，如：如何实现实时变Key统计？
Ververica·2019-12-12 08:46

基于 Flink SQL 构建实数据仓库：OPPO 数据中台之基石

本文主要内容如下：-OPPO实时数仓的演进思路；-基于FlinkSQL的扩展工作；-构建实时数仓的应用案例；-未来工作的思考和展望。
·2019-12-11 00:00

实时数仓有必要吗？

传统的数据仓库或者数据集市并没有包括当前最新的数据，其数据是按周甚至按天导入到数仓里面的。然而，有一些公司已经开始着手建设实时或近实时BI数据库了。乍一看，实时BI似乎是继传统数仓之后合乎逻辑的下一个阶段，毕竟只要数据越“新鲜”，我们就能从中得到越优质的信息，那为什么不把BI系统升级成实时的呢？答案就是相对于其价值来说，这样做其实更麻烦。试图在BI数据库上对数据进行实时更新简直就像是打开一个装满蠕
Mekal·2019-12-06 08:44

TiDB / TiSpark 在易果集团实时数仓中的创新实践

项目背景目前企业大多数的数据分析场景的解决方案底层都是围绕Hadoop大数据生态展开的，常见的如HDFS+Hive+Spark+Presto+Kylin，在易果集团，我们初期也是采取这种思路，但是随着业务规模的快速增长和需求的不断变化，一些实时或者准实时的需求变得越来越多，这类业务除了有实时的OLTP需求，还伴随着一些有一定复杂度的OLAP的需求，单纯地使用Hadoop已经无法满足需求。现有的准实
PingCAP·2019-11-05 01:38

企业实践 | 如何更好地使用 Apache Flink 解决数据计算问题？

基于Flink的数据平台构建、运用Flink解决业务场景中的具体问题等随着Flink被更广泛的应用于广告、金融风控、实时BI、实时数仓、实时推荐等多种业务场景，在生产实践中已有丰富的案例与优秀的经验。
Ververica·2019-10-30 17:21

云栖干货回顾 | 更强大的实时数仓构建能力！分析型数据库PostgreSQL 6.0新特性解读

AnalyticDBPG6.0版本大幅提升并发事务处理能力，更好的满足实时数仓场
大涛学长·2019-10-27 21:41

云栖干货回顾 | 更强大的实时数仓构建能力！分析型数据库PostgreSQL 6.0新特性解读

AnalyticDBPG6.0版本大幅提升并发事务处理能力，更好的满足实时数仓场
51小二·2019-10-23 15:36

AnalyticDB for PostgreSQL 6.0 新特性介绍

ADBPG6.0版本大幅提升并发事务处理能力，更好的满足实时数仓场景，同时通过事务锁等优化，完
大涛学长·2019-10-17 03:24

实时计算框架 Flink 在教育行业的应用实践

若想实现大规模数据的“即席查询”，就须用实时计算框架构建实时数仓来实现。本文通过一个教育行业的应用案例，剖析业务系统对实时计
UCloud技术市场团队·2019-10-12 14:00

Antl4 访问者模式返回对象

最近在实时数仓，基本的流程图如下：我们采用Antl4来进行Mysql的解析，从效率上来说，解析速度确实有点慢，但简单易于上手，MySqlLexer.g4和MySqlParser.g4都是开源的，所以就可以直接拿来用了
shengjk1·2019-09-27 16:21

你需要的不是实时数仓 | 你需要的是一款合适且强大的OLAP数据库(上)

前言今年有个现象，实时数仓建设突然就被大家所关注。我个人在公众号也写过和转载过几篇关于实时数据仓库的文章和方案。但是对于实时数仓的狂热追求大可不必。
王知无·2019-09-15 10:00

你需要的不是实时数仓 | 你需要的是一款强大的OLAP数据库(下)

在上一章节中，我们讲到实时数仓的建设，互联网大数据技术发展到今天，各个领域基本已经成熟，有各式各样的解决方案可以供我们选择。
王知无·2019-09-15 10:00

如果你也想做实时数仓…

本文将从数据仓库的简介、经历了怎样的发展、如何建设、架构演变、应用案例以及实时数仓与离线数仓的对比六个方面全面分享关于数仓的详细内容。
ApacheFlink·2019-09-12 00:00

如果你也想做实时数仓…

本文将从数据仓库的简介、经历了怎样的发展、如何建设、架构演变、应用案例以及实时数仓与离线数仓的对比六个方面全面分享关于数仓的详细内容。
阿里云云栖社区·2019-09-10 09:57

如果你也想做实时数仓…

本文将从数据仓库的简介、经历了怎样的发展、如何建设、架构演变、应用案例以及实时数仓与离线数仓的对比六个方面全面分享关于数仓的详细内容。
阿里云云栖社区·2019-09-10 00:00

知乎实时数仓架构演进

从智能商业的角度来讲，数据的结果代表了用户的反馈，获取结果的及时性就显得尤为重要，快速的获取数据反馈能够帮助公司更快的做出决策，更好的进行产品迭代，实时数仓在这一过程中起到了不可替代的作用。
ApacheFlink·2019-09-05 00:00

Spark2.4.0和Scala2.11集成Kudu1.8.0遇到的坑

最近做实时数仓用到了sparkstreaming和kudu两个组件，因为资料少得可怜，折腾了一番终于是搞定了，在这里记录下期间遇到的坑先通过Impala建张Kudu表createtablekudu_appbind_test
lzw2016·2019-08-08 16:43

Flink1.8实时数仓项目实战

《Flink1.8实时数仓项目实战》课程主要基于Flink最新稳定版本进行讲解，课程包含FlinkDataSet、容错、Connector、FlinkSQL以及实时数仓项目。
java_66666·2019-08-06 15:51

Flink1.8实时数仓项目实战

《Flink1.8实时数仓项目实战》课程主要基于Flink最新稳定版本进行讲解，课程包含FlinkDataSet、容错、Connector、FlinkSQL以及实时数仓项目。
小红牛·2019-08-06 14:14

Flink1.8实时数仓项目实战

《Flink1.8实时数仓项目实战》课程主要基于Flink最新稳定版本进行讲解，课程包含FlinkDataSet、容错、Connector、FlinkSQL以及实时数仓项目。
小红牛·2019-08-06 14:14

高可用Flink on YARN集群快速配置

我们正准备涉足实时业务，实时数仓、实时推荐这些东西总是要有的，快速上手Flink势在必行。Flink的官方文档比较详尽，并且设计理念与Spark多有相通，理解成本较低。Flink有多种集群部署方
LittleMagic·2019-07-17 22:19

知乎实时数仓架构演进[笔记]

知乎的实时数仓实践以及架构的演进：实时数仓1.0版本，主题：ETL逻辑实时化，技术方案：SparkStreaming。
itbgj·2019-07-05 11:04

知乎实时数仓架构演进

从智能商业的角度来讲，数据的结果代表了用户的反馈，获取结果的及时性就显得尤为重要，快速的获取数据反馈能够帮助公司更快的做出决策，更好的进行产品迭代，实时数仓在这一过程中起到了不可替代的作用。
阿里云云栖社区·2019-06-28 00:00

知乎实时数仓架构演进

从智能商业的角度来讲，数据的结果代表了用户的反馈，获取结果的及时性就显得尤为重要，快速的获取数据反馈能够帮助公司更快的做出决策，更好的进行产品迭代，实时数仓在这一过程中起到了不可替代的作用。
ApacheFlink·2019-06-27 00:00

第十二周

（构建实时数仓，实时索引build）数据分析（报表、大屏）数据触发（触发器，告警）链接二、《有状态流式处理引擎基石》状态容错Flink如何保证精确一次如何保证？分布式快照流程中安
梧上擎天·2019-06-19 13:48

Blink 有何特别之处？菜鸟供应链场景最佳实践

作者：晨笙、缘桥菜鸟供应链业务链路长、节点多、实体多，使得技术团队在建设供应链实时数仓的过程中，面临着诸多挑战，如：如何实现实时变Key统计？如何实现实时超时统计？如何进行有效地资源优化？
阿里云云栖社区·2019-06-17 00:00

数据仓库介绍与实时数仓案例

1.数据仓库简介数据仓库是一个面向主题的（SubjectOriented）、集成的（Integrate）、相对稳定的（Non-Volatile）、反映历史变化（TimeVariant）的数据集合，用于支持管理决策。数据仓库是伴随着企业信息化发展起来的，在企业信息化的过程中，随着信息化工具的升级和新工具的应用，数据量变的越来越大，数据格式越来越多，决策要求越来越苛刻，数据仓库技术也在不停的发展。数据
阿里云云栖社区·2019-06-11 00:00

应用案例 | Blink 有何特别之处？菜鸟供应链场景最佳实践

作者：晨笙、缘桥菜鸟供应链业务链路长、节点多、实体多，使得技术团队在建设供应链实时数仓的过程中，面临着诸多挑战，如：如何实现实时变Key统计？如何实现实时超时统计？如何进行有效地资源优化？
Ververica·2019-05-29 16:47

应用案例 | Blink 有何特别之处？菜鸟供应链场景最佳实践

本文授权转自阿里技术官方公众号（ali_tech）：菜鸟供应链业务链路长、节点多、实体多，使得技术团队在建设供应链实时数仓的过程中，面临着诸多挑战，如：如何实现实时变Key统计？如何实现实时超时统计？
ApacheFlink·2019-05-29 00:00

Blink 有何特别之处？菜鸟供应链场景最佳实践

阿里妹导读：菜鸟供应链业务链路长、节点多、实体多，使得技术团队在建设供应链实时数仓的过程中，面临着诸多挑战，如：如何实现实时变Key统计？如何实现实时超时统计？如何进行有效地资源优化？
阿里云云栖社区·2019-05-24 00:00

OPPO数据中台之基石：基于Flink SQL构建实数据仓库

本文主要内容如下：OPPO实时数仓的演进思路；基于FlinkSQL的扩展工作；构建实时数仓的应用案例；未来工作的思考和展望。
阿里云云栖社区·2019-05-15 00:00

OPPO数据中台之基石：基于Flink SQL构建实数据仓库

本文主要内容如下：OPPO实时数仓的演进思路；基于FlinkSQL的扩展工作；构建实时数仓的应用案例；未来工作的思考和展望。
Ververica·2019-05-14 20:40

OPPO数据中台之基石：基于Flink SQL构建实数据仓库

本文主要内容如下：OPPO实时数仓的演进思路；基于FlinkSQL的扩展工作；构建实时数仓的应用案例；未来工作的思考和展望。
ApacheFlink·2019-05-14 00:00

金融数据仓库系列-实时数仓

OracleGoldenGate实时同步Oracle实时传输到Hadoop集群（HDFS，Hive，Kafka等）的基本原理如图：根据如上原理，配置大概分为如下步骤：源端目标端配置ogg管理器（mgr）；源端配置extract进程进行Oracle日志抓取；源端配置pump进程传输抓取内容到目标端；目标端配置replicate进程复制日志到Hadoop集群或者复制到用户自定义的解析器将最终结果落入到
bigdataCoding·2019-05-13 20:40

广告场景下的实时计算

/articles/692364案例与解决方案汇总页：阿里云实时计算产品案例&解决方案汇总广告场景的综述，计算广告与流处理技术综述：其中涉及的主要实时处理环节：实时数据统计与BI，可参考数据仓库介绍与实时数仓案例在线流量反作弊
串行并jjjjj·2019-03-05 11:34

一些awesome网站

2、nginxNginx高性能Web服务器3、docker系列docker系列-jsonhcloocode-docker系列4、Spark系列Spark学习之路5、Flink系列Flink系列美团点评实时数仓实践滴滴是如何从零构建集中式实时计算平台的
江畔独步·2019-03-01 15:20

阿里云实时计算产品案例&解决方案汇总

场景：广告场景下的实时计算运维场景下的实时计算案例&解决方案：通过Flink实时构建搜索引擎的索引基于实时计算（Flink）与高斯模型构建实时异常检测系统计算广告与流处理技术综述数据仓库介绍与实时数仓案例基于实时计算
客服小羊·2019-02-26 18:34

美团点评基于 Flink 的实时数仓建设实践

更多精选文章关注MAYOU18引言近些年，企业对数据服务实时化服务的需求日益增多。本文整理了常见实时数据组件的性能特点和适用场景，介绍了美团如何通过Flink引擎构建实时数据仓库，从而提供高效、稳健的实时数据服务。此前我们美团技术博客发布过一篇文章《流计算框架Flink与Storm的性能对比》，对Flink和Storm俩个引擎的计算性能进行了比较。本文主要阐述使用Flink在实际数据生产上的经验。
qq_41694752·2018-10-22 09:19

美团点评基于 Flink 的实时数仓建设实践

引言近些年，企业对数据服务实时化服务的需求日益增多。本文整理了常见实时数据组件的性能特点和适用场景，介绍了美团如何通过Flink引擎构建实时数据仓库，从而提供高效、稳健的实时数据服务。此前我们美团技术博客发布过一篇文章《流计算框架Flink与Storm的性能对比》，对Flink和Storm俩个引擎的计算性能进行了比较。本文主要阐述使用Flink在实际数据生产上的经验。实时平台初期架构在实时数据系统
美团技术团队·2018-10-19 00:00

美团点评基于 Flink 的实时数仓建设实践

引言近些年，企业对数据服务实时化服务的需求日益增多。本文整理了常见实时数据组件的性能特点和适用场景，介绍了美团如何通过Flink引擎构建实时数据仓库，从而提供高效、稳健的实时数据服务。此前我们美团技术博客发布过一篇文章《流计算框架Flink与Storm的性能对比》，对Flink和Storm俩个引擎的计算性能进行了比较。本文主要阐述使用Flink在实际数据生产上的经验。实时平台初期架构在实时数据系统
美团点评技术团队·2018-10-18 22:00

分享一个实时数仓系统--SnappyData的博客与中文社区

分享一个实时OLAP系统–SnappyData的博客与中文社区SnappyData中文博客SnappyData中文社区
lmalds李麦迪·2018-04-23 00:00

TiDB / TiSpark 在易果集团实时数仓中的创新实践

项目背景目前企业大多数的数据分析场景的解决方案底层都是围绕Hadoop大数据生态展开的，常见的如HDFS+Hive+Spark+Presto+Kylin，在易果集团，我们初期也是采取这种思路，但是随着业务规模的快速增长和需求的不断变化，一些实时或者准实时的需求变得越来越多，这类业务除了有实时的OLTP需求，还伴随着一些有一定复杂度的OLAP的需求，单纯地使用Hadoop已经无法满足需求。现有的准实
tidb_pingcap·2017-12-21 10:21

压力测试软件入门基础

作为一个菜鸟，突然说要做一个实时数仓的压力测试，蒙蔽呀，只有度娘可以拯救我！！！下面是我整理的一点测试基础知识，希望可以帮到大家！
Simon_my·2017-12-04 22:58
上一页 14 15 16 17 18 19 20 21 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他