E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Mondrian+多维分析
Apache Doris (十二) :数据存储模型之Unique数据存储模型
在某些
多维分析
场景下,用户更关注的是如何保证Key的唯一性,即如何获得PrimaryKey唯一性约束。
IT贫道
·
2023-10-20 00:58
Apache
Doris
大数据OLAP体系技术栈
sql
database
大数据
数据仓库
etl
apache
Spark
多维分析
去重计数场景优化案例【BitMap精确去重的应用与踩坑】
关注交流微信公众号:小满锅场景前几天遇到一个任务,从前也没太注意过这个任务,但是经常破9点了,执行时长正常也就2个小时。看逻辑并不复杂,基本是几段SQL的JOIN操作,其中一个最耗时间的就是要根据底表数据Lateralviewexplode(array(字段,‘all’)),一共lateral了4个字段,相当于数据量要扩大16倍。并且可怕的场景,lateralview之后还对11个字段进行了去重。
小满锅lock
·
2023-10-18 04:05
spark
spark
数据仓库
etl
大数据
数据分析
在Java Web项目中引入Mondrian
多维分析
框架
本文完全转载自:http://www.linuxidc.com/Linux/2014-09/107008.htm我也是初学,为了方便以后查看,所以转到自己博客上了。----------------------------------------------------------------------------------一,Mondrian简介Mondrian是一个开源项目,一个用Java写
不知道方向只知道前行
·
2023-10-15 16:29
java
大数据
MDX
Mondrian框架
java
starrocks
starrocks分布式OLAP数据库系统,高效支持大数据量级的
多维分析
、实时分析、高并发分析等多种数据分析场景定位面向在线报表和分析的数据仓库系统。它采用了全面向量化技术,比同类产品平均快3-5倍。
EnndmeRedis
·
2023-10-14 01:44
数据仓库
30 数据分析常见概念(略写可跳)
文章目录数据科学领域概述数据如何驱动运营给企业带来价值岗位关键词说明业务的商业模式数据指标数据指标定义及常用数据指标如何选取指标分析角度计数流量导向的工具内容导向的工具用户导向的工具业务导向的工具数据分析方法对比分析
多维分析
漏斗分析留存分析总结用户画像标签有什么如何获得标签用户画像用于做什么思考问题的方法归因查找路径挖掘行为序列数据科学领域概述数据如何驱动运营给企业带来价值原始收集数据数据埋点
Micoreal
·
2023-10-08 15:57
个人python流程学习
数据分析
数据挖掘
多维分析
后台实践 3:维度排序压缩
【摘要】用实例、分步骤,实践目标本期目标,是在完成数据类型转化基础上,实现维度排序压缩,进一步提升计算速度。实践的步骤:1、准备基础宽表:修改上期的代码,完成维度排序压缩存成新组表。2、访问基础宽表:上期代码不必修改,直接应用于新组表。3、新增数据追加:每日新增业务数据追加,每月重新排序重整。要尽可能不影响访问基础宽表的性能,同时减小每日新增数据所需要的时间。本期样例宽表不变,依然为custome
小黄鸭呀
·
2023-10-05 15:47
多维分析
后台实践 2:数据类型优化
【摘要】用实例、分步骤,详细讲解
多维分析
(OLAP)的实现。实践目标本期目标是练习将数据库读出的数据,尽可能转换为有利于性能优化的数据类型,例如:小整数和浮点数。
小黄鸭呀
·
2023-10-03 15:59
BDA初级考试第一周
level3:
多维分析
,问题出在哪
DODO77
·
2023-10-02 13:33
简单说说列式存储数据库
随着业务越来越看重数据的重要性,相信大家也做了很多
多维分析
的需求,在调研技术选型时候,会发现很多olap,如druid、clickhouse、starRocks都是列式存储数据库,今天我们来通过对比行存储简单说下列存储举个栗子来说下列存储和行存储要过年回家了
小草莓子桑
·
2023-09-30 18:10
Elasticsearch 批量导入数据
**Elasticsearch**可以非常方便地进行数据的
多维分析
,所以大数据分析领域也经常会见到它的身影,生产环境中绝大部分新产生的数据可以通过应用直接导入,但是历史或初始数据可能会需要单独处理,这种情况下可能遇到需要导入大量数据的情况这里简单分享一下批量导入数据的操作方法与相关基础
web13618542420
·
2023-09-27 09:18
java
elasticsearch
搜索引擎
大数据
linux
缓存
大数据思想与应用
4.在线分析:可以快速对大规模数据进行交互式查询与
多维分析
。5.数据挖掘:从海量数据中提取有价值的信息,进行业务决策和预测。大数据的作用:1.收集数据:采集各种数据源的数据,构建庞
密斯特.张先生
·
2023-09-22 12:17
大数据
全方位解读星型模型,雪花模型及星座模型
1背景在
多维分析
的商业智能解决方案中,根据事实表和维度表的关系,又可将常见的模型分为星型模型,雪花型模型及星座模型。
大数据私房菜
·
2023-09-20 23:56
数据仓库
hive、spark、presto 中的增强聚合-grouping sets、rollup、cube
目录1、什么是增强聚合和
多维分析
函数?
广阔天地大有可为
·
2023-09-20 08:16
Hive
hive
spark
hadoop
【Doris全面解析】存储层设计介绍2——写入流程、删除流程分析
本文转自开源中国ZhangYu0123博客1整体介绍Doris是基于MPP架构的交互式SQL数据仓库,主要用于解决了近实时的报表和
多维分析
。Doris高效的导入、查询离不开其存储结构精巧的设计。
ApacheDoris
·
2023-09-18 08:36
大数据
分布式
数据库
python
mysql
ChatGPT AIGC 完成
多维分析
雷达图
我们先让ChatGPT来帮我们总结一下
多维分析
雷达图的功能与作用。同样ChatGPTAIGC完成的动态雷达图效果如下;这样的一个
多维分析
动态雷达图是用HTML,JS,Echarts来完成的。
大厂数据专家
·
2023-09-06 18:42
ChatGPT实战案例
ChatGPT
chatgpt
AIGC
人工智能
前端
html5
javascript
分析“上帝”,你的营销推广有依据么?
用户上网会产生行为,而与行为相关的数据有发生的时间、频次等等,利用这些数据
多维分析
,可以构建用户模型,完善用户画像。用户行为分析应该包含
Diadio
·
2023-09-05 09:43
扫盲:OLTP和OLAP的区别
上世纪60年代,关系数据库之父E.F.Codd提出了关系模型,造就了基于OLTP的传统关系型数据库的大发展;1993年,E.F.Codd认为传统OLTP已无法满足需求,又提出了多维数据库和
多维分析
的概念
Xu-小安安
·
2023-08-31 07:21
数据库
oracle
数据库
基于数据仓库和
多维分析
技术的决策支持系统
1)降低库存成本通过数据仓库系统,将成千上万种货物的销售数据和库存数据集中起来,通过数据分析,对知识进行分类,可以知道库存中一段时间内,没有收到订单的货物,很少收到订单的货物和库存中周转很快的货物。从而决策者能决定对货物进行相应增减,确保正确的库存,从而加快资金周转、降低库存成本。最为典型的分类方法是基于决策树的分类方法。它是从实例集中构造决策树,是一种有指导的学习方法。该方法先根据训练子集形成决
a66889999
·
2023-08-28 05:31
数据仓库
大数据
大数据------Kylin单机集成CDH安装(详细教程)
https://www.acfun.cn/a/ac10294589(免费教程)ApacheKylin是一个开源的分布式分析引擎,提供Hadoop之上的SQL查询接口及
多维分析
(OLAP)能力(可以把Kylin
ItStar
·
2023-08-24 12:26
训练营临别感言
营员们的交流分享就有开放共享的理念,比如李皓的口红销售
多维分析
、小关的纯香茶道研究,荣鹏的司马懿处世之道,雨霏的海量网盘,梦妍的家庭保险策略。还有
敏水感词
·
2023-08-23 03:14
睿思BI版本划分
标准版开源版功能数据ETL,数据填报,数据查询,数据建模,
多维分析
,数据报表,仪表盘,移动BI,权限管理。
睿思BI
·
2023-08-21 03:11
商业智能
睿思BI标准版V4.1正式发布
睿思BI标准版V4.1现已正式发布,主要更新内容:1.支持elasticsearch数据库,用户通过BI系统把数据载入elasticsearch中,通过elasticsearch进行数据
多维分析
和仪表盘可视化
睿思BI
·
2023-08-21 03:11
商业智能
睿思BI
多维分析
系统介绍
随着企业信息化建设的逐渐完善,累积的业务数据越来越多,老板认识到信息化的益处后,对信息化相关人员要求也越来越高。比如他可能问您的问题:去年卖的最好的商品是什么?卖的最差的商品又是什么?帮我查询今年销量比去年增加30%的商品列表?我想看看最近12个月某几个商品的销售趋势对比,以及环比趋势对比?启用促销手段后,销售收入和销售数量有一个什么样的变化?哪些商品变化大?卖的最好的商品占用多少库存,卖的最差的
睿思BI
·
2023-08-21 03:10
商业智能
bi
睿思BI正式支持ClickHouse
ClickHouse作为一个列存数据库,非常适合用来做OLAP分析,而睿思BI主要包括
多维分析
和报表功能,使用ClickHouse可以解决基于mysql查询的效率问题,现目前睿思BIV5.1版本已完全支持
睿思BI
·
2023-08-21 03:10
商业智能
数据库
database
睿思BI开源版新版发布,基于springboot+vue
开源版包含数据建模、数据报表、
多维分析
、权限管理等功能模块,方便用户快速建立一套易用,灵活、免费的数据分析平台,实现数据的快速分析及可视化。
睿思BI
·
2023-08-21 03:40
商业智能
vue.js
spring
bi
一分钟拥有自己的知识店铺
1.多种内容形式图文、音视频、直播,满足各类课程需求2.人气营销工具品牌传播快速获客,持续提升课程销量3.高效社群运营维系用户增强互动,拉新促活面面俱到4.精准数据分析随时掌控店铺数据,
多维分析
经营状态做好上面
42f48c2158e7
·
2023-08-17 07:57
十一、结合数字孪生与时间技术进行
多维分析
设计与实施
大数据可视化中心以主题为分析对象,选择业务分类下的某个主题,可以在数据面板中展示其二维图表,在地图中标记其空间分布,并叠加其相应的二维或三维图层。1、界面设计其主界面设计详上图,各部分功能介绍如下:1.1、主题与图层面板,从上到下,从左到右分别是:①折叠按钮:点击搜索框左边的下拉按钮,可隐藏下面的主题和图层面板。②搜索框:可搜索当前主题下的数据记录,支持模糊搜索和即时搜索。搜索列表分页显示,各条记
vandh
·
2023-08-10 11:40
大数据开发与实战
信息可视化
大数据
人工智能
多维分析
十二、结合数字孪生与时空技术进行大数据
多维分析
大数据技术和应用中,如何还原数据的真实维度,构建所见即所得的分析和展示平台,一直处于积极探索和持续改进中。本发明提出的一套设计方法,可行之有效的应用在智慧城市、商业智能、金融、电子政务、地理信息等各行业。其特点是在传统的二维图表基础上进行维度和指标的适配和增强;结合地图与数字孪生技术,多层次拓展数据的多维张力空间;扩展时间维度的表现力,实时驱动和追溯数据的变化。1、背景随着GIS的发展,各种开源,
vandh
·
2023-08-10 11:07
数字孪生开发与实战
大数据
数字孪生
多维分析
cesium
Docker快速部署Apache Kylin和体验
https://zhuanlan.zhihu.com/p/2010205361.Kylin是什么ApacheKylin™是一个开源的、分布式的分析型数据仓库,提供Hadoop/Spark之上的SQL查询接口及
多维分析
万州客
·
2023-08-04 13:30
大数据可视化BI工具:Visualis
Visualis支持拖拽式报表定义、图表联动、钻取、全局筛选、
多维分析
、实时查询等数据开发探索的分析模式,并提供水印、数据质量校验等金
小水滴2014
·
2023-08-03 23:30
开源
大数据
可视化BI
开源
DataSphere
OceanMind海睿思签约江苏省粮食集团,携手推进风控数字化进程
双方将依托OceanMind海睿思提供的数据中台、风控分析监管系统等产品,以风险防控为切入点,从事后监督变成事前、事中、事后全流程监督,从单一维度防控变成
多维分析
预警,为构建风控内控合规“三位一体”监管平台打下坚实基础
海睿思
·
2023-07-17 13:40
企业内控与风险管理
企业数字化转型
数据中台
九、OLAP之
多维分析
联机分析处理(OnLineAnalyticalProccessing,简称OLAP)是目前数据仓库上的重要应用之一,是决策分析的关键,也是数据仓库最重要的
多维分析
工具,它利用存储在数据仓库中的数据完成各种分析操作
vandh
·
2023-07-14 23:17
大数据开发与实战
大数据
多维分析
olap
mdx
数据挖掘
Kylin知识点总结
Kylin1、ApacheKylin概览1.1什么是KylinApacheKylin™是一个开源的、分布式的分析型数据仓库,提供Hadoop/Spark之上的SQL查询接口及
多维分析
(OLAP)能力以支持超大规模数据
南潇如梦
·
2023-07-14 14:59
大数据那些事
big
data
kylin
hadoop
Kylin简介
ApacheKylin是一个开源的分布式分析引擎,提供Hadoop/Spark之上的SQL查询接口以及
多维分析
(OLAP)能力以及支持超大规模数据,最初由eBay开发并贡献给开源社区。
hailunw
·
2023-07-14 14:54
kylin
大数据
Kylin (一) ---------- 概述
目录一、Kylin定义二、Kylin架构三、Kylin特点四、Kylin4.0升级一、Kylin定义ApacheKylin是一个开源的分布式分析引擎,提供Hadoop/Spark之上的SQL查询接口及
多维分析
在森林中麋了鹿
·
2023-07-14 14:54
即席查询
kylin
hive
大数据
Kylin
多维分析
引擎(一):Kylin概述
1.定义:ApacheKylin(ExtremeOLAPEngineforBigData)是一个开源的分布式分析引擎,为Hadoop等大型分布式数据平台之上的超大规模数据集提供标准SQL查询及
多维分析
(
Yuan_CSDF
·
2023-07-14 14:24
#
Kylin
【数据仓库】Apache Doris介绍
ApacheDoris介绍ApacheDoris应用场景ApacheDoris核心特性ApacheDoris架构Doris数据模型三种Aggregate模型介绍Uniq模型介绍在某些
多维分析
场景下,用户更关注的是如何保证
wenchun001
·
2023-07-13 19:54
数据仓库
apache
数据仓库
2022(一等奖)B22基于时空大数据的
多维分析
与传统二维分析相结合的大气污染变化研究方法探索
作品介绍1作品背景及研究对象1.1背景及必要性介绍2022年春节期间,山东及多地的部分省市明确了禁放烟花爆竹的规定,直接表明了当今大气污染变化的严峻形势,燃放烟花爆竹会严重影响空气环境质量,加剧雾霾天气,产生噪音污染,且极易引发火灾和安全事故,造成人身伤亡和财产损失。不仅如此,我国也早已出台了《中华人民共和国大气污染防治法》等有关的法律法规,在国际上也是对全球性的大气污染采取了多项举措,全球环境问
sky J
·
2023-06-23 06:21
案例分享
大数据
python
人工智能
【AntDB数据库】AntDB数据库产品概述
趋势与挑战基于大数据场景的
多维分析
、查询类应用如精准营销、标签查询,要求在海量、多样的数据中高效地提取价值;同时伴随着用户个性化、业务多元化,使得数据类型多样化,人们对
亚信安慧AntDB数据库
·
2023-06-20 13:40
国产数据库
AISWare
AntDB
AntDB
数据库
Doris面试题二十道
它具有高性能、高可扩展性和高稳定性的特点,适用于OLAP(联机分析处理)场景,可以处理大量数据的实时查询和
多维分析
。问题2:Doris的主要特点是什么?
MIDSUMMER_yy
·
2023-06-18 01:08
大数据
【数据管理架构】什么是 OLAP?
OLAP(用于在线分析处理)是一种软件,用于对来自数据仓库、数据集市或其他一些统一的集中式数据存储的大量数据进行高速
多维分析
。大多数业务数据都有多个维度——数据被分解为多个类别以进行展示、跟踪或分析。
超级架构师
·
2023-06-17 10:50
数据仓库
数据挖掘
数据分析
大数据
数据库
StarRocks 完成鲲鹏兼容性互认证 !
它采用新一代的弹性MPP架构,可以高效支持海量数据的
多维分析
、实时分析、高并发分析等多种数据分析场景。Star
·
2023-06-16 17:49
数据库认证授权华为
加速大规模数据处理和
多维分析
:基于Lucene和Hadoop的开源项目
这个项目基于Lucene和Hadoop,旨在提供高效的数据存储和查询引擎,加速大规模数据处理和
多维分析
。
杨五五
·
2023-06-16 06:58
lucene
hadoop
开源
spark
作为架构师该如何面对系统和业务的复杂性?
之所以说“业务理解-->领域建模-->流程分解-->
多维分析
”是体力,是因为实现它们就像是在做填空题,只要你愿意花时
天秤座的架构师
·
2023-06-15 23:18
架构微学堂
架构沉思录
复杂业务解决方案
Apache Doris :Rollup 物化视图
整理了一下目前开启虚拟机需要用到的程序,包括MySQL,Hadoop,Linux,hive,Doris3.5RollupROLLUP在
多维分析
中是“上卷”的意思,即将数据按某种指定的粒度进行进一步聚合。
All996
·
2023-06-14 10:22
hive
学习
数学建模
数据仓库
数据库
多维数据库
3.为什么要
多维分析
?4.多维数据分析领域中的概念5.OLAP(OnlineAnalyzeProcess在线分析处理)6.Mondrain7.Kylin1.多维数据是什么?
xnninger
·
2023-06-12 21:37
数据库
大数据
Kyligence Zen 产品体验 ——AI数据指标洞察专家
2023年5月体验博主风尚云网目标产品KyligenceZen开发团队跬智信息(Kyligence)由ApacheKylin创始团队于2016年创办,是领先的大数据分析和指标平台供应商,提供企业级OLAP(
多维分析
风尚云网
·
2023-06-11 17:53
人工智能
低代码
大数据
Kylin
1.2数据仓库这是商业智能的核心部分,主要是将不同数据源的数据整合到一起,通过
多维分析
为企业提供决策支持报表生成等。存入数据仓库的资料必定包含时间属性。
爱过java
·
2023-06-10 05:22
kylin
数据仓库
数据挖掘
clickhouse优化最佳实践
clickhouse在易企秀数据仓库项目中已投入使用两年,主要为内部用户提供快速查询和
多维分析
的能力;希望你在业务当中遇到的性能问题,在这里都能得到解决Clickhouse堪称OLAP领域的黑马,最近发布的几个版本在多表关联分析上也有了极大的性能提升
weixin_42993799
·
2023-06-09 15:12
clickhouse
大数据
clickhouse 查询优化_clickhouse优化最佳实践(持续更新...)
clickhouse在易企秀数据仓库项目中已投入使用两年,主要为内部用户提供快速查询和
多维分析
的能力;希望你在业务当中遇到的性能问题,在这里都能得到解决Clickhouse堪称OLAP领域的黑马,最近发布的几个版本在多表关联分析上也有了极大的性能提升
Gigiain
·
2023-06-09 15:11
clickhouse
查询优化
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他