E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
clickhouse数据仓库
基于SQL的可观测性现状观察
本文字数:8975;估计阅读时间:23分钟作者:RyadhDahimene审校:庄晓东(魏庄)本文在公众号【
ClickHouse
Inc】首发1375年的加泰罗尼亚地图所展示的地中海地区。
ClickHouseDB
·
2024-01-29 01:47
产品
sql
数据库
clickhouse
使用
ClickHouse
推动特征存储
本文字数:7833;估计阅读时间:20分钟作者:DaleMcDiarmid审校:庄晓东(魏庄)本文在公众号【
ClickHouse
Inc】首发介绍在本文中,我们将深入探讨MLOps领域,并探讨特征存储:不同类型
ClickHouseDB
·
2024-01-29 01:47
软件工程
clickhouse
ClickHouse
23.12 版本发布说明
本文字数:12700;估计阅读时间:32分钟作者:
ClickHouse
Team审校:庄晓东(魏庄)本文在公众号【
ClickHouse
Inc】首发欢迎来到2024年的第一篇新版本发布文章,实际上是与2023
ClickHouseDB
·
2024-01-29 01:17
版本发布
clickhouse
详解最小化 Kafka 到
ClickHouse
延迟的原理和方法
本文字数:4801;估计阅读时间:13分钟审校:大平本文在公众号【
ClickHouse
Inc】首发引言
ClickHouse
博客上的很多话题都是由社区参与的公共讨论引起的,诸如Slack频道等。
ClickHouseDB
·
2024-01-29 01:16
软件工程
kafka
clickhouse
分布式
ClickHouse
中的CPU调度
本文字数:14267;估计阅读时间:36分钟作者:MaksimKita审校:庄晓东(魏庄)本文在公众号【
ClickHouse
Inc】首发概述在这篇文章中,我将描述向量化的工作原理,什么是CPU调度,如何找到
ClickHouseDB
·
2024-01-29 01:16
软件工程
clickhouse
在
ClickHouse
中处理更新和删除
本文字数:9491;估计阅读时间:24分钟作者:
ClickHouse
中国Meetup活动:首届
ClickHouse
官方Meetup活动正式开放报名,文末扫码报名!
ClickHouseDB
·
2024-01-29 01:46
软件工程
clickhouse
使用
ClickHouse
进行向量搜索 - 第二部分
本文字数:30099;估计阅读时间:76分钟审校:庄晓东(魏庄)本文在公众号【
ClickHouse
Inc】首发介绍这篇博客文章是关于向量搜索系列的续篇,基于前一篇文章,我们为向量搜索提供了一个概览,探讨了它与历史上基于倒排索引的方法的关系
ClickHouseDB
·
2024-01-29 01:46
软件工程
clickhouse
ClickHouse
Keeper: 一个用 C++ 编写的 ZooKeeper 替代品
本文字数:9915;估计阅读时间:25分钟审校:庄晓东(魏庄)本文在公众号【
ClickHouse
Inc】首发介绍
ClickHouse
是用于实时应用和分析的最快且资源利用率最高的开源数据库。
ClickHouseDB
·
2024-01-29 01:46
软件工程
clickhouse
zookeeper
分布式
Goldsky - 使用
ClickHouse
和Redpanda的黄金标准架构
本文字数:6240;估计阅读时间:16分钟作者:
ClickHouse
Team审校:庄晓东(魏庄)本文在公众号【
ClickHouse
Inc】首发介绍作为一家以开源为根基的公司,我们发现用户通常是第一个识别并运用新的架构模式或应用的人
ClickHouseDB
·
2024-01-29 01:16
软件工程
clickhouse
架构
[架构之路-255]:目标系统 - 设计方法 - 软件工程 - 软件设计 - 架构设计 - 软件架构风格:串行-数据流风格、同步调用返回风格、并行异步分发与接收风格、虚拟机风格、
数据仓库
风格
目录前言:一、建筑风格1.1什么是建筑风格1.2常见的建筑风格1.3如何区分不同的建筑风格二、软件架构风格概述2.1什么是软件架构风格2.2如何区分不同的软件架构风格2.3软件架构风格的发展阶段2.4软件架构风格与软件架构的区别2.5常见的软件架构风格的种类1.8复杂软件系统可以组合多种架构风格二、常见的软件架构风格详解2.1A-串行-数据流风格:适合数据面业务处理(数据面)(1)A-串行-数据流
文火冰糖的硅基工坊
·
2024-01-29 00:25
架构之路
架构
软件工程
风格
ClickHouse
基础入门
一、
ClickHouse
简介
ClickHouse
是俄罗斯的Yandex于2016年开源的一个用于联机分析(OLAP:OnlineAnalyticalProcessing)的列式数据库管理系统(DBMS:
AC编程
·
2024-01-28 21:42
关于hive 的迁移 之 表结构批量迁移
image.png我们在做数据治理
数据仓库
的时候,集群数据迁移时必不可少的一项,因为什么呢,比如1刚开始集群搭在亚马逊aws,几十万美金的创业红包用完了,差不多三四个月,2aws的小规模集群也有900TB
Helen_Cat
·
2024-01-28 16:44
ClickHouse
(23)
ClickHouse
集成Mysql表引擎详细解析
MySQL表引擎MySQL引擎可以对存在远程MySQL服务器上的数据执行SELECT查询。调用格式:MySQL('host:port','database','table','user','password'[,replace_query,'on_duplicate_clause']);调用参数host:port—MySQL服务器地址。database—数据库的名称。table—表名称。user—
张飞的猪大数据
·
2024-01-28 14:22
ClickHouse入门与实战
clickhouse
mysql
大数据
数据仓库
数据库
Hive面试题*精选*!附答案!!!
HIVE面试一、Hive的基本概念1.什么是hiveHive是一款开源的基于hadoop的用于统计海量结构化数据的一个
数据仓库
,它定义了简单的类似SQL的查询语言,称为HQL,允许熟悉SQL的用户查询数据
yhy_only
·
2024-01-28 07:36
hive
学习
大数据
hive面试题总结(大数据面试)
Hive概述Hive是基于Hadoop的一个
数据仓库
工具,可以将结构化的数据文件映射成为一张数据库表,并提供类SQL的查询功能。可以将sql语句转化为MapReduce任务进行运行。
404个问号
·
2024-01-28 07:02
大数据
大数据
hive
java
hive面试题
0.思维导图1.简述Hive♥♥ 我理解的,hive就是一款构建
数据仓库
的工具,它可以就结构化的数据映射为一张表,并且可以通过SQL语句进行查询分析。
韩顺平的小迷弟
·
2024-01-28 07:29
大数据面试题
hive
hadoop
数据仓库
常见OLAP对比
Olap(On-lineAnalyticalProcessing,联机分析处理):是在基于
数据仓库
多维模型的基础上实现的面向分析的各类操作的集合。
不加班程序员
·
2024-01-28 00:34
Hadoop相关
数据库
大数据
数据分析
ClickHouse
高级学习(四)
Clickhouse
数据查询(待更新)
文章目录数据查询WITH子句SAMPLE子句ARRAYJOIN子句JOIN子句LIMITBY子句LIMIT查看SQL执行计划数据查询注意事项:在
clickhouse
里面不要使用select*这样的语句,
程序胖
·
2024-01-27 20:27
ClickHouse
clickhouse
ClickHouse
(一):入门
文章目录
ClickHouse
简介
ClickHouse
的特点列式存储DBMS的功能多样化引擎高吞吐写入能力数据分区与线程级并行性能对比
ClickHouse
的安装前期环境准备单机安装数据类型表引擎TinyLogMemoryMergeTreepartitionby
程序胖
·
2024-01-27 20:26
ClickHouse
数据库
database
总监眼里的数仓和中台、报表平台的概念及意义和你认为的不一样
总监眼里的数仓和中台、报表平台的概念及意义和你认为的不一样在大数据时代,
数据仓库
、中台和报表平台等概念逐渐成为企业数字化转型的热门话题。然而,不同职位和背景的人对这些概念的理解可能存在差异。
UI设计前端开发一线员工
·
2024-01-27 19:03
electron
javascript
前端
信息可视化
低代码
【华为云-云驻共创】数据高速公路—数仓集群通信技术详解
数据仓库
服务GaussDB(DWS)是一种基于华为云基础架构和平台的在线数据分析处理数据库,提供即开即用、可扩展且完全托管的分析型数据库服务。GaussDB(DWS)是基于华为融合
数据仓库
Gaus
IT民工金鱼哥
·
2024-01-27 18:29
在华为云社区的故事
华为云
GaussDB
ClickHouse
(22)
ClickHouse
集成HDFS表引擎详细解析
文章目录HDFS用法实施细节配置可选配置选项及其默认值的列表libhdfs3支持的
ClickHouse
额外的配置限制Kerberos支持虚拟列资料分享系列文章
clickhouse
系列文章知乎系列文章HDFS
张飞的猪大数据
·
2024-01-27 17:35
clickhouse
hdfs
大数据
hadoop
数据仓库
数据库
GBASE南大通用分享:
clickhouse
-Merge Tree原理解析
GBASE南大通用分享MergeTree表引擎参数:partitionby:分区键orderby:排序键primarykey:主键sampleby:抽样表达式(如果使用此配置,主键配置也需要声明同样的表达式)settingsindex_granularity:索引力度,默认值是8192,表示每隔8192行数据才生成一条索引settings:index_granularity_bytes:根据每一批
GBASE数据库
·
2024-01-27 14:03
数据库
GBASE南大通用
GBASE
笔记 |
Clickhouse
命令行查询
在
ClickHouse
中,可以使用命令行客户端执行查询。默认情况下,
ClickHouse
的命令行客户端称为
clickhouse
-client。
不会调制解调的猫
·
2024-01-27 14:01
ClickHouse
笔记
clickhouse
bash
服务器
运维
高可用性:
ClickHouse
高可用性架构与实现
1.背景介绍1.背景介绍
ClickHouse
是一个高性能的列式数据库管理系统,主要用于实时数据处理和分析。
OpenChat
·
2024-01-27 11:11
架构
clickhouse
java
大数据
微服务
clickhouse
数据库的连接
客户端连接工具1、
clickhouse
也提供内置浏览器版的UI工具:http://192.168.92.128:8123/play2、下载DBeaver和连接驱动https://dbeaver.io/files
深夜的烟
·
2024-01-27 09:41
IoT
Java
IoT
Doris 与
Clickhouse
对比(一)
1.常用引擎☕️Doris表数据模型duplicatekey场景:适用于数据无需提前聚合的分析业务。⚠️注意点:只指定排序列,相同的行并不会合并。uniquekey场景:适用于有更新需求的业务。⚠️注意点:key相同时,新记录覆盖旧记录。aggregatekey场景:可以提前聚合数据,适合报表和多维度业务。⚠️注意点:将会进行聚合操作,目前支持sum,min,max,replace等(1)sum:
大数据左右手
·
2024-01-27 08:14
Doris
Doris
clickhouse
银行
数据仓库
体系实践(11)--
数据仓库
开发管理系统及开发流程
数据仓库
管理着整个银行或公司的数据,数据结构复杂,数据量庞大,任何一个数据字段的变化或错误都会引起数据错误,影响数据应用,同时业务的发展也带来系统不断升级,数据需求的不断增加,
数据仓库
需要不断的升级和维护
南极找南
·
2024-01-27 08:51
银行数据仓库
数据仓库
银行
数据仓库
体系实践(10)--汇总指标层和集市模型设计
建立多层次的数据访问服务体系,有力提升
数据仓库
的价值。基于指标汇总层、集市层、可以提供面向业务人员的即席数据查询、以及面向应用开发者的数据接口、应用访问接口,满足不同类型应用的需要。
南极找南
·
2024-01-27 08:21
银行数据仓库
数据仓库
银行
数据仓库
体系实践(8)--主数据模型设计
主数据区域中保留了
数据仓库
的所有基础数据及历史数据,是
数据仓库
中最重要的数据区域之一,那主数据区域中主要分为近源模型区和整合(主题)模型区。上一节讲到了模型的设计流程如下图所示。
南极找南
·
2024-01-27 08:36
银行数据仓库
数据仓库
CDP技术系列(三):百万级QPS的人群命中服务接口性能优化指南
一、背景介绍CDP系统提供了强大的标签和群体的构建能力,面对海量数据的标签和群体,我们采用了Bitmap+
ClickHouse
的存储与计算方案。详细内容可以参考之前文章。
京东云技术团队
·
2024-01-27 07:32
性能优化
数据库
服务器
【技术预研】StarRocks官方文档浅析(2)
参考文档产品简介|StarRocksStarRocksStarRocks是一款高性能分析型
数据仓库
,使用向量化、MPP架构、CBO、智能物化视图、可实时更新的列式存储引擎等技术实现多维、实时、高并发的数据分析
偏振万花筒
·
2024-01-27 06:16
大数据
starRocks
数据库
clickhouse
数据迁移到starrocks踩坑记录
-
clickhouse
数据迁移到starrocks-新建
clickhouse
外部表方式-经测试存在bigint转换问题官方已于23年9.8日修复等待下个版本(官方10天左右发布一个版本)-https:/
Thomas2143
·
2024-01-27 06:15
free
clickhouse
1分钟了解基于Hadoop的
数据仓库
工具Hive(附超实用示例)
Hive功能Hive是基于Hadoop构建的一套
数据仓库
分析系统,它提供了丰富的SQL查询方式来分析存储在Hadoop分布式文件系统中的数据:可以将结构化的数据文件映射为一张数据库表,并提供完整的SQL
yuyuyuyo
·
2024-01-27 05:53
企业
数据仓库
环境
企业
数据仓库
环境企业
数据仓库
(EDW)是从普通
数据仓库
演变而来的,它们已在上篇文章中进行了描述。企业
数据仓库
试图表示组织的所有业务数据及其业务规则,而不是将重点放在单个主题域进行分析。
DataVault善哉
·
2024-01-27 00:04
Hive调优策略
Hive调优策略Hive作为大数据领域常用的
数据仓库
组件,在设计和开发阶段需要注意效率。
奋斗的蛐蛐
·
2024-01-26 23:24
MySQL技术探究(1)「索引技术」体验前所未有的技术探险,看穿索引的本质和技术体系(上篇)
数据库类型OLAP:联机分析处理----对海量历史数据进行分析,产生决策性的策略----
数据仓库
—HiveOLTP:联机事务处理----要求很短时效内返回对应的结果----数据库—关系型
洛神灬殇
·
2024-01-26 22:26
数据仓库
现代化和迁移解决方案Datametica
Datametica利用自动化将数据/工作负载/ETI/分析迁移到云,从而为企业提供支持。Datametica是一家通过建立数据湖来帮助企业实现数据平台现代化的公司,该数据湖安全地保存结构化和非结构化数据。随着企业数据湖从各种来源收集大量数据,需要利用信息并帮助做出更明智的业务决策。Datametica通过使用大数据技术和独特的自动化技术建立数据湖来帮助企业,这有助于以更快的速度和更低的成本完成该
weixin_30777913
·
2024-01-26 20:20
数据仓库
数据中台架构原理与开发实战:构建数据中台的步骤与方法
它可以对业务数据进行收集、加工处理、存储、分析,为各个部门提供简单有效的数据服务,包括
数据仓库
、数据湖、数据应用平台等。
OpenChat
·
2024-01-26 20:15
AI实战
大数据AI人工智能
Python实战
大数据
人工智能
语言模型
Java
Python
架构设计
ERD-ONLINE 免费在线数据库建模工具
ERD-ONLINE说明功能特点ERD-ONLINE是一款在线协作
数据仓库
设计软件,无需本地安装应用程序,在线操作数据库,是桌面数据建模工具的一个优秀的替代方案。
ERD Online
·
2024-01-26 14:02
ERD-ONLINE
数据建模
在线
web
ERD
用户画像项目背景
1,用户画像项目介绍大数据平台简介
数据仓库
+用户画像+推荐系统(1)
数据仓库
:加快数据的分析和查询
数据仓库
分层:ODS层(映射HDFS的数据)—DW(
数据仓库
层)–APP(层)—BI(层)DW:DWD明细数据层
祈愿lucky
·
2024-01-26 13:20
大数据
spark
kafka
第2章 信息技术发展——2.1 信息技术及其发展
软件定义网络3.第五代移动通信技术2.1.3存储和数据库1.存储技术2.数据结构模型1)层次模型2)网状模型3)关系模型3.常用数据库类型1)关系型数据库2)非关系型数据库3)不同存储方式数据库的优缺点4.
数据仓库
Mrlibai
·
2024-01-26 07:06
信息系统项目管理
网络
信息与通信
笔记
学习
深度干货|谈谈阿里云AnalyticDB Spark如何构建低成本数据湖分析
文/李少锋阿里云瑶池旗下的云原生
数据仓库
AnalyticDBMySQL版是基于湖仓一体架构打造的实时湖仓。本文将分享AnalyticDBMySQLSpark助力构建低成本数据湖分析的最佳实践。
阿里云瑶池数据库
·
2024-01-26 06:57
阿里云
spark
云计算
web系统架构基于springCloud的各技术栈
使用的技术栈:springboot+mysql+
clickhouse
+postgresql+redis+rocketMq+oss+eureka+base-gateway+apollo+docker+nginx
奋力向前123
·
2024-01-26 01:50
java
系统架构
spring
cloud
spring
docker 部署
clickhouse
docker部署
clickhouse
的注意点当前百度上查到的都是如下所示教程dockerpullyandex/
clickhouse
-server此镜像为个人版本,不是
clickhouse
的官方版本
clickhouse
挖煤小王子
·
2024-01-26 01:14
docker
clickhouse
容器
Docker安装
Clickhouse
详细教程
简介
ClickHouse
是一种列式数据库管理系统,专门用于高性能数据分析和
数据仓库
应用。它是一个开源的数据库系统,最初由俄罗斯搜索引擎公司Yandex开发,用于满足大规模数据分析和报告的需求。
AscendKing
·
2024-01-26 01:13
clickhouse
大数据|Spark介绍
前文回顾:Hive和
数据仓库
目录为什么会有SparkSpark的基本架构和组件主要体系结构和组件Spark集群的基本结构Spark系统的基本结构Spark应用程序的基本结构Spark程序运行机制⭐️Spark
啦啦右一
·
2024-01-25 21:08
大数据与数据分析
#
大数据管理与分析笔记
大数据
spark
ClickHouse
极简教程
ClickHouse
简介Yandex开源的数据分析的数据库,名字叫做
ClickHouse
,适合流式或批次入库的时序数据。
禅与计算机程序设计艺术
·
2024-01-25 21:59
clickhouse
异常分析
1、
Clickhouse
ToomanypartitionsforsingleINSERTblock(morethanxxx)解决方法ToomanypartitionsforsingleINSERTblock
那些乐趣
·
2024-01-25 20:01
clickhouse
数据库
sqoop之hive
数据仓库
和oracle数据库数据转换
1sqoop简介1.1什么是sqoop?sqoop(发音:skup)是一款开源的工具,主要用于在Hadoop(Hive)与传统的数据库(mysql、oracle)间进行数据的传递,可以将一个关系型数据库(例如:MySQL,Oracle,Postgres等)中的数据导进到Hadoop的HDFS中,也可以将HDFS的数据导进到关系型数据库中。Sqoop项目开始于2009年,最早是作为Hadoop的一个
Summer_1981
·
2024-01-25 20:37
上一页
3
4
5
6
7
8
9
10
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他