---ClickHouse

clickhouse常见异常以及错误码解决

一、异常1）DB::Exception:NestedtypeArray(String)cannotbeinsideNullabletype(version20.4.6.53(officialbuild))原因：字段类型是Nullable(String)，在使用一些字符串函数如splitByString，他们对Nullable类型是不支持的，需要转成String。解决：使用cast强转一下字段类型就
林鸟鸟·2023-04-07 13:05

druid 的基础架构与应用

类似的产品有kylin/clickhouse。druid典型的应用就是OLAP场景下的cube组合查询分析。
Java大生·2023-04-07 12:38

ClickHouse 修改表字段属性避坑记录

修改CK数据表字段属性的标准语句是：altertable表名oncluster集群名MODIFYCOLUMN列名类型名……需求：将表中所有字段都设置为不可为空常规方式：每个字段的修改都会执行一条alter语句问题：由于CK是基于Zookeeper的分布式数据库，每执行一次alter操作，集群内部会进行同步字段属性；此时，如果批量执行alter命令，由于前一个字段未同步到整个集群，后一条alter执
wolfengi·2023-04-07 09:13

Flink+Clickhouse在广投集团实时数仓的最佳实践

Flink+Clickhouse实时数仓在广投集团的最佳实践一、业务背景由于历史原因，大型集团企业往往多个帐套系统共存，包括国内知名ERP厂商浪潮、用友、金蝶、速达所提供的财务系统，集团财务共享中心的财务人员在核对财务凭证数据时经常需要跨多个系统查询且每个系统使用方式不一
Wping_1c08·2023-04-06 23:55

spark 3.0.0 csv文件导入clickhouse

pom.xml文件：因为sparkjackson/guava会有版本冲突，因此需要shade隔绝4.0.0spark_clickhousespark_clickhouse1.0-SNAPSHOTorg.apache.sparkspark-sql
二十赶朝暮__·2023-04-06 18:03

初识clickhouse优势与部署

clickhouse简介clickhouse是Yandex在2016年6月15日开源的，发展非常迅猛，代码维护非常频繁，刚刚看了下1hourago；社区很活跃，证明其活力满满；官网也比较详细，惊喜的是有中文模式可以切换
帝休·2023-04-06 18:19

(Presto、HAWQ、ClickHouse、GreenPlum)

这是易观Spark实战营出品的开源Olap引擎测评报告，团队选取了Hive、Sparksql、Presto、Impala、Hawq、Clickhouse、Greenplum大数据查询引擎，在原生推荐配置情况下
探路人·2023-04-06 16:06

从Clickhouse 到 Snowflake： 云原生

云原生Clickhouse优势概述以Clickhouse为基础，借鉴Snowflake等系统的设计思路，打造一款高性能的云原生OLAP系统，为用户提供多场景下的一站式的数据分析平台。
简说Linux·2023-04-06 16:34

魔鬼存在于细节中：从Redshift迁移到ClickHouse后再无数据丢失

FunCorp是一家国际性娱乐App开发商，知名AppiFunny就是由FunCorp出品的。iFunny是一款非常有趣的图片和GIFApp，用户可以用它来打发时间，比如看模因、漫画、有趣的图片、宠物GIF等，也可以上传和分享自己的内容。iFunny一直使用Redshift作为后端服务和移动App的事件存储数据库。他们之所以选择Redshift，是因为当时从成本和便利性方面来看确实没有更好的选择。
weixin_33716941·2023-04-06 15:27

从 Clickhouse 到 Snowflake： 云原生

云原生Clickhouse优势概述以Clickhouse为基础，借鉴Snowflake等系统的设计思路，打造一款高性能的云原生OLAP系统，为用户提供多场景下的一站式的数据分析平台。
小晨说数据·2023-04-06 15:10

瞰见 | 初创1个月就融到3亿美金，ClickHouse 你凭什么？

-北岛或许是受巴菲特参投的纳斯达克热门公司-云上数仓Snowflake的催化，开源数据库ClickHouse社区也终于在2021年8月注册成立了商业化公司，紧接着不到2个月的时间内，以惊人的速度完成了A
OpenTEKr·2023-04-06 15:35

从 Clickhouse 到 Snowflake（一）： 云原生

概述Clickhouse是一款性能十分强悍的OLAP引擎，凭借优秀的性能在用户行为分析、ABTest、在线报表等多个领域大放异彩，但是目前Clickhouse在易用性、稳定性、可维护性、功能特性等方面都还有较多不足
简说Linux·2023-04-06 15:01

ETL 数据交换 engine 引擎 时序数据库交换 消息中间件数据分发

支持数据源类型时序数据库prometheusinfluxdbclickhouse关系型数据库mysqlpostgresqloraclesqlite文件excelcsv
weigeonlyyou·2023-04-06 09:07

统一观测丨使用 Prometheus 监控 E-MapReduce，我们该关注哪些指标？

开源大数据平台E-MapReduce（简称“EMR”）是云原生开源大数据平台，向客户提供简单易集成的Hadoop、Hive、Spark、Flink、Presto、ClickHouse、StarRocks
阿里云技术·2023-04-06 04:31

如何设置python2，python3，并添加环境变量

公众号后续将会持续更新clickhouse，sparkstreaming，flink，数仓建模，用户画像，实时计算，推荐系统，实时数仓等内容，感兴趣的朋友可以关注不定期会有朋友的面经分享1、添加python2
大数据私房菜·2023-04-05 23:14

clickhouse20.3.19.4-ARM版本简单修改重新编译，以支持kafka引擎表

clickhouse20.3.19.4的ARM版本默认是不支持kafka引擎表的，记得大概是从21.2（具体v21.2.2.8-stable,2021-02-07）才开始允许在ARM64上编译时支持kafka
huangmr0610·2023-04-05 06:33

clickhouse数据类型

整型有符号整型：Int8,Int16,Int32,Int64无符号整型：UInt8,UInt16,UInt32,UInt64浮点数（Float32,Float64）建议尽可能以整数形式存储数据。对浮点数进行计算可能引起四舍五入的误差。浮点计算结果可能是诸如正无穷大（inf）、负无穷大（-inf）和"非数字"（nan）。SELECT1-0.9#0.09999999999999998SELECT0.5
盗梦者_56f2·2023-04-05 02:40

clickhouse报错 Connection refused: connect

而在clickhouse中，则着重看一下防火墙以及clickhouse的host和port是否对外开放。我的报错如下：我这里代码检查过是没问题的，而且用户名密码类的问题一般都有更清晰的提示。
Interest1_wyt·2023-04-05 01:44

DataHub - 为现代数据技术栈而生的元数据管理平台

1.引言当前属于大数据时代，数据爆炸式增长，当然管理数据的工具也是层出不穷，从传统的单机关系型数据库PostgreSQL、Oracle、MySQL、MSSQL到擅长分析的Greenplum、Clickhouse
阿福Chris·2023-04-05 00:09

ClickHouse的bitmap学习之路

前文：Bitmap在大数据领域是一种伟大的思想，在没有Clickhouse出现之前，主流方案是用HBase+Coprocessor通过服务去做整套处理，特别是(1)用户画像领域，以前ES+HBase的方案及其复杂
CesarChoy·2023-04-04 18:10

C++雾中风景14:CRTP, 模板的黑魔法

笔者在进行数据库源码学习和开发时，发现无论是Clickhouse还是Doris中也同样大量使
LeeHappen·2023-04-04 13:18

数仓选型必列入考虑的OLAP列式数据库ClickHouse(中)

优质资源分享学习路线指引（点击解锁）知识定位人群定位Python实战微信订餐小程序进阶级本课程是pythonflask+微信小程序的完美结合，从项目搭建到腾讯云部署上线，打造一个全栈订餐系统。Python量化交易实战入门级手把手带你打造一个易扩展、更安全、效率更高的量化交易系统实战案例使用背景ELK作为老一代日志分析技术栈非常成熟，可以说是最为流行的大数据日志和搜索解决方案；主要设计组件及架构如下
李自提·2023-04-04 10:21

Doris (HOLAP)，实时数据仓库的王者。

前文：Uniq模型拳打KUDU、HUDI，Aggregate模型脚踢Kylin、ClickHouse，Duplicate模型跟Hive势不两立。Doris+Flink将会是实时数据仓库的重要基石。
CesarChoy·2023-04-04 06:17

ClickHouse-尚硅谷（15. 高级-常见问题排查）学习笔记

MaterializeMySQL引擎）学习笔记文章目录1分布式DDL某数据节点的副本不执行2数据副本表和数据不一致3副本节点全量恢复4数据副本启动缺少zk表5ZKtablereplicas数据未删除，导致重建表报错6Clickhouse
yuan_404·2023-04-04 05:29

ClickHouse列存储（十一）—— ClickHouse

文章目录一、重点内容：1.数据库基本概念2.列式存储3.clickHouse存储设计4.clickHouse典型应用场景二、准备工作：1、了解数据库基本概念2、了解列式存储相关概念3、了解ClickHouse
爱打辅助的小可爱·2023-04-03 23:55

ClickHouse系列之集群副本与分片

概述本文主要为大家介绍ClickHouse三板斧（集群、副本与分片）集群集群是副本和分片的基础，它将ClickHouse的服务拓扑由当前节点延伸到多个节点，但它并不像Hadoop生态某系统那样，要求所有节点组成一个单一的大集群
zhijunwoo·2023-04-03 12:07

Clickhouse MergeTree表引擎的原理解析

目录1.MergeTree简介2.MergeTree表引擎的创建3.储存结构4.数据分区5.一级索引6.二级索引7.数据储存8.数据标记9.分区、索引、标记和压缩数据的协同总结1.MergeTree简介数据写入时按partitionby字段进行分区储存到磁盘，同一个分区的数据会定期合并成一个新的片段只有MergeTree有数据副本、数据分区(partitionby)、主键索引、数据采样(sampl
Bulut0907·2023-04-03 12:06

ClickHouse高可用集群分片-副本实操(四)

目录一、ClickHouse高可用之ReplicatedMergeTree引擎二、ClickHouse高可用架构准备-环境说明和ZK搭建三、高可用集群架构-ClickHouse副本配置实操四、ClickHouse
这是王姑娘的微博·2023-04-03 12:04

ClickHouse 分布式表实现数据同步

在多副本分布式ClickHouse集群中，通常需要使用Distributed表写入或读取数据，Distributed表引擎自身不存储任何数据，它能够作为分布式表的一层透明代理，在集群内部自动开展数据的写入
平沙落雁子·2023-04-03 12:55

clickhouse笔记04--快速理解分片和副本

clickhouse笔记04--快速理解分片和副本1介绍2副本&分片核心要点2.1数据副本2.2ReplicatedMergeTree原理2.3数据分片2.4Distributed原理解析3注意事项4说明
昕光xg·2023-04-03 12:22

Clickhouse之ReplicatedMergeTree原理详解

ReplicatedMergeTree作为Clickhouse（下文简称CK）复制表系列的基础表引擎，包涵了CK数据副本最核心的逻辑，本文详细介绍了ReplicatedMergeTree的核心原理，以便于更好地去使用
zcx_bigdata·2023-04-03 12:51

clickhouse数据存储原理浅析

本文更好的阅读体验在笔者的个人博客中引言        最近做项目有个需求，想对clickhouse中的数据添加几个标签，但是总记着之前草草看过说clickhouse这种OLAP引擎的更新和删除数据操作是灾难性的
theonly_df·2023-04-03 11:11

ClickHouse详解

一clickhouse-简介ClickHouse是俄罗斯的Yandex于2016年开源的一个用于联机分析(OLAP:OnlineAnalyticalProcessing)的列式数据库管理系统(DBMS:
与光同尘~追光者·2023-04-03 11:40

clickhouse副本和分片

title:clickhouse副本和分片date:2021-02-2016:48:02categories:数据库tags:clickHouse副本和分片是在很多分布式系统中都有，首先简单来看看他们的概念
不想说话的猴子·2023-04-03 11:23

Clickhouse副本备份机制

配置方法配置clickhouse的zk属性
好奇的小黑·2023-04-03 11:19

clickHouse副本和同步机制

文章目录1.副本的基本概念1.1什么是副本1.2副本写入流程简单示例1.3多副本的配置1.4clickhouse创建副本表2.副本同步原理2.1clickhouse目录2.2ClickHouse在zk的目录结构
天使灬城·2023-04-03 11:18

Clickhouse的数据存储原理、二进制文件内容分析与索引详解

Clickhouse的数据存储原理、二进制文件内容分析与索引详解Clickhouse以其强大的性能著称，已经被越来越多的使用在OLAP分析查询等场景中。
JermeryBesian·2023-04-03 11:14

Clickhouse新版本JSON字段数据写入方式

Clickhouse新版本JSON字段数据写入方式在Clickhouse版本22.3.1版本以上，提供了针对JSON格式数据的新的数据类型：JSON，从而实现了存储此类数据由原先的结构化表结构，更新为现在的半结构化表存储
JermeryBesian·2023-04-03 11:14

Clickhouse的数据副本协同原理详解（借助ZK实现）

Clickhouse的数据副本协同原理详解（借助ZK实现）文章目录Clickhouse的数据副本协同原理详解（借助ZK实现）Clickhouse数据副本副本的特点ReplicatedMergeTree原理解析数据结构
JermeryBesian·2023-04-03 11:58

[ClickHouse] 使用 Bifrost 全量(实时)同步 MySQL 数据

1.简介本文记录一个从MySQL同步数据到ClickHouse的方案.在GitHub上以MySQL和ClickHouse为关键字搜索到几个相关的开源项目,首先试了下synch,结果在安装依赖包mysqlclient
風の唄を聴け·2023-04-03 03:43

php redis mysql中间件_GitHub - unphp/Bifrost: Bifrost ---- 面向生产环境的 MySQL 同步到Redis,MongoDB,ClickHouse,My.

Bifrost----面向生产环境的MySQL同步到Redis,ClickHouse等服务的异构中间件漫威里的彩虹桥可以将雷神送到阿斯加德和地球而这个Bifrost可以将你MySQL里的数据全量,实时的同步到
weixin_39875503·2023-04-03 03:39

ClickHouse 数据同步-和MySQL交个朋友

ClickHouse的数据同步功能一直是万众期待，之前有一些开源工具来做，比如Bifrost、mysql-clickhouse-replication、clickhouse-mysql-data-reader
万能修实验室·2023-04-03 03:07

bifrost-数据库同步中间件部署

https://wiki.xbifrost.com/githubhttps://github.com/brokercap/Bifrost介绍Bifrost----面向生产环境的MySQL同步到Redis,ClickHouse
opreator.ke·2023-04-03 03:52

Bifrost 同步数据库实现微服务跨库数据同步

BifrostBifrost可以在同步各种数据数据，类似于Canal当前支持的数据库RedisMongoDBClickHouse（DDLsuppoted）MySQL（DDLsupported）MemcacheRabbitMQActiveMQKafkaElasticSearchHttp
开发老张·2023-04-03 02:16

ClickHouse概述

简介ClickHouse是一个用于联机分析(OLAP)的列式数据库管理系统(DBMS)。列式数据库总是将同一列的数据存储在一起，不同列的数据也总是分开存储。
盗梦者_56f2·2023-04-03 00:57

Clickhouse第二讲-CK数据类型

Clickhouse支持的数据类型在system.data_type_families表中检查数据类型名称以及是否区分大小写。这个表中存储了ClickHouse支持的所有数据类型。
阳光-星辰大海·2023-04-02 23:47

Clickhouse第六讲-视图

ClickHouse中视图分为普通视图和物化视图，两者区别如图所示普通视图普通视图不存储数据，它只是一层select查询映射，类似于表的别名或者同义词，能简化查询，对原有表的查询性能没有增强的作用，具体性能依赖视图定义的语句
阳光-星辰大海·2023-04-02 23:47

Clickhouse-高级

Clickhouse使用场景列式存储、数据压缩、向量化执行、支持标准SQL、支持20多张表引擎、支持多线程与分布式、多主架构、交互式查询、数据分片与分布式查询等ClickHouse适合OLAP数据分析类的场景
阳光-星辰大海·2023-04-02 23:47

Clickhouse第一讲-CK概述

常用的数据架构OLAP场景绝大多数是读请求。数据以相当大的批次(>1000行)更新，而不是单行更新;或者根本没有更新。已添加到数据库的数据不能修改。对于读取，从数据库中提取相当多的行，但只提取列的一小部分。宽表，即每个表包含着大量的列。查询相对较少(通常每台服务器每秒查询数百次或更少)。对于简单查询，允许延迟大约50毫秒。列中的数据相对较小：数字和短字符串(例如，每个URL60个字节)。处理单个
阳光-星辰大海·2023-04-02 23:16

centos7安装clickhouse

包下载地址https://packagecloud.io/altinity/clickhouse安装依赖yuminstalllibicuunixODBC安装rpm-ivh+包名配置文件地址：/etc/clickhouse-server
Time一柒·2023-04-02 23:06
上一页 33 34 35 36 37 38 39 40 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他