---ClickHouse

clickhouse-压测

一、数据集准备数据集可以使用官网数据集，也可以用ssb-dbgen来准备1.准备数据这里最后生成表的数据行数为60亿行，数据量为300G左右gitclonehttps://github.com/vadimtk/ssb-dbgen.gitcdssb-dbgen/make1.1生成数据#-s指生成多少G的数据$./dbgen-s40-Tc$./dbgen-s40-Tl$./dbgen-s40-Tp$.
与数据交流的路上·2023-08-26 14:24

虚拟机设置时区

->选择China-->选择Beijing—选择yes修改配置vim/etc/profile#添加如下TZ='Asia/Shanghai'exportTZ#刷新配置source/etc/profileclickhouse
闲不住的程序员·2023-08-26 01:59

Clickhouse物化视图原理和使用详解

前言ClickHouse广泛用于用户和系统日志查询场景中，主要针对于OLAP场景，为业务方提供稳定高效的查询服务。在业务场景下，数据以不同的格式、途径写入到clickhouse。
dkjhl·2023-08-25 21:28

python连接clickhouse数据插入OSError: [Errno 22] Invalid argument异常

背景python连接clickhouse插入数据异常，报错信息如下：Traceback(mostrecentcalllast):File"D:\workspace\zcm_docScript\venv\
赖皮猫·2023-08-25 18:38

Idea连接clickhouse异常驱动类找不到Driver class ‘ru.yandex.clickhouse.ClickHouseDriver‘ not found.

背景描述Idea连接clickhouse时，报驱动类找不到。
赖皮猫·2023-08-25 18:37

clickhouse数据库insert select语句报错Code: 44. DB::Exception: Array(Int32) cannot be inside Nullable column

背景clickhouse数据库中，如何使用insertselect语句将Nullable字段写入非null的字段中报错，Code:44.DB::Exception:Array(Int32)cannotbeinsideNullablecolumn
赖皮猫·2023-08-25 18:07

如何快速地将Hive中的数据导入ClickHouse

如何快速地将Hive中的数据导入ClickHouseClickHouse是面向OLAP的分布式列式DBMS。
Ricky_Huo·2023-08-24 04:44

MPP 还是主流架构吗

MPP架构：MPP架构的产品：ImpalaClickHouseDruidDoris很多OLAP引擎都采用了MPP架构批处理系统-使用场景分钟级、小时级以上的任务，目前很多大型互联网公司都大规模运行这样的系统
菠萝-琪琪·2023-08-23 11:03

docker安装clickhouse

安装docker安装创建clickhouse目录mkdir -P /data/clickhouse/datamkdir -P /data/clickhouse/confmkdir -P /data/clickhouse
yue_stack·2023-08-23 09:37

clickhouse（十四、分布式DDL阻塞及同步阻塞问题）

文章目录一、分布式ddl阻塞、超时现象验证方法解决方案二、副本同步阻塞现象验证解决方案一、分布式ddl阻塞、超时现象在clickhouse集群的操作中，如果同时执行一些重量级变更语句，往往会引起阻塞。
yyoc97·2023-08-23 08:35

ClickHouse的架构与基本概念

一、ClickHouse的定义ClickHouse是一个完全的列式分布式数据库管理系统(DBMS)，允许在运行时创建表和数据库，加载数据和运行查询，而无需重新配置和重新启动服务器，支持线性扩展，简单方便
晓之以理的喵~~·2023-08-23 05:19

docker安装clickhouse

安装docker安装创建clickhouse目录mkdir-P/data/clickhouse/datamkdir-P/data/clickhouse/confmkdir-P/data/clickhouse
·2023-08-22 10:39

clickhouse的删除和更新

clickhouse不擅长更新和删除操作，更新操作很重，更新是重新创建一个分区，更新完后，太混之前的ClickHouse提供了DELETE和UPDATE的能力，这类操作被称为Mutation查询，它可以看作
不吃饭的猪·2023-08-22 09:27

clickhouse的更新操作注意事项

1，clickhouse的更新操作必须带有where条件2，mutation操作适用于where筛选出大批量数据的更改3，mutation操作是不可逆的，一旦提交，及时重启ck，也会按照system.mutations
不吃饭的猪·2023-08-22 09:27

clickhouse的分区

说明：clickhouse的分区和hive表有类似地方，但也有区别，比如clickhouse中支持对分区的卸载和装载，卸载的数据不受ck管控，数据一直在，还可以复制分区数据到另外一张表结构一样的分区一样的表中
不吃饭的猪·2023-08-22 09:57

clickhouse插入数据

clickhouse中插入数据，最好性能是按照指定格式插入文件，这样是ck擅长的，因为ck是写入block的，每个block的大小在配置文件中设置有，这样在数据未写满block的时候，要么写成功要么写失败
不吃饭的猪·2023-08-22 09:57

ClickHouse（二十三）：Java &Spark读写ClickHouse API

进入正文前，感谢宝子们订阅专题、点赞、评论、收藏！关注IT贫道，获取高质量博客内容！个人主页：含各种IT体系技术，IT贫道_ApacheDoris,大数据OLAP体系技术栈,Kerberos安全认证-CSDN博客订阅：拥抱独家专题，你的订阅将点燃我的创作热情！点赞：赞同优秀创作，你的点赞是对我创作最大的认可！⭐️收藏：收藏原创博文，让我们一起打造IT界的荣耀与辉煌！✏️评论：留下心声墨迹，你的评论
IT贫道·2023-08-22 09:55

clickhouse的ttl

当列中的值过期时，ClickHouse会将其替换为列数据类型的默认值。如果数据部分中的所有列值均已过期，则ClickHouse将从文件系统中
不吃饭的猪·2023-08-22 09:24

ClickHouse安装及部署

Docker快速安装本地pull镜像dockerrun-d--namech-server--ulimitnofile=262144:262144-p9000:9000-p8123:8123yandex/clickhouse-server
孙靖俊·2023-08-22 08:04

clickhouse DBA入门常用SQL

1.查询正在运行的SQLselect*fromsystem.processes;也可以showprocesslist但不太方便过滤user-执行查询的用户。对于分布式处理，查询会在default用户下发送到远程服务器。该字段是执行特定查询的用户名，而不是初始发起此查询的用户名。address-发出请求的IP地址。elapsed-请求执行时间，单位为秒。read_rows-从表中读取的行数。对于分布
Hehuyi_In·2023-08-21 07:55

ClickHouse学习笔记之数据一致性

背景ClickHouse中，即使是对数据一致性支持最好的合并树引擎，也只能保证最终一致性。
coder_szc·2023-08-21 05:35

ClickHouse学习笔记之安装配置

介绍ClickHouse是俄罗斯公司Yandex推出的列式存储数据库，不依赖于Hadoop生态，用于在线分析处理查询，通过SQL查询实时生成分析数据报告。
coder_szc·2023-08-21 05:34

ClickHouse学习笔记之副本

副本写入流程如下图所示，ClickHouse结点通过ZooKeeper集群同步数据：配置步骤安装、配置、启动ZooKeeper配置副本进入/etc/clickhouse-server目录[root@scentosszc
coder_szc·2023-08-21 05:34

ClickHouse学习笔记之SQL语句

文章目录简介InsertUpdate和Delete删除修改查询插入数据withcubewithtotalsalter操作导出数据简介ClickHouse支持传统的MySQL中的结构化查询语言SQL，因此此处不会从头学
coder_szc·2023-08-21 05:04

睿思BI正式支持ClickHouse

ClickHouse作为一个列存数据库，非常适合用来做OLAP分析，而睿思BI主要包括多维分析和报表功能，使用ClickHouse可以解决基于mysql查询的效率问题，现目前睿思BIV5.1版本已完全支持
睿思BI·2023-08-21 03:10

Metabase——开源的大数据分析探索、可视化报表神器

2.3支持的数据源（大家最关心的）2.4对比ApacheSuperset3.快速上手4.部署安装4.1部署方式及版本4.2配置需求4.3下载安装4.3启动与关闭5.用户手册5.1与clickhouse对接
╭⌒若隐_RowYet——大数据·2023-08-20 20:30

clickhouse入门

clickhouse1课程介绍和hadoop无关，俄罗斯，速度快3介绍&特点1列式存储在线分析处理。使用sql进行查询。列式存储更适合查询分析的场景。新增时候有一个寻址的过程。更容易进行压缩行式存储。
我叫山鸡996·2023-08-20 15:23

clickhouse出现数据重复问题

clickhouse出现数据重复问题排查在生产环境中，偶然发现clickhouse数据表中出现重复数据，并且都是重复的两条数据，重重迷雾，疑窦重生…建表语句如下：CREATETABLEtest.baseinfo
yeah_you_are·2023-08-20 10:56

ClickHouse写入数据报错Code: 27, e.displayText() = DB::ParsingException: Cannot parse input: expected ‘\t‘

后来参考插入clickhouse其他表的代码，甚至打印出praparedStatement填充数据后的sql语句，但是依旧无效。两者的插入语句完全相同，但是第二个就是插入不进
yeah_you_are·2023-08-20 10:25

写入clickhouse效率低总结

在将数据写入clickhouse中，直接使用的原生的jdbc，采用了两种方式。//方式一insertintotable(row1,row2,...)values(?,?,...)
yeah_you_are·2023-08-20 10:25

技术争鸣——关于OLAP引擎你所需要知道的一切

1.主流OLAP引擎技术原理大阅兵1.1何为OLAP在前文BI系统与ClickHouse：探索式BI的OLAP技术演进之路中已经涉及过OLAP的概念，这里再简要介绍下。
登高且赋·2023-08-20 00:22

ClickHouse（2）- CK介绍与MergeTree引擎

1.ck概述ClickHouse全称是ClickStream,DataWareHouse。根据名字可以分析为：在采集数据过程中，一次页面点击（click）会产生一个事件（event）。
·2023-08-19 13:11

CK集群搭建

u013332124/article/details/122714966ck集群搭建：yuminstall-yyum-utilsyum-config-manager--add-repohttps://packages.clickhouse.com
君泽丶·2023-08-18 17:32

ClickHouse（二十二）：Clickhouse SQL DML操作及导入导出数据

进入正文前，感谢宝子们订阅专题、点赞、评论、收藏！关注IT贫道，获取高质量博客内容！个人主页：含各种IT体系技术，IT贫道_ApacheDoris,大数据OLAP体系技术栈,Kerberos安全认证-CSDN博客订阅：拥抱独家专题，你的订阅将点燃我的创作热情！点赞：赞同优秀创作，你的点赞是对我创作最大的认可！⭐️收藏：收藏原创博文，让我们一起打造IT界的荣耀与辉煌！✏️评论：留下心声墨迹，你的评论
IT贫道·2023-08-18 14:11

Clickhouse——OLAP工具

1.基础知识clickhouse的特点：DBMS的功能：使用SQL列式存储:在列的统计计算上有优势，便于压缩，节省磁盘空间高吞吐写入能力：顺序写，充分利用了磁盘的吞吐能力数据分区与线程级并行：多核并行处理
July2333·2023-08-18 08:30

clickhouse 一（centos7安装clickhouse，设置用户名密码）

步骤1.准备2.安装3.设置用户名密码3.1clickhouse的密码有2种形式，一种是明文，一种是写sha256sum的Hash值3.2cilckhouse的配置文件默认地址/etc/clickhouse-server3.3
高并发·2023-08-18 08:28

clickhouse修改默认密码

1.明文密码vim/etc/clickhouse-server/users.xml找到下面的语句,增加明文密码1234567892.sha256密码#echo-n123456789|openssldgst-sha256
javachen__·2023-08-18 08:57

linux部署clickhouse(单机)

一、下载安装1.1、下载地址阿里巴巴开源镜像站-OPSX镜像站-阿里云开发者社区阿里巴巴开源镜像站，免费提供Linux镜像下载服务，拥有Ubuntu、CentOS、Deepin、MongoDB、Apache、Maven、Composer等多种开源软件镜像源，此外还提供域名解析DNS、网络授时NTP等服务，致力于为互联网用户提供全面，高效和稳定的基础服务。https://developer.aliy
88再见孙悟空·2023-08-18 07:58

clickhouse新建服务器流程

sudoapt-keyadv--keyserverhkp://keyserver.ubuntu.com:80--recv8919F6BD2B48D7543、echo"debhttps://packages.clickhouse.com
赵一舟·2023-08-18 07:58

python3 安装clickhouse_sqlalchemy(greenlet) 失败

环境信息：centos7操作系统，python3.8执行pip3installclickhouse_sqlalchemy或者pip3installgreenlet报以下报错：Command"/opt/python3.6.10
马飞·2023-08-18 07:28

clickhouse-备份恢复

可能大多数公司很少会对大数据所使用的数据进行备份，这里还是了解下比较好，下面做了一些简单的介绍，详细情况可以通过官网来查看，经过测试发现Disk中增量备份并不好用，而File中的增量是好用的,也可以看下开源工具clickhouse-backup
与数据交流的路上·2023-08-18 07:57

clickhouse-数据导入导出方案

一、简介clickhouse有多种数据的导入导出方式，可以灵活使用，下面对这些方式分别做些介绍，导入导出的写法与格式和格式设置有关。
与数据交流的路上·2023-08-18 07:56

分布式 | 浅谈 dble 引入 ClickHouse 的配置操作

作者：阙秀平爱可生dble团队测试成员，主要负责dble需求测试，自动化编写和社区问题解答。热衷rua雍正。本文来源：原创投稿*爱可生开源社区出品，原创内容未经授权不得随意使用，转载请联系小编并注明来源。一、功能背景我们知道,dble是基于MySQL的⾼可扩展性的分布式中间件，而MySQL擅长的是联机事务处理（OLTP），那么面对越来越多的联机分析(OLAP)需求，MySQL就显得有些捉襟见肘了。
ActionTech·2023-08-18 07:39

Clickhouse表引擎介绍

Clickhouse表引擎表引擎是Clickhouse的一大特色，表引擎决定了如何存储数据，包括：数据的存储方式和位置，写到哪里以及从哪里读取数据支持哪些查询以及如何支持并发数据访问索引的使用（如果存在
脆弱的天炎·2023-08-18 04:19

ClickHouse初探

简介首先介绍下ClickHouse的特点以及适用场景，引用官方的介绍ClickHouse是一个用于联机分析(OLAP)的列式数据库管理系统(DBMS)。
typ0520·2023-08-18 00:49

1 ClickHouse 安装部署（tgz）

1下载离线安装包到官网https://packages.clickhouse.com/tgz/stable/查看最新的安装包版本，https://packages.clickhouse.com/tgz/
prcyang·2023-08-17 23:44

ClickHouse（二十）：Clickhouse SQL DDL操作-2-分区表DDL操作

进入正文前，感谢宝子们订阅专题、点赞、评论、收藏！关注IT贫道，获取高质量博客内容！个人主页：含各种IT体系技术，IT贫道_ApacheDoris,大数据OLAP体系技术栈,Kerberos安全认证-CSDN博客订阅：拥抱独家专题，你的订阅将点燃我的创作热情！点赞：赞同优秀创作，你的点赞是对我创作最大的认可！⭐️收藏：收藏原创博文，让我们一起打造IT界的荣耀与辉煌！✏️评论：留下心声墨迹，你的评论
IT贫道·2023-08-17 11:54

ClickHouse AST is too big 报错问题处理记录

ClickHouseASTistoobig报错问题处理记录问题描述问题分析解决方案1、修改系统配置2、修改业务逻辑问题描述项目中统计报表的查询出现ASTistoobig问题，报错信息如下：问题分析报错信息显示
像少年啦飞驰点、·2023-08-17 11:54

clickhouse扩缩容

一、背景我们之前已经学会了搭建clickhouse集群，我们搭建的是一套单分片两副本的集群，接下来我们来测试下clickhouse的扩缩容情况二、扩容扩容相对来说比较简单，我们原来的架构如下hostshardreplica192.169.1.111192.169.1.212
与数据交流的路上·2023-08-17 11:23

clickhouse Checksum doesn‘t match: 问题修复

1.问题描述SQL错误[40][07000]:Code:40.DB::Exception:Checksumdoesn'tmatch:corrupteddata.Reference:50e8c1efa78de2881b725d44b04be1fe.Actual:161c99eb681ec36b83540ecdd65ad8c9.Sizeofcompressedblock:32846.Themismat
fusugongzi·2023-08-17 11:53
上一页 21 22 23 24 25 26 27 28 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他