clickhouse集群部署

Java版商城：Spring Cloud+SpringBoot b2b2c实现多商家入驻、直播带货及免 费小程序商城搭建

springboot、mybatis、redis3.前端框架vue、uniapp、bootstrap/h5/css3、ios、android、小程序4.核心思想分布式、微服务、云架构、模块化、原子化、持续集成、集群部署
微服务商城技术分享·2023-12-15 11:02

记录一次springboot单数据源mysql到多数据源mysql+clickhouse的接入过程,项目使用seata做事务管理

记录一次springboot单数据源mysql到多数据源mysql+clickhouse的接入过程,项目使用seata做事务管理单数据源配置:spring:datasource:username:rootpassword
weixin_45684051·2023-12-15 11:28

Kubectl Patch 的应用

仍处于终止状态[root@k8s-01clickhouse-cluster]#kubectlapply-fsample05.yamlErrorfromserver(MethodNotAllowed):errorwhencreating"sample05
叱咤少帅（少帅）·2023-12-15 09:07

【用户画像】将数据迁移到ClickHouse（源码实现）、位图的介绍（bitmap）、位图在用户分群中的应用、位图的使用

文章目录一数据迁移至Clickhouse1为何要迁移2方案选型3任务目标4设计分析5代码实现（1）pom.xml（2）配置文件（3）创建库6打包发布二在clickhouse中宽表转换为Bitmap表1为什么用位图
OneTenTwo76·2023-12-15 08:54

RoaringBitMap在ClickHouse和Spark之间的实践-解决数据仓库预计算多维分析问题

前面在Spark多维分析去重计数场景优化案例中说了一下Spark计算在多维分析场景中的弊端，多维度分析会导致数据量指数级膨胀，搭配上去重计算字段越多，膨胀倍数也是线性增长，通过BitMap这个案例也更加让我们明白了，什么是数据倾斜，从根本来讲，并不仅仅是数据量的问题，而是倾斜Task在进行数据IO和数据计算的时候耗费过长时间，我理解为下面三种情况。数据量过大很常见单条数据存储过大很少有单个字段单条
小满锅lock·2023-12-15 08:23

ClickHouse 集成Bitmap(2022-01-16更新)

ClickHouse继承Bitmap1、精确去重计数性能测试1.1、创建一张test表1.2、往test表插入1亿条数据1.3、进行精确去重计数性能测试2、Bitmap位存储和位计算3、位图函数groupBitmapStatebitmapBuildbitmapToArraybitmapSubsetInRangebitmapSubsetLimitbitmapContainsbitmapHasAnyb
会点东西的普通人·2023-12-15 08:53

Java 操作 ClickHouse Bitmap

Java操作ClickHouseBitmap1、需求背景最近接手项目需要做人群标签分析，结果集会保存为bitmap的形式，需要读取ck中bitmap数据到内存中。
sanliangitch·2023-12-15 08:48

SparkSQL & ClickHouse RoaringBitmap64格式支持

ClickHouse新版使用roaring64map(https://github.com/RoaringBitmap/CRoaring/blob/af9fafb72edcfb88f7adc781eaea4e7e95f68d01
fz1989·2023-12-15 08:47

【Clickhouse】float 计算误差

举例：SELECT0.1+0.2ASresult在ClickHouse中，运行上述查询，可能会得到一个结果接近于0.3，但不完全相等的值，例如0.30000000000000004。
TaiKuLaHa·2023-12-15 08:46

ClickHouse中的 Bitmap

ClickHouseBitmap一、bitmap本身bitmap（位图）是一种利用比特位来进行数据存储的结构，非0即1。
RileyXia·2023-12-15 08:46

ClickHouse源码阅读(0000 1111) —— ClickHouse中的bitmap实现

项目中使用到了ClickHouse的bimtap结构，来分析下ClickHouse中bimtap的具体实现。
B_e_a_u_tiful1205·2023-12-15 08:45

Clickhouse RoaringBitmap

https://blog.csdn.net/penriver/article/details/119736050https://juejin.cn/post/7179956435806076988BitMap适合连续密集的正整数存储，对于稀疏的正整数存储，其性能在很多时候是没办法和int数组相比的，尤其是正整数跨度较大的场景；RoaringBitMap就是为了解决这个问题产生。1RoaringBi
TaiKuLaHa·2023-12-15 08:41

Hadoop集群部署实战指南

一、大数据简介1、为什么使用大数据技术？数据量越来越大数据分析的实时性越来越强数据结果的应用越来越广泛结论：我们需要使用大数据技术。2、大数据的定义大数据是收集、整理、处理大容量数据集，并从中获得结果的技术总称。二、大数据应用领域1）广告广告投放广告策略2）电信深度包检测流失分析
wespten·2023-12-15 07:53

物流实时数仓：采集通道搭建

环境准备1.前置环境2.hbase安装1.上传并解压2.配置环境变量3.拷贝jar包4.编写配置文件5.分发配置文件3.Redis安装1.安装需要的编译环境2.上传并解压文件3.编译安装4.后台访问4.ClickHouse
超哥--·2023-12-15 06:34

Kubernetes(K8S)部署安装+K8S操作资源（NameNode/Pod/Deployment/Service/lngress/挂载数据和配置文件/Secret）

K8S集群部署一、准备三台服务器通过命令为每一个服务器设置主机名hostnamectlset-hostnamek8s-masterhostnamectlset-hostnamek8s-node1hostnamectlset-hostnamek8s-node2free-m
A尘埃·2023-12-14 20:12

第十四章 ： Spring Boot 整合spring-session,使用redis共享

SpringBoot整合spring-session,使用redis共享前沿本文重点讲述：springboot工程中使用spring-session机制进行安全认证，并且通过redis存储session，满足集群部署
半部论语·2023-12-14 20:55

Kubeadm 部署集群

目录1.1获取镜像1.2安装docker[集群]1.3阿里仓库下载[集群]1.4集群部署[集群]1.5集群环境配置[集群]1.6关闭系统Swap[集群]1.7安装Kubeadm包[集群]1.8配置启动kubelet
宇博士·2023-12-14 20:59

Docker笔记：Docker Swarm 搭建集群与项目部署

关于DockerSwarm1）Swarm的引入DockerCompose只能编排单节点上的容器，即:单台服务器上的集群部署如果要实现多台服务器上的集群部署，就可以选择SwarmDockerSwarm是Docker
Wang's Blog·2023-12-14 19:38

Elasticsearch- 环境-Windows集群部署和环境-Linux单节点部署和Linux集群部署-03

Elasticsearch环境环境-简介单机&集群单台Elasticsearch服务器提供服务，往往都有最大的负载能力，超过这个阈值，服务器性能就会大大降低甚至不可用，所以生产环境中，一般都是运行在指定服务器集群中。除了负载能力，单点服务器也存在其他问题：单台机器存储容量有限单服务器容易出现单点故障，无法实现高可用单服务的并发处理能力有限配置服务器集群时，集群中节点数量没有限制，大于等于2个节点就
渣渣龙_拽得很·2023-12-14 16:03

【自定义Source、Sink】Flink自定义Source、Sink对ClickHouse进行读和批量写操作

ClickHouse官网文档Flink读取ClickHouse数据两种驱动ClickHouse官方提供ClickhouseJDBC.
不进大厂不改名二号·2023-12-14 16:03

【实用+干货】如何使用Clickhouse搭建百亿级用户画像平台看这一篇就够了

背景如果你是用户，当你使用抖音、小红书的时候，假如平台能根据你的属性、偏好、行为推荐给你感兴趣的内容，那就能够为你节省大量获取内容的时间。如果你是商家，当你要进行广告投放的时候，假如平台推送的用户都是你潜在的买家，那你就可以花更少的钱，带来更大的收益。这两者背后都有一项共同的技术支撑，那就是用户画像。业务能力京东科技画像系统，提供标准的画像功能服务，包含标签市场、人群管理、数据服务、标签管理等，可
工业甲酰苯胺·2023-12-07 00:31

2023.9.6 类加载器和双亲委派模型、ClickHouse和PostgreSQL

早上又是满课，而且来晚了，最后一排还没有桌子，够艰苦的，ipad放腿上写力扣。老规矩还是写了两题第一题，光从题目看其实很难一眼看出来该用什么。但是它有两个个明显的特征：叠加和比较，所以应该用动态规划来解决。这里设dp[i]为i元所需硬币的最少数量，然后遍历i到目标值amount，逐步记录每个钱数最少硬币数量，跟前面的完全平方数非常像，里面的嵌套的循环就是由近到远来查，看中间到底能空多少个，空得越多
zark456·2023-12-06 12:50

SpringBoot 整合 MongoDB 6 以上版本副本集及配置 SSL / TLS 协议

此篇文章是对上一篇文章的实战和项目中相关配置的使用，我这边针对MongoDB原有基础上做了增强，简化了MongoDB配置SSL/TLS协议上的支持,目前支持SpringBoot、SpringCloud等场景下，支持MongoDB单机、副本集、分片集群部署上的使用
架构潜行之路·2023-12-06 12:27

第12章 VersionedCollapsingMergeTree引擎测试

算法：当ClickHouse合并数据片段时，它会删除满足如下条件的行：排序键相同，version相同，Sign不同。
边走边忘·2023-12-06 09:42

Mysql分布式集群部署---MySQL集群Cluster将数据分成多个片段，每个片段存储在不同的服务器上

1.1目的部署MysqlCluster集群环境1.2MySQL集群Cluster原理1数据分片MySQL集群Cluster将数据分成多个片段，每个片段存储在不同的服务器上。这样可以将数据负载分散到多个服务器上，提高系统的性能和可扩展性。2.数据同步MySQL集群Cluster使用多个服务器来存储数据，因此需要确保数据在不同的服务器之间同步。MySQL集群Cluster使用多种同步机制，如异步复制、
qq_14910065·2023-12-06 09:41

Kubernetes（k8s）访问不了Pod服务

在k8s集群部署javaweb应用的服务时，浏览器访问不了pod服务或linux终端curlhttp://192.168.138.112:30000即curlhttp://ip地址:端口号失败，如下图：
向之 所欣·2023-12-06 09:56

Kubeadm构建K8S集群指南：从环境准备到Dashboard部署的详细步骤与常见问题解决方案

设置主机名与时区3、添加hosts网络主机配置4、关闭防火墙5、验证是否配置正确二、安装Kubeadm1、在每个Centos上安装Docker2、确保从cgroups均在同一个从groupfs3、安装kubeadm集群部署工具
程序员Forlan·2023-12-06 06:40

Clickhouse常用sql

SQL语句1.增加jdbcTemplate.execute(sql)//生成表CREATETABLE表名(`列名1`String,`列名2`String,`列名3`DateTime)ENGINE=ReplacingMergeTree//引擎类型PARTITIONBY列名3//分区PRIMARYKEY(列名1)//主键ORDERBY(列名1)//排序SETTINGSindex_granularity
白snow·2023-12-05 19:33

JAVA电商平台免费搭建 B2B2C商城系统 多用户商城系统 直播带货 新零售商城 o2o商城 电子商务 拼团商城 分销商城

SpringBoot、Mybatis、Redis3.前端框架VUE、Uniapp、Bootstrap/H5/CSS3、IOS、Android、小程序4.核心思想分布式、微服务、云架构、模块化、原子化、持续集成、集群部署
2301_78385600·2023-12-05 16:18

click house基础总结

clickhouse简介来源：尚硅谷clickhouse教程文档clickhouse是俄罗斯的Yandex在2016年开源的列式存储数据库DBMS，使用c++语言用于在线分析处理查询OLAP，能够使用SQL
厨 神·2023-12-05 16:51

java版微信小程序商城免费搭建 java版直播商城平台规划及常见的营销模式有哪些？电商源码/小程序/三级分销

SpringBoot、Mybatis、Redis3.前端框架VUE、Uniapp、Bootstrap/H5/CSS3、IOS、Android、小程序4.核心思想分布式、微服务、云架构、模块化、原子化、持续集成、集群部署
微服务商城技术分享·2023-12-05 12:25

《ClickHouse原理解析与应用实践》读书笔记（3）

开始学习《ClickHouse原理解析与应用实践》，写博客作读书笔记。本文全部内容都来自于书中内容，个人提炼。
Aiky哇·2023-12-05 10:22

Kubernetes集群部署—部署Master 节点 （三）

文章目录1生成kube-apiserver证书（master节点操作）1.1自签证书颁发机构（CA）1.2使用自签CA签发kube-apiserverHTTPS证书2从Github下载二进制文件3解压二进制包（master节点操作）4部署kube-apiserver（master节点操作）4.1创建配置文件4.2拷贝刚才生成的证书4.3创建上述配置文件中token文件：4.4systemd管理ap
杰哥的技术杂货铺·2023-12-05 08:35

Kubernetes集群部署—部署Worker节点（四）

文章目录1、创建工作目录并拷贝二进制文件2部署kubelet（master节点操作）2.1创建配置文件2.2配置参数文件2.3生成bootstrap.kubeconfig文件2.4systemd管理kubelet2.5启动并设置开机启动3批准kubelet证书申请并加入集群4部署kube-proxy（master节点操作）4.1创建配置文件4.2配置参数文件4.3生成kube-proxy.kube
杰哥的技术杂货铺·2023-12-05 08:35

通过RocketMq实现websocket的session共享（干货满满）

目录1、引入所需依赖2、RocketMq配置3、websocket配置文件4、发送消息5、监听消息6、效果展示工作中遇到即时聊天的需求，由于服务是集群部署，需要实现session共享，之前写过使用Redis
mlwsmqq·2023-12-05 08:37

通过Redis发布者/订阅者模式实现websocket的session共享

、RedisReceiver（消息监听对象，接收订阅消息进行处理）8、小结9、Websocket中的doMessage实现10、通过RocketMq实现websocket的session共享由于项目是集群部署
mlwsmqq·2023-12-05 08:36

ZooKeeper快速领导选举（Fast Leader Election）机制解析

最近我们服务ClickHouse集群的ZooKeeperznode数量一度突破了300万，但压力还好。之前说过不少ZooKeeper的应用，但还没有真正涉及到它的原理，那么本文就找个切入点来聊聊吧。
LittleMagic·2023-12-05 05:43

java版商城之直播带货直播订单 Spring Cloud+SpringBoot+mybatis+uniapp b2b2c o2o 多商家入驻商城 直播带货商城 电子商务

SpringBoot、Mybatis、Redis3.前端框架VUE、Uniapp、Bootstrap/H5/CSS3、IOS、Android、小程序4.核心思想分布式、微服务、云架构、模块化、原子化、持续集成、集群部署
m0_72864708·2023-12-05 00:20

JAVA电商平台免费搭建 B2B2C商城系统 多用户商城系统 直播带货 新零售商城 o2o商城 电子商务 拼团商城 分销商城

SpringBoot、Mybatis、Redis3.前端框架VUE、Uniapp、Bootstrap/H5/CSS3、IOS、Android、小程序4.核心思想分布式、微服务、云架构、模块化、原子化、持续集成、集群部署
m0_66404702·2023-12-04 20:03

JAVA电商平台免费搭建 B2B2C商城系统 多用户商城系统 直播带货 新零售商城 o2o商城 电子商务 拼团商城 分销商城

SpringBoot、Mybatis、Redis3.前端框架VUE、Uniapp、Bootstrap/H5/CSS3、IOS、Android、小程序4.核心思想分布式、微服务、云架构、模块化、原子化、持续集成、集群部署
Xiaohong0716·2023-12-04 19:09

clickhouse + chproxy 集群搭建

《clickhouse+chproxy集群搭建》----集群规划集群架构其中Distribute是指创建分布式表的机器，在此文章中是将Distrihttps://www.jianshu.com/p/9498fedcfee7
架构师联盟·2023-12-04 18:55

ClickHouse异常解决-code: 1002

1002]:org.springframework.jdbc.UncategorizedSQLException:\n###Errorqueryingdatabase.Cause:ru.yandex.clickhouse.except.ClickHouseUnknownException
每天学习一点点的躺平程序员·2023-12-04 15:24

Elasticsearch集群部署 head监控插件 Kibana部署 Nginx反向代理 Logstash部署

一、组件介绍1、Elasticsearch：是基于一个Lucene的搜索引擎，提供搜索，分析。存储数据三大功能，他提供了一个分布式多用户能力的全文搜索引擎，基于RESTfulweb接口，Elasticsearch是用Java开发的，并作为Apache许可条款下的开放源码发布，是当前流行的企业级搜索引擎。设计用于云计算中，能够达到实时搜索，稳定，可靠，快速，安装使用方便2、Logstash主要是用来
我的麦子熟了。·2023-12-04 12:05

（一）Storm集群部署

要搭建storm集群首先需要由zookeeper，这里使用三台机器，一台做做nimbus（mini1机器），两台做supervisor（mini2和mini3机器）。三台hosts文件如下[root@mini1~]#cat/etc/hosts127.0.0.1localhostlocalhost.localdomainlocalhost4localhost4.localdomain4::1loca
小猪Harry·2023-12-04 11:41

java版商城之直播带货直播订单 Spring Cloud+SpringBoot+mybatis+uniapp b2b2c o2o 多商家入驻商城 直播带货商城 电子商务

SpringBoot、Mybatis、Redis3.前端框架VUE、Uniapp、Bootstrap/H5/CSS3、IOS、Android、小程序4.核心思想分布式、微服务、云架构、模块化、原子化、持续集成、集群部署
m0_67544708·2023-12-04 06:50

Hadoop——分布式计算MapReduce和资源调度Yarn

分布式计算MapReduceYARN架构YARN集群部署一、Hadoop安装目录下/etc/hadoop修改mapred-env配置文件，mapred-site.xml文件二、etc/hadoop文件内
A尘埃·2023-12-04 06:34

Clickhouse在货品标签场景的应用

背景在电商场景中，我们经常需要对货品进行打标签的操作，简单来说就是对货品进行各种分类，按照价格段进行分组，此时运营人员就可以通过价格段捞取到满足条件的商品了，本文就来简单看下这个场景如何在clickhouse
lixia0417mul2·2023-12-03 18:05

Clickhouse Join

ClickHouse中的HashJoin,ParallelHashJoin,GraceHashJoinhttps://www.cnblogs.com/abclife/p/17579883.htmlhttps
TaiKuLaHa·2023-12-03 18:34

clickhouse的向量化执行

背景clickhouse快的很大一部分原因来源于数据的向量化执行，本文就来看一下向量化执行和正常标量执行的区别SIMD的向量化执行从上图可知，clickhouse通过SIMD指令可以做到一个cpu周期操作两个向量的运算操作
lixia0417mul2·2023-12-03 18:03

kubeadm安装

kubeadm和minikube类似，用镜像和容器封装k8s的组件，其目标是集群部署。准备工作既然是集群
雨打夏夜·2023-12-03 16:18
上一页 14 15 16 17 18 19 20 21 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他