E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
clickhouse集群部署
Apache Flink连载(二十三):Flink HA - Flink基于Yarn HA
个人主页:IT贫道_大数据OLAP体系技术栈,ApacheDoris,
Clickhouse
技术-CSDN博客私聊博主:加入大数据技术讨论群聊,获取更多大数据资料。
IT贫道
·
2024-01-02 04:42
大数据计算体系技术栈
Apache
Flink
apache
flink
大数据
Apache Doris (五十七): Doris - Runtime Filter
个人主页:IT贫道_大数据OLAP体系技术栈,ApacheDoris,
Clickhouse
技术-CSDN博客私聊博主:加入大数据技术讨论群聊,获取更多大数据资料。
IT贫道
·
2024-01-02 04:42
大数据OLAP体系技术栈
Apache
Doris
apache
php
开发语言
Apache Flink连载(二十二):Flink HA - Flink基于Standalone HA
个人主页:IT贫道_大数据OLAP体系技术栈,ApacheDoris,
Clickhouse
技术-CSDN博客私聊博主:加入大数据技术讨论群聊,获取更多大数据资料。
IT贫道
·
2024-01-02 04:11
大数据计算体系技术栈
Apache
Flink
apache
flink
大数据
clickhouse
入门之基础数据类型及数据表
数据类型基础类型基础类型只有三种数值、字符串、时间数值1.1数值类型int(用int8int16int32int64代表tinyintsmallintintbigint)分别占用1248字节,无符号整数加前缀U表示。1.2浮点数float(float32float64分别占用48字节有效精度分别为716位)1.3定点数decimal(decimal32(S)decimal64(S)decimal1
kooomo
·
2024-01-01 22:20
Elasticsearch-8.11.1 (2+1)HA(高可用)
集群部署
目录一、环境描述二、安装ES2.1下载Elasticsearch2.2解压Elasticsearch2.3创建es服务账号/密码2.3修改服务器配置2.4配置节点2.4.1配置说明2.4.2配置高可用集群2.4.2.1maser节点服务配置2.4.2.2node1节点服务配置2.4.2.3node2节点服务配置2.4.2.3node3节点服务配置2.4.2.3node4节点服务配置2.4.3服务启
夜夜流光相皎洁_小宁
·
2024-01-01 06:36
ElasticSearch
linux
运维
elasticsearch
高可用
kinana
es-head
第01期:一文了解
ClickHouse
一、简介1.1
ClickHouse
是什么?
ClickHouse
是Yandex(俄罗斯最大的搜索引擎)开源的一个用于实时数据分析的基于列存储的数据库,其处理数据的速度比传统方法快100-1000倍。
爱可生开源社区
·
2024-01-01 04:46
Kubernetes
集群部署
Rook Ceph实现文件存储,对象存储,块存储
Kubernetes
集群部署
RookCeph部署Ceph集群1.RookCeph介绍RookCeph是Rook项目中的一个存储方案,专门针对Ceph存储系统进行了优化和封装。
大風起雲飛揚
·
2023-12-31 17:08
kubernetes
ceph
容器
云原生
块存储
对象存储
文件存储
trino-435:
集群部署
二、
集群部署
1、集群规划节点是否为coordinatornod
玉成226
·
2023-12-31 13:38
【trino】
大数据
Nginx and micro-service
现在假设系统后端服务是微服务架构,一共100个microservice(简称:m-s),分别部署在150台机器上(有的服务是
集群部署
)。这种情况下前端请求它如何调抵达自己想访问的m-s呢?
君子兰琚琚
·
2023-12-31 13:37
一篇掌握Elasticsearch7.10集群搭建到实战
目录一、背景二、内容概要三、基础概念四、ES版本选择Elasticsearch版本选择ES客户端SDK版本选择五、Elasticsearch多租户多租户下的架构租户的识别和路由六、ES集群搭建
集群部署
架构单集群示例多集群示例
南天一梦N
·
2023-12-30 22:49
spring
JAVA杂七杂八
spring
elasticsearch
es
maven
spring
boot
CentOS7安装部署Zookeeper
集群角色4.特点5.环境二、正文1.部署服务器2.基础环境1)主机名2)Hosts文件3)关闭防火墙4)JDK安装部署3.单机部署1)下载和解压2)配置文件3)数据目录4)单机启动5)测试6)自启动4.
集群部署
趴着喝可乐
·
2023-12-30 21:43
#
CentOS
#
Middleware
zookeeper
分布式
MYSQL二主二从
集群部署
目录一、环境描述二、安装mysql2.1卸载mysql(如果没安装过,可忽略)2.1.1列出安装的mysql2.1.2卸载mysql2.1.3删除mysql文件目录2.1.3.1查看mysql目录2.1.3.2依次删除2.2在线安装2.2.1下载安装源2.2.2安装源rpm2.2.3加入rpm密钥2.2.4执行安装2.2.5设置开机自启动2.2.6修改密码2.2.6.1获取临时密码2.2.6.2登
夜夜流光相皎洁_小宁
·
2023-12-30 20:10
mysql
数据库
高可用
主从架构
MYSQL部署安装
Apache Doris (五十六): Doris Join类型 - 四种Join对比
个人主页:IT贫道_大数据OLAP体系技术栈,ApacheDoris,
Clickhouse
技术-CSDN博客私聊博主:加入大数据技术讨论群聊,获取更多大数据资料。
IT贫道
·
2023-12-30 15:32
大数据OLAP体系技术栈
Apache
Doris
doris
Apache Flink连载(二十):Flink On Yarn运行 - Yarn Per-Job模式(弃用)
个人主页:IT贫道_大数据OLAP体系技术栈,ApacheDoris,
Clickhouse
技术-CSDN博客私聊博主:加入大数据技术讨论群聊,获取更多大数据资料。
IT贫道
·
2023-12-30 15:02
大数据计算体系技术栈
Apache
Flink
apache
flink
大数据
Apache Flink连载(二十一):Flink On Yarn运行原理-Yarn Application模式
个人主页:IT贫道_大数据OLAP体系技术栈,ApacheDoris,
Clickhouse
技术-CSDN博客私聊博主:加入大数据技术讨论群聊,获取更多大数据资料。
IT贫道
·
2023-12-30 15:30
大数据计算体系技术栈
Apache
Flink
apache
flink
大数据
Spark在不同集群中的运行架构
部署在单台机器上时,既可以用本地(Local)模式运行,也可以使用伪分布式模式来运行;当以分布式
集群部署
的时候,可以根据自己集群的实际情况选择Standalone模式(Spark自带的模式)、YARN-Client
姚兴泉
·
2023-12-30 13:54
clickhouse
连接工具dbeaver
地址地址:Download|DBeaverCommunity安装表引擎表引擎之TinyLog以列文件的形式保存在磁盘上,不支持索引,没有并发控制。一般保存少量数据的小表,生产环境上作用有限,多用于平时练习测试用。内存引擎,数据以未压缩的原始形式直接保存在内存当中,服务器重启数据就会消失。读写操作不会相互阻塞,不支持索引。简单查询下有非常非常高的性能表现(超过10G/s)。一般用到它的地方不多,除了
xixiyuguang
·
2023-12-30 09:10
clickhouse
ClickHouse
基础知识(五):
ClickHouse
的SQL 操作
基本上来说传统关系型数据库(以MySQL为例)的SQL语句,
ClickHouse
基本都支持,这里不会从头讲解SQL语法只介绍
ClickHouse
与标准SQL(MySQL)不一致的地方。
依晴无旧
·
2023-12-30 09:10
大数据
clickhouse
sql
数据库
你需要懂一点
ClickHouse
的基础知识
大数据技术与架构点击右侧关注,大数据开发领域最强公众号!暴走大数据点击右侧关注,暴走大数据!应用场景:1.绝大多数请求都是用于读访问的2.数据需要以大批次(大于1000行)进行更新,而不是单行更新;或者根本没有更新操作3.数据只是添加到数据库,没有必要修改4.读取数据时,会从数据库中提取出大量的行,但只用到一小部分列5.表很“宽”,即表中包含大量的列6.查询频率相对较低(通常每台服务器每秒查询数百
王知无(import_bigdata)
·
2023-12-30 09:39
系统运维系列 之
Clickhouse
数据库学习集锦(接查询优化问题整理)
1简介
ClickHouse
是一个用于联机分析(OLAP)的列式数据库管理系统(DBMS),来自于俄罗斯本土搜索引擎企业Yandex公司,是为世界第二大web分析平台(Yandex.Metrica)所开发
琅晓琳
·
2023-12-30 09:08
基础运维
pagefile.sys
Clickhouse数据库
数据库
学习集锦
ClickHouse
基础知识(六):
ClickHouse
的副本配置
副本的目的主要是保障数据的高可用性,即使一台
ClickHouse
节点宕机,那么也可以从其他服务器获得相同的数据。
依晴无旧
·
2023-12-30 09:07
大数据
clickhouse
「从ES到CK 02」
Clickhouse
的基础知识扫盲
导航在完成将公司日志数据从Elasticsearch(下称ES)转战到
Clickhouse
后,个人认为有必要将过程记录分享。
Pong_Kaho
·
2023-12-30 09:07
日志解决方案
elasticsearch
clickhouse
Flink DataStream 编程模型
本文是我的第一篇付费文章,这是个开篇纵览,后面会深入讲解Flink理论与开发,不限于Flink这一个组件,后面也会有Spark、
Clickhouse
等等,代码也会配套同步到Gitee上面(Gitee地址见文末
大数据技术派
·
2023-12-30 09:54
flink
大数据
基于Rsyslog+Kafka+Flink+
Clickhouse
的高性能日志采集、分析、汇聚存储方法
在上一篇博文中介绍了简单的实用负载均衡与实时监控方案(tengine+rsyslog+goaccess),功能上是满足日常需要的。但是用户的需求是没有止境的,更何况我们做技术的都有一颗追求极致的心。在实际场景中客户需要了解平台整体UV、PV,各功能模块PV、UV,区域PV、UV,各手机型号、应用版本的使用情况,平台使用的趋势分析,功能模块的热度分析等指标。用户端精确埋点和基于Haddop的大数据采
IT 行者
·
2023-12-30 05:02
理论与实践
微服务
负载均衡
运维
nginx+rsyslog+kafka+
clickhouse
+grafana 实现nginx 网关监控
需求我想做一个类似腾讯云网关日志最终以仪表方式呈现,比如说qps、p99、p95的请求响应时间等等流程图数据流转就像标题nginx---->rsyslog---->kafka—>
clickhouse
—>
帆影匆匆
·
2023-12-30 05:59
nginx
kafka
clickhouse
clickhouse
code: 209. DB::NetException: Timeout: connect timed out:
1、code:209.DB::NetException:Timeout:connecttimedout:ck插入数据失败,查看querylog日志提示网络超时,最后定位到问题是ck底层系统升级造成。解决方案:1、业务重试容错2、也可以调整重试次数,降低失败概率setglobalonclusterdefaultconnections_with_failover_max_tries=10(默认是3次)
qq_35640866
·
2023-12-29 22:43
clickhouse
数据库
clickhouse
K8S简介(Kubernetes)
K8s是一个容器化应用提供
集群部署
和管理的开源工具由Google开发。
GG-0408
·
2023-12-29 22:34
kubernetes
docker
容器
kubesphere生产环境落地实践(二)kubekey本地化
实际上kubekey1.0.1部署kubesphere流程如下:检测依赖安装情况部署kubernetes
集群部署
存储插件(默认openebslocalPV)部署kubesphere如下createTasks
微凉哇
·
2023-12-29 21:11
给linux(centos)操作系统设置主机名的几种方式
镜像下载、域名解析、时间同步请点击阿里云开源镜像站一、前言就是我们需要
集群部署
hadoop,Flink时,写ip地址太长了,然后大家想的就是能不能用比如:node1,node2,node3去代替IP地址
萌褚
·
2023-12-29 21:13
Docker九 | Swarm mode
目录Swarm基本概念节点服务和任务创建Swarm集群创建管理节点增加工作节点查看
集群部署
服务新建服务查看服务服务伸缩增加服务减少服务删除服务Swarm基本概念节点节点分为管理节点(manager)和工作节点
魔法恐龙: )
·
2023-12-29 19:31
Docker
docker
集群部署
篇--Redis 哨兵模式
文章目录前言一、哨兵模式介绍:1.1介绍:1.2工作机制:二、哨兵模式搭建:2.1redis主从搭建:2.2setinel集群搭建:2.2.1配置:sentinel.conf:2.2.2运行容器:2.2.3查看容器的信息:2.2.4故障自动转移:2.2.5slave晋升maser:2.2.6原主节点重新启动:总结:参考:前言虽然有了Reids的主从模式,但是我们发现它的故障转移能力非常弱,所以在主
拽着尾巴的鱼儿
·
2023-12-29 18:24
java工具篇
db数据库
redis
bootstrap
数据库
集群部署
篇--Redis 主从模式
文章目录前言Redis主从部署:1.1主从架构介绍:1.2主从架构实现:1.2.1redis安装:1.3主从架构优缺点:1.4故障转移:总结前言显然在线上环境中Redis服务不能以单机的方式运行,必须有备份,来应对服务挂掉的情况,本文通过docker完成Redis的主从模式部署;Redis主从部署:1.1主从架构介绍:Redis主从架构是一种常见的数据复制和高可用性架构设计,它包括一个主节点和多个
拽着尾巴的鱼儿
·
2023-12-29 18:23
java工具篇
db数据库
redis
spring
数据库
集群部署
篇--Redis 集群分片模式
文章目录前言一、Redis分片集群介绍1.1介绍:1.2工作机制:1.2.1节点:1.2.2槽slot:1.2.3故障转移:二、Redis分片集群搭建:2.1配置文件:2.2redis部署:2.3redis集群创建:2.4redis集群连接:总结参考:前言对于平常的业务往往使用redis的哨兵模式就可以了,虽然redis单台服务可以提供10W的并发,但是对于并发量非常大的服务来说可能还不够,所以此
拽着尾巴的鱼儿
·
2023-12-29 18:52
java工具篇
db数据库
redis
数据库
缓存
零信任 aTrust 本地
集群部署
一、本地
集群部署
使用背景本地
集群部署
主要是为解决设备高可用问题,为客户提供设备容灾和扩容的能力。
慕容天成
·
2023-12-29 17:38
java
服务器
linux
CLICKHOUSE
中JSON解析
CLICKHOUSE
中JSON解析
Clickhouse
一般使用字符串行式保存JSON数据,
clickhouse
提供了JSON函数,方便我们提取JSON数据。
万山数据@yqj1987
·
2023-12-29 09:02
json
clickhouse
数据库
SeaTunnel同步PostgreSQL数据至
ClickHouse
(1)
ClickHouse
简介
ClickHouse
最初是为Yandex.Metrica世界第二大Web分析平台而开发的。多年来一直作为该系统的核心组件被该系统持续使用着。
万山数据@yqj1987
·
2023-12-29 09:02
clickhouse
SeaTunnel批处理同步MySQL数据至
ClickHouse
ClickHouse
是一种OLAP类型的列式数据库管理系统,
ClickHouse
完美的实现了OLAP和列式数据库的优势,因此在大数据量的分析处理应用中
ClickHouse
表现很优秀。
万山数据@yqj1987
·
2023-12-29 09:02
clickhouse
SeaTunnel流处理同步MySQL数据至
ClickHouse
ClickHouse
是一种OLAP类型的列式数据库管理系统,
ClickHouse
完美的实现了OLAP和列式数据库的优势,因此在大数据量的分析处理应用中
ClickHouse
表现很优秀。
万山数据@yqj1987
·
2023-12-29 09:02
clickhouse
seatunnel同步oracle到
clickhouse
问题
拷贝oracle的包ojdbc6-11.2.0.4.jar到/opt/spark-2.3.3/jar目录下##HowtosolvetheError`Exceptioninthread"main"java.lang.NoSuchFieldError:INSTANCE`?Thereasonisthattheversionofhttpclient.jarthatcomeswiththeCDHversio
lin502
·
2023-12-29 09:58
seatunnel
hadoop
spark
hdfs
SeaTunnel同步Oracle数据至
ClickHouse
SeaTunnel是一个分布式、高性能、易扩展、用于海量数据同步和转化的数据集成平台。可以实现MySQL、Oracle、SQLServer、Postgresql、MongoDB、Db2、Redis等各种异构数据源之间稳定高效的数据同步功能。用户只需要配置作业信息,就能完成数据的同步。提交作业后,源连接器负责并行读取数据并将数据发送到下游转换或直接发送到接收器,接收器将数据写入目标。SeaTunnl
万山数据@yqj1987
·
2023-12-29 09:53
clickhouse
oracle
kubeSphere
集群部署
nacos
kubeSphere部署nacos个人环境说明执行nacos数据脚本kubeSphere添加配置创建有状态副本集修改集群配置文件创建外部访问服务访问个人环境说明由于我之前这个项目就是docker+jenkins部署的,只是现在升级到k8s+kubeSphere所有下面有些操作我可能不同,例如我的nacos配置文件就是docker里面查看复制过来,如果之前没有部署过的小伙伴,可以直接到GitHub上
孟德爱吃香菜
·
2023-12-29 06:48
k8s
docker
nacos
kubernetes
云原生
kubeSphere
集群部署
ElasticSearch
kubeSphere
集群部署
ElasticSearch根据docker启动文件来配置修改max_map_count添加配置文件创建工作负载测试根据docker启动文件来配置dockerrun-d\--namees
孟德爱吃香菜
·
2023-12-29 06:41
k8s
docker
elasticsearch
云原生
kubernetes
记录一下亿级别数据入库
clickhouse
因而将数据聚合后导到
clickhouse
进行存储,目的只有一个就是加快查询,提高用户体验感。原本以为是个简单的需求,但是在中途还是遇到一些坑。
做一枚快乐的程序员
·
2023-12-29 05:58
clickhouse
数据库
clickhouse
【日志系列】什么是分布式日志系统?
现在,很多应用都是
集群部署
的,一次请求会因为负载均衡而被路由到不同的服务器上面,这就导致一个应用的日志会分散在不同的服务器上面。
昕宝爸爸爱编程
·
2023-12-29 03:12
#
日志
分布式
java
日志
kafka
Java技术栈 —— Redis的雪崩、穿透与击穿
实验的先导条件(Nginx+Jmeter)一、Redis缓存雪崩、缓存穿透、缓存击穿1.1雪崩1.2穿透1.3击穿二、Redis应用场景——高并发2.1单机部署的高并发问题与解决(JVM级别锁)2.2
集群部署
的高并发问题与解决
躬身入世,以生证道
·
2023-12-29 00:44
Java技术栈
java
redis
开发语言
ClickHouse
基础知识(四):
ClickHouse
引擎详解
1.表引擎的使用表引擎是
ClickHouse
的一大特色。可以说,表引擎决定了如何存储表的数据。包括:➢数据的存储方式和位置,写到哪里以及从哪里读取数据。
依晴无旧
·
2023-12-28 18:38
大数据
clickhouse
数据库
大数据
ClickHouse
入门基础教程
问题导读:1.
ClickHouse
是什么?2.
ClickHouse
有哪些特性?3.
ClickHouse
的使用场景有哪些?一、whatis
clickhouse
?
000X000
·
2023-12-28 18:37
ClickHouse
ClickHouse
ClickHouse
基础知识(一):
ClickHouse
入门
1.
ClickHouse
入门
ClickHouse
是俄罗斯的Yandex于2016年开源的列式存储数据库(DBMS),使用C++语言编写,主要用于在线分析处理查询(OLAP),能够使用SQL查询实时生成分析数据报告
依晴无旧
·
2023-12-28 18:37
大数据
clickhouse
数据库
ClickHouse
基础知识(三):
ClickHouse
数据类型全解
1整型固定长度的整型,包括有符号整型或无符号整型。整型范围(-2n-1~2n-1-1):无符号整型范围(0~2n-1):使用场景:个数、数量、也可以存储型id。2浮点型Float32-floatFloat64–double建议尽可能以整数形式存储数据。例如,将固定精度的数字转换为整数值,如时间用毫秒为单位表示,因为浮点型进行计算时可能引起四舍五入的误差。使用场景:一般数据值比较小,不涉及大量的统计
依晴无旧
·
2023-12-28 18:37
大数据
clickhouse
数据库
ClickHouse
单机安装及基础知识与 Spark 应用
什么是
ClickHouse
?
ClickHouse
是一个用于联机分析(OLAP)的列式数据库管理系统(DBMS)。在传统的行式数据库系统中,数据按如下顺序存储:处于同一行中的数据总是被物理的存储在一起。
月亮给我抄代码
·
2023-12-28 18:36
clickhouse
spark
数据库
上一页
9
10
11
12
13
14
15
16
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他