E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
clickhouse备份与恢复
openGauss学习笔记-155 openGauss 数据库运维-
备份与恢复
-导出数据-使用gs_dump和gs_dumpall命令导出数据-概述
文章目录openGauss学习笔记-155openGauss数据库运维-
备份与恢复
-导出数据-使用gs_dump和gs_dumpall命令导出数据-概述155.1概述155.2注意事项openGauss
superman超哥
·
2023-12-16 21:57
openGauss学习笔记
openGauss
国产数据库
开源数据库
数据库
RDBMS
Apache Flink(十三):Flink History Server
个人主页:IT贫道_大数据OLAP体系技术栈,ApacheDoris,
Clickhouse
技术-CSDN博客私聊博主:加入大数据技术讨论群聊,获取更多大数据资料。
IT贫道
·
2023-12-16 20:02
大数据计算体系技术栈
Apache
Flink
apache
flink
大数据
Apache Flink(十):Flink集群基础环境搭建-JDK及MySQL搭建
个人主页:IT贫道_大数据OLAP体系技术栈,ApacheDoris,
Clickhouse
技术-CSDN博客私聊博主:加入大数据技术讨论群聊,获取更多大数据资料。
IT贫道
·
2023-12-16 20:32
大数据计算体系技术栈
Apache
Flink
apache
flink
java
Apache Flink(十二):Flink集群部署-Flink On Yarn
个人主页:IT贫道_大数据OLAP体系技术栈,ApacheDoris,
Clickhouse
技术-CSDN博客私聊博主:加入大数据技术讨论群聊,获取更多大数据资料。
IT贫道
·
2023-12-16 20:32
大数据计算体系技术栈
Apache
Flink
apache
flink
大数据
Apache Flink(十一):Flink集群部署-Standalone集群部署
个人主页:IT贫道_大数据OLAP体系技术栈,ApacheDoris,
Clickhouse
技术-CSDN博客私聊博主:加入大数据技术讨论群聊,获取更多大数据资料。
IT贫道
·
2023-12-16 20:55
大数据计算体系技术栈
Apache
Flink
apache
flink
大数据
第四章 MySQL
备份与恢复
数据库备份概述备份的主要目的是灾难恢复.备份还可以测试应用、.回滚数据修改.查询历史数据.审计等.之前已经学习过如何安装MySQL,本小节我们将从生产运维的角度了解备份恢复的分类与方法。1、数据备份的重要性在企业中数据的价值至关重要,数据保障了企业业务的正常运行。因此.数据的安全性及数据的可靠性是运维的重中之重,任何数据的丢失都可能对企业产生严重的后果。通常情况下造成数据丢失的原因有如下几种:程序
郭俊 伟
·
2023-12-16 17:08
数据库
Mysql
备份与恢复
一、数据库备份概述:备份的主要目的是灾难恢复,备份还可以测试应用,回滚数据修改,查询历史数据,审计等。1.1数据备份的重要性:在企业中数据的价值至关重要.数据保障了企业业务的正常运行。因此,数据的安全性及数据的可靠性是运维的重中之重,任何数据的丢失都可能对企业产生严重的后果。通常情况下造成数据丢失的原因有如下几种:程序错误、人为操作错误、运算错误、磁盘故障、灾难和盗窃。1.2数据库备份类型:从物理
IT_肖威
·
2023-12-16 11:41
mysql
数据库
ClickHouse
Kafka 引擎教程
如果您刚开始并且第一次设置Kafka和
ClickHouse
需要帮助怎么办?这篇文章也许会提供下帮助。我们将通过一个端到端示例,使用Kafka引擎将数据从Kafka主题加载到
ClickHouse
表中。
yule.yang
·
2023-12-16 08:25
数据库
kafka
clickhouse
Grafana 插件
Grafana插件app(zabbix等)DataSource(
clickhouse
等)panel(clock,piechart等)安装方式离线在线以ck源为例wgethttps://storage.googleapis.com
我教你啊
·
2023-12-16 03:51
#
GPE系列
grafana
前端
javascript
MySQL之数据库的
备份与恢复
mysql数据库的
备份与恢复
#备份hsp_db02和hsp_db03库中的数据(在dos中执行)mysqldump-uroot-p-Bhsp_db02hsp_db03>d:\\bak.sql也可以按如下方式写
第六序列
·
2023-12-16 02:40
mysql
数据库
mysql
Elasticsearch的Snapshot and Restore(快照
备份与恢复
)
简介:Elasticsearch提供的Snapshotapi就是从正在运行的集群中获取备份用的,可以根据情况选择整个集群,也可以指定index和datastream。Elasticsearch是以增量的方式获取Snapshot,节约了时间和空间,小开销意味着可以适当增加备份的频率。每一个Snapshot在逻辑上相互独立,所以删除某一个Snapshot不会影响到其他的Snapshot。Snapsho
大叶子不小
·
2023-12-15 22:14
elasticsearch
【flink番外篇】4、flink的sink(内置、mysql、kafka、redis、
clickhouse
、分布式缓存、广播变量)介绍及示例(3) - redis
Flink系列文章一、Flink专栏Flink专栏系统介绍某一知识点,并辅以具体的示例进行说明。1、Flink部署系列本部分介绍Flink的部署、配置相关基础内容。2、Flink基础系列本部分介绍Flink的基础部分,比如术语、架构、编程模型、编程指南、基本的datastreamapi用法、四大基石等内容。3、FlikTableAPI和SQL基础系列本部分介绍FlinkTableApi和SQL的基
一瓢一瓢的饮 alanchan
·
2023-12-15 21:52
flink
示例专栏
分布式
flink
flink
hive
flink
sql
kafka
flink
redis
flink
sink
【flink番外篇】4、flink的sink(内置、mysql、kafka、redis、
clickhouse
、分布式缓存、广播变量)介绍及示例(2) - jdbc/mysql
Flink系列文章一、Flink专栏Flink专栏系统介绍某一知识点,并辅以具体的示例进行说明。1、Flink部署系列本部分介绍Flink的部署、配置相关基础内容。2、Flink基础系列本部分介绍Flink的基础部分,比如术语、架构、编程模型、编程指南、基本的datastreamapi用法、四大基石等内容。3、FlikTableAPI和SQL基础系列本部分介绍FlinkTableApi和SQL的基
一瓢一瓢的饮 alanchan
·
2023-12-15 21:22
flink
示例专栏
分布式
flink
flink
hive
kafka
flink
sql
flink
流批一体
flink
大数据
【flink番外篇】4、flink的sink(内置、mysql、kafka、redis、
clickhouse
、分布式缓存、广播变量)介绍及示例(1) - File、Socket、console
Flink系列文章一、Flink专栏Flink专栏系统介绍某一知识点,并辅以具体的示例进行说明。1、Flink部署系列本部分介绍Flink的部署、配置相关基础内容。2、Flink基础系列本部分介绍Flink的基础部分,比如术语、架构、编程模型、编程指南、基本的datastreamapi用法、四大基石等内容。3、FlikTableAPI和SQL基础系列本部分介绍FlinkTableApi和SQL的基
一瓢一瓢的饮 alanchan
·
2023-12-15 21:21
flink
示例专栏
分布式
flink
kafka
flink
hive
flink
sql
大数据
flink
流批一体
【flink番外篇】3、flink的source(内置、mysql、kafka、redis、
clickhouse
)介绍及示例 - 完整版
Flink系列文章一、Flink专栏Flink专栏系统介绍某一知识点,并辅以具体的示例进行说明。1、Flink部署系列本部分介绍Flink的部署、配置相关基础内容。2、Flink基础系列本部分介绍Flink的基础部分,比如术语、架构、编程模型、编程指南、基本的datastreamapi用法、四大基石等内容。3、FlikTableAPI和SQL基础系列本部分介绍FlinkTableApi和SQL的基
一瓢一瓢的饮 alanchan
·
2023-12-15 21:21
flink
示例专栏
flink
mysql
kafka
flink
hive
flink
sql
clickhouse
redis
【flink番外篇】3、flink的source(内置、mysql、kafka、redis、
clickhouse
)介绍及示例(5)-
clickhouse
Flink系列文章一、Flink专栏Flink专栏系统介绍某一知识点,并辅以具体的示例进行说明。1、Flink部署系列本部分介绍Flink的部署、配置相关基础内容。2、Flink基础系列本部分介绍Flink的基础部分,比如术语、架构、编程模型、编程指南、基本的datastreamapi用法、四大基石等内容。3、FlikTableAPI和SQL基础系列本部分介绍FlinkTableApi和SQL的基
一瓢一瓢的饮 alanchan
·
2023-12-15 21:51
flink
示例专栏
flink
kafka
flink
hive
flink
sql
flink
kafka
flink
operator
clickhouse
【flink番外篇】3、fflink的source(内置、mysql、kafka、redis、
clickhouse
)介绍及示例(2)- 自定义、mysql
Flink系列文章一、Flink专栏Flink专栏系统介绍某一知识点,并辅以具体的示例进行说明。1、Flink部署系列本部分介绍Flink的部署、配置相关基础内容。2、Flink基础系列本部分介绍Flink的基础部分,比如术语、架构、编程模型、编程指南、基本的datastreamapi用法、四大基石等内容。3、FlikTableAPI和SQL基础系列本部分介绍FlinkTableApi和SQL的基
一瓢一瓢的饮 alanchan
·
2023-12-15 21:50
flink
示例专栏
flink
mysql
kafka
flink
hive
flink
sql
flink
kafka
flink
operator
【flink番外篇】3、flink的source(内置、mysql、kafka、redis、
clickhouse
)介绍及示例(3)- kafka
Flink系列文章一、Flink专栏Flink专栏系统介绍某一知识点,并辅以具体的示例进行说明。1、Flink部署系列本部分介绍Flink的部署、配置相关基础内容。2、Flink基础系列本部分介绍Flink的基础部分,比如术语、架构、编程模型、编程指南、基本的datastreamapi用法、四大基石等内容。3、FlikTableAPI和SQL基础系列本部分介绍FlinkTableApi和SQL的基
一瓢一瓢的饮 alanchan
·
2023-12-15 21:50
flink
示例专栏
flink
mysql
kafka
flink
hive
flink
sql
flink
kafka
flink
operator
【flink番外篇】3、fflink的source(内置、mysql、kafka、redis、
clickhouse
)介绍及示例(1) - File、Socket、Collection
Flink系列文章一、Flink专栏Flink专栏系统介绍某一知识点,并辅以具体的示例进行说明。1、Flink部署系列本部分介绍Flink的部署、配置相关基础内容。2、Flink基础系列本部分介绍Flink的基础部分,比如术语、架构、编程模型、编程指南、基本的datastreamapi用法、四大基石等内容。3、FlikTableAPI和SQL基础系列本部分介绍FlinkTableApi和SQL的基
一瓢一瓢的饮 alanchan
·
2023-12-15 21:19
flink
示例专栏
flink
mysql
kafka
flink
hive
flink
kafka
flink
operator
clickhouse
【flink番外篇】3、flink的source(内置、mysql、kafka、redis、
clickhouse
)介绍及示例(4)- redis -异步读取
Flink系列文章一、Flink专栏Flink专栏系统介绍某一知识点,并辅以具体的示例进行说明。1、Flink部署系列本部分介绍Flink的部署、配置相关基础内容。2、Flink基础系列本部分介绍Flink的基础部分,比如术语、架构、编程模型、编程指南、基本的datastreamapi用法、四大基石等内容。3、FlikTableAPI和SQL基础系列本部分介绍FlinkTableApi和SQL的基
一瓢一瓢的饮 alanchan
·
2023-12-15 21:19
flink
示例专栏
flink
mysql
kafka
flink
hive
flink
sql
flink
kafka
flink
operator
12、Flink source和sink 的
clickhouse
详细示例
Flink系列文章一、Flink专栏Flink专栏系统介绍某一知识点,并辅以具体的示例进行说明。1、Flink部署系列本部分介绍Flink的部署、配置相关基础内容。2、Flink基础系列本部分介绍Flink的基础部分,比如术语、架构、编程模型、编程指南、基本的datastreamapi用法、四大基石等内容。3、FlikTableAPI和SQL基础系列本部分介绍FlinkTableApi和SQL的基
一瓢一瓢的饮 alanchan
·
2023-12-15 21:15
#
Flink专栏
flink
clickhouse
flink
流批一体化
flink
kafka
flink实时数仓
flink
实时计算
flink
离线计算
openGauss学习笔记-149 openGauss 数据库运维-
备份与恢复
-逻辑
备份与恢复
之gs_restore
文章目录openGauss学习笔记-149openGauss数据库运维-
备份与恢复
-逻辑
备份与恢复
之gs_restore149.1背景信息149.2命令格式149.3参数说明149.3.1通用参数-V,
superman超哥
·
2023-12-15 21:19
openGauss学习笔记
openGauss
国产数据库
开源数据库
数据库
开源软件
[idea]idea连接
clickhouse
23.6.2.18
一、安装驱动直接在pom.xml加上那个lz4也是必要的不然会报错com.
clickhouse
clickhouse
-jdbc0.4.2org.lz4lz4-java1.8.0之后在maven的package
胖胖学编程
·
2023-12-15 19:24
clickhouse
intellij-idea
pycharm
python
oracle-rman备份详细过程
第五章数据
备份与恢复
通过本章的学习,要求学员掌握以下内容:1、大致了解ORACLE的备份方式。2、了解如何配置RMAN。
曹元_
·
2023-12-15 17:11
从
ClickHouse
通往MySQL的几条道路 | 京东物流技术团队
一、应用背景简介
ClickHouse
是Yandex(俄罗斯最大的搜索引擎)开源的一个用于实时数据分析的基于列存储的数据库,其处理数据的速度比传统方法快100-1000倍。
京东云开发者
·
2023-12-15 16:31
数据库
clickhouse
mysql
数据库
【
ClickHouse
】
ClickHouse
与MySQL之间实时同步数据(MySQL引擎),将MySQL数据实时同步到
clickhouse
experimental]MaterializedMySQL(包含设置allow_experimental_database_materialized_mysql)MySQL引擎用于将远程的MySQL服务器中的表映射到
ClickHouse
一起来学吧
·
2023-12-15 13:16
clickhouse
mysql
数据实时同步
数据库
ClickHouse
应用随笔1——按两个非数值型字段分别去重查询
前言平时SQL用得少,最近刚好需要在Metabase上用与SQL差不多的
ClickHouse
语句搭数据仪表盘,于是遇到了以下问题,在查询时,需要按两个字段分别去重的查询,而非单纯的做联合去重,如先按字段
制了个了个杖
·
2023-12-15 12:09
ClickHouse
(16)
ClickHouse
日志引擎Log详细解析
日志引擎系列这些引擎是为了需要写入许多小数据量(少于一百万行)的表的场景而开发的。这系列的引擎有:StripeLogLogTinyLog共同属性引擎:数据存储在磁盘上。写入时将数据追加在文件末尾。不支持突变操作,也就是更新。不支持索引。这意味着`SELECT`在范围查询时效率不高。非原子地写入数据。如果某些事情破坏了写操作,例如服务器的异常关闭,你将会得到一张包含了损坏数据的表。差异Log和Str
张飞的猪大数据
·
2023-12-15 12:38
ClickHouse入门与实战
clickhouse
大数据
数据库
log表引擎
一文讲解如何从
Clickhouse
迁移数据至 DolphinDB
ClickHouse
是Yandex公司于2016年开源的OLAP列式数据库管理系统,主要用于WEB流量分析。
DolphinDB智臾科技
·
2023-12-15 12:37
DolphinDB与大数据
clickhouse
数据迁移
DBMS
数据库
时序数据库
实用的jdbc连接
clickhouse
数据库,以及用阿里巴巴连接池管理连接
1.添加相关的maven依赖4.0.0org.springframework.bootspring-boot-starter-parent2.6.4com.example
clickhouse
0.0.1-
远方的风吹来了“遥遥领先”的声音
·
2023-12-15 12:06
clickhouse
数据库
clickhouse
删除partition分区数据
clickhouse
分布式表tencent_table_20231208_DIST,本地表tencent_table_20231208_local;30台
clickhouse
存储服务器;本地表:tencent_table
runscript.sh
·
2023-12-15 12:28
clickhouse
【
clickhouse
】ck远程访问另一个ck
CREATETABLEtmp.tbsasremote(host,database_name,table_name,user,password);就相当于从ck1直接请求ck2参考文档https://github.com/
ClickHouse
偏振万花筒
·
2023-12-15 12:58
clickhouse
数据库
浅谈
ClickHouse
性能监控与调优
ClickHouse
性能监控与调优
ClickHouse
是一个高性能的列式数据库管理系统,适用于实时分析和大数据处理。
~奔跑的简默~
·
2023-12-15 12:58
ClickHouse系列
clickhouse
大数据
性能优化
ClickHouse
(17)
ClickHouse
集成JDBC表引擎详细解析
要实现JDBC连接,CH需要使用以后台进程运行的程序
clickhouse
-jdbc-bridge。该引擎支持Nullable数据类型。
张飞的猪大数据
·
2023-12-15 12:27
ClickHouse入门与实战
clickhouse
大数据
数据库
数据仓库
etl
记录一次springboot单数据源mysql到多数据源mysql+
clickhouse
的接入过程,项目使用seata做事务管理
记录一次springboot单数据源mysql到多数据源mysql+
clickhouse
的接入过程,项目使用seata做事务管理单数据源配置:spring:datasource:username:rootpassword
weixin_45684051
·
2023-12-15 11:28
mysql
java
spring
boot
Linux完成mysql数据库的
备份与恢复
背景:在进行数据报表的测试过程中,为了让我们的测试数据更加真实,因此我们需要同步生产数据到测试环境。方式有很多种,我这里介绍的是通过Linux完成数据同步。备份数据:执行命令:mysqldump-uxxx-pxxxx-h127.0.0.1--default-character-set=utf8database_name>备份之后的文件名,注意需要使用.sql拓展名,–default-charact
Test_the_rookie
·
2023-12-15 11:12
数据库
Linux
数据库
linux
mysql
Kubectl Patch 的应用
仍处于终止状态[root@k8s-01
clickhouse
-cluster]#kubectlapply-fsample05.yamlErrorfromserver(MethodNotAllowed):errorwhencreating"sample05
叱咤少帅(少帅)
·
2023-12-15 09:07
Kubernetes
linux
kubernetes
docker
MySQL-备份+日志:介质故障与数据库恢复
目录第1关:
备份与恢复
第2关:备份+日志:介质故障的发生与数据库的恢复第1关:
备份与恢复
任务描述本关任务:备份数据库,然后再恢复它。
蒋劲豪
·
2023-12-15 08:34
头歌
数据库
mysql
【用户画像】将数据迁移到
ClickHouse
(源码实现)、位图的介绍(bitmap)、位图在用户分群中的应用、位图的使用
文章目录一数据迁移至
Clickhouse
1为何要迁移2方案选型3任务目标4设计分析5代码实现(1)pom.xml(2)配置文件(3)创建库6打包发布二在
clickhouse
中宽表转换为Bitmap表1为什么用位图
OneTenTwo76
·
2023-12-15 08:54
用户画像
big
data
clickhouse
database
sql
RoaringBitMap在
ClickHouse
和Spark之间的实践-解决数据仓库预计算多维分析问题
前面在Spark多维分析去重计数场景优化案例中说了一下Spark计算在多维分析场景中的弊端,多维度分析会导致数据量指数级膨胀,搭配上去重计算字段越多,膨胀倍数也是线性增长,通过BitMap这个案例也更加让我们明白了,什么是数据倾斜,从根本来讲,并不仅仅是数据量的问题,而是倾斜Task在进行数据IO和数据计算的时候耗费过长时间,我理解为下面三种情况。数据量过大很常见单条数据存储过大很少有单个字段单条
小满锅lock
·
2023-12-15 08:23
clickhouse
spark
数据仓库
大数据
ClickHouse
集成Bitmap(2022-01-16更新)
ClickHouse
继承Bitmap1、精确去重计数性能测试1.1、创建一张test表1.2、往test表插入1亿条数据1.3、进行精确去重计数性能测试2、Bitmap位存储和位计算3、位图函数groupBitmapStatebitmapBuildbitmapToArraybitmapSubsetInRangebitmapSubsetLimitbitmapContainsbitmapHasAnyb
会点东西的普通人
·
2023-12-15 08:53
ClickHouse
python
Java 操作
ClickHouse
Bitmap
Java操作
ClickHouse
Bitmap1、需求背景最近接手项目需要做人群标签分析,结果集会保存为bitmap的形式,需要读取ck中bitmap数据到内存中。
sanliangitch
·
2023-12-15 08:48
java
SparkSQL &
ClickHouse
RoaringBitmap64格式支持
ClickHouse
新版使用roaring64map(https://github.com/RoaringBitmap/CRoaring/blob/af9fafb72edcfb88f7adc781eaea4e7e95f68d01
fz1989
·
2023-12-15 08:47
【
Clickhouse
】float 计算误差
举例:SELECT0.1+0.2ASresult在
ClickHouse
中,运行上述查询,可能会得到一个结果接近于0.3,但不完全相等的值,例如0.30000000000000004。
TaiKuLaHa
·
2023-12-15 08:46
clickhouse
人工智能
ClickHouse
中的 Bitmap
ClickHouse
Bitmap一、bitmap本身bitmap(位图)是一种利用比特位来进行数据存储的结构,非0即1。
RileyXia
·
2023-12-15 08:46
clickhouse
java
ClickHouse
源码阅读(0000 1111) ——
ClickHouse
中的bitmap实现
项目中使用到了
ClickHouse
的bimtap结构,来分析下
ClickHouse
中bimtap的具体实现。
B_e_a_u_tiful1205
·
2023-12-15 08:45
Dive
into
ClickHouse
clickhouse
java
哈希算法
Clickhouse
RoaringBitmap
https://blog.csdn.net/penriver/article/details/119736050https://juejin.cn/post/7179956435806076988BitMap适合连续密集的正整数存储,对于稀疏的正整数存储,其性能在很多时候是没办法和int数组相比的,尤其是正整数跨度较大的场景;RoaringBitMap就是为了解决这个问题产生。1RoaringBi
TaiKuLaHa
·
2023-12-15 08:41
clickhouse
Linux——MySQL
备份与恢复
一、数据库备份概述1、数据备份的重要性在企业中数据的价值至关重要,数据保障了企业业务的正常运行。因此.数据的安全性及数据的可靠性是运维的重中之重,任何数据的丢失都可能对企业产生严重的后果。通常情况下造成数据丢失的原因有如下几种:>程序错误,人为操作错误>运算错误,磁盘故障,灾难和盗窃2、数据库备份类型(1)从物理与逻辑的角度数据库备份可以分为物理备份和逻辑备份。物理备份是对数据库操作系统的物理文件
IT_郑杰
·
2023-12-15 06:48
mysql
数据库
物流实时数仓:采集通道搭建
环境准备1.前置环境2.hbase安装1.上传并解压2.配置环境变量3.拷贝jar包4.编写配置文件5.分发配置文件3.Redis安装1.安装需要的编译环境2.上传并解压文件3.编译安装4.后台访问4.
ClickHouse
超哥--
·
2023-12-15 06:34
物流实时数仓
大数据
flink
数据库灾难应对:MySQL误删除数据的救赎之道,技巧get起来!(Ⅰ)
以下是一些常见的数据恢复方法和步骤:1.数据
备份与恢复
(脚本自动备份)数据库定期备份是数据恢复的最有效手段之一。
玄明Hanko
·
2023-12-15 04:01
数据库
mysql
上一页
9
10
11
12
13
14
15
16
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他