rsync实时同步

基于docker的Mysql主从数据库配置

基本过程1)、Mysql的主从同步就是当master（主库）发生数据变化的时候，会实时同步到slave（从库）。2)、主从复制可以水平扩展数据库的负载能力，容错，高可用，数据备份。
抹香鲸之海·2021-12-07 10:38

长连接网关技术专题(六)：石墨文档单机50万WebSocket长连接架构实践

1、引言在石墨文档的部分业务中，例如文档分享、评论、幻灯片演示和文档表格跟随等场景，涉及到多客户端数据实时同步和服务端批量数据在线推送的需求，一般的HTTP协议无法满足服务端主动Push数据的场景，因此选择采用
·2021-12-01 15:16

linux比较两个目录的差异

brief仅显示有无差异或者使用>diff-qrdir1/dir2/-q仅显示有无差异，不显示详细的信息-r比较子目录中的文件git>gitdiff--no-indexdir1/dir2/可以显示颜色差异rsync
·2021-11-28 22:41

MySQL特定表全量、增量数据同步到消息队列-解决方案

目录1、原始需求2、解决方案3、canal介绍、安装canal的工作原理架构安装4、验证1、原始需求既要同步原始全量数据，也要实时同步MySQL特定库的特定表增量数据，同时对应的修改、删除也要对应。
·2021-11-27 20:16

TermPair 使用指南：一款安全好用的终端控制工具

不过GoTTY是将终端『投屏』到浏览器上，终端上不再显示内容，而我今天分享的工具则是双向实时同步的，更适合远程协助。
Xpitz·2021-11-24 10:15

linux远程复制文件命令小总结

我平时在工作中服务器远程拷贝文件一般会用到scp和rsyncscpscp是securecopy的简写，用于在Linux下进行远程拷贝文件的命令，和它类似的命令有cp，不过cp只是在本机进行拷贝不能跨服务器
·2021-11-20 22:12

5分钟搞定 MySQL 到 ClickHouse 实时数据同步进阶篇-CloudCanal实战

简述之前的文章5分钟搞定MySQL到ClickHouse实时数据同步发布后，很多用户将MySQL->ClickHouse实时同步链路用了起来，但是我们很快发现，CollapsingMergeTree在某些场景下可能并不能按预期进行数据折叠
·2021-11-19 16:03

rsync远程同步

目录一、rsync同步简介1.关于rsync2.rsync同步源（备份源）二、配置rsync备份源1.关闭防火墙2.查看rsync是否已安装，一般系统已默认安装rsync3.建立/etc/rsync.conf
向善卓越·2021-11-16 00:04

rsync实现远程同步

一、rsync简介rsync（RemoteSync，远程同步）·一款开源的快速备份工具·支持本地复制·也可以在不同主机（例如：其他SSH、rsync主机）之间镜像同步整个目录树，支持增量备份，并保持钳接和权限
FANG7727·2021-11-15 10:32

SpringCloud config native 配置

每次部署都需要安装gitlab有些环境安装完gitlab，外面不能访问，不给开端口实时同步比较麻烦基于上述问题，决定将配置中心依springCloudconfig本地文件的方式进行改造缺点就是每个服务器上都可以放配置文件
风雨无阻415·2021-11-12 10:00

Rabbitmq之Federation配置

一般我们会将这种情况应用于存在两个不同的系统，但是老数据来源只能向一个队列写入数据，此时为了在新系统上也可以实时同步到
FantanLee·2021-11-08 12:52

Laravels配置过程（一）

Laravels作为websocket服务器因为公司要做一个学生在线答题—老师监控的功能，并且可以实时同步学生的答题状态所以配置了swoole，当做websocket服务器。
六面体·2021-11-04 18:04

MatrixDB 4.3 发布：持续聚集等6大特性解读！

在数据持续加载到表的过程中，聚集查询在后台持续运行，当用户想获取时序表的对应聚集结果时，直接查询持续聚集视图即可，通过物化视图实时同步源表
·2021-11-04 10:09

纯 Git 实现前端 CI/CD

这种方案用rsync直接上传就可以，这里不赘述。源码部署就是把源文件上传到服务器上，然后：$npminst
·2021-11-03 16:03

基于Binlog的实时同步功能——debezium、canel、databus技术选型 | holmofy

去年的一篇文章大致地讲了我对MQ的一些认识，事实上Kafka在内的现代MQ，功能远不止这些。后面整理好自己的思路，肯定会再写一篇文章来讲讲。这篇文章的主角就是与MQ息息相关的CDC技术。#1.CDC技术CDC全称叫：changedatacapture，是一种基于数据库数据变更的事件型软件设计模式。比如有一张订单表trade，订单每一次变更录入到一张trade_change的队列表。然后另外一个调度
·2021-10-30 23:00

基于ReentrantLock的实现原理讲解

目录ReentrantLock实现核心–AQS(AbstractQueuedSynchronizer)Node结构ReentrantLock实现分析二者关联NonfairSync分析FairSync分析注意一下
·2021-10-29 10:13

rsync 同步 mysql（rsync 做文件增量备份）

文章目录一、rsync简介二、实验过程三、rsync命令四、编译安装包下载一、rsync简介  sync是一个常用的Linux应用程序，用于文件同步。
公博义·2021-10-26 19:48

linux之rsync远程同步文件

rsync全名RemoteSync,是类unix下数据镜像的备份工具。可以方便的实现本地,远程备份文件,rsync最重要的一点是支持增量备份。
·2021-10-25 22:23

【大数据】☀️搞定Hadoop集群☀️Hadoop运行模式-完全分布式

目录三大模式：完全分布式搭建：分析：编写集群分发脚本xsync：1.scp（securecopy）安全拷贝：2.rsync远程同步工具：3.xsync集群分发脚本：SSH无密登录配置：配置SSH：1.基本语法
故里º·2021-10-24 10:57

Google

文章目录LDAP服务器搭建安装Docker服务安装Mysql服务AD域环境搭建运维派DHCPDNSFTPSAMBANFSLAMPApacheLNMPNginxrsyncTomcatRedisMysqlDorkerGitSVNHadoopLDAP
谱次·2021-10-24 00:38

java非公平锁知识点实例详解

实例/***Syncobjectfornon-fairlocks*/staticfinalclassNonfairSyncextendsSync{privatestaticfinallongserial
·2021-10-21 10:19

Linux: daily backup with crontab

=>crontab-l015***rsync-arvu--delete-excluded--exclude/home/user/Download/home/user//media/user/pluto-home-backup
DingDingYuan·2021-10-18 10:13

为在线数据库构建基于 Kudu 的实时数据同步

本篇文章将会介绍几种数据数据同步到Kudu的方案选择，然后从功能和使用角度介绍CloudCanal如何帮助我们解决数据实时同步到Kudu。
·2021-10-09 12:52

Linux自定义脚本整合

基础知识（a）rsync命令原始拷贝：[[email protected]]#rsync-av/opt/module/hadoop-3.3.1/bigdata802:/opt/module
俊杰梓·2021-10-06 10:43

rsync远程同步（都在用的备份方案）

文章目录一，rsync介绍二，rsync源服务器三，配置rsync源服务器四，rsync备份工具五、inotify+rsync实时同步七、使用rsync来实现快速删除大量文件。
OSoooo·2021-10-05 23:12

Shell面试题

5.日志切割脚本6.利用shell开发rsync服务启动、停止脚本，并通过chkconfifig进行开关机管理7.编写一个shell脚本,添加100个新用户，并设置密码8.取出某个文件的第三列，以冒号分割
kali_yao·2021-10-05 15:13

最新实时同步5大应用场景，4种实现方案分享（有彩蛋）

那么，什么时候我们需要进行数据同步，甚至是实时同步呢？目前又有什么实时同步方案？Tapdata产品合伙人徐亮有着丰富的大数据产品及项目经验，本次为我们分享了实时同步的5
·2021-09-24 17:21

nfs+drbd+keepalived实现k8s高可用存储方案过程记录

在前次文章（https://www.jianshu.com/p/c83921f848ef）中介绍了NFS+keepalived+Sersync搭建nfs群集实现k8s存储的过程，但在使用中发现，遇到大量频繁的文件更新时
阿乐_822e·2021-09-17 09:29

阿里云盘——多电脑实时同步文件的实现

一、使用的工具使用阿里云盘和一个工具（让阿里云盘变成本地磁盘）工具链接:「阿里云盘变本地硬盘64位.exe」，点击链接保存，或者复制本段内容，打开「阿里云盘」APP，无需下载，极速在线查看享用。链接：https://www.aliyundrive.com/s/qYrdVttpZe1二、搭建步骤1、安装软件先安装阿里云网盘，然后安装上面分享的这个软件。安装成功后，一定要勾选“查阅localhost:
我在燕京有把刀·2021-09-15 17:50

Java之Rsync并发迁移数据并校验详解

java调用Rsync并发迁移数据并执行校验java代码如下RsyncFile.javaimportlombok.NoArgsConstructor;importlombok.SneakyThrows;
·2021-09-15 10:20

数据同步平台CloudCanal的透明化、可视化运维之道

CloudCanal-万少查看原文前言CloudCanal是一款由ClouGence公司发行的集结构迁移、数据全量迁移/校验/订正、增量实时同步为一体的数据迁移同步平台。
·2021-09-10 18:15

centos:go-mysql-elasticsearch实现mysql 与elasticsearch实时同步

缺点：删除数据-同步不支持步骤1：安装goyuminstallgo步骤2：安装godepgogetgithub.com/tools/godepcentos下载不下来，我采取了另一种方法先从https://github.com/tools/godep下载下来放到/root/go/src/github.com/tools下面cdgodepgoinstall./#该命令会将godep生成到go文件夹里面
青春至上·2021-09-02 18:17

4-10.9 Linux 中的文件同步传输 --- rsync --exclude 排除不需要传输的数据

--exclude有时候使用rsync进行数据传输时，希望排除一些不需要传输的数据。这时，可以用--exclude参数排除指定数据，被排除的数据不会进行传输。
捌千里路雲和月·2021-09-02 10:26

【nexus】关于nexus oss 的高可用

关于nexus作为docker镜像仓库的高可用设置，网上nexus+keepalived+rsync的方式挺扯的，官方开源版本默认又不支持高可用，那么通过nginx代理不失为一个办法，只是需要将镜像推两遍
Bogon·2021-08-30 10:48

Java并发之synchronized实现原理深入理解

synchronized的三种应用方式synchronized作用于实例方法synchronized作用于静态方法synchronized同步代码块synchronized底层语义原理理解Java对象头与Monitorsynchronized
·2021-08-27 18:24

5分钟搞定 MySQL 到 TiDB 的数据同步 - CloudCanal实战

CloudCanal提供了从传统关系型数据库实时同步到TiDB的能力，并且附带数据迁移、数据校验、数据订正等能力。此文章简要介绍如何快速构建一条长期稳定运行的MySQL->TiDB数据链路。
·2021-08-27 16:55

5分钟搞定 MySQL 到 TiDB 的数据同步 - CloudCanal实战

CloudCanal提供了从传统关系型数据库实时同步到TiDB的能力，并且附带数据迁移、数据校验、数据订正等能力。此文章简要介绍如何快速构建一条长期稳定运行的MySQL->TiDB数据链路。
Clougence·2021-08-27 14:25

详解MRS CDL整体架构设计

摘要：MRSCDL是FusionInsightMRS推出的一种数据实时同步服务，旨在将传统OLTP数据库中的事件信息捕捉并实时推送到大数据产品中去，本文档会详细为大家介绍CDL的整体架构以及关键技术。
·2021-08-23 17:37

【重大更新】CloudCanal 社区版 1.0.2 正式发布，开放众多新数据源

CloudCanal是一款由ClouGence公司发行的集结构迁移、数据全量迁移/校验/订正、增量实时同步为一体的多源多端数据迁移同步平台。
·2021-08-20 19:20

DML实时同步

CDC首先什么是CDC？它是ChangeDataCapture的缩写,即变更数据捕捉的简称，使用CDC我们可以从数据库中获取已提交的更改并将这些更改发送到下游，供下游使用。这些变更可以包括INSERT,DELETE,UPDATE等操作。FlinkSQLCDC数据同步与原理解析CDC全称是ChangeDataCapture，它是一个比较广义的概念，只要能捕获变更的数据，我们都可以称为CDC。业界主要
AmirHou·2021-08-14 10:35

服务器如何向手机端推送信息吗,服务端向客户端推送消息技术之websocket的介绍...

如下图：当发送私信的时候，如果要求实时同步的话，可以先让消息入库，等对方登陆之后，查询显示即可。如下图：可是现在，需要实时消息，怎么办？最简单的一种方式，就是写个定时任务，轮询查询去。
申展平·2021-08-10 16:01

技术干货| 腾讯云TDSQL多源同步架构与特性详解

一、场景及需求在金融业务场景中，数据的同步、订阅、分发是常见需求，例如保险行业常见的总分系统架构，多个子库需要实时地将业务数据同步至总库汇总查询；银行核心交易系统中，需要将交易数据实时同步至分析子系统进行报表
·2021-08-09 23:02

Druid 集群方式部署 —— 启动服务

如果你已经在你的本地计算机上修改了配置，你可以使用rsync来进行拷贝。
·2021-08-07 00:02

数据迁移同步平台CloudCanal免费社区版正式发布，诸多功能特性等你体验！

CloudCanal是一款由ClouGence公司发行的集结构迁移、数据全量迁移/校验/订正、增量实时同步为一体的数据迁移同步平台。
·2021-08-05 18:22

CentOS8虚拟机之间的通信

虚拟机之间的通信ssh认证免密登录通过主机名实现ssh连接更加简单的同步rsync与其二次封装的xsync学习大数据，配置集群时，需要先让虚拟机之间能够自由通信。
阿文灬·2021-08-05 15:55

4-10.1 Linux 中的文件同步传输 --- rsync 常用参数（rsync 不加参数、-a，--archive参数）

本地使用rsync进行传输，熟悉rsync常用参数功能。4-10-1内容：1、rsync不加参数传输文件。2、-a，--archive：归档模式，递归传输和保存文件属性。
捌千里路雲和月·2021-07-30 08:03

4-10.2 Linux 中的文件同步传输 --- rsync 常用参数（-b、--backup参数）

4-10-1内容：-b--backup：rsync备份文件。传输文件的时候如检测到源文件与目标目录文件有同名文件。
捌千里路雲和月·2021-07-29 23:25

认识数据实时同步神器—Canal～

：恒生LIGHT云社区随着系统业务量的不断扩大，都会使用分布式的方式，同时会有非常多的中间件，如redis、消息队列、大数据存储等，但是实际核心的数据存储依然是存储在数据库，多个数据库之前就会存在数据实时同步的问题
·2021-07-27 20:21

Realtime DB技术详解

1.RealtimeDB概述1.1RealtimeDB简介RealtimeDB是一种托管在云端的数据库，数据以JSON格式存储并实时同步到所连接的每个客户端。
·2021-07-27 19:55

sync_binlo主从复制

sync_binlogControlshowoftentheMySQLserversynchronizesthebinarylogtodisk.sync_binlog=0:Disablessyncwww.diuxie.comhronizationofthebinarylogtodiskbytheMySQLserver.Instead
·2021-07-27 19:57
上一页 35 36 37 38 39 40 41 42 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他