集群同步

初识hadoop

客户端在存入的数据的时候先经过nn,查要存入的数据是否存在（通过元数据查询），如果存在就返回拒绝写入，若不存在，就开始返回可以往集群里面写入，而且还分配存入那些dn。
西门吹水之城·2025-02-26 12:45

Gossip 协议

Gossip协议协议介绍协议流程缺点Gossip算法是一种在分布式系统中广泛使用的通信协议，主要用于信息传播和状态同步。
disgare·2025-02-26 12:44

短视频矩阵源码开发功能概述，支持OEM定制开发

自动同步账号基础信息，包括昵称、头像、粉丝数等，方便运营者一站式查看各平台账号状态。
李lrh9166·2025-02-26 12:14

HDFS是如何存储和管理大数据

以下是HDFS存储和管理大数据的详细机制：一、HDFS架构HDFS采用主从架构，主要包括以下组件：NameNode（主节点）：作为集群的“大脑”，NameNode负责管理文件系统的命名空间，维护文件和目录的元
python资深爱好者·2025-02-26 11:38

Hadoop 基础原理

Hadoop基础原理基本介绍Hadoop的必要性Hadoop核心组件Hadoop生态系统中的附加组件HDFSHDFS集群架构HDFS读写流程HDFS写流程HDFS读流程NameNode持久化机制MapReduce
disgare·2025-02-26 11:38

最全redis缓存核心知点（原理+图解）

6.2RBD持久化的缺点6.3持久化方式之AOF6.4AOF文件重写6.5Redis数据的恢复6.7RDB和AOF的优缺点6.8RDB-AOF混合持久化方式（新版本的默认备份方式）七、Pipeline及主从同步
敲代码的胖虎·2025-02-26 10:35

Chrony 无法同步时间的排查过程

文章目录1.问题描述2.检查chrony.conf配置3.检查Chronyd进程状态4.检查Chrony是否在跟踪时间5.检查Chrony是否获取了NTP源6.检查防火墙7.检查网络连接性8.根因9.解决方案10.验证1.问题描述在一台Linux服务器上配置了Chrony作为NTP客户端，配置文件/etc/chrony.conf指定了两个NTP服务器：2.检查chrony.conf配置cat/et
中年如酒·2025-02-26 10:05

Flink-02-flink技术架构及工作原理

Flink组件栈自下而上，分别针对每一层进行解释说明：Deployment该层主要涉及了Flink的部署模式，Flink支持多种部署模式：本地、集群（Standalone/YARN）、云（GCE/EC2
TRX1024·2025-02-26 10:35

本地Oracle数据库复制数据到Apache Hive的Linux服务器集群的分步流程

我们已经有安装ApacheHive的Linux服务器集群，它可以连接到一个OracleRDS数据库，需要在该Linux服务器上安装配置sqoop，然后将OracleRDS数据库中所有的表数据复制到Hive
weixin_30777913·2025-02-26 10:34

手把手教你使用CloudCanal数据同步工具

本文向大家介绍的是CloudCanal数据迁移同步工具，能够实现多种数据源之间的数据同步，并且提供可视化操作界面，帮助我们提升开发效率，让我们一起快速了解CloudCanal并掌握数据同步操作吧～CloudCanal
高阳很捷迅·2025-02-26 09:21

rabbitmq 同步策略_数据同步解决方案-canal与rabbitmq

学习目标能够完成canal环境的搭建与数据监控微服务的开发能够完成首页广告缓存更新的功能，掌握OkHttpClient的基本使用方法能够完成商品上架索引库导入数据功能，能够画出流程图和说出实现思路能够完成商品下架索引库删除数据功能，能够画出流程图和说出实现思路该工程使用lua+nginx+rabbitmq+redis等技术的第一个主要目的是实现轮播图的读取，具体图解：其中nginx的作用包括了从数
weixin_39996739·2025-02-26 08:51

Android面试题-多线程(99题)

Android面试题之多线程，包括线程、Java同步问题、阻塞队列、线程池、AsyncTask、HandlerThread、IntentService等内容。
猎羽·2025-02-26 08:44

Flink集群架构

从本章节开始，我们对flink从它的一个集群的一个架构以及它的一个部署模式着手，去了解flink如何去部署在不同的这样的一个集群的一些资源管理器上面，以及相应的一些原理的一些解析。
流量留·2025-02-26 06:32

Pinpoint应用性能管理工具Docker化安装

Dockerfile启动Pinpoint其他Pinpoint应用性能管理工具Docker化安装本文主要介绍Pinpoint应用性能管理工具Docker化安装，以及在后期Pinpoint进行版本升级时，如何同步升级
小苏少·2025-02-26 05:29

GaussDB 数据库迁移方案设计与实践

GaussDB（华为云分布式关系型数据库）凭借其高吞吐、强一致性、弹性扩展等特性，成为政企客户替换传统数据库（如MySQL、Oracle）或升级原有GaussDB集群的首选目标。
如清风一般·2025-02-26 05:56

K8S集群搭建(kubeadm+calico)

准备阶段环境显卡：4060ti系统：ubuntu22.041.安装docker官网安装步骤：#AddDocker'sofficialGPGkey:sudoapt-getupdatesudoapt-getinstallca-certificatescurlsudoinstall-m0755-d/etc/apt/keyringssudocurl-fsSLhttps://download.docker.
·2025-02-26 05:02

什么容错性以及Spark Streaming如何保证容错性

容错系统的关键特性包括负载平衡、集群、冗余、复制和故障转移等。
python资深爱好者·2025-02-26 04:48

不愧是腾讯，面试的质量太高了

核心区别：事件处理流程不同Reactor：基于同步I/O，主线程监听事件就绪后，由工作线程执行实际I/O操作(读/写)和业务处理。
大G哥·2025-02-26 02:35

嵌入式软件架构设计分层思路

在正规的项目开发中，项目往往是并行开发的，也就是说硬件设计、底层软件设计、应用软件设计等是同步进行的。比如说在开发板上调试模块驱动，在其他平台上调试应用程序再移植到目前这个平台等。
轻松学C语言·2025-02-26 01:57

MongoDB副本集与分片综合应用

MongoDB复制是将数据同步在多个服务器的过程。复制提供了数据的冗余备份，并在多个服务器上存储数据副本，提高了数据的可
李明一.·2025-02-26 01:26

rust笔记10-多线程

在Rust中，Sync和Send是用于多线程编程的两个关键trait，它们帮助确保线程安全和数据同步。Send和SyncTraitSend:表示类型的所有权可以在线程间安全传递。
shanzhizi·2025-02-25 21:34

微服务架构是什么？怎么使用？

微服务架构一.服务架构演变过程1.1单体应用架构所有的功能都在一个项目中1.2集群架构把一个单体项目部署多个，使用nginx进行负载均衡，根据负载均衡策略调用后端服务。
刘zy_9527·2025-02-25 21:34

七、详细解释：实用工具命令

1.rsync–高效文件同步用途：增量同步文件/目录（适合备份、迁移），仅传输变化的部分。语法：rsync[选项]源路径目标路径常用选项：-a：归档模式（保留权限、时间戳等，等同于-rlptgoD）。
猫猫虫。·2025-02-25 21:59

以太坊介绍

它使用区块链来从同步和存储系统状态，以及称为ether的加密货币来计量和约束执行资源成本。智能合约相当于可以在以
倒霉男孩·2025-02-25 21:29

Spark集群架构

文章目录Spark架构Spark执行任务流程Spark运行环境SparkonYARNSparkStandaloneSpark架构Spark可以运行在YARN上也可以运行Mesos上，无论运行在哪个集群管理架构上
情深不仅李义山·2025-02-25 20:25

四、spark集群架构

spark集群架构官方文档：http://spark.apache.org/docs/latest/cluster-overview.html集群架构我们先看这张图这张图把spark架构拆分成了两块内容
weixin_34411563·2025-02-25 20:54

精选 ES（elasticsearch）添加、修改、查询、删除详细使用语法

es使用简单，支持集群，适用于海量数据的存储、搜索与分析，应用十分广泛。
代码讲故事·2025-02-25 20:54

分布式锁有哪些应用场景？

在没有适当的同步机制下，可能会发生超卖（即系统允许超过库存数量的购买）。解决方案：
·2025-02-25 20:46

Spark集群架构介绍

Spark之YARN介绍一、导语二、Spark及其特性三、Spark架构总览一、导语ApacheSpark(后续简称为Spark)是一款正在点燃大数据世界的开源集群计算框架。
olifchou·2025-02-25 20:23

Spark Standalone集群架构

北风网spark学习笔记SparkStandalone集群架构SparkStandalone集群集群管理器，clustermanager：Master进程，工作节点：Worker进程搭建了一套Hadoop
htfenght·2025-02-25 20:22

Spark----Spark 在不同集群中的架构

Spark注重建立良好的生态系统，它不仅支持多种外部文件存储系统，提供了多种多样的集群运行模式。
XiaodunLP·2025-02-25 20:22

运维实践 | 使用K3S之快速搭建精简版本K8S集群环境，助力开发测试环境!

欢迎关注「WeiyiGeek」点击下方卡片即可关注我哟!设为「星标⭐」每天带你基础入门到全栈实践再到放弃学习！涉及网络安全运维、应用开发、物联网IOT、学习路径、个人感悟等知识“花开堪折直须折，莫待无花空折枝。”作者主页：[https://www.weiyigeek.top]作者博客：[https://blog.weiyigeek.top]作者答疑学习交流群：请关注
全栈工程师修炼指南·2025-02-25 19:17

k8s集群内的pod连接集群外部的mysql， k8s集群内部服务如何连接集群外部mysql？ 一文搞明白

一、为什么不将mysql服务部署到k8s集群中使用呢？1.有状态服务在K8s中的管理比较复杂，特别是持久化存储的问题。
终端行者·2025-02-25 19:17

使用kuboard管理kubernetes集群

官网：https://kuboard.cn/learning/准备一台新的服务并安装docker[root@docker-server~]#dockerrun-d--restart=unless-stopped--name=kuboard-p80:80/tcp-p10081:10081/tcp-eKUBOARD_ENDPOINT="http://192.168.209.176:80"-eKUBOA
终端行者·2025-02-25 19:17

如何添加集群节点与token过期如何重新生成？

Kubernetes集群部署零、版本信息操作系统：CentosStream9、Centos7通过k8s版本：1.26.11.28.2本文档未使用docker,使用containerd从版本1.24开始已经去掉默认对
终端行者·2025-02-25 19:17

后端导出时前端如何处理

，通过后端导出，但是前端要怎么写才能完成这个导出功能呢，上网查了一下，发现还是有不少方法的，最后选择了其中一个比较简单可行的方法，那就是通过创建form表单然后配置相关的参数，最后提交表单，这种方式是同步的
灯光下的投影·2025-02-25 19:45

docker修改command_只要 8 个步骤，学会这个 Docker 命令终极教程！

花费1-2天的时间来设置Docker集群，或找出导致Docker容器启动失败的代码，你是不是也有过类似的经历？
凶残小龙虾·2025-02-25 18:39

MySQL 主从集群同步延迟问题分析与解决方案

MySQL主从复制（Replication）是构建高可用架构的核心技术，但在实际应用中，主从同步延迟（ReplicationLag）是常见且棘手的问题。
豪宇刘·2025-02-25 17:35

[实现Rpc] 客户端 | Requestor | RpcCaller的设计实现

目录Requestor类的实现框架完善onResponse处理回复完整代码RpcCaller类的实现1.同步调用call2.异步调用call3.回调调用callRequestor类的实现（1）主要功能：
lvy-·2025-02-25 17:03

python百度网盘-百度网盘 Python 客户端

这样很大的一个好处是可以利用到百度云盘2TB的存储空间(如果你是会员有6TB)；你可以在任何服务器上，利用自动化脚本实现一些数据文件、日志文件等等备份操作，同时也提供丰富的文件列表、上传、下载、对比、同步以及批量操作等
weixin_37988176·2025-02-25 17:02

bypy使用指南 | 如何在linux服务器上下载百度云/百度网盘文件？（超级详细版）

以下是根据BaiduPCS-Py（bypy）项目提供的中文详细使用指南：bypy介绍bypy是一个用于操作百度云的命令行工具，支持文件上传、下载、同步等操作。
TokamakYang·2025-02-25 16:00

微服务即时通信系统---（三）框架学习

RpcController类服务端类与接口ServerOptions类Server类ClosureGuard类HttpHeader类Controller类客户端类与接口ChannelOptions类Channel类使用同步调用
YangZ123123·2025-02-25 16:28

spark程序提交到集群上_Spark集群模式&Spark程序提交

Spark集群模式&Spark程序提交1.集群管理器Spark当前支持三种集群管理方式Standalone—Spark自带的一种集群管理方式，易于构建集群。
毫无特色·2025-02-25 16:25

JUC并发编程之集合类线程安全问题

在并发条件下,由于多数集合没有同步控制所以这些集合具有线程不安全性线程不安全的集合线程不安全用例(ArrayList为例)示例publicclassMainTest{publicstaticvoidmain
xzystart·2025-02-25 16:24

JUC并发—9.并发安全集合三

CopyOnWriteArrayList2.并发安全的链表队列ConcurrentLinkedQueue3.并发编程中的阻塞队列概述4.JUC的各种阻塞队列介绍5.LinkedBlockingQueue的具体实现原理6.基于两个队列实现的集群同步机制
东阳马生架构·2025-02-25 15:53

Redis原理—3.复制、哨兵和集群

大纲1.Redis使用sync命令实现的复制功能2.Redis使用psync命令实现的复制功能3.Redis主从服务器之间的心跳检测4.从服务器如何实现复制主服务器的(复制的实现)5.Redis的复制拓扑介绍6.Redis主从复制数据延迟的处理7.Redis主从复制的问题8.RedisSentinel和高可用9.Redis如何保存更多的数据10.一个普通Redis服务器的初始化过程11.一个Sen
东阳马生架构·2025-02-25 15:53

基于docker-compose安装spark 1+3及Spark On Yarn模式集群

基于docker-compose安装spark1+3及SparkOnYarn模式集群1、`docker-compose.yml`：2、`spark.env`：此处的样例是参考别人的，之后自己整合一套可以使用的
dh12313012·2025-02-25 15:20

71、Go语言全局初始化利器：sync.Once的深度解析与应用

1.sync.Once简介在Go语言中，sync.Once是一个同步原语，用于确保某个函数仅被执行一次。这对于初始化操作特别有用，例如全局变量的初始化，因为它们需要在程序启动
多多的编程笔记·2025-02-25 14:41

【Golang 面试题】每日 3 题（六十五）

Gochannel是线程安全的，原因在于channel内部实现了同步机制，它可以保证在多个goroutine之间的
Pandaconda 的测开之路·2025-02-25 14:06

Redis 的主从复制是如何工作的

一、主从同步的基本原理主节点（Master）：负责处理写请求和一部分读请求，保存数据的最新状态。从节点（Slave）：复制主节点的数据，处理只读请求，分担主节点的读取压力。
吃en橙·2025-02-25 13:32
上一页 7 8 9 10 11 12 13 14 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他