分布式+集群

GitHub上克隆项目

Git是一个开源的分布式版本控制系统，用于跟踪和管理代码变更。你可以从Git的官方网站（https://git-scm.

bigbig猩猩·2024-09-16 09:19

01-Git初识

01-Git初识概念：一个免费开源，分布式的代码版本控制系统，帮助开发团队维护代码作用：记录代码内容。

Meereen·2024-09-16 09:44

Kafka是如何保证数据的安全性、可靠性和分区的

Kafka作为一个高性能、可扩展的分布式流处理平台，通过多种机制来确保数据的安全性、可靠性和分区的有效管理。

喜欢猪猪·2024-09-16 07:00

MongoDB知识概括

GeorgeLin98·2024-09-16 06:58

WebMagic：强大的Java爬虫框架解析与实战

文章目录引言官网链接WebMagic原理概述基础使用1.添加依赖2.编写PageProcessor高级使用1.自定义Pipeline2.分布式抓取优点结论引言在大数据时代，网络爬虫作为数据收集的重要工具

Aaron_945·2024-09-16 05:21

华为云分布式缓存服务DCS 8月新特性发布

分布式缓存服务（DistributedCacheService，简称DCS）是华为云提供的一款兼容Redis的高速内存数据处理引擎，为您提供即开即用、安全可靠、弹性扩容、便捷管理的在线分布式缓存能力，满足用户高并发及数据快速访问的业务诉求

华为云PaaS服务小智·2024-09-16 04:43

浅谈MapReduce

从今天开始，本人将会开始对另一项技术的学习，就是当下炙手可热的Hadoop分布式就算技术。目前国内外的诸多公司因为业务发展的需要，都纷纷用了此平台。

Android路上的人·2024-09-16 04:40

98_es生产集群部署之针对集群重启时的shard恢复耗时过长问题定制的重要参数

98_es生产集群部署之针对集群重启时的shard恢复耗时过长问题定制的重要参数shardrecovery配置以及集群重启时的无意义shard重分配问题在集群重启的时候，有一些配置会影响shard恢复的过程

小山居·2024-09-16 03:53

KVM+GFS分布式存储系统构建KVM高可用

利用GlusterFs分布式复制卷，对KVM虚拟机文件进行分布存储和冗余。

henan程序媛·2024-09-16 00:17

Hadoop

ApacheHadoop是一个开源的分布式计算框架，主要用于处理海量数据集。它具有高度的可扩展性、容错性和高效的分布式存储与计算能力。

傲雪凌霜，松柏长青·2024-09-16 00:16

【Kubernetes】常见面试题汇总（十一）

目录33.简述Kubernetes外部如何访问集群内的服务？34.简述Kubernetesingress？35.简述Kubernetes镜像的下载策略？

summer.335·2024-09-16 00:14

k8s中Service暴露的种类以及用法

二、详解1.ClusterIP定义：默认类型，服务只能在集群内部访问。作用：通过集群内部IP地址暴露服务。示例：spec:type:ClusterIPports:-port:80targetPo

听说唐僧不吃肉·2024-09-16 00:13

Kubernetes 自定义控制器开发

前言Controller监听集群内部资源对象的变化，编辑资源对象(增

IT回忆录·2024-09-15 23:40

大模型训练数据库Common Crawl

CommonCrawl介绍‌‌CommonCrawl是一个非营利组织，致力于通过大规模分布式爬虫系统定期抓取整个Web并将其存储在一个可公开访问的数据库中。

WindyChanChan·2024-09-15 23:40

慢速连接攻击是什么？慢速连接攻击怎么防护？

与传统的拒绝服务（DoS）和分布式拒绝服务（DDoS）攻击不同，慢速攻击并不依赖于发送大量数据包来消耗带宽，而是利用HTTP、TCP或SSL等协议的特性，通过发送大量不完整的请求或缓慢发送数据来占用服务器资源

快快小毛毛·2024-09-15 23:08

分布式锁和spring事务管理

最近开发一个小程序遇到一个需求需要实现分布式事务管理业务需求用户在使用小程序的过程中可以查看景点，对景点地区或者城市标记是否想去，那么需要统计一个地点被标记的人数，以及记录某个用户对某个地点是否标记为想去

暴躁的鱼·2024-09-15 23:38

【K8s】专题十一：Kubernetes 集群证书过期处理方法

本文内容均来自个人笔记并重新梳理，如有错误欢迎指正！如果对您有帮助，烦请点赞、关注、转发、订阅专栏！专栏订阅入口Linux专栏|Docker专栏|Kubernetes专栏往期精彩文章【Docker】（全网首发）KylinV10下MySQL容器内存占用异常的解决方法【Docker】（全网首发）KylinV10下MySQL容器内存占用异常的解决方法（续）【Docker】MySQL源码构建Docker镜

行者Sun1989·2024-09-15 22:34

Gobelieve 架构

转简书JackieF的文章,为了自己方便copy了一份,加一些自己的东西.链接：https://www.jianshu.com/p/8121d6e85282IMCore主要分三大块:im客户连接服务器（可分布式部署

weixin_34099526·2024-09-15 22:30

Kafka详细解析与应用分析

Kafka是一个开源的分布式事件流平台（EventStreamingPlatform），由LinkedIn公司最初采用Scala语言开发，并基于ZooKeeper协调管理。

芊言芊语·2024-09-15 20:33

linux挂载文件夹

1.使用NFS（NetworkFileSystem）NFS是一种分布式文件系统协议，允许一个系统将其文件系统的一部分共享给其他系统。

小码快撩·2024-09-15 19:58

Kafka 基础与架构理解

目录前言Kafka基础概念消息队列简介：Kafka与传统消息队列（如RabbitMQ、ActiveMQ）的对比Kafka的组件Kafka的工作原理：消息的生产、分发、消费流程Kafka系统架构Kafka的分布式架构设计

StaticKing·2024-09-15 19:27

Rides实现分布式锁，保障数据一致性,Redisson分布式事务处理

分布式环境下分布式锁有三种方式：基于数据库分布式锁基于Redis分布式锁基于zk分布式锁本帖只介绍Redis分布式锁为什么需要用到分布式锁？

朱杰jjj·2024-09-15 19:26

机电综合管理系统架构

余度管理1.余度概述2.硬件冗余3.软件冗余4.通信冗余三、总线架构1.MIL-STD-1553B总线2.ARINC429总线3.ARINC629总线4.AFDX/ARINC664总线四、未来发展趋势1.分布式架构

小熊coder·2024-09-15 18:23

华为云分布式缓存服务DCS与开源服务差异对比

分布式缓存服务DCS提供单机、主备、集群等丰富的实例类型，满足用户高读写性能及快速数据访问的业务诉求。支持丰富的实例管理操作，帮助用户省去运维烦恼。

hcinfo_18·2024-09-15 18:49

在服务器计算节点中使用 jupyter Lab

、数据分析和机器学.jupyterlab是jupyternotebook的下一代产品,集成了更多功能,使用起来更方便.在进行数据分析及可视化时，个人电脑不能满足大数据的分析需求，就需要用到高性能计算机集群资源

ranshan567·2024-09-15 17:43

Dubbo架构概览：服务注册与发现、远程调用、监控与管理

Dubbo是一个成熟的、高性能的、基于Java的微服务开发框架，它主要用于解决分布式系统中的服务治理问题，包括服务的注册与发现、远程过程调用（RPC）、服务监控与管理等多个关键环节。

木南曌·2024-09-15 16:39

老生常谈：MySQL高可用架构

服务备份：有些服务是无法同时存在多个运行时的，比如说：Nginx的反向代理，一些集群的leader节点。这时可以存在一个备份服务，处于随时待命状态。自动切换：服务冗余之后，当某个节点不可用时，要

我有一头小花驴·2024-09-15 14:24

nfs服务搭建

基哥度娘网络文件系统(NFS)是sun微系统最初开发的分布式文件系统协议,[1]允许客户端计算机上的用户通过计算机网络访问文件很像本地存储被访问。

GHope·2024-09-15 13:41

hbase介绍

hbase是一个分布式的、多版本的、面向列的开源数据库hbase利用hadoophdfs作为其文件存储系统，提供高可靠性、高性能、列存储、可伸缩、实时读写、适用于非结构化数据存储的数据库系统hbase利用

CrazyL-·2024-09-15 13:06

MySQL MHA

一、MySQLMHA高可用环境概述1.什么是MHAMHA（MasterHighAvailability）是一款用于MySQL数据库集群的高可用解决方案，主要解决MySQL单点故障问题。

pokemon..·2024-09-15 12:33

Flume：大规模日志收集与数据传输的利器

一、Flume概述ApacheFlume是一个分布式、可靠、可扩展的日志

傲雪凌霜，松柏长青·2024-09-15 12:32

探索未来，大规模分布式深度强化学习——深入解析IMPALA架构

探索未来，大规模分布式深度强化学习——深入解析IMPALA架构scalable_agent项目地址:https://gitcode.com/gh_mirrors/sc/scalable_agent在当今的人工智能研究前沿

汤萌妮Margaret·2024-09-15 12:30

关于Redis集群同步/持久化/淘汰机制的详解

Redis是非常常用的KV数据库,使用内存以及HashMap进行存储的特点带来了高效的查询.本文将围绕Redis的常见开发使用场景,阐述在Redis集群中各个节点是如何进行数据同步,每个节点如何进行持久化以及在长期使用中如何对数据进行更新和淘汰

尾巴尖上的阳光·2024-09-15 09:15

ETCD 六 etcd总体架构

hack基准测试、测试集群、k8s部署、分支管理、证书等pkg实用程序包的集合raftraft实现server.auth角色身份验证server.em

wanghaichao1234·2024-09-15 09:15

等保测评中的关键技术挑战与应对策略

一、等保测评中的关键技术挑战1.复杂系统架构的评估难度随着信息技术的快速发展，企业信息系统的架构日益复杂，包括分布式系统、微服务架构、云计算环境等。

亿林数据·2024-09-15 06:55

系统架构师软考历年论文题目（2009-2024年）及分析

的软件架构设计与应用；2.论信息系统建模方法；3.论基于REST服务的Web应用系统设计；4.论软件可靠性设计与应用20101.论软件的静态演化和动态演化及其应用；2.论数据挖掘技术的应用；3.论大规模分布式系统缓存设计策略

pccai-vip·2024-09-15 05:49

深入解析 Dubbo 的 attachments 机制及其应用场景

背景在分布式系统中，服务之间的调用（RPC调用）是非常常见的。而在这种服务调用过程中，常常需要在不同服务之间传递一些上下文信息，比如用户身份信息、请求追踪ID、客户端IP等。

molashaonian·2024-09-15 05:18

座舱交互的下一个时代

去年开始，不少车型开始推动传统的分布式座舱仪表和中控电子架构进入域控制器时代，高通成为大赢家。

高工智能汽车·2024-09-15 05:45

【K8S】kubernetes集群架构与组件

文章目录【K8S】kubernetes集群架构与组件kubernetes组件**master组件**node组件整体流程POD终止过程【K8S】kubernetes集群架构与组件kubernetes组件

奇奇怪怪^·2024-09-15 05:43

Kubernetes——组件

文章目录K8S的优势核心架构角色与功能集群图例K8S的优势能管理大量跨主机容器快速部署应用快速扩展应用无缝对接新的应用节省资源，优化硬件资源的使用核心架构master（管理节点）node（计算节点）images

窒息う·2024-09-15 04:37

Kubernetes组件

Kubernetes主要由以下几个核心组件组成：etcd保存了整个集群的状态；

汉只只·2024-09-15 04:34

【Linux 从基础到进阶】Kubernetes 集群搭建与管理

Kubernetes集群搭建与管理Kubernetes（简称K8s）是一个用于自动化部署、扩展和管理容器化应用程序的开源平台。

爱技术的小伙子·2024-09-15 03:00

软件架构，一切尽在权衡

FSA是基础篇，重点介绍了常见的8种架构模式；SAHP是进阶篇，重点介绍了如何从单体架构演进到分布式架构。软件架构，特别是分布

元闰子·2024-09-15 01:47

Spark集群的三种模式

文章目录1、Spark的由来1.1Hadoop的发展1.2MapReduce与Spark对比2、Spark内置模块3、Spark运行模式3.1Standalone模式部署配置历史服务器配置高可用运行模式3.2Yarn模式安装部署配置历史服务器运行模式4、WordCount案例1、Spark的由来定义：Hadoop主要解决，海量数据的存储和海量数据的分析计算。Spark是一种基于内存的快速、通用、可

MelodyYN·2024-09-15 01:16

Nacos 与 Eureka 的区别

随着微服务架构的流行，服务发现成为了构建分布式系统的关键技术之一。在众多服务发现工具中，Nacos和Eureka是两个非常受欢迎的选择。

litGrey·2024-09-15 00:10

【集群架构中的故障集合】_nfs connection reset by peer

3.Connectionrefused连接拒绝检查是否能ping通对应服务器[12:41root@backup~]#rsync-avz/etc176.16.1.31:/tmpssh:connecttohost176.16.1.31port22:Connectionrefusedrsync:connectionunexpectedlyclosed(0bytesreceivedsofar)[sende

2024云技术·2024-09-15 00:09

Redis 集群

目录Redis主从复制Redis主从复制简介Redis主从复制的作用Redis主从复制流程搭建Redis主从复制master节点slave节点验证哨兵故障转移机制部署哨兵Redis集群作用数据分区高可用

確定饿的猫·2024-09-14 23:36

Web3入门指南：从基础概念到实际应用

与以往依赖中心化服务器和大公司控制的数据模式不同，Web3通过区块链技术实现了数据的分布式存储和处理。这一去中心化

dingzd95·2024-09-14 23:01

为什么需要DDos高防服务器呢？

DDoS高防服务可以通过云端清洗集群、数据库监控牵引系统等技术进行有效的削弱。这些技术能够识别并过滤恶意流量，确保正常用户能够顺利

666IDCaaa·2024-09-14 23:28

边缘计算在现代数据中心的应用

一、边缘计算的概念与特点边缘计算是一种将计算和数据存储靠近数据源或用户的分布式计算模式。

666IDCaaa·2024-09-14 23:58

推荐频道