分布式基础知识第4页

minio多主机分布式部署

Minio多主机分布式docker-compose集群部署_miniodocker-compose-CSDN博客

一剑丶飘香·2025-02-27 12:14

OpenHarmony 特性解析——硬件资源池化架构介绍

1.1一对一在设计初期，为解决两台设备间的协同问题，我们通过系统提供的分布式设备虚拟化平台将两台设备的硬件资源进行融合，实现了“一对一”的硬

愿天堂没有996·2025-02-27 10:05

redission的原理

分布式锁的实现Redisson最出名的功能之一是分布式锁（RLock）。

深圳卢先生·2025-02-27 10:33

大模型成本优化实战：从分布式训练到量化剪枝，轻松降低AI计算开销

网罗开发（小红书、快手、视频号同名）大家好，我是展菲，目前在上市企业从事人工智能项目研发管理工作，平时热衷于分享各种编程领域的软硬技能知识以及前沿技术，包括iOS、前端、HarmonyOS、Java、Python等方向。在移动端开发、鸿蒙开发、物联网、嵌入式、云原生、开源等领域有深厚造诣。图书作者：《ESP32-C3物联网工程开发实战》图书作者：《SwiftUI入门，进阶与实战》超级个体：CO

网罗开发·2025-02-27 08:54

爬虫必备html和css基础知识

一、引言在当今数字化时代，网络上蕴含着海量的有价值数据。Python爬虫技术凭借其高效、灵活的特点，成为了获取这些数据的重要手段。而网页数据通常以HTML格式呈现，要想准确地从网页中提取所需信息，就需要深入了解HTML标签的结构和含义，以及如何运用CSS选择器精准定位目标元素。本文将围绕这两方面展开详细阐述，旨在帮助掌握Python爬虫的关键基础技能。二、常用HTML标签详解2.1文本结构标签2.

ylfhpy·2025-02-27 07:17

2020年Python最新面试题（四）：爬虫基础知识

目录1.什么是爬虫?2.爬虫的基本流程有哪些?3.Request中包含了哪些内容?4.Response中包含了哪些内容5.HTTP请求中的POST、GET有什么区别?6.HTTP、HTTPS协议有什么区别?7.Cookie和Session有什么区别？8.域名和IP之间有什么关系?如何查看某个域名对应的IP地址?9.在HTTP协议头中，keep-alive字段有什么作用?10.HTTP常用的状态码(

Amo Xiang·2025-02-27 07:17

Cassini_Network-Aware Job Schedulingin Machine Learning Clusters

分布式机器学习训练工作负载的通信开销占据了训练迭代时间的很大一部分，而现有的ML调度器往往忽略了ML训练作业的通信模式。

一只积极向上的小咸鱼·2025-02-27 07:37

性能测试丨JMeter 分布式加压机制

JMeter的分布式加压机制允许在多台机器上同时运行测试，以模拟更高的负载。以下是其工作原理和配置步骤：1.分布式架构主节点（Controller）：负责管理测试计划、分发任务和收集结果。

霍格沃兹测试开发学社测试人社区·2025-02-27 06:36

大语言模型(LLM)入门学习路线图，附资源汇总，收藏这篇就够了

Github项目上有一个[大语言模型学习路线笔记]“大语言模型学习路线笔记”)，它全面涵盖了大语言模型的所需的基础知识学习，LLM前沿算法和架构，以及如何将大语言模型进行工程化实践。

AI小白熊·2025-02-27 06:34

强大的ETL利器—DataFlow3.0

产品开发背景DataFlow是基于应用数据流程的一套分布式ETL系统服务组件，其前身是LogCollector2.0日志系统框架，自LogCollector3.0版本开始正式更名为DataFlow3.0

lixiang2114·2025-02-27 05:27

深入解析Zookeeper脑裂问题与CAP取舍：从原理到实战

在分布式系统中，Zookeeper是一种常用于维护配置信息、命名、提供分布式同步和组服务的协调服务。

guihong004·2025-02-27 05:26

python总结报告_python 学习总结

一、python的基础知识1、数据类型数字型：int、float、Boolean非数字型：字符串、列表、元组、字典可变类型：列表、字典不可变类型：数字、字符串、元组格式化字符串：两种写法a、python

weixin_39628247·2025-02-27 05:21

Linux系统管理-Shell-脚本入门

关于Linux系统管理、Shell以及脚本入门，我们可以从以下几个方面进行清晰的归纳和总结：一、Linux系统管理基础知识Linux系统组成：Linux系统由内核、shell、文件系统和应用程序四个部分组成

11-pmans-20220308016·2025-02-27 04:16

Hive SQL 使用及进阶详解

一、Hive简介Hive是建立在Hadoop之上的数据仓库基础架构，它提供了类似于SQL的查询语言HiveSQL（也称为HQL），用于对存储在Hadoop分布式文件系统（HDFS）中的大规模数据进行数据查询和分析

小四的快乐生活·2025-02-27 03:37

Redisson 简介

1.Redisson简介Redisson是一个基于Redis的Java客户端库，专注于分布式和并发编程。

茶本无香·2025-02-27 02:03

kafka小白基础知识

一、Kafka入门（一）Kafka简介Kafka是一个开源的分布式流处理平台，最初由LinkedIn开发，后来贡献给了Apache软件基金会。

小四的快乐生活·2025-02-27 02:29

uml类图

Android西红柿·2025-02-27 01:22

去中心化应用 DApp：开启数字经济新时代

DApp的定义与特性去中心化：DApp运行在区块链网络上，不依赖单一的中心化机构或服务器，其数据、逻辑和状态都存储在区块链的分布式账本中，由众多节点共同维护和验证，避免了单点故障和数据篡改的风险，极大地提升了系统的安全性和稳定性

·2025-02-27 00:38

HBase：大数据时代的“超级数据库”

HBase是一个分布式的、面向列的开源数据库，它基于Google的Bigtable论文设计而成。简单来说，HBas

狮歌~资深攻城狮·2025-02-26 22:57

skywalking前端_SkyWalking

Skywalking(简称SW)是分布式系统的应用程序性能监视(APM)工具，专为微服务、云原生和容器架构而设计，提供分布式追踪、服务网格遥测分析、度量聚合和可视化一体化解决方案。

智能迷宫·2025-02-26 21:48

从中医到代码：用Java揭开《皇帝内经》的神秘面纱

《皇帝内经》讲述的是中医学的基本理论、诊断方法及治疗原则；而Java编程则涉及面向对象编程、数据结构、算法等基础知识。2.学习与实践实践性：学习《皇

guzhoumingyue·2025-02-26 20:45

区块链软件系统开发：从设计到实现的全面指南

作为去中心化、不可篡改、透明可信的分布式账本技术，区块链不仅为加密货币提供了基础，还推动了许多创新应用的发展。然而，开发一个区块链软件系统并非易事。

电报号dapp119·2025-02-26 20:13

127.0.0.1 与 localhost 有什么区别

文章目录引言：被忽视的基础知识陷阱一、基础概念深度解析1.1网络协议栈视角1.2技术定义对比二、核心差异全景分析2.1操作系统实现差异2.2网络编程中的行为差异三、六大关键使用场景3.1Web开发调试3.2

.猫的树·2025-02-26 19:06

分布式爬虫场景下代理IP负载均衡的实战优化指南

在数据采集项目中，分布式节点搭配代理IP的组合方案已成为行业标配。

·2025-02-26 19:30

【Go | 从0实现简单分布式缓存】-4：使用singleflight防止缓存击穿

本文目录一、缓存问题二、singleflight三、geecache.go一、缓存问题先回顾一下缓存问题：缓存雪崩：缓存在同一时刻全部失效，造成瞬时DB请求量大、压力骤增，引起雪崩。缓存雪崩通常因为缓存服务器宕机、缓存的key设置了相同的过期时间等引起。缓存击穿：一个存在的key，在缓存过期的一刻，同时有大量的请求，这些请求都会击穿到DB，造成瞬时DB请求量大、压力骤增。缓存穿透：查询一个不存在的

Golinie·2025-02-26 18:27

Dubbo 实战 + 手写 RPC 框架，彻底搞懂分布式调用！

Dubbo实战+手写RPC框架，彻底搞懂分布式调用！大家好！今天我们来聊聊RPC框架。

工一木子·2025-02-26 17:24

2024腾讯最新面经总结：面试题库+实战笔记（附答案解析）

20、你们用过缓存吗没有，但是用redis做了分布式锁21、你说说下分布式锁怎么做的？

2401_84048521·2025-02-26 17:22

MongoDB 数据库简介

MongoDB概述MongoDB是一个基于分布式文件系统的NoSQL数据库，由10gen公司

wjs2024·2025-02-26 17:20

《深入理解JVM》实战笔记（五）：线程安全与锁优化

序言多线程编程是现代计算机系统中不可或缺的一部分，尤其在高并发、大规模分布式系统中，线程安全问题直接影响程序的稳定性和性能。

西瓜拍两瓣·2025-02-26 16:48

TIDB数据库的基本介绍

一、基础概念：1、TiDB是PingCAP公司自主设计、研发的国产开源分布式关系型数据库，具备水平扩容或者缩容、金融级高可用、实时HTAP、云原生的分布式数据库、兼容MySQL5.7协议和MySQL生态等重要特性

奕辰杰·2025-02-26 16:47

MongoDB私人学习笔记

一、基础知识：1、MongoDB的名称来源于HumongousDatabase，中文意思就是巨大无比的数据库，顾名思义，MongoDB就是为处理大数据而生，以解决海量数据的存储和高效查询使用为使命。

奕辰杰·2025-02-26 15:08

MongoDB 复制(副本集)

在分布式系统中，为了提高数据可用性和系统稳定性，常常需要实现数据的备份和冗余。MongoDB提供了副本集（ReplicaSet）功能，可以实现数据的自动备份和故障转移。

froginwe11·2025-02-26 15:38

【Python爬虫(82)】开启物联网数据爬取之旅

从Python基础语法、爬虫入门知识讲起，深入探讨反爬虫、多线程、分布式等进阶技术。以大量实例为支撑，覆盖网页、图片、音频等各类数据爬取，还涉及数据处理与分析。

奔跑吧邓邓子·2025-02-26 15:37

Flink Checkpoint机制详解

在分布式流处理系统中，容错性和一致性是核心要求。ApacheFlink作为流处理的领先框架，提供了一种强大的机制来确保系统的容错性与数据的一致性，这就是Flink的Checkpoint机制。

Ray.1998·2025-02-26 15:05

探秘分布式图处理利器——PHOEBUS

探秘分布式图处理利器——PHOEBUSphoebusPhoebusisadistributedframeworkforlargescalegraphprocessingwritteninErlang.项目地址

杭臣磊Sibley·2025-02-26 14:32

探秘MoonMQ：一款高速分布式消息队列系统

探秘MoonMQ：一款高速分布式消息队列系统moonmqafastdistributedmessagequeueimplementedwithgo项目地址:https://gitcode.com/gh_mirrors

蒙丁啸Sharp·2025-02-26 14:32

革新汽车装配产线：MR30分布式IO模块引领智能制造新时代

在这场技术革命的浪潮中，MR30分布式IO模块以其高效、灵活、可靠的特点，正逐步成为汽车装配产线上的明星产品，引领着汽车制造业向更高层次的智能制造迈进。

明达技术·2025-02-26 14:00

【Python爬虫(37)】解锁分布式爬虫：原理与架构全解析

从Python基础语法、爬虫入门知识讲起，深入探讨反爬虫、多线程、分布式等进阶技术。以大量实例为支撑，覆盖网页、图片、音频等各类数据爬取，还涉及数据处理与分析。

奔跑吧邓邓子·2025-02-26 14:57

Apache IoTDB: 物联网时序数据库的分布式核心技术与实际应用

本文将深入探讨ApacheIoTDB的分布式核心技术和其在实际应用中的表现。项目背景与核心技术ApacheIoTDB的诞生源于对海量时序数据管理的需求。

ITPUB-微风·2025-02-26 12:17

Elasticsearch 相关面试题

Elasticsearch是一个分布式搜索引擎，基于Lucene实现。Mapping是什么？ES中有哪些数据类型？Mapping：定义字段的类型和属性。

一切顺势而行·2025-02-26 12:47

基于Mybatis-Plus和dynamic-datasource-spring-boot-starter-多租户多商户多数据源动态切换

基础知识1、引入dynamic-datasource-spring-boot-starter。

更容易记住我·2025-02-26 12:15

Gossip 协议

Gossip协议协议介绍协议流程缺点Gossip算法是一种在分布式系统中广泛使用的通信协议，主要用于信息传播和状态同步。

disgare·2025-02-26 12:44

netty详解

Netty是一个高性能的网络通信框架，广泛用于构建网络应用程序，如高性能的服务器、客户端和分布式系统。以下是Netty的各个组件介绍与原理分析，以及客户端和服务端的实现示例。

p-knowledge·2025-02-26 11:13

JVM之垃圾回收和调优思路

文章目录GC的基础知识1.什么是垃圾2.如何定位（找到）垃圾3.常见的垃圾回收算法4.JVM内存分代模型（用于分代垃圾回收算法）5.常见的垃圾回收器常见垃圾回收器组合参数设定：(1.8)JVM调优第一步

星星都没我亮·2025-02-26 11:13

单片机C语言基础知识-指针篇

引言：指针是变量在计算机或单片机内所占有的存储区域的地址。C51语言中广泛使用的指针概念是从C语言中继承下来的，利用指针变量不但可以操作各种基本的数据类型、，而且能使C51语言像汇编语言一样，具有处理单片机内存地址的能力。地址，指针，指针变量概念区分地址：地址是单片机内存单元的编号。其中内存单元是单片机存储器中的最小存储单位，通常一个字节称为-一个内存单元。指针：指针是一个特殊变量，其实也是一个地

墨小羽ovo·2025-02-26 11:42

Linux入门的基础知识点汇总（带示例）

目录文件和目录操作文本处理命令系统管理命令用户和权限管理权限管理软件安装与管理网络配置Linux是一种广泛使用的开源操作系统，对于初学者而言，掌握一些基础知识点十分关键。

浪九天·2025-02-26 11:10

HDFS是如何存储和管理大数据

HDFS（HadoopDistributedFileSystem，Hadoop分布式文件系统）是专为大数据处理而设计的分布式文件系统，具有高吞吐量、高容错性等特点，适用于大规模数据存储和管理。

python资深爱好者·2025-02-26 11:38

Hadoop 基础原理

Hadoop生态系统中的附加组件HDFSHDFS集群架构HDFS读写流程HDFS写流程HDFS读流程NameNode持久化机制MapReduce底层原理示例Hadoop是一个由Apache基金会开发的分布式系统基础架构

disgare·2025-02-26 11:38

短视频矩阵服务架构指南

在数据存储方面，系统使用分布式数据库或云数据库

李lrh9166·2025-02-26 11:37

Flink-02-flink技术架构及工作原理

Runtime层Runtime层提供了支持Flink计算的全部核心实现，比如：支持分布式Stream处理、JobGraph到ExecutionGraph的映射、调度等等，为上层API层提供基础服

TRX1024·2025-02-26 10:35

推荐频道

分布式基础知识