分布式+集群第3页

kubernetes(k8s) 安装与部署

可参考https://blog.csdn.net/White_Ink_/article/details/139743058配置集群环境。

北_鱼·2025-02-24 02:56

接口测试-API测试中常用的协议（下）

下面从其概念、工作原理、特点、应用场景等方面详细介绍：概念起源与核心思想起源：RPC的概念最早出现在20世纪70年代，是为了解决分布式系统中不同计算机之间的通信和协作问题而提出的。

2025年一定要上岸·2025-02-24 02:53

泷羽sec---超文本协议与内外网划分

http协议HTTP协议概述HTTP（HyperTextTransferProtocol）是用于分布式、协作式和动态Web的核心通信协议。它定义了浏览器和Web服务器之间如何传输超文本或文件。

是山然呀·2025-02-24 01:15

Redis数据库面试——数据结构类型知识

文章目录基本数据类型1.String（字符串）使用场景缓存计数器ID生成器分布式锁2.Hash（哈希）3.List（链表/列表）4.Set（集合）5.SortedSet（有序集合）特殊

Good Note·2025-02-23 22:25

鸿蒙搭配前端开发：应用端与WEB端交互

鸿蒙系统（HarmonyOS）是华为开发的一款面向全场景的分布式操作系统，其设计初衷是为了适应物联网时代的需求，旨在构建一个统一的操作系统，支持多种设备的无缝协同工作。

星仔如雨·2025-02-23 21:54

《Spring Cloud 微服务的设计模式》

在分布式系统中，微服务的实例数量和地址可能动态变化，服务注册与发现机制可以让服务之间通过服务名称进行调用，而无需关心具体的实例地址。实现组件Eureka：Netflix

@孤随·2025-02-23 20:16

【Python爬虫(44)】分布式爬虫：筑牢安全防线，守护数据之旅

从Python基础语法、爬虫入门知识讲起，深入探讨反爬虫、多线程、分布式等进阶技术。以大量实例为支撑，覆盖网页、图片、音频等各类数据爬取，还涉及数据处理与分析。

奔跑吧邓邓子·2025-02-23 18:29

Redis中Lua脚本的使用场景

文章目录1.原子计数2.条件更新3.事务性操作4.分布式锁5.批量处理6.计数器与过期管理7.条件删除8.数据聚合1.原子计数场景：原子性地

思静鱼·2025-02-23 17:54

Spark on Yarn 多机集群部署

SparkonYarn多机集群部署1.规划机器角色服务器IP地址角色Master192.168.1.100NameNode+ResourceManager+SparkMasterWorker1192.168.1.101DataNode

晓夜残歌·2025-02-23 17:20

【RabbitMQ业务幂等设计】RabbitMQ消息是幂等的吗？

在分布式系统中，RabbitMQ自身不直接提供消息幂等性保障机制，但可通过业务逻辑设计和技术组合实现消息处理的幂等性。

星星点点洲·2025-02-23 16:19

Xline v0.7.0: 一个用于元数据管理的分布式KV存储

Xline是一个基于Curp协议的，用于管理元数据的分布式KV存储。现有的分布式KV存储大多采用Raft共识协议，需要两次RTT才能完成一次请求。

·2025-02-23 16:35

【Elasticsearch】java 集成es

我们知道Elasticsearch是一款RestfulAPI风格的分布式搜索引擎。ESClient有

日月星宿～·2025-02-23 16:18

JAVA 集成 ElasticSearch

ElasticSearchClientJavaRESTClientDependenciesInitializationRequestOptions测试ElasticSearchClient9300端口：TCP协议，性能较高，ES集群内部节点之间通过

RealmElysia·2025-02-23 15:09

Java高级开发所具知识技能

以下是Java高级开发整理的知识技能，其中涵盖核心技术、框架、分布式架构、性能优化等关键领域：一、Java核心进阶JVM深度理解内存模型（堆、栈、方法区）垃圾回收算法（CMS、G1、ZGC）类加载机制与字节码增强

码代码的小仙女·2025-02-23 14:02

Python的那些事第三十篇：并行计算库在大数据分析中的应用Dask

Dask作为一种开源的并行计算库，通过动态任务调度和分布式计算，能够高效处理超出内存容量的大数据集，并与Python生态系统中的Pandas、NumPy和scikit-learn等库无缝集成。

暮雨哀尘·2025-02-23 13:53

【Python爬虫(27)】探索数据可视化的魔法世界

从Python基础语法、爬虫入门知识讲起，深入探讨反爬虫、多线程、分布式等进阶技术。以大量实例为支撑，覆盖网页、图片、音频等各类数据爬取，还涉及数据处理与分析。

奔跑吧邓邓子·2025-02-23 13:51

边缘计算与联邦学习驱动医疗影像特征工程优化

本研究针对医疗影像分析场景中跨机构数据共享的复杂性，提出基于边缘计算与联邦学习的协同优化框架，通过分布式特征工程重构医学图像的解析范式。

智能计算研究中心·2025-02-23 11:40

深度学习框架与边缘计算融合驱动医疗金融模型优化新路径

当前，TensorFlow、PyTorch等主流框架通过轻量化改造（如TensorFlowLite与PyTorchMobile）逐步适应边缘设备的资源限制，同时结合联邦学习技术构建分布式训练网络。

智能计算研究中心·2025-02-23 11:10

边缘计算与联邦学习驱动医疗金融预测及模型可解释性技术突破

通过将计算资源下沉至终端设备，边缘计算有效缓解了传统中心化架构的延迟与带宽压力，而联邦学习则在保障数据隐私的前提下，实现了跨机构模型的分布式训练。

智能计算研究中心·2025-02-23 11:10

Zookeeper（67） Zookeeper在HBase中的应用是什么？

Zookeeper在HBase中起到了至关重要的作用，主要用于协调和管理HBase集群中的多个组件。

辞暮尔尔-烟火年年·2025-02-23 11:39

联邦学习: 统一数据协作和隐私保护的技术解决之道

联邦学习:统一数据协作和隐私保护的技术解决之道1.数据价值和隐私2.隐私计算技术安全多方计算可信执行环境联邦学习3.联邦学习的拓展分布式机器学习联邦学习和传统分布式系统的差异联邦学习带来的挑战安全性补充实际案例讲解总结

小牍·2025-02-23 10:35

行业风向标｜「博睿数据2024年度精选案例集——观测先锋」重磅发布

云计算时代下，企业的应用交付链路越来越复杂，云原生、微服务、大型分布式等新技术给企业带来竞争力的同时，也带来了全新的挑战，传统IT监控已无法监测业务系统全链路的稳定性和可靠性，“云深不可见”难题突显。

博睿数据Bonree·2025-02-23 09:26

SpringBoot+Vue前后端跨域问题

随着分布式微服务的兴起，越来越多的公司在开发web项目的时候选择前后端分离的模式开发，前后端分开部署，使得分工更加明确，彻底解放了前端。

笔上烽烟·2025-02-23 08:43

搭建Spark On YARN集群

一、SparkOnYARN架构二、搭建SparkOnYARN集群（一）搭建SparkStandalone集群（二）修改Spark环境配置文件SparkOnYARN模式的搭建比较简单，仅需要在YARN集群的一个节点上安装

snow323H·2025-02-23 07:05

Ubuntu 22.04安装K8S集群

以下是Ubuntu22.04安装Kubernetes集群的步骤概要一、设置主机名与hosts解析#Master节点执行sudohostnamectlset-hostname"k8smaster"#Worker

刘明同学呀·2025-02-23 06:35

基于Hadoop的天气数据分析系统的设计与实现-计算机毕业设计源码+LW文档

Hadoop作为大数据处理领域的领军技术，其分布式计算框架和海量数据存储能力为天气数据分析提供了强大的支持。

qq_375279829·2025-02-23 06:04

Centos7搭建k8s集群

k8s集群节点192.168.128.160k8s-master192.168.128.161k8s-node1192.168.128.162k8s-node21.先搭建master节点#在所有节点上禁用

ct1027038527·2025-02-23 06:32

Centos8安装k8s集群

网上找过一些安装文档，但是安装过程中都遇到了一些问题，本文将一些安装过程中的问题进行了说明，确保能够按照步骤利用三台虚拟机搭建一个k8s的实验环境。1、准备工作规划IPmaster01192.168.10.139node01192.168.10.140node02192.168.10.141利用VMwareWorkstation安装这3台虚拟机，操作系统为centos8。1.1911，安装操作系统

chenwu_k8s·2025-02-23 06:32

Hive排序函数源码解密：字节跳动面试官的底层三连问

一、分布式执行框架Hive中ROW_NUMBER、RANK和DENSE_RANK的底层实现差异主要体现在相同排序键值的处理逻辑上，其核心流程可分为两个阶段：数据分区（Shuffle阶段）根据PARTITIONBY

数据大包哥·2025-02-23 06:31

不同类型的网站选择不同的服务器，那么应该怎么选择服务器呢？

一个站点集群的特点之一是需要多个独立的ip，独立的服务器可以满足这一要求。特别是对于站群的独立服务器，大部分独立IP将达到数百个。2、对外贸易各外贸网站规模大、流量

咕噜分发企业签名-APP加固-彭于晏·2025-02-23 06:30

云存储、云计算与分布式存储、分布式计算是一回事吗？

随着互联网的蓬勃兴起，大数据、人工智能、物联网、云计算与云存储等这些专业词汇在大众视野内出现的频率越来越高，再加上近几年分布式技术异军突起，更使得分布式存储、分布式计算等成为热词。

IPFS星际无限·2025-02-23 05:22

如何理解分布式与集群，二者区别是什么？

分布式是指不同的业务分布在不同的地方，集群指的是将几台服务器集中在一起，实现同一业务。

weixin_39214481·2025-02-23 05:21

【分布式理论13】分布式存储：数据存储难题与解决之道

文章目录一、数据存储面临的问题二、RAID磁盘阵列的解决方案1.RAID概述2.RAID使用的技术3.RAID的代表性等级三、分布式存储的新思路1.分布式存储背景与特点2.分布式存储的组成要素一、数据存储面临的问题在单机系统时代

roman_日积跬步-终至千里·2025-02-23 04:19

【YashanDB 知识库】如何处理 no free block in dictionary cache

问题现象1、共享集群中，创建用户卡住2、查询表或视图报错问题的风险及影响1、共享集群中，createtable、user等，因为需要等其他节点返回消息，如果某个节点dc不够，则会卡住。

·2025-02-23 04:23

WebSocket实战：如何实现百万级即时通讯

WebSocket实战：如何实现百万级即时通讯（附Mermaid架构图+性能优化策略）一、WebSocket核心流程图解1.全链路通信流程（Mermaid）客户端负载均衡WS网关Redis集群业务服务TCP

程序员没睡醒·2025-02-23 03:39

如何在 SpringBoot 项目创建并使用 Redis 的详细介绍

文章目录一、Redis的前置配置1、引入依赖2、单机配置3、集群配置4、两种配置路径解读二、创建Redis配置类1、简易版RedisConfig2、复杂版RedisConfig三、RedisTemplate

青灯文案·2025-02-23 02:31

深入HBase——核心组件

对于HDFS看过深入HDFS的小伙伴，应该都不陌生，它提供了高可靠的海量数据存储和读写能力；而对于Zookeeper，它是一个分布式协调存储服务，主要

黄雪超·2025-02-23 01:26

Python网络爬虫技术详解与实践

本文详细介绍了Python爬虫的基本原理、常用库、实战技巧，框架构建，数据存储，反爬策略，多线程/异步处理，分布式爬虫等关键技术点，并通过新闻网站、电商平台和社交媒体数据爬取的实战案例，阐述了Python

懒癌弓箭手起源·2025-02-23 00:46

全面指南：使用JMeter进行性能压测与性能优化（中间件压测、数据库压测、分布式集群压测、调优）

目录一、性能测试的指标1、并发量2、响应时间3、错误率4、吞吐量5、资源使用率二、压测全流程三、其他注意点1、并发和吞吐量的关系2、并发和线程的关系四、调优及分布式集群压测（待仔细学习）1.线程数量超过单机承载能力时的解决方案

web13508588635·2025-02-23 00:46

ubuntu22.04搭建ETCD集群

一、软件环境ubuntu22.04etcd3.5.1二、服务器角色ubuntu01192.168.209.124ubuntu02192.168.209.125ubuntu03192.168.209.126三、使用cfssl生成自签证书1.下载cfssl工具（/home/wuyu）wgethttps://pkg.cfssl.org/R1.2/cfssl_linux-amd64wgethttps://

qq_43199968·2025-02-23 00:45

《Linux运维总结：基于Ubuntu 22.04+x86_64架构CPU部署etcd 3.5.15二进制分布式集群》

东城绝神·2025-02-23 00:44

TTRSS 迁移实战

背景几年前在云服务器上搭建了一套TTRss+RssHub集群,用于阅读文章.具体可以参见这篇文章:使用K8S部署RSS全套自托管解决方案-RssHub+TinyTinyRss-东风微鸣技术博客近期云服务器要到期了

·2025-02-22 23:19

2.ELK之Elasticsearch常用DSL语句(kibana语句)

零、ES基本操作1、查看索引/mapping2、查看集群健康状态3、查询ES中所有的index4、删除索引5、查看索引的分片情况6、根据docid查询文档7、常规查找——在/index/type中查找8

焱齿·2025-02-22 23:04

开发环境搭建

鸿蒙操作系统（HarmonyOS）是华为公司自主研发的分布式操作系统，旨在为不同的设备提供统一的操作平台。

荔枝寄·2025-02-22 23:01

Spark on YARN的重要参数

在集群模式下，spark.driver.memory改为使用。使用小写字母后缀，例如k，m，g，t，和p，为kibi-，mebi-

大米饭精灵·2025-02-22 21:50

设计一个高并发的系统，如何保证数据一致性？

设计高并发系统时，保证数据一致性是一个非常重要的挑战，尤其是在分布式环境中。

weixin_49526058·2025-02-22 21:15

利用Redis发布订阅模式、SSE实现分布式实时站内信系统

二、单机与集群的站内信实现方式有何区别？三、Redis发布、订阅模式有何特点？

weixin_38515820·2025-02-22 20:44

kafka判断生产者是否向kafka集群成功发送消息

判断kafka生产者是否成功向Kafka集群发送消息，可以通过以下几种方式来判断：同步发送方式在同步发送方式中，生产者调用send()方法后，会等待Kafka的响应来确认消息是否发送成功。

weixin_43833540·2025-02-22 19:05

麦萌《至尊红颜归来》技术架构拆解：从复仇算法到分布式攻防的终极博弈

分布式任务调度：勇闯修罗九塔对应多层防御链（Defense-in-Depth）架构，每层塔可视为独立微服务，通过Kafka实现异步攻击流量编排。对抗性训练框架：修罗门诱捕圈套可建模为GAN（生

短剧萌·2025-02-22 18:56

19、《Springboot+MongoDB整合：玩转文档型数据库》

通过15+个典型代码示例，演示如何高效操作文档数据库，深入剖析MongoTemplate与MongoRepository的差异化使用场景，提供索引优化方案与分片集群配置实战经验，最后针对生产环境常见问题给出解

wolf犭良·2025-02-22 17:50

推荐频道

分布式+集群