云计算&分布式

从单块巨石到星辰大海：分布式与微服务的本质思考

一、分布式系统：宇宙观的代码映射1.核心命题的进化单机时代（1960s-2000s）：冯·诺依曼架构的终极演绎，摩尔定律撑起性能天花板分布式觉醒（2000s-）：CAP定理的启示——放弃"完美系统"的幻想
斗-匕·2025-03-07 14:21

面试基础---MySQL 分布式 ID 方案深度解析

MySQL分布式ID方案深度解析：UUID、自增ID与雪花算法引言在分布式系统中，生成全局唯一的ID是一个常见的需求。
WeiLai1112·2025-03-07 14:18

第三十天：Scrapy 框架-分布式

文章目录一、介绍scrapy-redis框架二、分布式原理三、分布式爬虫的实现四、scrapy-redis框架的安装五、部署scrapy-redis六、给爬虫增加配置信息七、运行程序八、数据导入到mongodb
穿梭的编织者·2025-03-07 14:48

一致性哈希函数处理负载均衡（简单实现，勿喷）

一致性哈希算法是分布式系统中常用的负载均衡算法，特别适合动态变化的服务节点场景。它的核心思想是将服务节点和数据映射到一个虚拟的哈希环上，通过哈希值定位数据所属的节点。
01_·2025-03-07 13:42

Spring Boot 缓存最佳实践：从基础到生产的完整指南

SpringBoot缓存最佳实践：从基础到生产的完整指南引言在现代分布式系统中，缓存是提升系统性能的银弹。
天才选手Yoke·2025-03-07 13:11

Redis

另外，redis也经常用来做分布式锁。redis提供了多种数据类型来支持不同的业务场景。除此之外，redis支持事务、持久化、LUA脚本、LRU驱动事件、多种集群方案。
任璐·2025-03-07 10:52

使用Python构建去中心化社交网络：打破信息垄断的新思维

而去中心化的社交网络，通过分布式技术，将数据的控制权交还用户，打破信息垄断，提升隐私安全性。本文将详细介绍如何使用Python实现这
Echo_Wish·2025-03-07 10:47

分布式基本理论 - CAP,BASE 和 RAFT 算法

分布式基本理论-CAP,BASE和RAFT算法1.分布式基本理论1.1CAP理论在理论计算机科学中，CAP定理（CAPtheorem），又被称作布鲁尔定理（Brewer’stheorem），它指出对于一个分布式计算系统来说
Yellow明·2025-03-07 09:08

最硬核DNS详解

1、是什么DNS（域名系统）是互联网的一项服务，它作为将域名和IP地址相互映射的一个分布式数据库，能够使人更方便地访问互联网。DNS协议基于UDP协议，使用端口号53。
运维开发那些事·2025-03-07 09:36

分布式事务 CAP三进二和Base定理

关系型数据库遵循ACID原则事务在英文中是transaction，和现实世界中的交易很类似，它有如下四个特性：1、A(Atomicity)原子性原子性很容易理解，也就是说事务里的所有操作要么全部做完，要么都不做，事务成功的条件是事务里的所有操作都成功，只要有一个操作失败，整个事务就失败，需要回滚。比如银行转账，从A账户转100元至B账户，分为两个步骤：1）从A账户取100元；2）存入100元至B账
柿子加油努力·2025-03-07 08:02

大数据面试系列之——Hadoop

Hadoop的三个核心：HDFS（分布式存储系统）MapReduce（分布式计算系统）YARN(分布式资源调度)1.Hadoop集群的几种搭建模式1.单机模式：直接解压安装，不存在分布式存储系统2.伪分布式
潜心_守道·2025-03-07 07:17

心得分享：云端运营对零售业的全渠道拓展到底能起到多大作用？

印度领先的食品杂货零售平台FreshToHome在云计算方面找到了适合的合作伙伴，双方携手为业务开拓未来之路“AkamaiCloudComputing平台为我们提供了所需的灵活性，使我们能在进一步扩大业务的同时维持较低的成本
Akamai中国·2025-03-07 06:06

知识篇 | 低代码开发（Low-Code Development）是个什么东东？

2000年后，随着云计算和SaaS（软件即服务）的兴起，低代码开发进入新阶段。典型代表包括：Salesforce的Force.com（2005年）：首个
db_murphy·2025-03-07 04:44

java面试问题大全及答案大全

文章目录前言java面试题-Java基础java面试题-JVM知识java面试题-多线程与并发java面试题-主流框架java面试题-数据库相关java面试题-分布式与微服务java面试题-网络知识前言该文档围绕
小白教程·2025-03-07 03:06

HarmonyNext实战：基于ArkTS的分布式实时消息队列系统开发

HarmonyNext实战：基于ArkTS的分布式实时消息队列系统开发引言在HarmonyNext生态系统中，消息队列是实现分布式系统通信和异步处理的核心组件。
·2025-03-07 03:51

使用minioClient迁移minio

MinIO是一个分布式对象存储服务器，专为大规模私有云基础架构设计，也适用于云原生环境和大规模数据存储需求。
t梧桐树t·2025-03-07 02:25

分布式锁—5.Redisson的读写锁一

大纲1.Redisson读写锁RedissonReadWriteLock概述2.读锁RedissonReadLock的获取读锁逻辑3.写锁RedissonWriteLock的获取写锁逻辑4.读锁RedissonReadLock的读读不互斥逻辑5.RedissonReadLock和RedissonWriteLock的读写互斥逻辑6.写锁RedissonWriteLock的写写互斥逻辑7.写锁Redi
东阳马生架构·2025-03-07 02:23

javaEE概述

前言小编最近在学习javaEE的基础，所以总结了一下关于javaEE的框架知识，希望可以帮助到大家whatjavaEEjavaEE输入分布式多层的应用程序，javaEE平台用的是分布式多层应用模型为企业应用
qq_45691343·2025-03-07 01:42

深入解析Java MDC：日志链路追踪的利器

二、MDC的核心作用作用说明典型场景链路追踪跟踪请求完整处理流程分布式系统调用跟踪上下文传递跨方法传递公共参数用户ID、机构号等透传日志增强自动添加公共字段到日志请求IP、
没什么技术·2025-03-06 23:57

AWS CloudFormation：云原生时代的基础设施即代码利器

在云计算时代，企业追求敏捷开发和高效运维，**基础设施即代码（InfrastructureasCode,IaC）**逐渐成为现代化IT架构的核心实践。
AWS官方合作商·2025-03-06 23:55

DApp开发中的模式设计、功能文档与代币对接解析

DApp通过智能合约实现业务逻辑自动化，结合区块链的分布式账本技术，为金融、游戏、供应链等领域提供了可信的解决方案。
飞机号dapp119·2025-03-06 23:24

微电网智慧平台：推动能源革命，助力智能高效运营

微电网作为连接分布式能源与主电网的桥梁，是构建新型电力系统的重要组成部分。然而，传统微电网管理模式粗放，难以满足新型电力系统下安全、高效、灵活的运行需求。
Acreldingshan·2025-03-06 23:53

Redis和MySQL数据一致问题怎么解决

在分布式系统中，Redis和MySQL经常同时使用，Redis通常作为缓存系统，而MySQL作为持久化数据库。二者的数据一致性和安全性问题需要特别关注。
昔我往昔·2025-03-06 20:02

鸿蒙全栈开发 D1

012015-01-012016-01-012017-01-012018-01-012019-01-012020-01-012021-01-012022-01-012023-01-012024-01-01分布式技术预研微内核验证
GH小杨·2025-03-06 19:47

高可用架构选型指南：MHA、Percona PXC与MySQL MGR对比与实践示例

高可用架构选型指南：MHA、PerconaPXC与MySQLMGR对比与实践示例在分布式数据库系统中，高可用性（HighAvailability,HA）是保障业务连续性的核心需求。
·2025-03-06 18:04

十二、Redis Cluster（集群）详解：原理、搭建、数据分片与读写分离

RedisCluster（集群）详解：原理、搭建、数据分片与读写分离RedisCluster是Redis官方提供的分布式存储方案，通过数据分片（Sharding）实现水平扩展（scalability），
伯牙碎琴·2025-03-06 18:41

Spark单机伪分布式环境搭建、完全分布式环境搭建、Spark-on-yarn模式搭建

搭建Spark需要先配置好scala环境。三种Spark环境搭建互不关联，都是从零开始搭建。如果将文章中的配置文件修改内容复制粘贴的话，所有配置文件添加的内容后面的注释记得删除，可能会报错。保险一点删除最好。Scala环境搭建上传安装包解压并重命名rz上传如果没有安装rz可以使用命令安装：yuminstall-ylrzsz这里我将scala解压到/opt/module目录下：tar-zxvf/op
遇安.YuAn·2025-03-06 17:06

XMall商城listSearch存在SQL注入漏洞(DVB-2025-8924)

0x01产品介绍XMall开源电商商城是开发者Exrick的一款基于SOA架构的分布式电商购物商城。XMall商城存在SQL注入漏洞，未经身份验证的攻击
Byp0ss403·2025-03-06 17:36

Redis 各数据类型使用场景详解

场景2：分布式锁问题：多节点服务竞争同一资源时，需确保同一时间只有一个客户端持有锁
何怀逸·2025-03-06 17:35

Redis 和 Mysql 中的数据一致性问题

Redis和MySQL的特性Redis：是一个基于内存的高性能键值数据库，常用于缓存、分布式锁和消息队列。数据持久化（RDB、AOF）不实时，且默认不是事务性强一致的。
百里自来卷·2025-03-06 17:05

常用的分布式 ID 设计方案

文章目录1.UUID2.数据库自增ID3.雪花算法4.Redis生成ID5.美团Leaf1.UUID原理：UUID是由数字和字母组成的128位标识符，通过特定算法随机生成，包括时间戳、计算机网卡地址等信息。常见的版本有版本1（基于时间戳和MAC地址）、版本4（纯随机数）等。优点：生成简单，本地生成，不需要依赖额外的组件或服务，能有效减少网络开销。全球唯一，基本能保证在任何场景下不会重复。缺点：长度
梦城忆·2025-03-06 15:17

浅谈常用的分布式ID的设计方案以及Snowfake是否受冬令时切换影响

浅谈常用的分布式ID的设计方案以及Snowfake是否受冬令时切换影响分布式ID定义典型实现方案基于数据库自增序列的实现UUID方案Redis方案Snowflake方案Snowfake是否受冬令时切换影响分布式
24K不怕·2025-03-06 15:47

幂等性设计原则：如何保证服务中任务不重复执行？

别怕，咱们今天就来聊聊如何用幂等性策略，让你在分布式系统或高并发场景下，稳稳地“只执行一次”！
小小小小关同学·2025-03-06 14:36

Flume-HBase-Kafka

Flume简介和特征2.HBase简介和特征3.Kafka简介和特征二、通过Flume读取日志文件写入到Kafka中在写入HBase各自作用一、各自介绍1.Flume简介和特征一、简介Flume是一个分布式
正在緩沖҉99%·2025-03-06 13:51

分布式网络

分布式网络（DistributedNetwork）指的是一种计算机网络架构，其中计算资源（计算、存储、数据处理等）分布在多个物理或逻辑上的节点上，而不是集中在单一的服务器或数据中心中。
Hard_pea·2025-03-06 12:46

大模型的实践应用30-大模型训练和推理中分布式核心技术的应用

大家好，我是微学AI，今天给大家介绍一下大模型的实践应用30-大模型训练和推理中分布式核心技术的应用。本文深入探讨了大模型训练和推理中分布式核心技术的应用。
微学AI·2025-03-06 11:11

Redis-分布式锁

分布式锁为什么需要分布式锁核心场景举例技术原理简述项目中需要注意的优化和思考小结分布式锁的本质Redis分布式锁的实现原理?
左灯右行的爱情·2025-03-06 11:08

阿里云MaxCompute面试题汇总及参考答案

目录简述MaxCompute的核心功能及适用场景，与传统数据仓库的区别解释MaxCompute分层架构设计原则，与传统数仓分层有何异同MaxCompute的存储架构如何实现高可用与扩展性解析伏羲（Fuxi）分布式调度系统工作原理盘古
大模型大数据攻城狮·2025-03-06 10:05

nacos架构图

架构图整体架构分为用户层、业务层、内核层和插件，用户层主要解决用户使用的易用性问题，业务层主要解决服务发现和配置管理的功能问题，内核层解决分布式系统一致性、存储、高可用等核心问题，插件解决扩展性问题。
三希·2025-03-06 10:29

基于HarmonyNext的跨设备分布式数据库开发实战指南

基于HarmonyNext的跨设备分布式数据库开发实战指南引言在HarmonyNext生态系统中，跨设备分布式数据库是一个极具挑战性和创新性的领域。
·2025-03-06 09:15

HarmonyNext实战：基于ArkTS的分布式任务调度系统开发

HarmonyNext实战：基于ArkTS的分布式任务调度系统开发引言在HarmonyNext生态系统中，分布式任务调度是一个关键且复杂的领域。
·2025-03-06 09:14

HarmonyNext实战：基于ArkTS的分布式实时日志分析系统开发

HarmonyNext实战：基于ArkTS的分布式实时日志分析系统开发引言在HarmonyNext生态系统中，日志分析是保障系统稳定性和性能优化的重要手段。
·2025-03-06 09:13

HarmonyNext实战：基于ArkTS的高性能分布式数据同步应用开发

HarmonyNext实战：基于ArkTS的高性能分布式数据同步应用开发引言在分布式系统中，数据同步是一个核心问题，尤其是在多设备协同的场景下，如何高效、可靠地实现数据同步是开发者面临的重大挑战。
·2025-03-06 09:43

HarmonyNext实战：基于ArkTS的分布式数据同步应用开发

HarmonyNext实战：基于ArkTS的分布式数据同步应用开发引言在HarmonyNext生态系统中，分布式能力是其核心特性之一。
·2025-03-06 09:42

软件架构设计与模式之：模块化设计与组件化架构

作者：禅与计算机程序设计艺术1.背景介绍模块化、组件化、微服务架构已经成为云计算的主流架构模式，软件架构设计如何满足需求并持续优化性能是一个非常重要的课题。
AI天才研究院·2025-03-06 09:54

Zookeeper（89）Zookeeper的线性化写入是如何实现的？

这种一致性模型对于分布式系统的正确性至关重要。线性化写入的原理单一Leader：ZooKeeper通过选举机制确保在集群中只有一个Leader节点。所有的写请求都必须通过Leader进行处理。事务ID
辞暮尔尔-烟火年年·2025-03-06 09:53

分布式锁—4.Redisson的联锁和红锁一

大纲1.Redisson联锁MultiLock概述2.Redisson联锁MultiLock的加锁与释放锁3.Redisson红锁RedLock的算法原理4.Redisson红锁RedLock的源码分析1.Redisson联锁MultiLock概述(1)MultiLock的简介(2)MultiLock的使用(3)MultiLock的初始化(1)MultiLock的简介一.一次性要锁定多个资源的场景
东阳马生架构·2025-03-06 07:42

hadoop

Hadoop是一个用于分布式存储和处理大规模数据的开源框架，它的架构主要由以下几个核心组件组成：1.Hadoop生态系统核心组件Hadoop的核心架构主要包括HDFS（HadoopDistributedFileSystem
百里自来卷·2025-03-06 06:00

云上大数据平台的优化：提升效率与可靠性的实践

云上大数据平台的优化：提升效率与可靠性的实践随着云计算和大数据技术的快速发展，越来越多的企业选择将其数据处理和分析工作迁移到云上。
Echo_Wish·2025-03-06 05:54

深入检索：专业知识检索的高级算法与架构策略

比如需要考虑的基本点：分布式架构：水平扩展：采用分布式架构，将检索任务分布到多个节点上，实现水平扩展。这可以通过将索引数据分片存储在不同的节点上，并使用分布式文件系统或对象存储来存储大规模的索引数据。
是小旭啊·2025-03-06 05:52
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他