分布式基础原理

文件上传-第三方服务阿里云OSS

也可以建立分布式集群,专门的微服务来存储文件常见的技术比如Minio。对于中小型公司，并且上传文件私密性不高的话可以使用第三方的存储服务，比如阿里云、华为云等。
sunyunfei1994·2024-02-19 16:54

《分布式系统原理介绍》要点简记

数据备份机制问题:机器宕机导致数据丢失问题解决:无状态节点则无需读取读取任何信息就可以立刻重新“可用”有状态节点可以通过读取本地存储设备中的信息或通过读取其他节点数据的方式恢复内存信息有状态是指是否是保存数据的节点序列号机制问题:消息乱序解决:给消息排号,按照版本号进行消费校验码机制问题:数据错误消息被抓包篡改解决:使用一定的校验码机制可以较为简单的检查出网络数据的错误，从而丢弃错误的数据序列号机
猫哥灬01·2024-02-19 16:52

贝住区块链住宿平台项目介绍

链接B端和C端构建分布式协作通证组织，共同组建生态，享受生态成长的整体利益。贝住项目团队于2018年首次建立于美国纽约，同年8月，项目创始人彭中华博士正式创立了深圳总部“深圳贝住科技有限公司”。
贝住科技·2024-02-19 16:07

小白如何学鸿蒙开发？

在互联网技术不断发展的现在，鸿蒙操作系统的出现标志着是能技术领域的一次重大突破，鸿蒙作为华为推出的一代操作系统，鸿蒙不仅达代表了自主创新的力量，还因为独特的分布式架构和全场景适配能力而备受关注。
OpenHarmony_小贾·2024-02-19 15:41

Seata入门

Seata:SimpleExtensibleAutonomousTransactionArchitectureSeata是一款开源的分布式事务解决方案，致力于提供高性能和简单易用的分布式事务服务。
susie_小石头·2024-02-19 15:54

SpringCloud-搭建Nacos配置中心

一、Nacos功能介绍Nacos（DynamicNamingandConfigurationService）是阿里巴巴开源的一个分布式服务注册、配置管理，以及服务健康管理平台。
Damon小智·2024-02-19 15:45

区块链技术和Hyperledger Fabric介绍

1区块链介绍1.1区块链技术形成1.1.1起源在比特币诞生之时，技术专家们开始研究比特币的底层技术，并抽象提取出来，形成区块链技术，或者称分布式账本技术。
dnice·2024-02-19 15:35

JeecgBoot集成TiDB，打造高效可靠的数据存储解决方案

TiDB简介TiDB是PingCAP公司自主设计、研发的开源分布式关系型数据库，同时支持在线事务处理与在线分析处理(HybridTransactionalandAnalyticalProcessing,
·2024-02-19 15:56

Sentinel 新版本发布，提升配置灵活性以及可观测配套

基本介绍Sentinel是阿里巴巴集团开源的，面向分布式、多语言异构化服务架构的流量治理组件，承接了阿里巴巴近15年的双十一大促流量的核心场景，例如秒杀、冷启动、消息削峰填谷、集群流量控制、实时熔断下游不可用服务等
·2024-02-19 15:56

从 13 个企业关心的问题看懂用云范式的改变

同时，随着互联网分布式技术的普及，微服务架构被广泛使用，围绕着一整套的技术体系，运维复杂度陡然上升。在这两个趋势之下，我们看到企业和开发者面临新
·2024-02-19 15:44

【性能测试】分布式压测之locust和Jmeter的使用

受限于单台机器的配置问题，我们在单台机器上达不到一个很高的压测并发数，那这个时候就需要引入分布式压测分布式压测原理：一般通过局域网把不同测试计算机链接到一起，达到测试共享、分散操作、集中管理的目的。
鱼鱼说测试·2024-02-19 14:07

消息中间件管理系统-RabbitMQ及其两类传输模型

MQ，意思为消息队列，分布式系统中的重要组件，用它就可以实现应用解耦、异步消息、流量削峰等问题。消息队列产品有很多，企业级应用较广泛的就是RabbitMQ。
sunyunfei1994·2024-02-19 14:08

RabbitMQ的高可用机制

集群中的节点共享同一个Erlang分布式数据库，队列可以在多个节点上进行镜像，以提供冗余。%%加入到集群的命令rabbitmqctljoin_clusterrabbit@镜像队列（MirroredQ
辞暮尔尔-烟火年年·2024-02-19 14:37

RabbitMQ面试题

RabbitMQ面试题RabbitMQ如何保证消息不丢失出现消息丢失可能会出现在以下场景：异步发送（验证码，短信，邮件）MySQL和Redis，ES之间的数据同步分布式事务削峰消谷总结为：消息未达到交换机
重生之我是cxk·2024-02-19 14:07

什么是RabbitMQ？

一、引言RabbitMQ是一个开源的消息代理软件，用于在分布式系统中传递消息。
张万森的救赎·2024-02-19 14:35

Redis实现分布式可重入锁——CAS操作

一、前言Redis实现的分布式锁被大家广泛用于解决在分布式环境下的并发问题——使用setNXEX，当某一个key存在时，返回失败，当key不存在时，设置新值和过期时间，返回成功。
qq_26678049·2024-02-19 14:55

Redis分布式可重入锁实现方案

在分布式环境下，要保证多个节点的线程对代码块的同步访问，就必须要用到分布式锁方案。
程序员小潘·2024-02-19 14:49

Apache Flink连载（二十六）：TaskSlot任务槽-（1）-TaskSlot&SlotSharingGroup

豹哥教你学编程个人主页-哔哩哔哩视频提交到集群中的Flink程序最终会转换成一个个的Subtask，Subtask是Flink任务调度的基本单元，这些task最终被发送到不同的TaskManager节点上分布式执行
IT贫道·2024-02-19 13:41

Flink系列-1、流式计算简介

大数据系列文章目录官方网址：https://flink.apache.org/学习资料：https://flink-learning.org.cn/目录数据的时效性流式计算和批量计算流式计算流程和特性分布式计算引擎什么是
技术武器库·2024-02-19 13:10

[Flink02] Flink架构和原理

1、运行模式Flink有多种运行模式，可以运行在一台机器上，称为本地（单机）模式；也可以使用YARN作为底层资源调度系统以分布式的方式在集群中运行，称为FlinkOnYARN模式；还可以使用Flink自带的资源调度系统
YoungerChina·2024-02-19 13:32

云计算基础-存储虚拟化（深信服aSAN分布式存储）

什么是存储虚拟化分布式存储是利用虚拟化技术“池化”集群存储卷内通用X86服务器中的本地硬盘，实现服务器存储资源的统一整合、管理及调度，最终向上层提供NFS、ISCSI存储接口，供虚拟机根据自身的存储需求自由分配使用资源池中的存储空间
比特微联·2024-02-19 13:19

300分钟吃透分布式缓存-02讲：如何根据业务来选择缓存模式和组件？

缓存读写模式如下图，业务系统读写缓存有3种模式：&CacheAside（旁路缓存）&Read/WriteThrough（读写穿透）&WriteBehindCaching（异步缓存写入）CacheAside如上图所示，CacheAside模式中，业务应用方对于写，是更新DB后，直接将key从cache中删除，然后由DB驱动缓存数据的更新；而对于读，是先读cache，如果cache没有，则读DB，同时
机智阳·2024-02-19 13:12

31、商城系统（十三）：缓存：springboot集成redis，使用redisson用作分布式锁，缓存一致性解决方案，集成SpringCache，并自定义过期时间、序列化

目录一、集成redis（有问题版本）1.引入依赖2.配置redis的ip端口3.修改之前的查询接口
鹏哥哥啊Aaaa·2024-02-19 13:10

hadoop硬件配置 高可用 datanode namenode硬件配置

每个分布式文件系统分块在NameNode的内存中大小约为250个字节，此外还要加上文件和目录所需的250字节空间。
xcagy·2024-02-19 13:07

spring cloud和dubbo比较

Dubbo其实是一个分布式服务框架，致力于提供高性能和透明化的RPC远程服务调用方案，以及SOA服务治理方案。
爱宝宝n·2024-02-19 12:17

渲染效果图为什么都选择使用云渲染，优势有哪些？

一、云渲染与本地渲染的比较1.渲染速度云渲染可以利用分布式渲染技术，同时调用多台高性能服务器进行渲染，大大缩短了渲染时间，比本地渲染节省了几十
小白的建模·2024-02-19 12:09

ACK One：构建混合云同城容灾系统

作者：蔡靖对于当前业务运行在IDC内的Kubernetes集群中，希望通过云计算为云下业务提供同城灾备的高可用冗余能力，可利用阿里云分布式云容器平台ACKOne[1]来提供统一得流量、应用和集群管理，实现业务流量的多集群路由和灾难情况下的流量的自动平滑容灾
·2024-02-19 12:35

精彩回顾 I DatenLord Hackathon 2023圆满结束！

达坦科技基于其跨云分布式文件系统DatenLord项目，结合AI大模型时代背景，搭建了擂台。我们邀请参赛者为DatenLord的极端场景设计并实现缓存p2p传输和同步模块。
·2024-02-19 12:34

2.16日学习打卡----初学Dubbo(一)

2.16日学习打卡目录:2.16日学习打卡一.什么是分布式？二.什么是RPC?
中北萌新程序员·2024-02-19 12:54

ACK One：构建混合云同城容灾系统

作者：蔡靖对于当前业务运行在IDC内的Kubernetes集群中，希望通过云计算为云下业务提供同城灾备的高可用冗余能力，可利用阿里云分布式云容器平台ACKOne[1]来提供统一得流量、应用和集群管理，实现业务流量的多集群路由和灾难情况下的流量的自动平滑容灾
·2024-02-19 12:31

RabbitMQ：分布式系统中的高效消息队列

摘要RabbitMQ是一款开源、高度可靠、灵活性强的消息队列系统，被广泛应用于分布式系统中。
张万森的救赎·2024-02-19 12:48

【Redis篇】详解布隆过滤器（原理 | 操作 | 代码）

文章目录简述布隆过滤器原理存入过程查询过程️‍优缺点⭐优点⭐缺点代码实现（本地）代码实现（分布式）简述布隆过滤器布隆过滤器的由来可以追溯到1970年代，由一个名叫BurtonHowardBloom的美国计算机科学家提出
在下小吉.·2024-02-19 12:29

现阶段适用于 单一架构 还是 分布式架构 ？

分布式架构：优势：可以提高应用程序的可用性、可扩展性和弹性；各个服务之间通过定义的接口进行通信，彼此独立，互不干扰。劣势：开发和部署比较复杂，需要考虑分布式系统的一些问题，如分布式
小Mie不吃饭·2024-02-19 12:41

基于python的分布式爬虫框架_基于scrapy-redis的通用分布式爬虫框架

spiderman基于scrapy-redis的通用分布式爬虫框架目录demo采集效果爬虫元数据cluster模式standalone模式kafka实时采集监控功能自动建表自动生成爬虫代码，只需编写少量代码即可完成分布式爬虫自动存储元数据
summer_ccs·2024-02-19 11:39

深入解析鸿蒙系统的页面路由（Router）机制

鸿蒙系统以其独特的分布式架构和跨设备的统一体验而备受瞩目。在这个系统中，页面路由（Router）机制是连接应用各页面的关键组成部分。
OpenHarmony_小贾·2024-02-19 11:32

【2019-04-28】Hadoop分布式文件系统

Hadoop自带HDFS(hadoopdistributefilesystem)。HDFS默认数据块128M。HDFS有两类工作节点：一个管理节点namenode、多个工作节点datenode，namenode维护文件系统树以及整颗树内所有的文件和目录。namenode记录每个文件中各个数据块所在的数据节点信息。但不永久保存块的位置信息，这些信息会在系统启动时根据数据节点信息重建。namenode
BigBigFlower·2024-02-19 11:56

Hadoop搭建之 start-yarn.sh 报错

在搭建伪分布式的Hadoop集群环境时，在配置基础环境了并成功开启了HDFS组件后，jps查看已运行的名称节点和数据节点进程，[hadoop@masterhadoop]$jps8994NameNode10396Jps9087DataNode9279SecondaryNameNode
万里长江雪·2024-02-19 11:58

Day 25 25.2 Scrapy框架之分布式爬虫(scrapy_redis)

分布式爬虫(scrapy_redis)分布式爬虫是指将一个大型的爬虫任务分解成多个子任务，由多个爬虫进程或者多台机器同时执行的一种爬虫方式。
Chimengmeng·2024-02-19 11:22

微信发送一条消息经历哪些过程。企业微信以及钉钉的IM架构对比

目前已经写的IM的文章分布式websocket即时通信(IM)系统构建指南【第七期】分布
呆呆呆呆梦·2024-02-19 11:49

基于scrapy框架的单机爬虫与分布式爬虫

我们知道，对于scrapy框架来说，不仅可以单机构建复杂的爬虫项目，还可以通过简单的修改，将单机版爬虫改为分布式的，大大提高爬取效率。
Jesse_Kyrie·2024-02-19 11:47

【区块链技术开发语言】在ubuntu18 系统环境下命令操作配置以太坊go-ethereum环境

一、概述项目简介：以太坊是一个基于区块链技术的分布式平台，用于构建去中心化应用程序（DApps）。go-ethereum是以太坊官方开发团队维护的Go语言实现的以太坊客户端，也被称为Geth。
源代码杀手·2024-02-19 11:41

读TiDB源码聊设计：浅析HTAP的SQL优化器

1.引子如果让你做一个分布式数据库的优化器，面对以下的SQL，你会想到什么好的方法去执行他们呢？
·2024-02-19 11:23

阿里云计算平台大数据基础工程技术团队直聘！！！

通过软件工程，数据智能化的方法论，围绕数据系统化建设运维智能工具链，打造飞天大数据&AI运维管控平台ABM，解决超大规模分布式集群运维管理问题，提升产品的稳定性
·2024-02-19 11:20

抗D盾是游戏盾吗

游戏盾有哪些功能呢游戏盾包含抗D节点，通过分布式的抗D节点，游
·2024-02-19 11:42

大数据，对于生活的改变

谷歌通过对于疾病的查询量可以预测一个个h1n1病毒的大爆发，大数据时代对于人的考验用户的搜索记录就是一种信息，这种信息会满足其基础相关的词条与其有关的词条（最为原始的搜索机制，国内的搜索引擎都是采用这种基础原理
待·2024-02-19 11:53

【Go】四、rpc跨语言编程基础与rpc的调用基础原理

Go管理工具早期Go语言不使用gomodule进行包管理，而是使用gopath进行包管理，这种管理方式十分老旧，两者最显著的区别就是：GoPath创建之后没有go.mod文件被创建出来，而gomodule模式会创建出一个go.mod文件用于管理包信息现在就是：尽量使用GoModules模式另外，我们在引入包的时候，可以先进行import再通过编译器来下载内容，这样能让我们更简便的处理包关系Go编码
清河__·2024-02-19 10:57

Go RPC 远程过程调用

在分布式计算，远程过程调用是一个计算机通信协议。该协议允许运行于一台计算机的程序调用另一个地址空间的子程序，而程序员就像调用本地程序一样，无需额外地为这个交互作用编程。
CDFMLR·2024-02-19 10:26

分布式文件系统 SpringBoot+FastDFS+Vue.js【四】

分布式文件系统SpringBoot+FastDFS+Vue.js【四】八、文件的下载和删除功能8.1.FastDFSClient.java8.2.FileServerController.java8.3
良辰美景好时光·2024-02-19 10:21

分布式文件系统 SpringBoot+FastDFS+Vue.js【二】

分布式文件系统SpringBoot+FastDFS+Vue.js【二】六、实现上传功能并展示数据6.1.创建数据库6.2.创建springboot项目fastDFS-java6.3.引入依赖6.3.fastdfs-client
良辰美景好时光·2024-02-19 10:20

分布式文件系统 SpringBoot+FastDFS+Vue.js【三】

分布式文件系统SpringBoot+FastDFS+Vue.js【三】七、创建后台--分角色管理7.1.创建后台数据库表7.2.创建实体类7.2.1.Admin7.2.2.Menu7.2.3.MenuBean7.2.4
良辰美景好时光·2024-02-19 10:20
上一页 15 16 17 18 19 20 21 22 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他