MFS分布式

【分布式技术】消息队列Kafka

目录一、Kafka概述二、消息队列Kafka的好处三、消息队列Kafka的两种模式四、Kafka1、Kafka定义2、Kafka简介3、Kafka的特性五、Kafka的系统架构六、实操部署Kafka集群步骤一：在每一个zookeeper节点上完成kafka部署编辑步骤二：传给其他节点步骤三：启动3个节点kafka管理topic命令创建topic查看有哪些topic查看topic的详细信息修改top
liu_xueyin·2024-01-23 04:01

【分布式技术】Elastic Stack部署，实操logstash的过滤模块常用四大插件

目录一、ElasticStack，之前被称为ELKStack完成ELK与Filebeat对接步骤一：安装nginx做测试步骤二：完成filebeat二进制部署步骤三：准备logstash的测试文件filebeat.conf步骤四：完成实验测试二、logstash拥有强大的过滤功能，常用四种插件1、grok步骤一：现在logstash的conf文件中进行filter模块的修改，添加grok插件步骤二
liu_xueyin·2024-01-23 04:00

【分布式技术】注册中心zookeeper

目录一、ZooKeeper是什么二、ZooKeeper的工作机制三、ZooKeeper特点四、ZooKeeper数据结构五、ZooKeeper应用场景●统一命名服务●统一配置管理●统一集群管理●服务器动态上下线●软负载均衡六、ZooKeeper的选举机制七、实操部署ZooKeeper集群步骤一：先部署java环境步骤二：完成zookeeper安装包下载步骤三：完成部署启动一、ZooKeeper是什
liu_xueyin·2024-01-23 04:00

Dubbo基础

1、背景随着互联网的发展，网站应用的规模不断扩大，常规的垂直应用架构已无法应对，分布式服务架构以及流动计算架构势在必行，亟需一个治理系统确保架构有条不紊的演进。
拼搏男孩·2024-01-23 04:36

Dubbo_入门

系列文章目录提示：这里可以添加系列文章的所有文章的目录，目录需要自己手动添加Dubbo_入门提示：写完文章后，目录可以自动生成，如何生成可参考右边的帮助文档文章目录系列文章目录前言一、什么是分布式系统二
键盘敲烂~~~·2024-01-23 03:45

算法/结构/理论复习1---理论基础

算法/结构/理论算法雪花算法二叉树查找法理论BASE理论结构Btree二叉树HASH算法雪花算法雪花算法主要是为了解决在分布式中id的生成问题分布式id的生成规则是:全局唯一,不可以出现重复的id号,趋势递增雪花算法指的是一个
滑上又滑落 一收和一放·2024-01-23 03:44

大模型学习笔记08——分布式训练

大模型学习笔记08——分布式训练模型规模的扩大，对硬件（算力、内存）的发展提出要求。然而，因为内存墙的存在，单一设备的算力及容量，受限于物理定律，持续提高芯片的集成越来越困难，难以跟上模型扩大的需求。
等风来随风飘·2024-01-23 03:28

RDD简介

RDD-弹性分布式数据集(ResilientDistributedDataSet)什么是RDDRDD是一个基本的抽象，操作RDD就像操作一个本地集合一样，降低了编程的复杂度；操作RDD，其实是对每个分区进行操作
Cool_Pepsi·2024-01-23 02:43

Presto

Presto是一个facebook开源的，完全基于内存的并行计算的分布式SQL查询引擎，是一种Massivelyparallelprocessing(MPP)架构，多个节点管道式执行，适用于交互式分析查询
Cool_Pepsi·2024-01-23 02:43

Hadoop -- HDFS

1.什么是Hadoophadoop中有3个核心组件：分布式文件系统：HDFS——实现将文件分布式存储在很多的服务器上分布式运算编程框架：MAPREDUCE——实现在很多机器上分布式并行运算分布式资源调度平台
Cool_Pepsi·2024-01-23 02:42

Hadoop -- ZooKeeper

ZooKeeper是一个分布式的，开放源码的分布式应用程序协调服务，是Hadoop、Hbase、kafka、dubbo等重要组件。
Cool_Pepsi·2024-01-23 02:42

Java - 深入四大限流算法：原理、实现与应用

文章目录Pre概述简单计数器原理实现测试优缺点滑动窗口算法原理实现测试优缺点漏桶算法原理实现测试优缺点令牌桶算法原理实现测试优缺点小结Pre深入理解分布式技术-限流并发编程-25高并发处理手段之消息队列思路
小小工匠·2024-01-23 02:41

ZooKeeper

ZooKeeper是一个开源的分布式协调服务，它是Apache软件基金会的一个子项目。它提供了一个简单而高效的分布式系统协调的解决方案，用于构建可靠的分布式应用程序。
.:::.·2024-01-23 02:37

Dubbo

Dubbo提供了基于服务化架构的分布式应用开发解决方案。
.:::.·2024-01-23 02:37

中间件-缓存、索引、日志

文章目录缓存中间件本地缓存中间件分布式缓存中间件全文索引中间件分布式日志中间件小结缓存中间件缓存是性能优化的一大利器我们先一起来看一个用户中心查询用户信息的基本流程这时候，如果查找用户信息这个API的调用频率增加
善守的大龙猫·2024-01-23 02:03

Ubuntu上安装ElasticSearch

ElasticSearch安装包2.4修改配置文件2.5修改/etc/security/limits.conf文件增加配置2.6启动ElasticSearch1.ElasticSearch简介Elasticsearch是一个分布式可扩展的实时搜索和分析引擎
犀牛_2046·2024-01-23 02:32

一起学习ETCD系列——简单安装

1.2集群概要在微服务中服务发现是必不可少的，此时ETCD中间件就是一种可选项，其实ETCD除了服务发现功能，还有：元数据存储，比如存储服务配置等数据，以实现配置中心化，进行统一的，有版本记录的变更管理；分布式锁
pigfu·2024-01-23 01:15

优酷鸿蒙开发实践｜多屏互动开发实践

背景介绍鸿蒙分布式体验华为定义的分布式体验主要包含连续性体验和协同体验两种。1连续性体验当用户在一个设备上发起操作，并切换
阿里巴巴终端技术·2024-01-23 01:45

狗狗币Dogecoin

狗狗币Dogecoin，它诞生于2013年12月8日，也是诞生比较早的一种数字资产，它结合Doge文化产生的一种分布式加密数字资产，在欧美地区比较受欢迎。
大庆思考笔记·2024-01-23 00:27

ZooKeeper介绍

简介ZooKeeper是一个开源的分布式协调服务，它的设计目标是将那些复杂且容易出错的分布式一致性服务封装起来，构成一个高效可靠的原语集，并以一系列简单易用的接口提供给用户使用。
努力学习的小飞侠·2024-01-22 23:01

RPC框架简介

RPC的目的就是让构建分布式计算（应用）更加简单，在提供强大的调用远程调用的同时不失去简单的本地调用的语义简洁性RPC整体架构服务端启动时首先将自己的服务节点信息注册到注册中心，客户端调用远程方法时会订阅注册中心中的可用服务节点信息
努力学习的小飞侠·2024-01-22 23:01

redis连接池参数

系列文章目录redis主从架构redis哨兵架构redis的集群架构Redis的单线程和高性能redis管道操作(节省网络IO开销)redis的lua脚本redis分布式锁redis分布式锁redissonredis
敖小军·2024-01-22 23:48

redis的过期淘汰策略

系列文章目录redis主从架构redis哨兵架构redis的集群架构Redis的单线程和高性能redis管道操作(节省网络IO开销)redis的lua脚本redis分布式锁redis分布式锁redissonredis
敖小军·2024-01-22 23:48

redis分布式锁

系列文章目录redis主从架构redis哨兵架构redis的集群架构Redis的单线程和高性能redis管道操作(节省网络IO开销)redis的lua脚本redis分布式锁redis分布式锁redissonredis
敖小军·2024-01-22 23:18

redis分布式锁redisson

系列文章目录redis主从架构redis哨兵架构redis的集群架构Redis的单线程和高性能redis管道操作(节省网络IO开销)redis的lua脚本redis分布式锁redis分布式锁redissonredis
敖小军·2024-01-22 23:18

redis缓存优化

系列文章目录redis主从架构redis哨兵架构redis的集群架构Redis的单线程和高性能redis管道操作(节省网络IO开销)redis的lua脚本redis分布式锁redis分布式锁redissonredis
敖小军·2024-01-22 23:18

redis的集群架构

系列文章目录redis主从架构redis哨兵架构redis的集群架构Redis的单线程和高性能redis管道操作(节省网络IO开销)redis的lua脚本redis分布式锁redis分布式锁redissonredis
敖小军·2024-01-22 23:47

Redis的单线程和高性能

系列文章目录redis主从架构redis哨兵架构redis的集群架构Redis的单线程和高性能redis管道操作(节省网络IO开销)redis的lua脚本redis分布式锁redis分布式锁redissonredis
敖小军·2024-01-22 23:47

redis管道操作(节省网络IO开销)

系列文章目录redis主从架构redis哨兵架构redis的集群架构Redis的单线程和高性能redis管道操作(节省网络IO开销)redis的lua脚本redis分布式锁redis分布式锁redissonredis
敖小军·2024-01-22 23:47

redis的lua脚本

系列文章目录redis主从架构redis哨兵架构redis的集群架构Redis的单线程和高性能redis管道操作(节省网络IO开销)redis的lua脚本redis分布式锁redis分布式锁redissonredis
敖小军·2024-01-22 23:47

Redis主从架构

系列文章目录redis主从架构redis哨兵架构redis的集群架构Redis的单线程和高性能redis管道操作(节省网络IO开销)redis的lua脚本redis分布式锁redis分布式锁redissonredis
敖小军·2024-01-22 23:17

redis哨兵架构

系列文章目录redis主从架构redis哨兵架构redis的集群架构Redis的单线程和高性能redis管道操作(节省网络IO开销)redis的lua脚本redis分布式锁redis分布式锁redissonredis
敖小军·2024-01-22 23:46

Zookeeper使用场景-读书笔记6

通常在配置中心配置分布式协调/通知负载均衡利用多台计算机资源分配负载，以达到优化资源使用、最大化吞吐率、最小化响应时间和避免过载的目的。
泰格谢·2024-01-22 23:10

Redis分布式锁存在的问题以及解决方式

❤️文章目录Redis分布式锁实现一、分布式锁二、基于Redis的分布式锁2.1初级版本2.2解决分布式锁误删问题2.3分布式锁的原子性问题2.4Redis分布式锁存在的问题R
欧克小奥·2024-01-22 23:44

Redisson分布式锁源码篇

❤️文章目录Redisson分布式锁源码篇一、使用Redisson分布式锁1.1引入依赖1.2调用API二、源码解析2.1可重入锁原理(1)原理解释(2)源码分析①尝试获取锁②
欧克小奥·2024-01-22 23:13

LLM包含的知识

分布式训练框架大语言模型的“大”，就离不开分布式。ZeRO的三个级别、Deepspeed理论与实战等等是必备
AI知识图谱大本营·2024-01-22 22:23

简单了解Redis，及其持久化机制之AOF和RDB模式

认识RedisRedis简介一个分布式缓存系统，初学者可以认为是一个独立于Python应用之外的字典。除了缓存功能，还有数据库MQ的特性。
Summer@123·2024-01-22 22:14

消息中间件介绍

在分布式的环境下，我们除了使用httprest、rpc、消息中间件也是一个去使两个系统之间进行通信的方式，当我们想提高程序响应速度的时候，一个就是【使用多线程进行并行处理】，另外就是使用【异步的方法】，
xmh-sxh-1314·2024-01-22 22:43

GaussDB与openGauss有什么相同和不同？

众所周知，GaussDB是华为自主创新研发的分布式关系型数据库，为企业提供功能全面、稳定可靠、扩展性强、性能优越的企业级数据库服务，openGauss是开源数据库，两者之间又是什么样的关系，有什么相同和不同
Gauss松鼠会·2024-01-22 21:51

MongoDB

MongoDB简介基于分布式文件存储的开源数据库系统。旨在为WEB应用提供可扩展的高性能数据存储解决方案。将数据存储
Python野路子·2024-01-22 21:05

SQL注入实战：http报文包讲解、http头注入

最初HTTP只是一个为获取基于文本的静态资源而开发的简单协议，后来人们以各种形式扩展和利用它.使其能够支持如今常见的复杂分布式应用程序。
ting_liang·2024-01-22 21:00

大数据--Flink--流处理(一)

一、Flink简介  ApacheFlink是一个框架和分布式处理引擎，用于对无界和有界数据流进行有状态计算。Flink设计为在所有常见的集群环境中运行，以内存速度和任何规模执行计算。
无剑_君·2024-01-22 20:26

Cloudflare威胁报告：2023年DDoS攻击流量惊人增长

Cloudflare周二在一份报告中表示，分布式拒绝服务攻击在2023年创下历史新高，第四季度同比增长了一倍多威胁报告.DDoS攻击创下历史新高的一年恰逢新型零日漏洞被大量利用HTTP/2快速重置，2023
帝恩思·2024-01-22 20:25

Hadoop RPC解析

网络通信模块是分布式系统中最底层的模块。它直接支撑了上层分布式环境下复杂的进程间通信（Inter-ProcessCommunication,IPC）逻辑，是所有分布式系统的基础。
tracy_668·2024-01-22 19:51

kafka基础入门

所有这些功能都是以分布式、高度可伸缩、弹性、容错和安全的方式提供的。Kafka是一个分布式系统，由服务端和客户端组成，通过高性能的TCP网络协议进行通信。Kafka可以部署
从大数据到人工智能·2024-01-22 19:08

hadoop之mapreduce教程+案例学习（一）

第1章MapReduce概述目录第1章MapReduce概述1.1MapReduce定义MapReduce是一个分布式运算程序的编程框架，是用户开发“基于Hadoop的数据分析应用”的核心框架。
菜瓜技术联盟·2024-01-22 19:04

raft重要概念

raft重要概念执行流程raft将分布式一致性问题分解成两个独立的问题，分成两个大的步骤来进行数据处理。
growdu_real·2024-01-22 19:33

dcf配置解析机制(元数据)

dcf配置解析机制(元数据)openguass的dcf是一个分布式一致性协议的实现（基于paxos协议，类似raft），能够实现分布式一致性数据传输和存储。
growdu_real·2024-01-22 19:33

大数据计算引擎之Flink简介

原文地址：大数据计算引擎之Flink简介Flink简介1.1Flink的初步认识ApacheFlink是为分布式、高性能、随时可用以即准确的流处理应用程序打造的开源处理框架ApacheFlink是一个框架和分布式处理引擎
开发实习生·2024-01-22 19:58

大数据学习之 Flink

目录一：简介二：为什么选择Flink三：哪些行业需要四：Flink的特点五：与sparkStreaming的区别六：初步开发七：Flink配置说明八：环境九：运行组件一：简介Flink是一个框架和分布式得计算引擎
会编程的海贼王·2024-01-22 19:58
上一页 62 63 64 65 66 67 68 69 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他