分布式集群相关

JAVA面试题分享四百二十八：为什么需要分布式ID？你项目中是怎么做的？

目录分布式ID介绍什么是ID？什么是分布式ID？分布式ID需要满足哪些要求?
之乎者也··2024-02-03 02:31

RocketMQ源码解析(五)-Broker架构及服务启动

后面会用更多的几篇来讲Broker，其实也就是消息队列的核心-分布式Queue的实现。
空挡·2024-02-03 01:01

手写分布式存储系统v0.1版本

引言这是手写分布式存储系统v0.1版本，只有一个目标就是支持通过tcp接收数据并落地到磁盘文件(单机模式)，那接下来就开始吧一、设计实现一个系统，设计是最过瘾的过程没有之一，类似你搭积木前在脑海设计构建一副大致的
林崇辉·2024-02-03 01:10

手写分布式存储系统v0.2版本

引言上回说到手写分布式存储系统v0.1版本，已经实现了通过监听TCP端口并将数据写到本地磁盘的功能，今天咱们就继续往上面添砖加瓦v0.2版本大致做以下功能实现滚动写文件代码优化一、滚动写文件实现由于咱们写文件是用的
林崇辉·2024-02-03 01:10

MySQL之SQL的查询语句如何执行

文章目录前言一、一条查询的SQL是如何执行的二、MySQL的“零件”们1.连接器2.查询缓存3.分析器4.优化器5.执行器总结前言做了多年技术之后，技术更新换代太快，从我入行时候从单体架构到后面分布式SOA
YLDominer·2024-02-03 01:01

分布式数据库健康评估有什么不同

前阵子和一个做数据库服务的朋友交流，他们承接了某个企业的国产分布式数据库的运维工作，安排了一个该数据库的认证工程师驻场做服务，不过从半年的工作情况来看，效果并不好。
DBAIOps社区·2024-02-03 01:59

从架构上分析TIDB和OB擅长的应用领域

这两年分布式数据库比较火，金融行业客户上数据库产品的时候，大多数都选择了分布式数据库。
DBAIOps社区·2024-02-03 01:57

Hadoop生态圈-组件介绍

Hadoop是目前应用最为广泛的分布式大数据处理框架，其具备可靠、高效、可伸缩等特点。Hadoop的核心组件是HDFS、MapReduce。
苏尔伯特·2024-02-03 00:19

技术分享 | Prometheus支持docker容器啦！

Docker简介Docker是以Docker容器为资源分割和调度的基本单位，封装整个软件运行时环境，为开发者和系统管理员设计的，用于构建，发布和运行分布式应用的平台。
阿木实验室·2024-02-03 00:07

揭秘Sentinel背后的原理

在当今互联网时代，分布式系统的发展已经成为了不可逆转的趋势。然而，随着系统规模的不断扩大，面临的挑战也在不断增加。其中之一就是系统的稳定性和安全性。
m1chiru·2024-02-03 00:42

dolphinScheduler分布式搭建&快速上手

dolphinScheduler入门详解dolphinScheduler分布式部署&快速上手Dolph
PythonDev000·2024-02-02 23:14

缓存框架jetcache

支持多种缓存类型：本地缓存、分布式缓存、多级缓存。
A尘埃·2024-02-02 23:02

[轉]ERP系统之比较——SAP、Oracle、BAAN、JDE、SSA

R/2是用于集中式大型机环境的系统，R/3是用于分布式的客户机/服务器环境的系统。SAP是国际上著名的标准应用软件公司。SAP总部设在德国南部的沃尔道夫市
weixin_33836874·2024-02-02 23:31

单机搭建hadoop环境（包括hdfs、yarn、hive）

单机可以搭建伪分布式hadoop环境，用来测试和开发使用，hadoop包括：hdfs服务器yarn服务器，yarn的前提是hdfs服务器，在前面两个的基础上，课可以搭建hive服务器，不过hive不属于
howard_shooter·2024-02-02 23:39

SpringCloud01

单体架构的优缺点如下：优点：架构简单部署成本低缺点：耦合度高（维护困难、升级困难）1.2.分布式架构分布式架构：根据
程序媛9688·2024-02-02 22:48

不能划等号吗？

大众对区块链技术仍处于一头雾水的状态，习惯于将区块链等同于比特币，将其看作一种纯金融产品，却忽略了区块链技术的本质是一种去中心化、不可篡改、集安全与强制背书为一体的分布式数据库存储技术。
大拿BTC·2024-02-02 22:25

Hadopp未授权访问导致RCE

前言：Hadoop是一个开源的分布式计算框架，用于处理大规模数据集的存储和处理。
安鸾彭于晏·2024-02-02 22:27

什么是RDD

ResilientDistributedDataset==>弹性分布式数据集Resilient==>指的是RDD的分区数量是可以进行弹性控制的Distributed==>指的是RDD的分区分布式的存在于各个执行
zholeiv5·2024-02-02 22:18

Flink知识点概述

flink是什么是一个框架和分布式处理引擎，在无边界和有边界数据流上纪念性有状态的计算主要特性1.批流统一批处理：数据全部访问完成后进行操作有界、持久、大量，适合访问全套记录才能完成的工作，一般用于离线统计流处理
内向仓鼠·2024-02-02 21:39

架构设计内容分享(一百三十七)：架构设计的42个黄金法则

分布式知识。架构知识。架构哲学。意志坚强。但不偏执。善于沟通。但不花言巧语。除此之外，架构师在做方案的时候，有很大的发挥空间。所
之乎者也··2024-02-02 20:57

【K8S】详解容器网络中的overlay、underlay

spm=1001.2014.3001.5502在分布式pod中，K8S上的所有pod默认会从同一平面网络得到全局一个唯一IP地址和一个虚拟网络接口，无论是否都处于一个namespace，各个pod之间都可
带你去吃小豆花·2024-02-02 20:31

Python爬虫代理池

爬虫代理IP池在公司做分布式深网爬虫，搭建了一套稳定的代理池服务，为上千个爬虫提供有效的代理，保证各个爬虫拿到的都是对应网站有效的代理IP，从而保证爬虫快速稳定的运行，当然在公司做的东西不能开源出来。
妄心xyx·2024-02-02 19:34

MongoDB基础认识

MongoDB是由C++语言编写的，是一个基于分布式文件存储的开源数据库系统。在高负载的情况下，添加更多的节点，可以保证服务器性能。MongoDB旨在为WEB应用提供可扩展的高性能数据存储解决方案。
蓝白汤姆·2024-02-02 19:39

使用Java实现基于HTTP的分布式系统：让你的应用“四处开花”

在数字世界里，分布式系统就像是一个大家庭，每个成员（即节点）都有自己的任务和职责，共同维护整个家庭的运转。
华科℡云·2024-02-02 19:08

自己搭一个 OSS 服务，和阿里云的一毛一样

我们会用OSS（ObjectStorageService）对象存储服务来存文件，它是支持分布式扩展的，不用担心存储容量问题，而且也好管理。比如阿里云的OSS服务。
神码观察·2024-02-02 19:53

深度学习的开源分布式框架Deeplearning4j

该框架基本上是由Hadoop和Spark集成的分布式深度学习库组成的。在Hadoop和Spark的帮助下，我们可以轻松地分发模型和大数据集，并运行
weixin_43106248·2024-02-02 19:13

eureka 和zookeeper 区别 优势

作为服务注册中心，Eureka比Zookeeper好在哪里著名的CAP理论指出，一个分布式系统不可能同时满足C(一致性)、A(可用性)和P(分区容错性)。
音乐与咖啡Bean·2024-02-02 18:43

亚信安慧AntDB：分布式数据库的崛起与挑战

亚信安慧AntDB是国产的分布式数据库，它具备快速发展的潜力。随着互联网技术的迅猛发展，大数据时代的到来，数据库的需求不断增长。
亚信安慧AntDB数据库·2024-02-02 18:03

技术革新与市场需求：探索亚信安慧AntDB的发展之路

AntDB采用分布式架构设计，可以根据业务需求灵活增减节点数量，实现无缝扩容升级，从而满足企业在不同发展阶段的数据管理需求。这种平滑扩展的特性，为企业节省了大量的时间和资
亚信安慧AntDB数据库·2024-02-02 18:03

亚信安慧的AntDB数据库：稳定可靠的保障

作为一种高效可靠的数据库解决方案，AntDB引入了先进的分布式技术和优化算法，使得运营商能够拥有更稳定、更可靠的数据存储和处理能力。
亚信安慧AntDB数据库·2024-02-02 18:03

亚信安慧AntDB探索数据库更多可能

AntDB数据库架构通过引入创新的分布式体系结构，充分利用集群资源，实现数据的高效分布和快速存取。同时，它还具备强大的容错能力和灵活的扩展性，可以根据业务需求进行按需配置和动态调整。
亚信安慧AntDB数据库·2024-02-02 18:00

Linus 在 2007 年 Google Talk 上介绍 Git

可靠高性能分布式内容管理Git之前有很多版本控制软件，但都存在一些问题，尤其
一只大鸽子·2024-02-02 18:21

分布式系统（DS） -- 详解

本文不涉及…1.为什么会有分布式系统（distributedsystem，ds）参考链接–漫谈大数据1.1了解传统系统1.1.1了解计算分布式化刚开始面临一个词法分析的需求，把一个几十K的文件解析下，然后生成一个词频分析的报告
LtMamba·2024-02-02 18:23

分布式文件系统（DFS）-- 详解

1.了解分布式文件系统1.1了解什么是分布式文件系统分布式文件系统（DistributedFileSystem，DFS）是一种计算机文件系统，它将网络上不同计算机的文件系统集成在一起，使得用户就像在自己的本地机器上一样访问和操作文件
LtMamba·2024-02-02 18:23

fastdfs --详解

1.为什么会存在fastdfs参考链接–了解为什么有分布式参考链接–分布式文件系统详解FastDFS是一个开源的轻量级分布式文件系统，主要解决了海量数据存储问题，特别适合以中小文件（建议范围：4KB[storageserverlist
LtMamba·2024-02-02 18:18

Git 指令

Git安装·操作·命令行简介：Git是一个开源的分布式版本控制系统，用于敏捷高效地处理任何或小或大的项目。
花追雨·2024-02-02 18:11

ETCD数据库入门小案例

一、ETCD介绍etcd一个高可用、强一致性的服务发现存储仓库，它是一个高可用，高度一致的分布式键值存储的Key/Value存储系统，内部采用raft协议作为一致性算法。
福海鑫森·2024-02-02 18:06

TiDB 简介

TiDB简介|PingCAPDocsTiDB是PingCAP公司自主设计、研发的开源分布式关系型数据库，是一款同时支持在线事务处理与在线分析处理(HybridTransactionalandAnalyticalProcessing
福海鑫森·2024-02-02 18:06

SpringBoot使用Kafka详解含完整代码

1.前言随着大数据和实时处理需求的增长，Kafka作为一种分布式流处理平台，与SpringBoot的集成变得尤为重要。
孤蓬&听雨·2024-02-02 18:27

An End-to-End Learning-Based Metadata Management Approach for Distributed File Systems——论文阅读

)”局部保持哈希“MultipleSubsetSumProblem(MSSP).”多子集和问题“polynomial-timeapproximationscheme(PTAS)”多项式时间近似方法背景分布式元数据的挑战目前的
妙BOOK言·2024-02-02 18:57

CJFS: Concurrent Journaling for Better Scalability——论文泛读

FAST2023Paper分布式元数据论文汇总问题和挑战重量级的EXT4可扩展性较差，由于日志存在两个限制：日志提交是一个严格的串行活动；日志提交使用原始页缓存条目，而不是其副本，随后任何对正在进行的页缓存条目的访问都将被阻塞
妙BOOK言·2024-02-02 18:57

ConfD: Analyzing Configuration Dependencies of File Systems for Fun and Profit——论文泛读

FAST2023Paper分布式元数据论文汇总问题文件系统在管理数据方面发挥着至关重要的作用。为了满足不同的需求，它们通常支持许多配置参数，例如EXT4有85个参数。
妙BOOK言·2024-02-02 18:57

BetrFS: A Compleat File System for Commodity SSDs——论文阅读

EuroSys2022Paper分布式元数据论文汇总问题在不同的工作负载下，没有单一的Linux文件系统在普通SSD上始终表现良好。
妙BOOK言·2024-02-02 18:27

Chipmunk: Investigating Crash-Consistency in Persistent-Memory File Systems——论文泛读

EuroSys2023Paper分布式元数据论文汇总问题检测PM文件系统关于崩溃一致性的潜在bug。
妙BOOK言·2024-02-02 18:27

分布式元数据论文，阅读笔记（持续更新）

元数据优化论文阅读GUFI:Fast,SecureFileSystemMetadataSearchforBothPrivilegedandUnprivilegedUsersSC2022Paper论文笔记针对元数据查询的优化，通过构建外部元数据索引来加速元数据查询的性能。作者提出以下优化点：将各个底层文件系统的所有元数据汇总，构建统一的基于嵌入式数据库的新索引；在索引中添加多个表便于快速的数据库查询
妙BOOK言·2024-02-02 18:56

TiDedup: A New Distributed Deduplication Architecture for Ceph——论文泛读

ATC2023Paper分布式元数据论文汇总问题Ceph是一个广泛部署的分布式存储系统，Ceph中的集群级去重设计，由于一些缺点难以在生产环境中使用：（1）去重唯一数据会导致过多的元数据消耗；（2）串行层次化机制对前台
妙BOOK言·2024-02-02 18:26

linux下安装flink 1.18

一、flink介绍Flink是为分布式、高性能、随时可用以及准确的流处理应用程序打造的开源流处理框架二、flink下载flink下载三、flink配置3.1、配置环境变量exportJAVA_HOME=
爱上雪茄·2024-02-02 17:46

JavaSE基础知识总结（上）

作为一名程序设计人员，常常希望能够有一种语言，它具有令人赏心悦目的语法和利于理解的语义Java白皮书关键术语简单性面向对象分布式健壮性安全性体系结构中立可移植性解释型高性能多线程动态性1、使用命令行工具编译
北纬40度~·2024-02-02 17:13

springboot+JTA简单实现多数据源事务

Springboot+JTA简单实现多数据源事务JTA依赖YML配置DataSourceConfig+Mybatis分包配置db1db2测试JTAJTA，即JavaTransactionAPI，JTA允许应用程序执行分布式事务处理
夕阳西下，断肠人在天涯·2024-02-02 17:10

架构师应知必会的缩写大全

CAPCAP定理指出，任何分布式数据存储都只能提供以下三种保证中的两种：一致性-每次读取都会收到最近的写入或错误。可用性-每个请求都会收到响应。分区容忍度-系统在网络故障时仍能继续运行。
xwhking·2024-02-02 16:25
上一页 35 36 37 38 39 40 41 42 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他