E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
【Distributed】
大数据学习之hadoop伪分布式集群安装(一)
Hadoop实现了一个分布式文件系统(Hadoop
Distributed
FileSystem),简称HDFS。
baihuayong9323
·
2023-04-04 08:29
大数据
开发工具
java
分布式网络计算机,分布式网络
分布式网络(
Distributed
Network)[编辑]什么是分布式网络分布式网络也叫网状网络,如图1所示,它是由分布在不同地点的计算机系统互连而成,网中无中心节点。
黄雀飞
·
2023-04-04 08:29
分布式网络计算机
第1章 初始Hadoop
HDFSHadoop
Distributed
FileSystem分布式文件系统MapReduce并行计算框架HBase分布式NoSQL列数据库Hive数据仓库工具,将结构化的数据文件映射为一张数据库表,并提供简单的
longbow747
·
2023-04-04 06:58
Hadoop分布式文件系统HDFS
参考:尚硅谷大数据Hadoop3.x1HDFS概述1.1HDFS定义HDFS(Hadoop
Distributed
FileSystem),它是一个文件系统,用于存储文件,通过目录树来定位文件;其次,它是分布式的
PandaKing
·
2023-04-04 05:19
Spark的架构与基本运行流程
的架构与基本运行流程一、Spark中的核心概念二、Spark中的核心架构设计三、Spark中的基本运行流程一、Spark中的核心概念(1)RDD,Spark中最核心的概念就是RDD(Resillient
Distributed
Dataset
syp_net
·
2023-04-04 03:39
spark
spark
架构
大数据
spark基本概念与架构设计
spark基本概念:•RDD:是Resillient
Distributed
Dataset(弹性分布式数据集)的简称,是分布式内存的一个抽象概念,提供了一种高度受限的共享内存模型•DAG:是DirectedAcyclicGraph
诠释轻音
·
2023-04-04 03:28
hadoop
spark
关于分布式系统的一些学习心得-笔记
分布式系统(
distributed
system)是建立在网络之上的软件系统。
进阶的小橙子
·
2023-04-04 02:56
分布式事务------XA协议/2PC(Seata AT)
·XA规范是X/Open组织定义的分布式事务处理(DTP,
Distributed
TransactionProcessing)标准。
Bigger_Lee
·
2023-04-04 00:22
分布式事务
分布式
java
CAP理论
可用性2.3、分区容错性三、CAP理论应用3.1、CA模型3.2、AP模型3.3、CP模型四、base理论五、实战案例5.1、消息异步解耦5.2、zookeeper5.2、Nacos总结前言分布式系统(
distributed
system
依剑问道
·
2023-04-03 22:52
java基础
java
分布式
使用docker搭建Hadoop
Hadoop的整体框架Hadoop由HDFS、MapReduce、HBase、Hive和ZooKeeper等成员组成,其中最基础最重要元素为底层用于存储集群中所有存储节点文件的文件系统HDFS(Hadoop
Distributed
FileSystem
哦吼吼吼tian
·
2023-04-03 20:27
Hadoop架构和原理
HDFS
Distributed
FileSystem(HDFS)是Hadoop分布式文件存储系统。不同于其他分布式文件存储系统,HDFS包含高度容错机制(数据副本机制),并且设计初衷是
松myth
·
2023-04-03 20:26
hadoop组成及其架构
1.1HDFS架构概述Hadoop
Distributed
FileSystem,简称HDFS,是一个分布式文件系统。
90后的包子
·
2023-04-03 20:50
大数据
hadoop
架构
hdfs
抗DDOS,我选Cloudflare,免费!
DDOS攻击什么引用百度百科的解释:分布式拒绝服务(DDoS:
Distributed
DenialofService)攻击指借助于客户/服务器技术,将多个计算机联合起来作为攻击平台,对一个或多个目标发动DDoS
大山聊产品运营
·
2023-04-03 18:45
如何看懂Apache Pulsar?(究极缝合)
ApachePulsar官方文档直达,快速移步,本文基于pulsar2.8版本apache/pulsar:ApachePulsar-
distributed
pub-submessagingsystem(github.com
Wu_Init
·
2023-04-03 13:41
apache
pulsar
pulsar
Erlang/OTP OCP 面向并发编程入门
《面对软件错误构建可靠的分布式系统》Makingreliable
distributed
systemsinthepresenceofsodwareerrorsEr
坚果jimbowhy
·
2023-04-03 12:54
ClickHouse 分布式表实现数据同步
在多副本分布式ClickHouse集群中,通常需要使用
Distributed
表写入或读取数据,
Distributed
表引擎自身不存储任何数据,它能够作为分布式表的一层透明代理,在集群内部自动开展数据的写入
平沙落雁子
·
2023-04-03 12:55
数据库
clickhouse笔记04--快速理解分片和副本
clickhouse笔记04--快速理解分片和副本1介绍2副本&分片核心要点2.1数据副本2.2ReplicatedMergeTree原理2.3数据分片2.4
Distributed
原理解析3注意事项4说明
昕光xg
·
2023-04-03 12:22
Bigdata
ClickHouse
ClickHouse分片
ClickHouse副本
Replicated合并树原理
Distributed原理解析
Clickhouse副本备份机制
分布式表:使用
Distributed
引擎,原理类似于视图性质。需要先在各个实例中创建物理表,再关联映射到实际物理表。配置方法配置clickhouse的zk属性
好奇的小黑
·
2023-04-03 11:19
Clickhouse
大数据架构
大数据
IPFS中的分布式哈希表(DHT)
英文部分摘自官方文档,中文部分是基于理解上的翻译
Distributed
hashtables(DHTs)Tofindwhichpeersarehostingthecontentyou’reafter(discovery
_earthshaker_
·
2023-04-03 08:33
通俗讲解 Kademlia 原理
DHT的全称叫哈希表(
Distributed
black0591
·
2023-04-03 08:19
DBR基本原理
本文对VCSEL类型激光器中构成谐振腔的DBR(
Distributed
BraggReflector)的基本原理进行介绍。分别介绍两个基本的物理知识:反射相变与薄膜干涉。
继舜
·
2023-04-03 06:12
使用resnet网络实现分类算法
train.pyimportosimporttorch.optimasoptimimporttorchimporttorch.nnasnnimporttorch.nn.parallelimporttorch.utils.dataimporttorch.utils.data.
distributed
importtorchvision.transformsastransformsimporttorchv
WX_Chen
·
2023-04-03 06:23
分类算法
深度学习
Spring Cloud Alibaba系列之分布式服务组件Dubbo!
1、分布式理论1.1分布式基本定义《分布式系统原理与范型》定义:“分布式系统是若干独立计算机的集合,这些计算机对于用户来说就像单个相关系统”分布式系统(
distributed
system)是建立在网络之上的软件系统
废柴程序员
·
2023-04-03 06:55
Hadoop之HBase逻辑模型简介
与BigTable类似,BigTable是基于GFS(GoogleFileSystem)的分布式列式数据库,HBase是基于HDFS(Hadoop
Distributed
FileSystem)的分布式列式数据库
Hirisw
·
2023-04-03 05:19
Java
Java
大数据
Hadoop
HBASE
互联网架构
服务器并发能力为:200-250左右(JVM调优为1000);硬件条件:物理服务器处理能力网络带宽(2).分布式(2.1)分布式计算由多个线程,共同来完成某项特定的任务,拆合问题(2.2)分布式系统:(
distributed
system
Faith-小浩浩
·
2023-04-03 02:00
java
java
程序人生
后端
34学习数据分析工具 Hive 的基本用法,包括数据仓库、SQL 查询
数据仓库Hive的数据存储和查询都是基于Hadoop的分布式文件系统HDFS(Hadoop
Distributed
FileSystem)。在开始使用Hive前,需要先创建一个数据仓库
玩机科技社
·
2023-04-03 00:35
运维
服务器
运维开发
服务器
31学习大数据平台 Hadoop 的基本概念和架构,包括 HDFS、MapReduce
它包括两个核心组件:Hadoop分布式文件系统(Hadoop
Distributed
FileSystem,HDFS)和基于MapReduce的分布式计算框架。
玩机科技社
·
2023-04-03 00:39
运维
服务器
服务器
运维开发
Dapr | 云原生的抽象与实现
Dapr这个词是是「
Distributed
Applicationruntime」的首字母缩写,非常精炼的解释了dapr是什么:dapr是一个为应用提
腾讯云原生
·
2023-04-02 23:27
为什么Dapr是比SpringCloud和Istio更优雅的微服务框架?
Dapr这个词是是「
Distributed
Applicationruntime」的首字母缩写,非常精炼的解释了dapr是什么:dapr是一
北京的201个蓝天
·
2023-04-02 23:45
SmartIDE
spring
cloud
微服务
java
dapr
面向.NET开发人员的Dapr——俯瞰Dapr
目录:面向.NET开发人员的Dapr——前言面向.NET开发人员的Dapr——分布式世界Daprat20,000feet俯瞰DaprInchapter1,wediscussedtheappealof
distributed
microserviceapplications.But
dotNET跨平台
·
2023-04-02 23:43
分布式
java
编程语言
linux
docker
Dapr专题之01简介
官方解释:Dapr(
Distributed
ApplicationRuntime)是一个
Tom是只好猫
·
2023-04-02 23:33
微服务
.Net
6
微服务
.net
Hadoop
Hadoop实现了一个分布式文件系统(Hadoop
Distributed
FileSystem),其中一个组件是HDFS。
Susinl
·
2023-04-02 20:09
架构
人工智能
hadoop
大数据
java
Hadoop系列HDFS详解
简介HDFS(Hadoop
Distributed
FileSystem)Hadoop分布式文件系统。是根据google发表的论文翻版的。
诸葛子房_
·
2023-04-02 19:00
hadoop
Hadoop HDFS概念学习系列之初步掌握HDFS的架构及原理2(二)
HDFS的文件读取原理,主要包括以下几个步骤:1、首先调用FileSystem对象的open方法,其实获取的是一个
Distributed
FileSystem的实例。
weixin_34319111
·
2023-04-02 19:26
大数据
Hadoop 系列之一:HDFS简介
Hadoop系列之一:HDFS简介简介HDFS(Hadoop
Distributed
FileSystem)Hadoop分布式文件系统。是根据google发表的论文翻版的。
upHailin
·
2023-04-02 19:23
hadoop系列二 ——HDFS概念
hdfs简述首先,它是一个文件系统,用于存储文件,通过统一的命名空间——目录树来定位文件其次,它是分布式的,由很多服务器联合起来实现其功能,集群中的服务器有各自的角色;HDFS(Hadoop
Distributed
FileSystem
heartless_killer
·
2023-04-02 19:00
hadoop
HDFS
hdoop
HDFS
Hadoop分布式文件系统HDFS介绍
HDFS全称是Hadoop
Distributed
FileSystem。hdfs中的block的大小默认128MB(hadoop2.x,1.x是64MB),文件占用的大小不到128也占用128M。
XueminXu
·
2023-04-02 19:55
大数据
hadoop
hdfs
namenode
datanode
JournalNode
什么是ddos、cc攻击,原理是什么?
DDoS(
Distributed
DenialofService)和CC(CommandandControl)攻击是网络安全领域中常见的攻击类型,在网络攻击的分类中,第一种类型是DDoS攻击,其原理在于攻击者大量发送伪造的请求到目标服务器
似梦初觉
·
2023-04-02 18:37
网络
安全
服务器
服务器被ddos攻击?分析如何防止DDOS攻击?
关于DDOS攻击分布式拒绝服务(DDoS:
Distributed
DenialofService)攻击指借助于客户/服务器技术,将多个计算机联合起来作为攻击平台,对一个或多个目标发动DDoS攻击,从而成倍地提高拒绝服务攻击的威力
Srsshier
·
2023-04-02 18:02
网络
服务器
安全
Spark[3]:handoop生态与Spark架构启动等相关概念
框架的核心组件HDFS:Hadoop
Distributed
FileSystemMapReduce:processingunitYARN:YetAnotherResourceNegotiatorHadoopCommon
little_miya
·
2023-04-02 14:08
bigdata
spark
架构
hadoop
【Spark】Spark 的三大数据结构
1.RDDRDD(Resilient
Distributed
Dataset)弹性分布式数据集,是Spark最基本的数据处理模型,它是代码中的抽象类。
和风与影
·
2023-04-02 10:15
Spark
大数据
spark
HDFS架构,常用特性
文章目录HDFS前言一、1.NameNodeDateNodes二、文件系统命名空间三、数据复制四、文件系统元数据的持久性五、通讯协议六、健壮性七、数据结构九、命令行演示十、空间回收前言HDFS(Hadoop
Distributed
FileSystem
Vince1958
·
2023-04-02 06:44
HDFS
hdfs
hadoop
大数据
Hadoop源码分析笔记(五):HDFS特点和体系结构
HDFSHadoop是一个能够让用户轻松架构和使用的分布式计算平台,用户可以在Hadoop上管理、开发和运行处理大规模数据的应用,其中,Hadoop分布式文件系统(Hadoop
Distributed
FileSystem
剑邑龙泉
·
2023-04-02 06:21
Hadoop源码分析
Hadoop -- HDFS 原理、架构与特性介绍
架构详尽分析2:HDFS文件读取的解析3:HDFS文件写入的解析4:副本机制5:HDFS负载均衡6:HDFS机架感知7:HDFS访问8:HDFS健壮性9:HDFS文件删除恢复机制10:HDFS分布式缓存(
Distributed
Cache
shineHoo
·
2023-04-02 06:21
数据挖掘
「2-Hadoop」:HDFS架构详述
HDFS概述二:HDFS组成架构三:HDFS写、读数据流程四:NameNode和SecondaryNameNode工作机制五:DataNode工作机制一:HDFS概述HDFS定义HDFS(Hadoop
Distributed
FileSystem
栗子_yangxw
·
2023-04-02 06:10
大数据组件知识
hadoop
hdfs
DSA:2.9,厚颜无耻,油腻异常,圈钱之心过于明显
四大差评如下:官网以及白皮书找不到团队介绍——差评代币分配风险极大——差评免责声明占白皮书1/3——差评吹牛逼吹的太过——差评项目立项:过于敷衍5分项目介绍分布式众调加速器DSA(
Distributed
SurveyAccelerator
陈天宇123
·
2023-04-02 04:57
git 版本管理
Git版本控制管理@[TOC]gitGitisa
distributed
versioncontrolsystem.知识点版本回退1.工作区和暂存区工作区:电脑里的目录版本库:.git版本库中含有暂存区(stage
玉面小猿
·
2023-04-01 23:43
Kafka设计原理
它最初由LinkedIn公司基于独特的设计实现为一个分布式的提交日志系统(a
distributed
commitlog),之后成为Apache项目的一部分。Kafka系统快速、可扩展并且可持久化。
wujt8888
·
2023-04-01 23:09
kafka
kafka
DRBD(
Distributed
Replicated Block Device) 分布式块设备复制 进行集群高可用方案
外文名DRBDdrbdadm高级管理工具drbdsetup置装载进kernel的DRBD模块drbdmeta管理META数据结构目录1DRBD基础2DRBD功能▪工作原理▪版本DRBD基础编辑
Distributed
ReplicatedBlockDevice
weixin_30702887
·
2023-04-01 23:02
分布式数据库系列(二)
分布式数据库与数据库复制对比
Distributed
DatabasesVersusReplicatedDatabases二者有关联,但也是明显区别.分布式数据库管理所有数据的单一拷贝.在通常情况下.分布式数据库使用分布式事务访问本地和远程数据库
clg10051
·
2023-04-01 23:30
数据库
上一页
29
30
31
32
33
34
35
36
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他