E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
【Distributed】
airflow源码精读 三
LicensedtotheApacheSoftwareFoundation(ASF)underoneormore#contributorlicenseagreements.SeetheNOTICEfile
distributed
with
dll007
·
2023-12-24 22:59
调度系统
python
Spark的核心概念:RDD、DataFrame和Dataset
ApacheSpark,其核心概念包括RDD(Resilient
Distributed
Dataset)、DataFrame和Dataset。
晓之以理的喵~~
·
2023-12-24 22:25
Spark
spark
大数据
分布式
【Hadoop】HDFS简介——是什么/优缺点/适用场景
HDFS的优点/特性HDFS适用场景HDFS的缺点与不足HDFS不适用场景HDFS是什么源自Google的GFS论文Google于2003年10月发表HDFS是GFS的一个克隆版HDFS(Hadoop
Distributed
FileSystem
不怕娜
·
2023-12-24 18:11
hadoop
hdfs
大数据
分布式服务跟踪及Spring Cloud的实现
看了了一个关于分布式服务链路追踪的文章,觉得写得不错,转载记录,原文链接:http://daixiaoyu.com/
distributed
-tracing.html附上最近学习springcloud做的
有点胖的小乐乐
·
2023-12-24 14:19
Dubbo服务注册与发现
@[toc]一、分布式基本理论1.1、分布式基本定义《分布式系统原理与范型》定义:“分布式系统是若干独立计算机的集合,这些计算机对于用户来说就像单个相关系统”分布式系统(
distributed
system
smileNicky
·
2023-12-24 12:22
Hadoop学习笔记(一)分布式文件存储系统 —— HDFS
概念HDFS(Hadoop
Distributed
FileSystem),Hadoop分布式文件系统,用来存超大文件的。
zhang35
·
2023-12-24 08:54
大数据技术栈
大数据
分布式
Hadoop
入门
hdfs
Ceph存储体系架构?
RADOS(Reliable,Autonomic
Distributed
ObjectStore)是Ceph的底层核心,RADOS本身也是分布式存储系统,CEPH所有的存储功能都是基于RADOS实现。
cherry@kerry
·
2023-12-24 00:08
ceph
架构
慢调用链诊断利器-ARMS 代码热点
作者:铖朴、义泊可观测技术背景从最早的Google发表的一篇名为《Dapper,aLarge-Scale
Distributed
SystemsTracingInfrastructure》的论文开始,到后来以
阿里云云原生
·
2023-12-23 13:28
阿里云
云原生
可观测
DDOS攻击简介——什么是DDOS
DDoS是分布式拒绝服务攻击(
Distributed
denialofserviceattack)的简称。
Albart575
·
2023-12-23 12:40
linux
ddos
libp2p服务发现之 Multicast DNS(mDNS)
mDNS)一、MulticastDNS(mDNS)mDNS的工作原理MulticastDNS(mDNS)和DNS(DomainNameSystem)区别二、mDNS和libp2p的关系三、Kademlia
Distributed
HashTable
西京刀客
·
2023-12-22 18:54
区块链
软件架构/技术选型
p2p
服务发现
网络协议
百度的71个开源项目,肯定有用的着的
2、分布式配置管理平台Disconf
Distributed
ConfigurationMa
looovcn
·
2023-12-22 10:40
ZooKeeper-3.4.9集群安装配置及注意事项
ZooKeeper是一个分布式开源框架,提供了协调分布式应用的基本服务,它向外部应用暴露一组通用服务——分布式同步(
Distributed
Synchronization)、命名服务(NamingService
kamereon
·
2023-12-22 09:21
hadoop
HDFS NFS Gateway(环境配置,超级详细!!)
HDFSNFSGateway简介:HDFSNFSGateway是Hadoop
Distributed
FileSystem(HDFS)中的一个组件,它允许客户端通过NFS(NetworkFileSystem
syst1m'
·
2023-12-22 07:41
大数据
hdfs
gateway
hadoop
spark架构
一、基本概念RDD(Resilient
Distributed
Datasets):弹性分布式数据集,只读分区记录的集合,Spark对所处理数据的基本抽象。RDD是Spark分发数据和计算的基础抽象类。
allin8116
·
2023-12-22 01:47
什么是 DDoS ?如何识别DDoS?怎么应对DDOS攻击
什么是DDOS攻击DDoS攻击(
Distributed
DenialofServiceAttack)即分布式拒绝服务攻击,是一种利用分布式网络来发起大量的请求,占用目标服务器或网络资源的攻击行为。
德迅云安全杨德俊
·
2023-12-21 09:47
ddos
龙芯loongarch64服务器编译安装paddlepaddle
前言PaddlePaddle(Parallel
Distributed
DeepLearning,中文名飞桨)是百度公司推出的开源,易学习,易使用的分布式深度学习平台,现阶段各行各业均追求国产化,软件行业也一样
番茄小能手
·
2023-12-21 07:03
龙芯loongarch64
paddlepaddle
人工智能
spark_rdd算子介绍
1.9算子介绍1.9.1RDD概念RDD(Resilient
Distributed
Dataset)叫做弹性分布式数据集,是Spark中最基本的数据抽象,它代表一个不可变、可分区、里面的元素可并行计算的集合
Guff_hys
·
2023-12-20 16:24
分布式
spark
ajax
程序人生
服务器
scala
开发语言
基于局域网和广域网训练推理加速策略
一、基于局域网的多GPU上并行训练TensorFlow的MirroredStrategy和PyTorch的
Distributed
DataParallel它们可以帮助您在多个GPU或多个计算节点上训练大型模型
数据与后端架构提升之路
·
2023-12-19 15:24
大模型
推理加速
RNA-seq数据如何做PCA
PCAworksbestwhentheinputdataisapproximatelynormally
distributed
oneachdimension.Itwouldbeagoodideatodosomeinitialdataqualitycheckstoverifythatthisisthecase
OmicsAcademy
·
2023-12-19 08:49
Distributed
Cooperative Search Control Method of Multiple UAVs for Moving Target
1
Distributed
CooperativeSearchControlMethodofMultipleUAVsforMovingTarget(用于移动的多个无人机目标的分布式协同搜索控制方法)摘要:减少未知运动参数引起的不确定性对运动目标搜索计划的影响
澹台棋晴
·
2023-12-19 05:19
2020-12-16
《Semantic-awareWorkflowConstructionandAnalysisfor
Distributed
DataAnalyticsSyst
幸福大黑鸭
·
2023-12-19 04:22
Apache Spark 的基本概念和在大数据分析中的应用
以下是ApacheSpark的一些基本概念:RDD:Resilient
Distributed
Dataset,即弹性分布式数据集。它是Spark中最基本的数据抽象,代表一个可分区、
Uingll
·
2023-12-19 04:13
apache
2023.12.16 关于 分布式系统 基本介绍
目录单机架构服务器负载过高问题解决方法分布式系统引入更多的服务器节点负载均衡数据库读写分离引入缓存数据库分库分表引入微服务基本概念应用(Application)/系统(System)模块(Module)/组件(Component)分布式(
Distributed
茂大师
·
2023-12-19 01:34
Redis
redis
java
《密集环境下编队飞行的分布式集群轨迹优化》论文解读二
OptimizationProblemFormulation2.1controleffort2.2totaltime2.3obstacleavoidance2.4swarmformationsimilarity2.5swarmreciprocalavoidance本文解析的论文为高飞老师的
Distributed
SwarmTrajectoryOptimizationforFo
无意2121
·
2023-12-19 01:29
无人系统群体智能论文解读
分布式
算法
机器人
大数据技术11:Hadoop 原理与运行机制
前言:HDFS(Hadoop
Distributed
FileSystem)是Hadoop下的分布式文件系统,具有高容错、高吞吐量等特性,可以部署在低成本的硬件上。
Java架构何哥
·
2023-12-18 21:56
大数据治理
hadoop
大数据
分布式
Hadoop分布式系统基础框架
一文看懂分布式存储 Ceph 架构原理
首先,我们从Ceph的官方网站上,可以看到:“Cephisaunified,
distributed
storagesystemdesignedforexcellentperformance,reliabilityandscalability
Chengz77_
·
2023-12-18 15:45
分布式
ceph
架构
【Hadoop面试】HDFS读写流程
HDFS(Hadoop
Distributed
FileSystem)是GFS的开源实现。
话数Science
·
2023-12-18 06:16
大数据
面试
Hadoop
hadoop
hdfs
大数据
Hadoop (海量数据存储及计算) 基本概念
[1]Hadoop实现了一个分布式文件系统(Hadoop
Distributed
FileSystem),简称HDFS。
ronmy
·
2023-12-18 02:51
大数据
Hadoop
大数据
海量数据
存储
php分布式
Swoole分布式通讯框架Swoole
Distributed
基于nginx+swoole+phalcon+atlas实现的高性能负载均衡集群系列之【构建篇】一、简介php一直诟病于性能,可对开发者如此友好的语言为什么不能登上大雅之堂
hyb1234hi
·
2023-12-18 01:53
高效存储大规模数据的方法与实现
Hadoop
Distributed
FileSystem(HDFS)是一个常用的分布式文件系统,它使用主从架构,
静谧星光c
·
2023-12-17 11:47
大数据
机器学习 高维数据可视化:t-SNE 降维算法
本文目录t-SNE简介sklearn中的t-SNE使用t-SNE可视化手写数字数据集t-SNE简介t-SNE的全称为t-
Distributed
StochasticNeighborEmbedding,是一种非线
小嗷犬
·
2023-12-17 08:41
Python
#
数据分析及可视化
机器学习
python
scikit-learn
机器学习
Skywalking告警规则示例
LicensedtotheApacheSoftwareFoundation(ASF)underone#ormorecontributorlicenseagreements.SeetheNOTICEfile#
distributed
withthisworkforadditionalinformation
旷野九思
·
2023-12-17 08:17
监控配置手册
skywalking
rules
Hadoop,Hive和Spark大数据框架的联系和区别
1.1HDFS分布式存储HDFS全称为hadoop
distributed
filesystem。HDFS本质上也是一个文件系
Weiyaner
·
2023-12-17 06:00
数据库
大数据
hadoop
mapreduce
spark
区块链实验室(30) - 区块链期刊:
Distributed
Ledger Technologies: Research and Practice
Distributed
LedgerTechnologies:ResearchandPractice是ACM出版集团的一本期刊。
看聊效
·
2023-12-17 04:56
区块链
FISCO
Fabric
区块链
linux
ubuntu
网络安全试题——附答案
a)
Distributed
DenialofServiceb)DataDestructionofServicec)DirectDenialofSecurityd)DigitalDefenseofServers
知孤云出岫
·
2023-12-16 22:26
网络
网络安全
issue queue的实现方式
主要从一下几个点进行考虑:集中式(Centrallized)或者分布式(
Distributed
);压缩式(Compressing)或者非压缩式(Non-compressing);数据捕捉的方式(Data-capture
newyork major
·
2023-12-16 20:53
risc-v
risc-v
Spark
在Spark中,RDD(Resilient
Distributed
Dataset)是一个基本的数据抽象在Spark中,RDD(Resilient
Distributed
Dataset)是一个基本的数据抽象,
编织幻境的妖
·
2023-12-16 20:22
spark
hbase
数据库
数据仓库
大数据
RDD是什么
文尾有结论RDD的注释org.apache.spark.rdd.RDD类源代码中有详细的注释:AResilient
Distributed
Dataset(RDD),thebasicabstractioninSpark
猿界零零七
·
2023-12-16 20:18
知识总结
spark
RDD
DDOS攻击会造成哪些伤害
互联网时代服务器是很容易遭受到攻击的,因为当服务器遇到攻击的话会导致企业的业务无法正常的运行,进而对于企业的形象产生很大的影响,DDOS就是
Distributed
DenialofService,也叫做分布式拒绝服务器
wanhengwangluo
·
2023-12-16 15:53
ddos
图扑物联 | WEB组态可视化软件
组态的概念来自于20世纪70年代中期出现的第一代集散控制系统(
Distributed
ControlSystem),可理解为“配置”、“设置”等,是指通过人机开发界面,用类似“搭积木”的简单方式来搭建软件功能
DLIOTOPO
·
2023-12-16 14:56
物联网
web
DOS及DDOS的原理及防御方式
DOS(DenialofService)和DDOS(
Distributed
DenialofService)是一种网络攻击方式,其主要原理是通过向目标系统发送大量的请求或数据流量,使目标系统无法正常服务或响应
weixin_43962020
·
2023-12-16 12:06
web安全
安全
前端
javascript
DDOS 攻击是什么?有哪些常见的DDOS攻击?
DDOS简介DDOS又称为分布式拒绝服务,全称是
Distributed
DenialofService。DDOS本是利用合理的请求造成资源过载,导致服务不可用,从而造成服务器拒绝正常流量服务。
火伞云
·
2023-12-16 12:33
ddos
消息中间件使用场景
Message-orientedmiddleware(MOM)issoftwareorhardwareinfrastructuresupportingsendingandreceivingmessagesbetween
distributed
systems
Justin_Jun
·
2023-12-16 10:16
分布式架构常见概念
注:节点,可理解为一台物理机2、分布式【
distributed
】个人理解:一个
瑾兰
·
2023-12-16 08:44
【Spark精讲】Spark RDD弹性体现在哪些方面?
参考:什么是弹性伸缩ess_弹性伸缩(ESS)-阿里云帮助中心我们在看一下RDD定义:Resilient
Distributed
Datasets,译为弹性分布式数据集,是一种基于集群内存计算的一种抽象。
话数Science
·
2023-12-16 05:14
Spark精讲
Spark
大数据
spark
大数据
用python实现一个分布式锁
下面是一个简单的实现:首先,我们需要安装Redis模块,可以使用以下命令:pipinstallredis接下来,我们定义一个类来实现分布式锁:importredisimporttimeclass
Distributed
Lock
隔壁老姚
·
2023-12-16 04:34
python
分布式
redis
Client-server model
Theclient-servermodelisa
distributed
applicatonstructurethatpartitionstasksorworkloadsbetweentheprovidersofaresourceorservice
sinat_36651044
·
2023-12-16 01:00
学习
笔记
网络架构
spark常见面试题
spark面试题1.spark的RDD是什么,有哪些特性RDD(Resilient
Distributed
Dataset)叫做分布式数据集,是spark中最基本的数据抽象,它代表一个不可变,可分区,里面的元素可以并行计算的集合
YY_pdd
·
2023-12-15 19:24
面试
大数据运算
软件管理
分布式
大数据
spark
面试
spark学习之旅(2)之之RDD常用方法
RDD(Resilient
Distributed
Dataset)叫做弹性分布式数据集,是Spark中最基本的数据抽象,它代表一个不可变、可分区、里面的元素可并行计算的集合。
浩哥的技术博客
·
2023-12-15 19:51
spark
spark
大数据
SaaS anywhere: Designing
distributed
multi-tenant architectures
Peter:Thankyouforcomingouttooursessiontoday.SAS308SASAnywhereDesign,
Distributed
Multi-TenantArchitecture.MynameisPeter.I'mgonnabejoinedbymyteammate
李白的朋友王维
·
2023-12-15 19:56
aws
亚马逊云科技
科技
人工智能
re:Invent
2023
生成式AI
云服务
上一页
3
4
5
6
7
8
9
10
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他