E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
locust分布式
2019-03-16 Spark基本架构及运行原理
SparkCore:包含Spark的基本功能,包含任务调度,内存管理,容错机制等,内部定义了RDDs(弹性
分布式
数据集),提供了很多APIs来创建和操作这些RDDs。为其他组件提供底层的服务。
做一只乐观的小猴子
·
2024-02-03 02:04
springboot 整合 PowerJob实现定时任务调度
简介PowerJob是基于java开发的企业级的
分布式
任务调度平台,与xxl-job一样,基于web页面实现任务调度配置与记录,使用简单,上手快速,其主要功能特性如下:使用简单:提供前端Web界面,允许开发者可视化地完成调度任务的管理
缘不易
·
2024-02-03 02:36
springboot
spring
boot
后端
java
JAVA面试题分享四百二十八:为什么需要
分布式
ID?你项目中是怎么做的?
目录
分布式
ID介绍什么是ID?什么是
分布式
ID?
分布式
ID需要满足哪些要求?
之乎者也·
·
2024-02-03 02:31
JAVA
面试题分享
分布式
内容分享
java
分布式
开发语言
RocketMQ源码解析(五)-Broker架构及服务启动
后面会用更多的几篇来讲Broker,其实也就是消息队列的核心-
分布式
Queue的实现。
空挡
·
2024-02-03 01:01
手写
分布式
存储系统v0.1版本
引言这是手写
分布式
存储系统v0.1版本,只有一个目标就是支持通过tcp接收数据并落地到磁盘文件(单机模式),那接下来就开始吧一、设计实现一个系统,设计是最过瘾的过程没有之一,类似你搭积木前在脑海设计构建一副大致的
林崇辉
·
2024-02-03 01:10
分布式
分布式存储
java
手写
分布式
存储系统v0.2版本
引言上回说到手写
分布式
存储系统v0.1版本,已经实现了通过监听TCP端口并将数据写到本地磁盘的功能,今天咱们就继续往上面添砖加瓦v0.2版本大致做以下功能实现滚动写文件代码优化一、滚动写文件实现由于咱们写文件是用的
林崇辉
·
2024-02-03 01:10
分布式存储
Java写文件
Java
存储
手动实现
MySQL之SQL的查询语句如何执行
文章目录前言一、一条查询的SQL是如何执行的二、MySQL的“零件”们1.连接器2.查询缓存3.分析器4.优化器5.执行器总结前言做了多年技术之后,技术更新换代太快,从我入行时候从单体架构到后面
分布式
SOA
YLDominer
·
2024-02-03 01:01
mysql
sql
数据库
分布式
数据库健康评估有什么不同
前阵子和一个做数据库服务的朋友交流,他们承接了某个企业的国产
分布式
数据库的运维工作,安排了一个该数据库的认证工程师驻场做服务,不过从半年的工作情况来看,效果并不好。
DBAIOps社区
·
2024-02-03 01:59
技术文章
分布式
数据库
dba
运维
从架构上分析TIDB和OB擅长的应用领域
这两年
分布式
数据库比较火,金融行业客户上数据库产品的时候,大多数都选择了
分布式
数据库。
DBAIOps社区
·
2024-02-03 01:57
ob
tidb
dba
运维
数据库
Hadoop生态圈-组件介绍
Hadoop是目前应用最为广泛的
分布式
大数据处理框架,其具备可靠、高效、可伸缩等特点。Hadoop的核心组件是HDFS、MapReduce。
苏尔伯特
·
2024-02-03 00:19
技术分享 | Prometheus支持docker容器啦!
Docker简介Docker是以Docker容器为资源分割和调度的基本单位,封装整个软件运行时环境,为开发者和系统管理员设计的,用于构建,发布和运行
分布式
应用的平台。
阿木实验室
·
2024-02-03 00:07
揭秘Sentinel背后的原理
在当今互联网时代,
分布式
系统的发展已经成为了不可逆转的趋势。然而,随着系统规模的不断扩大,面临的挑战也在不断增加。其中之一就是系统的稳定性和安全性。
m1chiru
·
2024-02-03 00:42
sentinel
dolphinScheduler
分布式
搭建&快速上手
dolphinScheduler入门详解dolphinScheduler
分布式
部署&快速上手Dolph
PythonDev000
·
2024-02-02 23:14
大数据生态圈
#
Hadoop
hadoop
zookeeper
数据仓库
缓存框架jetcache
支持多种缓存类型:本地缓存、
分布式
缓存、多级缓存。
A尘埃
·
2024-02-02 23:02
缓存
jetcache框架
[轉]ERP系统之比较——SAP、Oracle、BAAN、JDE、SSA
R/2是用于集中式大型机环境的系统,R/3是用于
分布式
的客户机/服务器环境的系统。SAP是国际上著名的标准应用软件公司。SAP总部设在德国南部的沃尔道夫市
weixin_33836874
·
2024-02-02 23:31
数据库
开发工具
java
单机搭建hadoop环境(包括hdfs、yarn、hive)
单机可以搭建伪
分布式
hadoop环境,用来测试和开发使用,hadoop包括:hdfs服务器yarn服务器,yarn的前提是hdfs服务器,在前面两个的基础上,课可以搭建hive服务器,不过hive不属于
howard_shooter
·
2024-02-02 23:39
大数据
hadoop
大数据
分布式
SpringCloud01
单体架构的优缺点如下:优点:架构简单部署成本低缺点:耦合度高(维护困难、升级困难)1.2.
分布式
架构
分布式
架构:根据
程序媛9688
·
2024-02-02 22:48
docker
不能划等号吗?
大众对区块链技术仍处于一头雾水的状态,习惯于将区块链等同于比特币,将其看作一种纯金融产品,却忽略了区块链技术的本质是一种去中心化、不可篡改、集安全与强制背书为一体的
分布式
数据库存储技术。
大拿BTC
·
2024-02-02 22:25
Hadopp未授权访问导致RCE
前言:Hadoop是一个开源的
分布式
计算框架,用于处理大规模数据集的存储和处理。
安鸾彭于晏
·
2024-02-02 22:27
web安全
安全
网络
什么是RDD
ResilientDistributedDataset==>弹性
分布式
数据集Resilient==>指的是RDD的分区数量是可以进行弹性控制的Distributed==>指的是RDD的分区
分布式
的存在于各个执行
zholeiv5
·
2024-02-02 22:18
Flink知识点概述
flink是什么是一个框架和
分布式
处理引擎,在无边界和有边界数据流上纪念性有状态的计算主要特性1.批流统一批处理:数据全部访问完成后进行操作有界、持久、大量,适合访问全套记录才能完成的工作,一般用于离线统计流处理
内向仓鼠
·
2024-02-02 21:39
flink
大数据
架构设计内容分享(一百三十七):架构设计的42个黄金法则
分布式
知识。架构知识。架构哲学。意志坚强。但不偏执。善于沟通。但不花言巧语。除此之外,架构师在做方案的时候,有很大的发挥空间。所
之乎者也·
·
2024-02-02 20:57
架构设计
内容分享
架构
设计
【K8S】详解容器网络中的overlay、underlay
spm=1001.2014.3001.5502在
分布式
pod中,K8S上的所有pod默认会从同一平面网络得到全局一个唯一IP地址和一个虚拟网络接口,无论是否都处于一个namespace,各个pod之间都可
带你去吃小豆花
·
2024-02-02 20:31
运维
网络
运维
kubernetes
Python爬虫代理池
爬虫代理IP池在公司做
分布式
深网爬虫,搭建了一套稳定的代理池服务,为上千个爬虫提供有效的代理,保证各个爬虫拿到的都是对应网站有效的代理IP,从而保证爬虫快速稳定的运行,当然在公司做的东西不能开源出来。
妄心xyx
·
2024-02-02 19:34
MongoDB基础认识
MongoDB是由C++语言编写的,是一个基于
分布式
文件存储的开源数据库系统。在高负载的情况下,添加更多的节点,可以保证服务器性能。MongoDB旨在为WEB应用提供可扩展的高性能数据存储解决方案。
蓝白汤姆
·
2024-02-02 19:39
mongodb
数据库
使用Java实现基于HTTP的
分布式
系统:让你的应用“四处开花”
在数字世界里,
分布式
系统就像是一个大家庭,每个成员(即节点)都有自己的任务和职责,共同维护整个家庭的运转。
华科℡云
·
2024-02-02 19:08
游戏
java
自己搭一个 OSS 服务,和阿里云的一毛一样
我们会用OSS(ObjectStorageService)对象存储服务来存文件,它是支持
分布式
扩展的,不用担心存储容量问题,而且也好管理。比如阿里云的OSS服务。
神码观察
·
2024-02-02 19:53
github
开源
python
开发语言
java
深度学习的开源
分布式
框架Deeplearning4j
该框架基本上是由Hadoop和Spark集成的
分布式
深度学习库组成的。在Hadoop和Spark的帮助下,我们可以轻松地分发模型和大数据集,并运行
weixin_43106248
·
2024-02-02 19:13
深度学习
Hadoop
深度学习开源分布式框架
deeplearning4j
eureka 和zookeeper 区别 优势
作为服务注册中心,Eureka比Zookeeper好在哪里著名的CAP理论指出,一个
分布式
系统不可能同时满足C(一致性)、A(可用性)和P(分区容错性)。
音乐与咖啡Bean
·
2024-02-02 18:43
亚信安慧AntDB:
分布式
数据库的崛起与挑战
亚信安慧AntDB是国产的
分布式
数据库,它具备快速发展的潜力。随着互联网技术的迅猛发展,大数据时代的到来,数据库的需求不断增长。
亚信安慧AntDB数据库
·
2024-02-02 18:03
分布式
数据库
antdb
antdb数据库
技术革新与市场需求:探索亚信安慧AntDB的发展之路
AntDB采用
分布式
架构设计,可以根据业务需求灵活增减节点数量,实现无缝扩容升级,从而满足企业在不同发展阶段的数据管理需求。这种平滑扩展的特性,为企业节省了大量的时间和资
亚信安慧AntDB数据库
·
2024-02-02 18:03
antdb数据库
数据库
antdb
亚信安慧的AntDB数据库:稳定可靠的保障
作为一种高效可靠的数据库解决方案,AntDB引入了先进的
分布式
技术和优化算法,使得运营商能够拥有更稳定、更可靠的数据存储和处理能力。
亚信安慧AntDB数据库
·
2024-02-02 18:03
数据库
亚信安慧AntDB探索数据库更多可能
AntDB数据库架构通过引入创新的
分布式
体系结构,充分利用集群资源,实现数据的高效分布和快速存取。同时,它还具备强大的容错能力和灵活的扩展性,可以根据业务需求进行按需配置和动态调整。
亚信安慧AntDB数据库
·
2024-02-02 18:00
数据库
Linus 在 2007 年 Google Talk 上介绍 Git
可靠高性能
分布式
内容管理Git之前有很多版本控制软件,但都存在一些问题,尤其
一只大鸽子
·
2024-02-02 18:21
分布式
系统(DS) -- 详解
本文不涉及…1.为什么会有
分布式
系统(distributedsystem,ds)参考链接–漫谈大数据1.1了解传统系统1.1.1了解计算
分布式
化刚开始面临一个词法分析的需求,把一个几十K的文件解析下,然后生成一个词频分析的报告
LtMamba
·
2024-02-02 18:23
#
ds
分布式
分布式
文件系统(DFS)-- 详解
1.了解
分布式
文件系统1.1了解什么是
分布式
文件系统
分布式
文件系统(DistributedFileSystem,DFS)是一种计算机文件系统,它将网络上不同计算机的文件系统集成在一起,使得用户就像在自己的本地机器上一样访问和操作文件
LtMamba
·
2024-02-02 18:23
#
ds
分布式
fastdfs --详解
1.为什么会存在fastdfs参考链接–了解为什么有
分布式
参考链接–
分布式
文件系统详解FastDFS是一个开源的轻量级
分布式
文件系统,主要解决了海量数据存储问题,特别适合以中小文件(建议范围:4KB[storageserverlist
LtMamba
·
2024-02-02 18:18
#
C
#
linux
dfs
Git 指令
Git安装·操作·命令行简介:Git是一个开源的
分布式
版本控制系统,用于敏捷高效地处理任何或小或大的项目。
花追雨
·
2024-02-02 18:11
指令
git
ETCD数据库入门小案例
一、ETCD介绍etcd一个高可用、强一致性的服务发现存储仓库,它是一个高可用,高度一致的
分布式
键值存储的Key/Value存储系统,内部采用raft协议作为一致性算法。
福海鑫森
·
2024-02-02 18:06
肖邦
etcd
TiDB 简介
TiDB简介|PingCAPDocsTiDB是PingCAP公司自主设计、研发的开源
分布式
关系型数据库,是一款同时支持在线事务处理与在线分析处理(HybridTransactionalandAnalyticalProcessing
福海鑫森
·
2024-02-02 18:06
数据库
oracle
application
database
testing
user
脚本
SpringBoot使用Kafka详解含完整代码
1.前言随着大数据和实时处理需求的增长,Kafka作为一种
分布式
流处理平台,与SpringBoot的集成变得尤为重要。
孤蓬&听雨
·
2024-02-02 18:27
知识库
spring
boot
kafka
MQ
消息队列
An End-to-End Learning-Based Metadata Management Approach for Distributed File Systems——论文阅读
)”局部保持哈希“MultipleSubsetSumProblem(MSSP).”多子集和问题“polynomial-timeapproximationscheme(PTAS)”多项式时间近似方法背景
分布式
元数据的挑战目前的
妙BOOK言
·
2024-02-02 18:57
论文阅读
论文阅读
分布式
CJFS: Concurrent Journaling for Better Scalability——论文泛读
FAST2023Paper
分布式
元数据论文汇总问题和挑战重量级的EXT4可扩展性较差,由于日志存在两个限制:日志提交是一个严格的串行活动;日志提交使用原始页缓存条目,而不是其副本,随后任何对正在进行的页缓存条目的访问都将被阻塞
妙BOOK言
·
2024-02-02 18:57
论文阅读
论文阅读
文件系统
ConfD: Analyzing Configuration Dependencies of File Systems for Fun and Profit——论文泛读
FAST2023Paper
分布式
元数据论文汇总问题文件系统在管理数据方面发挥着至关重要的作用。为了满足不同的需求,它们通常支持许多配置参数,例如EXT4有85个参数。
妙BOOK言
·
2024-02-02 18:57
论文阅读
论文阅读
文件系统
BetrFS: A Compleat File System for Commodity SSDs——论文阅读
EuroSys2022Paper
分布式
元数据论文汇总问题在不同的工作负载下,没有单一的Linux文件系统在普通SSD上始终表现良好。
妙BOOK言
·
2024-02-02 18:27
论文阅读
论文阅读
文件系统
BetrFS
Chipmunk: Investigating Crash-Consistency in Persistent-Memory File Systems——论文泛读
EuroSys2023Paper
分布式
元数据论文汇总问题检测PM文件系统关于崩溃一致性的潜在bug。
妙BOOK言
·
2024-02-02 18:27
论文阅读
论文阅读
文件系统
分布式
元数据论文,阅读笔记(持续更新)
元数据优化论文阅读GUFI:Fast,SecureFileSystemMetadataSearchforBothPrivilegedandUnprivilegedUsersSC2022Paper论文笔记针对元数据查询的优化,通过构建外部元数据索引来加速元数据查询的性能。作者提出以下优化点:将各个底层文件系统的所有元数据汇总,构建统一的基于嵌入式数据库的新索引;在索引中添加多个表便于快速的数据库查询
妙BOOK言
·
2024-02-02 18:56
论文阅读
论文阅读
元数据
分布式
文件系统
TiDedup: A New Distributed Deduplication Architecture for Ceph——论文泛读
ATC2023Paper
分布式
元数据论文汇总问题Ceph是一个广泛部署的
分布式
存储系统,Ceph中的集群级去重设计,由于一些缺点难以在生产环境中使用:(1)去重唯一数据会导致过多的元数据消耗;(2)串行层次化机制对前台
妙BOOK言
·
2024-02-02 18:26
论文阅读
论文阅读
ceph
重复数据删除
linux下安装flink 1.18
一、flink介绍Flink是为
分布式
、高性能、随时可用以及准确的流处理应用程序打造的开源流处理框架二、flink下载flink下载三、flink配置3.1、配置环境变量exportJAVA_HOME=
爱上雪茄
·
2024-02-02 17:46
JAVA知识
大数据
linux
flink
hdfs
JavaSE基础知识总结(上)
作为一名程序设计人员,常常希望能够有一种语言,它具有令人赏心悦目的语法和利于理解的语义Java白皮书关键术语简单性面向对象
分布式
健壮性安全性体系结构中立可移植性解释型高性能多线程动态性1、使用命令行工具编译
北纬40度~
·
2024-02-02 17:13
笔记
java
程序设计
上一页
35
36
37
38
39
40
41
42
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他