E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
分布式存储技术博客
Hadoop-HDFS角色工作机制
一、角色职责介绍 HadoopDistributedFileSystem(HDFS,分布式文件系统):HDFS是Hadoop应用程序使用
分布式存储
,HDFS集群主要由管理文件系统元数据的NameNode
H.S.T不想卷
·
2023-11-30 10:33
大数据
hadoop
hdfs
大数据
论
分布式存储
系统架构设计
摘要2019年6月,我所在的公司中标某集团全国保险大数据平台搭建项目,该项目周期为2年,总投资为5000万人民币,通过该项目,搭建该集团大数据建设项目,实现该集团所有业务以及用户行为数据入库并解析,为集团提供精准营销、挖掘潜在客户等提供业务支撑,帮助集团实现快速的业务增长。我有幸作为此次项目的负责人以及架构师参与了项目的搭建以及开发过程。该项目时间紧任务重、涉及人员组织多,直接相关集团保险公司内部
mischen520
·
2023-11-30 08:36
软考高级系统架构师
论文
分布式
hdfs
python简单绘图代码-python绘图代码
广告关闭2017年12月,云+社区对外发布,从最开始的
技术博客
到现在拥有多个社区产品。未来,我们一起乘风破浪,创造无限可能。
weixin_37988176
·
2023-11-30 06:06
redis-cluster集群
redis-cluster集群是redis3.0引入的
分布式存储
方案集群由多个noede节点组成,redis数据分布在节点之中在进群中也分主节点和从节点集群模式中,主从一一对应,数据写入和读取与主从模式一样
91888888
·
2023-11-30 05:52
redis
数据库
缓存
ELK日志分析系统
ELK是一套完整的日志集中处理方案,由三个开源的软件简称组成E【ElasticSearch(ES)】开源的
分布式存储
检索引擎。索引型的非关系型数据库。存储日志。Java代码开发。
91888888
·
2023-11-30 05:52
elk
Hadoop入门学习笔记-第三天(Yarn高可用集群配置及计算案例)
什么是mapreduce首先让我们来重温一下hadoop的四大组件:HDFS:
分布式存储
系统MapReduce:分布式计算系统YARN:hadoop的资源调度系统Common:以上三大组件的底层支撑组件
渣男程序员007
·
2023-11-30 05:13
Hadoop入门学习笔记
分布式
hadoop
大数据
spark
mapreduce
redis 集群
redis-cluster集群:redis3.0引入的
分布式存储
方案集群由多个node节点组成,redis数据是分布在这写节点之中。在集群之中分为主节点和从节点。
weixin_51694382
·
2023-11-30 00:28
redis
数据库
缓存
分布式存储
ceph视频教程
└─视频容器-III-Storage-02-1-ceph-basic.mp4容器-III-Storage-02-2-ceph-installation.mp4容器-III-Storage-02-3-ceph-installation.mp4容器-III-Storage-02-4-ceph-internal.mp4容器-III-Storage-02-5-ceph-crushmap.mp4容器-III
CodeistheLaw
·
2023-11-29 22:51
Structured Streaming: Apache Spark的流处理引擎
欢迎来到我们的
技术博客
!今天,我们要探讨的主题是ApacheSpark的一个核心组件——StructuredStreaming。
俺会hello我的
·
2023-11-29 21:07
spark的一些操作
linq
c#
spark
大数据之Hbase(心得)
(2)HBase是一个高可靠性、高性能、面向列、可伸缩(可扩展)的
分布式存储
系统,利用HBASE技术可在廉价PCServer上搭建起大规模结构化存储集群。
宝宝不哭^_^
·
2023-11-29 20:30
心得体会
Hbase
Hbase的一点个人总结
Hbase是一个高可靠性、高性能、面向列、可伸缩的
分布式存储
系统,利用Hbase技术可在廉价PCServer上搭建起大规模结构化存储集群。
vthinkwen
·
2023-11-29 15:33
大数据
hadoop
java
hadoop安装
简介Hadoop是一个开源的
分布式存储
和计算框架,最初由Apache软件基金会开发。
necessary653
·
2023-11-29 14:11
hadoop
大数据
分布式
Navicat忘记连接密码,查看数据库密码(JAVA版本、php版)
1、php版参考navicat如何查看已经连接了的数据库账号和密码_12992884的
技术博客
_51CTO博客2、java版参考Navicat如何查看已经连接了的数据库账号和密码|openssl|protected
飞的肖
·
2023-11-29 13:35
数据库
java
开发语言
php
Android系统分析
Android工程师进阶第八课AMS、WMS和PMS一、Binder通信二、Android应用启动流程分析android应用进程android进程启动流程_mob6454cc6acccd的
技术博客
_51CTO
lanxuan1993
·
2023-11-29 11:39
Adroid面试题
android
ELK企业级日志分析系统
2.ELK组件ElasticSearch是基于Lucene(一个全文检索引擎的架构)开发的
分布式存储
检索引擎,用来存储各类日志。
pupcarrot
·
2023-11-29 09:46
elk
Vsan数据恢复—Vsan
分布式存储
数据恢复案例
vSAN故障:一台存储采用了VSAN
分布式存储
架构,存储内共有24块硬盘存储数据。这台vSAN存储设备关机重启。
北亚数据恢复
·
2023-11-29 08:56
北亚数据恢复
数据恢复
服务器数据恢复
vsan数据恢复
redis之cluster集群
1、redis-cluster集群:redis3.0引入的
分布式存储
方案2、集群:由多个node节点组成,redis数据分布在这些节点之中(1)在集群之中也分主节点和从节点(2)自带哨兵模式3、redis-cluster
海德Hyde
·
2023-11-29 07:01
redis
数据库
缓存
时间空间复杂度
理解算法复杂度:优化你的代码欢迎来到我们今天的
技术博客
!在本篇文章中,我们将探讨算法复杂度分析的重要性,特别是时间复杂度和空间复杂度的概念。
俺会hello我的
·
2023-11-29 06:01
数据结构
算法
java
数据结构
分布式运用之ELK企业级日志分析系统
ElasticSearch:是基于Lucene(一个全文检索引擎的架构)开发的
分布式存储
检索引擎,用来存储各类日志。
Lachewuxian
·
2023-11-29 05:10
分布式
elk
搭建ELK-B日志收集
FileBeat,是一个轻量型的日志收集处理工具,FileBeat占用的资源少,适合在各个服务器上搜集日志后传输给Logstash;Elasticsearch简称ES,是一个基于Lucene的、支持全文索引的
分布式存储
和索引引擎
争不恣游狂荡
·
2023-11-29 05:08
ELK
elk
elasticsearch
搜索引擎
redis-cluster集群
redis-cluster集群redis3.0引入
分布式存储
方案集群是由多个node节点组成,redis的数据分布在这些节点当中。在集群当中也分为主节点和从节点。
Lad1129
·
2023-11-29 05:31
redis
数据库
缓存
elk日志分析系统
ELK的概论elk是一套完整的日志集中处理方案,有三个开源的软件简称组成:E:ElasticSearchES是一个开源的,
分布式存储
检索引擎(索引型的非关系型数据库),存储日志。
Lad1129
·
2023-11-29 05:31
elk
mvc判断是否ajax请求,springMvc实现拦截特定请求判断用户是否登录
注意静态资源的处理对于一个新闻站点来说除了评论功能其他请求都不用拦截所以试着给springmvc框架增加一个用户登录的拦截功能0基础需要明白登录拦截是怎么实现的由谁实现拦截在哪里配置用户的登录状态保存在哪里如何保证密码的安全通过学习大佬们的
技术博客
善良是多余的
·
2023-11-29 05:16
mvc判断是否ajax请求
Hibernate项目搭建
Hibernate作为一个全自动的持久层[ORM]框架,在项目中引入需要以下步骤更多精彩更多
技术博客
,请移步asing1elife'sblog基础步骤进入Hibernate官网下载Hibernate源码包解压源码包后进入下图中的目录
asing1elife
·
2023-11-29 04:09
分布式存储
系统Minio简介
区别于
分布式存储
系统,minio的特色在于简单、轻量级,对开发者友好,认为存储应该是一个开发问题而不是一个运维问题。Minio的相关操作Min
明算科
·
2023-11-28 22:16
运维
分布式
java
开发语言
minio
分布式存储
系统
目录拉取docker镜像minio所需要的依赖文件存放的位置手动上传文件到minio中工具类上传yml配置config类service类启动类测试类图片视频删除minio服务器的文件下载minio服务器的文件拉取docker镜像拉取稳定版本:dockerpullminio/minio:RELEASE.2021-06-17T00-10-46Z-28-gac7697426创建并运行容器:dockerr
春来我不先开口,哪个虫儿敢作声?
·
2023-11-28 22:45
java微服务
分布式
hive总结
当处理的数据量非常大时,单一的MySQL数据库无法满足需求,需要使用
分布式存储
和处理工具,如Hadoop和Hive。
墨苏玩电脑
·
2023-11-28 18:26
hive
hadoop
数据仓库
校招专场 | 这些热招职位尚有「余票」,快上车!
云和恩墨在数据承载(
分布式存储
、数据持续保护)、管理(数据库基础软件、数据库云管平台、数据技术服务)、加工(应用开发质量管控、数据模型管控、数字化转型咨询)和应用(数据服务化管理平台、数据智能分析处理、
云和恩墨
·
2023-11-28 16:03
zData X 数据库一体机V3震撼上新,一张图读懂五大新体验
云和恩墨在数据承载(
分布式存储
、数据持续保护)、管理(数据库基础软件、数据库云管平台、数据技术服务)、加工(应用开发质量管控、数据模型管控、数字化转型咨询)和应用(数据服务化管理平台、数据智能分析处理、
云和恩墨
·
2023-11-28 16:32
Web3.0 技术介绍:从区块链到人工智能
前言Web3.0技术是互联网发展的重要趋势之一,它将互联网从中心化向去中心化转变,使用区块链、智能合约、加密货币、
分布式存储
和人工智能等前沿技术,实现更加安全、可靠、自由、创新的互联网体验。
Ai_robots
·
2023-11-28 12:02
区块链
人工智能
web3
StarRocks企业级数据库
第1章StarRocks简介1.1StarRocks介绍StarRocks是新一代极速全场景MPP数据库StraRocks充分吸收关系型OLAP数据库和
分布式存储
系统在大数据时代的优秀研究成果,在业界实践的基础上
AllenGd
·
2023-11-28 11:30
StarRocks
数据库
我的创作纪念日
机缘不知不觉我已经创作了256天,从我撰写了第1篇
技术博客
:《JS和CSS的交互》在这平凡的一天,你赋予了它不平凡的意义。也许是立志成为一名专业IT作者、也许是记录一段刚实践的经验。
无法自律的人
·
2023-11-28 10:45
经验分享
python数据清理的实践总结_Python数据清洗实践
本文为AI研习社编译的
技术博客
,原标题:DATACLEANINGWITHPYTHON作者|BalogunOmobolaji翻译|酱番梨、祝弟弟基督教校对|Pita审核|约翰逊·李加薪整理|立鱼王原文链接
weixin_39621235
·
2023-11-28 07:26
python数据清理的实践总结
python开发之FastDFS
分布式存储
系统整合Nginx部署重写Django项目文件传输行为
目录FastDFS业务场景概述部署FastDFS整合FastDFS和NginxFastDFS与Python交互重写Django项目文件传输行为FastDFS业务场景概述基于C语言开发的FastDFS是一项开源轻量级分布式文件系统,主要用于海量数据存储,有方便的可拓展性,记录文件指纹防止重复文件上传占用容量,主要用于电商平台等文件数据量大的系统部署FastDFS第一步,安装FastDFS依赖包#下载
Pythonicc
·
2023-11-28 05:52
unix运维
WEB后端开发
分布式
nginx
linux
centos
python
ELK日志分析系统
ElasticSearch:是基于Lucene(一个全文检索引擎的架构)开发的
分布式存储
检索引擎,用来存储各类日志。
相遇蟹堡王,尽享蟹黄堡
·
2023-11-28 02:01
elk
送给程序员的10条精进建议
我看到的一篇美团工程师的工作总结,写的非常好,从工作意识、时间观念,做事风格,方法心态,以及思考方式,都讲的很到位,相信大家看过之后,会很有收获,这里分享给大家:以下是原文:来源:美团
技术博客
作者:云鹏
程序员的隐秘角落
·
2023-11-27 23:41
JVM:垃圾回收
在这篇
技术博客
中,我们将深入探讨JVM垃圾回收机制的工作原理,以及如何优化垃圾回收以提高Java应用程序的性能。目录什么是垃圾?如何定位垃圾?引用计数算法根可达算法常见垃圾回收算法分代分区新生代和老年
杏花烟雨湘兰
·
2023-11-27 19:34
JVM
jvm
java
算法
IPFS大咖谈(一)| 分布式系统模型及关键问题分析
2019年1月5日,
分布式存储
的创新与未来——首届亚太IPFS产业发展高峰论坛成功举办。作为一场产学研各界汇聚的行业交流盛会,现场多位嘉宾分享干货满满,获得与会者一致好评。
星际鑫航IPFS社区
·
2023-11-27 19:59
大型网站系统架构演化(Web)
大型网站系统架构演化大型网站系统架构演化需要关注的维度涉及的技术演进过程单体架构垂直架构使用缓存改善网站性能缓存与数据库的数据一致性问题缓存技术对比Redis
分布式存储
方案Redis集群切片的常见方式Redis
早餐加个蛋
·
2023-11-27 10:59
软考
系统架构
分布式存储
Ceph-octopus版本手动实践部署与运维管理
分布式存储
Ceph-octopus版本手动实践部署与运维管理1.基础环境配置2.获取并安装Ceph软件包2.1.获取Ceph软件包2.2.安装Ceph软件包3.ceph-mon(monitor)服务部署
降世神童
·
2023-11-27 10:46
云计算及虚拟化技术专栏
运维
分布式
ceph
分布式存储
ceph---ceph概念及原理(1)
一、Ceph简介:Ceph是一种为优秀的性能、可靠性和可扩展性而设计的统一的、分布式文件系统。ceph的统一体现在可以提供文件系统、块存储和对象存储,分布式体现在可以动态扩展。在国内一些公司的云环境中,通常会采用ceph作为openstack的唯一后端存储来提高数据转发效率。Ceph项目最早起源于Sage就读博士期间的工作(最早的成果于2004年发表),并随后贡献给开源社区。在经过了数年的发展之后
om林mo
·
2023-11-27 10:14
ceph
ceph
大数据中的HBase的选择题
A.爬虫持续不断地抓取新页面,这些页面每隔一段时间地存储到BigTable里B.BigTable是一个
分布式存储
系统C.BigTable起初用于解决典型的互联网搜索问题D.网络搜索应用查询建立好的索引,
不想做程序猿的员
·
2023-11-27 09:58
大数据
hbase
数据库
通过本质看现象:关于Integer受内部初始化赋值范围限制而出现的有趣现象
原创/朱季谦这是我当年的第一篇
技术博客
,作为一名技术小菜鸟,总体而言显得很拙见,但也算是成长路上的一个小脚印,希望能在以后的日子里,可以对JAVA技术有一个更加深入的思考与认识。
朱季谦
·
2023-11-27 06:01
Java
java
首页以卡片形式来展示区块链列表数据(Web3项目一实战之五)
我们已然在Web3
分布式存储
IPFS(Web3项目一实战之四)介绍了什么是IPFS,以及在本地电脑如何安装它。
甄齐才
·
2023-11-27 03:26
Web3项目实战
区块链
web3
react.js
next.js
跨域
cross
origin
dapp
写
技术博客
那点事
在IT行业内,
技术博客
是了解一个开发者最好的方式之一,特别是当你没有一张
森森deHOME
·
2023-11-27 01:52
redis集群
一、redis-cluster集群概述:redis3.0之后引入的
分布式存储
方案集群由多个node节点组成,redis的数据是分布在这些节点之中。
koeda1
·
2023-11-26 23:00
redis
redis
数据库
缓存
Redis面试题:1~2亿条数据需要缓存,请问如何设计这个存储案例
目录前言一、哈希取余分区优点缺点二、一致性哈希算法分区背景步骤①算法构建一致性哈希环②服务器IP节点映射③key落到服务器的落键规则优点①容错性②扩展性缺点三、哈希槽分区前言单机单台100%不可能,肯定是
分布式存储
zoeil
·
2023-11-26 20:33
docker
redis
redis
缓存
面试
分布式
java
项目十八-Hadoop+Hbase分布式集群架构“完全篇”
Hadoop框架工作的应用程序可以在跨计算机群集提供
分布式存储
和计算的环境
weixin_33724059
·
2023-11-26 19:52
大数据
java
开发工具
Hadoop+Hbase 分布式集群架构“完全篇”
Hadoop框架工作的应用程序可以在跨计算机群集提供
分布式存储
和计算的环境中工作。Hadoop旨在从单一服务器扩展到数千台机器,每台机器都提供本地计算和存储。
架构文摘
·
2023-11-26 19:22
分布式计算、云计算与大数据 第十章
分布式计算、云计算与大数据第十章云存储技术存储概述存储组网形态RAIDRAID0RAID1RAID3RAID5RAID6RAID10RAID50RAID级别比较热备与重构逻辑卷快照
分布式存储
分布式块存储分布式文件存储分布式对象存储分布式表存储云存储技术存储概述存储组网形态
铁灵龙QAQ
·
2023-11-26 15:03
上一页
7
8
9
10
11
12
13
14
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他