hdfs扩容

Hadoop-HDFS高可用

一、说明在我的博客中已经包含了HDFS高可用的搭建，这里描述下它的原理。
隔着天花板看星星·2024-01-25 09:52

Hadoop-HDFS读流程（从输入命令到回显）

一、简单回顾下HDFS的架构如果不了解HDFS的可以看下我写的一篇博客，这里先贴下官网架构图：二、静静的思考一会儿爱因斯坦说过：想象力比知识更重要。想象力推动世界，是知识进化的源泉。
隔着天花板看星星·2024-01-25 09:52

HBase学习五：运维排障之备份与恢复

HBase的所有文件都存储在HDFS上，因此只要使用Hadoop提供的文件复制工具distcp将HBASE目录复制到同一HDFS或者其他HDFS的另一个目录中，就可以完成对源HBase集群的备份工作copyTable
Studying！！！·2024-01-25 09:49

VMWARE ubuntu18 虚拟机扩容后无法上网

1.Ubuntu18扩容后无法上网一个投机的方法//通过iplink命令找到网卡信息我们这里找到的是ens33lvi@ubuntu:~$iplink1:lo:2:ens33://2.主动链接执行sudodhclientens33lvi
lvi166·2024-01-25 09:45

淘宝购物车扩容与性能优化

为了应对用户规模的增加和交易活动的激增，淘宝购物车近年来进行了一系列技术升级，其中主要集中在扩容与性能优化上。本文将简要介绍这些改进措施，以及它们如何提升购物车的响应速度和用户体验，以实现“又快！
阿里巴巴淘系技术团队官网博客·2024-01-25 08:51

大数据平台组件日常运维操作说明（Hadoop/Zookeeper/Kafa/ES/Mysql/Spark/Flume/Logstash/Tomcat）

Hadoop日常运维操作说明hdfs生产环境hadoop为30台服务器组成的集群，统一安装配置，版本号为2.7.7部署路径：/opt/hadoop启动用户：hadoop配置文件：/opt/hadoop/
love6a6·2024-01-25 07:12

Hadoop HDFS 实现原理图文详解

一、HDFS体系结构1.1HDFS简介Hadoop分布式文件系统(HDFS)是运行在通用硬件(commodityhardware)上的分布式文件系统（DistributedFileSystem）。
禅与计算机程序设计艺术·2024-01-25 07:49

Linux-LVM逻磁盘管理

logicalvolume，LV）4.PE5.LE三、LVM常用命令四、物理卷PV管理五、卷组VG管理六、逻辑卷LV管理一、概述LVM是Linux下对磁盘分区进行管理的一种工具，适合管理大存储设备，并允许用户动态扩容文件系统
刘某的Cloud·2024-01-25 04:52

什么是渐进式rehash

阻塞态二、Redis中的做法redis的字典底层有2个数组还有一个字段rehashidx用来控制rehash(默认是-1)何时发生扩容元素的个数和数组长度一致的时候什么是扩容扩容就是把数组2号初始化一个
StevenHD·2024-01-25 02:00

源码分析：Redis hash和Java HashMap、ConcurrentHashMap区别

简述大家在开发工作中经常使用的key-value的数据结构，像Java中有HashMap，线程安全的ConcurrentHashMap，在Redis中hash结构更是最基础的；这里我们来分析一下它们的底层数据结构，包括如何扩容的
史啸天·2024-01-25 02:28

day08_数组进阶

今日内容零、复习昨日一、作业二、引用类型[重要]三、数组排序[面试|笔试]四、Arrays五、数组拷贝六、数组扩容零、复习昨日方法的参数列表是什么意思?怎么定义的?
沐沐霸·2024-01-24 22:41

HashMap的扩容过程

一：扩容条件在Java中，HashMap的扩容条件是基于当前HashMap容量（即内部数组的大小）和实际存储元素的数量。
见未见过的风景·2024-01-24 22:10

大数据小白初探HDFS架构原理：带你揭秘背后的真相（一）

目录1.前言2.HDFS架构2.1架构定义2.2揭秘架构2.3HDFS核心结构3.HDFS的优缺点3.1HDFS的优点3.2HDFS的缺点4.HDFS的应用场景5.总结1.前言前面的文章写了一篇，大数据方面的基础知识
程序员阿奇·2024-01-24 19:38

小白初探架构模式—常用的设计模式

2.4主从架构的示例3.主从架构设计的延伸3.1主备模式3.2主从复制3.3集群分片3.4异地多活4.总结1.前言作为一个架构设计小白，我们通常用了很多种工具，比如Mysql、Redis、Kafka、Hdfs
程序员阿奇·2024-01-24 19:03

MySQL集群架构（三）：分库分表

分库分表前言拆分方式垂直拆分垂直拆分优点垂直拆分缺点水平拆分水平拆分优点水平拆分缺点主键策略UUIDCOMB（UUID变种）SNOWFLAKE数据库ID表Redis生成ID分片分片概念分片策略基于范围分片哈希取模分片一致性哈希分片扩容方案停机扩容平滑扩容总结前言之前介绍了
一白丁·2024-01-24 18:09

OpenKruise ：Kubernetes背后的托底

一、诞生背景Kubernetes自身提供的应用部署管理功能，无法满足大规模应用场景的需求，例如应用发布时的原地升级策略，流式扩容，缩容顺序控制等等。
工业甲酰苯胺·2024-01-24 18:10

Java零基础学习19：集合

一、集合和数组的对比数组和集合很相似，但集合只能存储引用数据类型，而数组两者皆可，集合的长度可自动扩容，而数组则是固定长度packagewww.itheima;importjava.util.ArrayList
踏踏实实做人，勤勤恳恳做事·2024-01-24 16:45

eureka动态扩容_SpringCloud- 第二篇 Eureka快速上手

1Eureka是什么Eureka是SpringCloudNetflix的一个子模块，也是核心模块之一。Eureka是一个基于REST的服务，用于定位服务，以实现云端中间层服务发现和故障转移。服务注册与发现对于微服务架构来说是非常重要的，有了服务发现与注册，只需要使用服务的标识符，就可以访问到服务，而不需要修改服务调用的配置文件了。功能类似于dubbo的注册中心，比如Zookeeper。2基本概念R
滚菩提哦呢·2024-01-24 14:51

部署Hadoop集群

在node1节点执行，以root身份1：在VMware虚拟机集群上部署HDFS集群1）准备好hadoop安装包；目前最新3.3.4；了解：2）上传解压hadoop①：上传hadoop到node1节点；②
%HelloWorld%·2024-01-24 13:27

下只比肩丰乐种业的连板股已在路上

盘面出现了两个现象一是不少个股开始跌穿前期小平台开始二浪下跌，类似美锦能源这样的二是近期强势股开始补跌，跌停板在不断扩容不考虑外力的影响，就股市本身的运行规律而言，一个完整的调整周期至少包含三个波段
瞌睡虫短线·2024-01-24 13:43

C++&&数据结构——哈希表

unordered系列1.2unordered_set1.4unordered_map1.5性能对比二，哈希2.1哈希概念2.2常用哈希函数2.3哈希冲突及解决2.3.1闭散列2.3.2开散列2.4哈希表扩容
小堃学编程·2024-01-24 13:26

Mysql数据库主从复制和分库分表浅析

接下来，你将花费十分钟掌握以下三方面内容：1、MySQL复制：包括主从复制和主主复制；2、数据分片：数据分片的原理、分片的方案、分片数据库的扩容；3、数据库分布式部署的几种方案。一、My
一颗向上的草莓·2024-01-24 11:30

Hive 优化总结

Hive优化本质：HDFS+MapReduce问题原因：倾斜：分区：有的分区没有数据，有的分区数据堆积。(若按天分区，每一天数据差别大就叫倾斜。)
Byyyi耀·2024-01-24 10:25

IDEA报错：No hostname could be resolved for the IP address 127.0.0.1, using IP address as host name.

NohostnamecouldberesolvedfortheIPaddress127.0.0.1,usingIPaddressashostname.Localinputsplitassignment(suchasforHDFSfiles
唯一2333·2024-01-24 09:09

jdk1.8 HashMap

capacity、threshold和loadFactor之间的关系1、capacitytable的容量，默认容量是16；2、thresholdtable扩容的临界值，当table的size大于该值触发扩容
markdownpad·2024-01-24 08:36

hbase 总结

HBase什么是HBasehbase是一个基于java、开源、NoSql、非关系型、面向列的、构建与hadoop分布式文件系统（HDFS）上的、仿照谷歌的BigTable的论文开发的分布式数据库。
l靠近一点点l·2024-01-24 08:24

Hbase原理、基本概念、基本架构

概述HBase是一个构建在HDFS上的分布式列存储系统；HBase是基于GoogleBigTable模型开发的，典型的key/value系统；HBase是ApacheHadoop生态系统中的重要一员，主要用于海量结构化数据存储
wyl9527·2024-01-24 08:24

Hadoop集群（第12期)_HBase简介及安装

可以直接使用本地文件系统也可使用Hadoop的HDFS文件存储系统。为了提高数据
weixin_30451709·2024-01-24 08:23

HBase学习

可以直接使用本地文件系统也可使用Hadoop的HDFS文件存储系统。为了提高数据
mm_bit·2024-01-24 08:20

HBase简易安装和简介

可以直接使用本地文件系统也可使用Hadoop的HDFS文件存储系统。为了提高数据
滑过的板砖·2024-01-24 08:49

对于初中英语学习的一些建议

首先，整体学习以语、数、英三个主科为主：课时较充足，在安排上，允许老师细化性地进述；其次，除了前两年的口语学习外，从三年级开始的课本内容的主线，也是围绕日常生活知识的适当扩容，同时，通过
臻果小胖·2024-01-24 08:44

【K8S 云原生】K8S之HPA自动扩缩容、命名空间资源限制、容器抓包

目录一、HPA概述1、概念2、两个重要的组件：3、HPA的规则：4、pod的副本数扩容有两种方式：4.1、手动扩缩容，修改副本数：4.2、自动扩缩容HPA二、实验部署：1、部署HPA2、实现自动扩缩容三
koeda（粉丝冲刺一个亿）·2024-01-24 07:46

HBase学习五：运维排障之宕机恢复

RegionServer主要负责用户的读写服务，进程中包含很多缓存组件以及与HDFS交互的组件，实际生产线上往往会有非常大的压力，进而造成的软件层面故障会比较多。
Studying！！！·2024-01-24 07:27

记一次Flink通过Kafka写入MySQL的过程

->sink,即从source获取相应的数据来源，然后进行数据转换，将数据从比较乱的格式，转换成我们需要的格式，转换处理后，然后进行sink功能，也就是将数据写入的相应的数据库DB中或者写入Hive的HDFS
梦痕长情·2024-01-24 07:17

Hadoop中HBase命令行操作

采用的底层存储为HDFS。使用Hbase客户端操作，执行查看Hbase版本、状态、查看帮助命令。创建表、修改表、插入数据、删除数据、查询数据，清空表、退出Hbase命令行、停止HDFS服务。
m0_69595107·2024-01-24 06:05

磁盘管理LVM分区与扩容

本篇主要展示LVM动态磁盘分区的使用与扩容，重复的步奏只做了一遍，但也足够详细了。
楼空封存浮生·2024-01-24 04:21

SWAP分区的扩容与挂载

当某个时间内存不够用的时候，swap交换分区就很重要，本篇实现了swap交换分区的两种扩容方式，使用硬盘扩容和使用文件扩容。
楼空封存浮生·2024-01-24 04:21

Storm和hadoop对比及storm组件

stormhadoop实时流处理批处理无状态有状态使用zk协同的主从架构无主从zk架构每秒处理数万消息HDFS，MR数分钟，数小时不会主动停止终于完成的时候storm优点：跨语言，可伸缩，低延迟，秒级容错核心概念
smartjiang·2024-01-24 02:01

机械革命蛟龙16ubuntu双系统的移除与重装

介绍一下本人重装的一个初衷，首先系统更新内核导致cuda无法运行，其次原本的70g空间捉襟见肘，因此想要重装分配更多一些空间，若没有扩容的需求可以去找找系统自带的重装方法，应该会比我下面的流程快很多。
xiyanjoy·2024-01-24 00:25

C++中std::vector容器的入门讲解

目录创建和初始化插入和删除元素访问元素其他操作总结在C++中，std::vector是标准库中最常用的容器之一，它可以根据需要自动扩容，能够高效地插入、删除和访问元素。
码咔吧咔·2024-01-24 00:10

C++：迭代器失效问题

目录1.vector迭代器失效问题1.底层空间改变编辑2.指定位置元素的删除操作2.Linux下的迭代器失效检测1.扩容2.删除3.解决方法1.vector迭代器失效问题迭代器的主要作用就是让算法能够不用关心底层数据结构
Faiz..·2024-01-24 00:09

【Go语言】常用变量类型的创建

你可以使用append函数向空切片中添加元素，切片会根据需要自动扩容。使用make函数创建切片：s:=make([]int,0)这种方式使用make函数创建了一个初始长度为0的切片
小帅吖·2024-01-23 21:55

Ubuntu20 服务器版磁盘扩容

Ubuntu20服务器版磁盘扩容Ubuntu20服务器版磁盘不够用进可以使用fdisk命令对磁盘进行扩容本案例中是基于vmware虚拟化环境下，ubuntu服务器按默认磁盘大小16G进行安装后，运行一段时间后发面
老杜095·2024-01-23 21:41

Java集合的关注点

数据结构增删元素访问元素控制容量线程安全应用场景以ArrayList为例：数据结构：数组增删元素：以数组拷贝的形式插入及删除元素访问元素：根据数组下标访问或迭代控制容量：默认为10，一般扩容增加0.5倍线程安全
Cheava·2024-01-23 21:04

家政服务业迎来政策支持

7月5日，国新办举行《关于促进家政服务业提质扩容的意见》吹风会，国家发展改革委副主任连维良在会上表示，随着城乡居民收入水平不断提高，消费能力不断增强，加之新型城镇化、人口老龄化和全面二孩政策落实等多种因素的综合影响
湾区人才·2024-01-23 21:53

JeecgBoot集成TiDB，打造高效可靠的数据存储解决方案

公司自主设计、研发的开源分布式关系型数据库，同时支持在线事务处理与在线分析处理(HybridTransactionalandAnalyticalProcessing,HTAP)的融合型分布式数据库产品，具备水平扩容或者缩容
JEECG低代码平台·2024-01-23 20:54

进击的 Serverless：Java 应用如何从容地面对突增流量

尤其在大促或节日期间，难以预估具体需要的计算资源数量，同时不论水平还是垂直扩容，人工操作成本
阿里云云原生·2024-01-23 20:35

个人研修作业

当然，这对个人的知识储备也是一次扩容，能力也是以此提升，自己要重视这次机会。其次，对于
豫园草之页·2024-01-23 16:39

STL(标准模板库)容器

文章目录数组([])内置数组的遍历方法向量(vector)vector的定义和初始化：向向量中插入数据遍历向量的常见方法向量的扩容字符串(string)数组([])这里说的数组是，内置数组，即C/C++
scx_link·2024-01-23 13:47

全网最详细的linux逻辑卷制作教程

1、我们举个例子来说，比如我们我们在生产环境下有一块/dev/sdc的磁盘挂在了/date数据库目录下面，但是随着业务量的增加，我们需要对/date目录进行扩容，如果我们制作了逻辑卷这时候我么只需要在已有的基础上在把新盘做成卷组加入到逻辑卷组当中
耳边私语着·2024-01-23 12:38
上一页 11 12 13 14 15 16 17 18 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他