E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
hdfs扩容
高级java每日一道面试题-2024年8月28日-基础篇-ArrayList的底层工作原理?
下面是ArrayList的底层工作原理的详细解释,包括其实现细节、
扩容
机制、线程安全性和性能特点等方面。1.数据结构ArrayList内部使用了一个Object类型的数组(Object[]e
java我跟你拼了
·
2024-08-29 10:17
java每日一道面试题
java
spring
ArrayList
数据结构
基础篇
ConcurrentHashMap
扩容
原理 | 存储流程 | 源码探究
本篇文章将从源码的层面,探讨ConcurrentHashMap的存储流程以及
扩容
原理Java版本为JDK17,源代码可能与其他版本略有不同推荐阅读:HashMap实现原理、
扩容
机制一、构造函数1.1无参构造函数
VsunGoK
·
2024-08-29 10:47
java
源码探究
java
算法
Hdfs
的机架感知与副本放置策略
1.介绍Apachehadoop机架感知Hadoop分布式文件系统(
Hdfs
)作为ApacheHadoop生态系统的的核心组件之一,通过机架感知和副本放置策略来优化数据的可靠性,可用和性能.
Hdfs
的机架感知和副本放置策略是其设计的关键组成部分
sheansavage
·
2024-08-29 01:42
hdfs
hadoop
大数据
使用C++手动封装一个顺序表,包含成员数组一个,成员变量N个
实现顺序表的判空,判满,添加数据,求实际长度,任意位置的插入/删除,访问数组中的任意一个元素,以及让顺序表自动
扩容
。
睡觉然后上课
·
2024-08-28 21:16
QT
C++
c++
开发语言
Hive 分区表 & 数据加载
1.Hive表数据的导入方式1.1本地上传至
hdfs
命令:
hdfs
dfs-put[文件名][
hdfs
绝对路径]例如:测试文件test_001.txt内容如下在
hdfs
绝对路径:/user/hive/warehouse
Wu_Candy
·
2024-08-28 18:22
大数据测试
hive
hadoop
hdfs
今日读书:《考试脑科学》
如果想要让自己更聪明,懂得更多,记住很多似乎是无法逾越的第一步,遗憾的是,我们的脑容量无法
扩容
,也不擅长记忆,那我们应该怎么做呢?
我是秀一
·
2024-08-28 15:11
SparkStreaming 如何保证消费Kafka的数据不丢失不重复
(1)一个Receiver效率低,需要开启多个线程,手动合并数据再进行处理,并且Receiver方式为确保零数据丢失,需要开启WAL(预写日志)保证数据安全,这将同步保存所有收到的Kafka数据到
HDFS
K. Bob
·
2024-08-28 10:02
Spark
Spark
Kubernetes自动
扩容
:Horizontal Pod Autoscaler (HPA)
@[TOC](Kubernetes自动
扩容
:HorizontalPodAutoscaler(HPA))TheBegin点点关注,收藏不迷路在Kubernetes中,随着业务量的变化,我们可能需要增加或减少
Seal^_^
·
2024-08-28 08:54
【云原生】容器化与编排技术
持续集成
#
Kubernetes
kubernetes
容器
云原生
面试
容器集群管理
HPA
Pod的数量管理
oracle收缩表空间
1、发现一个表空间aaa使用率已达到93%,急需
扩容
,但asm磁盘组空间同样不足,只剩下不到100G,磁盘组
扩容
需要存储工程师配合,存储工程师未在现场,不具备
扩容
条件。
deadknight9
·
2024-08-27 21:07
Oracle
运维
oracle
数据库
sql
flink&paimon开发之一:创建catalog
开发环境IDEAFlink1.17.1Paimon0.5正式本地或
HDFS
存储参考链接paimonjavaAPIhttps://paimon.apache.org/docs/master/api/flink-api
leichangqing
·
2024-08-27 16:10
flink
大数据
paimon
Hive 数据迁移与备份
迁移类型同时迁移表及其数据(使用import和export)分步迁移表和数据迁移表(showcreatetable)迁移数据关联表和数据(msckrepair)迁移步骤将表和数据从Hive导出到
HDFS
linzeyu
·
2024-08-27 13:17
Hive
hive
big
data
hadoop
Java 中 HashMap 的
扩容
机制是怎样的?
当存储的元素数量增加时,为了保持较好的性能,HashMap需要进行
扩容
。HashMap的
扩容
机制是为了减少哈希碰撞,提高查询效率。
这孩子叫逆
·
2024-08-27 05:55
面试题java集合
哈希算法
算法
STL 容器和适配器的特性简介
底层数据结构为一个中央控制器和多个缓冲区,详细见STL源码剖析P146,支持首尾(中间不能)快速增删,也支持随机访问stack底层一般用23实现,封闭头部即可,不用vector的原因应该是容量大小有限制,
扩容
耗时
小菜鸡的蜕变之路
·
2024-08-27 04:24
STL读书笔记
C++学习笔记
doris跨
hdfs
集群迁移数据
官网-数据备份步骤一,在dorisA集群执行:CREATEREPOSITORY`repotestall`WITHBROKER`broker_name`ONLOCATION"
hdfs
://xx.xx.xx.xx
州周
·
2024-08-27 00:27
hdfs
hadoop
大数据
【初阶数据结构】顺序表与链表的比较(附题)
目录一、顺序表和链表的区别(其他链表存在缺陷,比较意义不大,这里用带头双向循环链表与顺序表进行比较)1.1插入、
扩容
与随机访问二、缓存利用率的比较2.1前置知识详解及补充知识(本文仅为比较顺序表及链表,
ZLRRLZ
·
2024-08-26 22:21
数据结构
链表
开发语言
数据结构
c语言
Java笔试面试题AI答之集合(5)
1.底层实现2.性能3.线程安全4.
扩容
机制5.构造方法3
工程师老罗
·
2024-08-26 22:45
Java笔试面试题AI答
java
开发语言
Java重修笔记 第四十一天 ArrayList的
扩容
机制、ArrayList和Vector的区别
ArrayList集合的
扩容
机制1.ArrayList中维护了一个Object类型的数组elementData,其数据就存放在里面transientObject[]elementData;2.使用无参构造创建的
Super Minion
·
2024-08-26 17:31
java
笔记
开发语言
Java重修笔记 第四十二天 LinkedList 类、ArrayList 和 LinkedList 比较
的内部类Node对象)中有三个属性,prev指向前一个结点、next指向后一个结点、item存储元素的值,来实现双向链表4.双向链表只需要操作prev和next的指向就可以完成添加的删除操作,不存在数组
扩容
和数据前
Super Minion
·
2024-08-26 17:00
java
笔记
开发语言
zookeeper+KAFKA 集群搭建
因为Kafka集群是把状态信息保存在Zookeeper中的,并且Kafka的动态
扩容
是通过Zookeeper来实现的,所以需要优先搭建Zookeer
懵逼的运维弟弟
·
2024-08-26 16:28
Linux
zookeeper+KAFKA
集群搭建
“
扩容
”你的内在生命力
这个内在的生命力就像一个容器,每当我们跟随内心,遵从自己的意志,在现实世界中创造(达成)了一个在外之物(成就或目标),无论大小,都会拓宽这个内在的空间,也就是“
扩容
”。
宁静雪
·
2024-08-26 13:28
Hadoop入门基础(五):Hadoop 常用 Shell 命令一网打尽,提升你的大数据技能!
1.2启动和停止Hadoop集群start-dfs.shstart-yarn.shstop-dfs.shstop-yarn.shstart-dfs.sh和stop-dfs.sh分别用于启动和停止
HDFS
william.zhang(张)
·
2024-08-25 15:52
大数据
Hadoop
容器
大数据
hadoop
分布式
2022年靠信息差赚钱的项目——专做大众不知道的行业
原来,淘宝的工程师,当时在计算流量的时候,已经在2017年双十一的基础上,再
扩容
了3倍。结果,春晚一开始,就超了3倍。最后统计数据一看,最高的峰值竟然达到了双十一的15倍。
高省APP大九
·
2024-08-25 10:27
HDFS
的编程
一、
HDFS
原理
HDFS
(HadoopDistributedFileSystem)是hadoop生态系统的一个重要组成部分,是hadoop中的的存储组件,在整个Hadoop中的地位非同一般,是最基础的一部分
卍king卐然
·
2024-08-25 07:02
hdfs
hadoop
大数据安全
web安全
经验分享
Hadoop 的基本 shell 命令
Hadoop的基本shell命令主要用于与Hadoop分布式文件系统(
HDFS
)和MapReduce进行交互。
难以触及的高度
·
2024-08-24 14:22
hadoop
大数据
分布式
从零到一建设数据中台 - 关键技术汇总
一、数据中台关键技术汇总语言框架:Java、Maven、SpringBoot数据分布式采集:Flume、Sqoop、kettle数据分布式存储:Hadoop
HDFS
离线批处理计算:MapReduce、Spark
我码玄黄
·
2024-08-24 12:09
数据中台
数据挖掘
数据分析
大数据
ArrayList动态
扩容
机制(长度可变原理)
当数组添加满了后,会自动
扩容
为1.5倍。原理讲解:1.用空参构造函数创建ArrayList集合容器。
冷雪言
·
2024-08-24 04:43
Java
java
vmware 虚拟机磁盘
扩容
扩容
关闭虚拟机设置->硬盘->扩展,输入扩展后的磁盘大小使用fdisk工具p显示分区信息d删除分区n创建分区t修改分区id挂载该分区到文件系统扩展根目录由于已经有分区挂载在该目录下我们只要扩展这个分区的大小即可使用
kur0mi
·
2024-08-23 10:59
Java面试题-分布式
单体项目将不同服务进行拆分,拆分后的服务可以支持横向
扩容
,避免因为单台服务器问题影响整体项目。场景2:数据库拆分。数据库读写分离,分库分表等提升性能。
迷茫的21世纪的新轻年
·
2024-08-22 04:18
面试题
spring
分布式
java
大数据存储
曾经负责过一款底层存储系统的测试工作,最近看
hdfs
的文章发现,从架构上真心没啥特别大的区别。
龙哥vw
·
2024-08-22 02:32
docker swarm如何让两个副本分别跑在两台不同的主机上
虽然dockerswarm支持自动
扩容
部署,但是为了服务的稳定性、可靠性,有的时候甲方巴巴会要求一定要服务分散部署在不同的服务器上。
GaoJamie
·
2024-08-22 00:22
docker
docker
docker
swarm
服务器
扩容
时该如何选择合适大小的CPU和内存?
服务器
扩容
时,CPU和内存的搭配是一个重要的考虑因素,因为它直接影响到服务器的性能和资源利用率。
Jtti
·
2024-08-21 19:50
数据库
运维
Azkaban各种类型的Job编写
Linuxshell命令行任务gobblin:通用数据采集工具hadoopJava:运行hadoopMR任务java:原生java任务hive:支持执行hiveSQLpig:pig脚本任务spark:spark任务
hdfs
ToTeradata
__元昊__
·
2024-03-28 21:00
Linux(centos7)部署hive
前提环境:已部署完hadoop(
HDFS
、MapReduce、YARN)1、安装元数据服务MySQL切换root用户#更新密钥rpm--importhttps://repo.mysql.com/RPM-GPG-KEY-mysqL
灯下夜无眠
·
2024-03-28 12:44
Linux
linux
hive
运维
dbeaver
hive客户端
关于HDP的20道高级运维面试题
HDP(HortonworksDataPlatform)的主要组件包括Hadoop框架、
HDFS
、MapReduce、YARN以及Hadoop生态系统中的其他关键工具,如Spark、Flink、Hive
编织幻境的妖
·
2024-03-26 15:34
运维
云服务器 linux
扩容
后不生效问题
//查看磁盘信息fdisk-ldf-h//操作mount/dev/vda//文件系统类型是xfs执行下面xfs_growfs/dev/vda1//如果有必要就重启服务器init6
GoToDinner
·
2024-03-20 04:12
linux
服务器
运维
【笔记】
HDFS
基础笔记
启动hadoop命令(未配环境变量):进入hadoop安装目录输入./sbin/start-dfs.sh已配环境变量:start-dfs.sh关闭hadoop命令:stop-dfs.sh启动完成后,可以通过命令jps来判断是否成功启动,若成功启动则会列出如下进程:"NameNode"、"DataNode"和"SecondaryNameNode"三种Shell命令方式:1.hadoopfs2.had
哇咔咔哇咔
·
2024-03-20 04:12
Hadoop
hdfs
笔记
hadoop
大数据
ubuntu
了解比特币分叉:演变与分歧
文章目录一、分叉的定义1.1软件分叉1.2共识分叉二、货币分叉类型2.1软件分叉2.2Blackcoin三、共识分叉和
扩容
争论3.1比特币软分叉3.2
扩容
辩论和硬分叉提案3.31MB块限制的起源3.4早期对区块大小的不满
杰哥的技术杂货铺
·
2024-03-16 13:49
BlockChain
比特币
区块链
比特币
比特币分叉
web3
hive库表占用空间大小的命令
1、查每个hive表占用的空间大小
hdfs
dfs-du-h/user/hive/warehouse2、按占用空间大小降序排列
hdfs
dfs-du/user/hive/warehouse/ipms.db|
刀鋒偏冷
·
2024-03-15 13:13
hive
hadoop
数据仓库
redis的优缺点和为什么要用redis做缓存
Zset五种数据类型,满足多场景需求支持主从复制,实现读写分离,分担读的压力支持哨兵机制,实现自动故障转移缺点数据存储在内存,主机断电则数据丢失存储容量受到物理内存的限制,只能用于小数据量的高性能操作在线
扩容
比较困难
菜鸡的我想成为高手
·
2024-03-15 11:40
缓存
redis
AMEYA360 | 兆易创新推出GD32F5系列Cortex®-M33内核MCU
GD32F5系列高性能MCU具备显著
扩容
的存储空间、优异的处理能效和丰富的接口资源,该系列MCU符合系统级IEC61508SIL2功能安全标准,并且提供完整的软硬件安全方案
皇华ameya
·
2024-03-14 06:29
单片机
嵌入式硬件
HDFS
(一)
HDFS
简介及其基本概念
HDFS
(HadoopDistributedFileSystem)是hadoop生态系统的一个重要组成部分,是hadoop中的的存储组件,在整个Hadoop中的地位非同一般
weixin_51987187
·
2024-03-12 14:32
笔记
大数据
Oracle将归档日志从 ASM 拷贝到 Linux 文件系统中操作步骤
Oracle–将归档日志从ASM拷贝到Linux文件系统中操作步骤适用场景:备份出现问题,ASM中归档日志磁盘组空间不足,暂时无法
扩容
,数据库不可用。
冥净
·
2024-03-12 14:01
oracle
linux
数据库
大数据开发(Hadoop面试真题-卷二)
2、请解释一下
HDFS
架构中NameNode和DataNode之间是如何通信的?3、请解释一下Hadoop的工作原理及其组成部分?4、
HDFS
读写流程是什么样子?
Key-Key
·
2024-03-12 02:15
大数据
hadoop
面试
docker-swarm集群管理命令
我的需求场景:不想直接用docker或者java-jar直接跑,修改前是使用java-jar方式,这两种方式想要动态
扩容
和动态负载均衡在没有比较好的CI/CD工具的条件下还是比较麻烦的。
chenzfp
·
2024-03-09 12:39
Docker
docker
java
大数据开发(Hadoop面试真题-卷九)
2、既然HBase底层数据是存储在
HDFS
上,为什么不直接使用
HDFS
,而还要用HBase?3、Sparkmapjoin的实现原理?4、Spark的stage如何划分?
Key-Key
·
2024-03-09 10:06
大数据
hadoop
面试
大数据开源框架技术汇总
目录系统平台(Hadoop、CDH、HDP)监控管理(CM、Hue、Ambari、Dr.Elephant、Ganglia、Zabbix、Eagle)文件系统(
HDFS
、GPFS、Ceph、Gluster
浪尖聊大数据-浪尖
·
2024-03-08 20:48
数据仓库
hive
flume
分布式
scipy
makefile
crm
lighttpd
39
很意外的是樊星平时说句话都费劲谈单时候还挺专业他明显不太懂技术方面对于产品知识却非常了解盛赫咺使坏故意摆了他一道原本根据恒业的需求樊星提出三种配置祝谨言原本比较倾向最高配那种盛赫咺说暂时用不到以后如果有必要可以
扩容
对于熙凝来说即便是比较中庸的配法也已经是不少钱了最高的那种在樊星出方案时候她就没报什么希望她看小祝总和对方技术态度都差不多了就赶快趁热打铁
盛菸兒
·
2024-03-07 10:04
hbase、hive、clickhouse对比
概念架构hbasemaster存储元数据、regionServer实际控制表数据,存储单位是Region,底层数据存储使用
HDFS
hive通过driver将sql分解成mapreduce任务元数据需要单独存储到一个关系型数据库
freshrookie
·
2024-03-05 16:40
hbase
hive
hadoop
数据结构·顺序表实现通讯录
目录1基本格式2结构体的声明3初始化销毁
扩容
插入删除4增加联系人5查看通讯录6删除联系人7查找联系人8修改联系人9整体代码引言:有了前面顺序表的基础,我们可以尝试利用顺序表实现通讯录,日常使用中,通讯录可以实现的功能有增加联系人
XY.散人
·
2024-03-03 21:44
数据结构
c语言
【Hadoop】使用Metorikku框架读取hive数据统计分析写入mysql
一、定义作业文件作业文件该文件将包括输入源、输出目标和要执行的配置文件的位置,具体内容如下metrics:-/user/xrx/qdb.yaml#此位置为
hdfs
文件系统目录inputs:output:
方大刚233
·
2024-03-03 06:23
Hadoop
Scala
hadoop
hive
mysql
上一页
5
6
7
8
9
10
11
12
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他