50070

Hadoop、Hive、Hbase集群间的数据迁移

hadoop集群间拷贝数据：迁移之前需要把两个集群的所有节点都互通/etc/hosts文件（重要，包括各个数据节点）两个集群版本不相同hadoopdistcphftp://192.168.57.73:50070
这个操蛋的人生！！！·2025-01-25 07:18

Hadoop生态漏洞修复记录

Hadoop常用端口介绍HDFSNameNode50070dfs.namenode.http-addresshttp服务的端口50470dfs.namenode.https-addresshttps服务的端口
不会吐丝的蜘蛛侠。·2024-02-08 08:30

hadoop 50070 无法访问问题解决汇总

遇到这个其实不难解决！解决办法1：[root@djt002hadoop]#vi/etc/selinux/config改为：SELINUX=disabled解决办法2：查看你的$HADOOP_HOME/etc/hadoop下的core-site.xml和hdfs-site.xml是否配置好解决办法3：必须在hadoop-env.sh文件中设置Java的绝对路径解决办法4：是否关闭linux系统的防火
無法複制·2024-02-03 08:13

搭建大数据平台常用的端口号

50070：HDFSwebUI的端口号8485:journalnode默认的端口号9000：非高可用访问数rpc端口8020：高可用访问数据rpc8088：yarn的webUI的端口号8080：master
修勾勾L·2024-01-27 13:51

HIve项目入门 环境部署遇到的问题及解决方案

参考以下几个安装教程：【主要参考：傻瓜式教程】Windows下安装HiveMySQL版【附安装Hadoop教程】全网最详细的图文教程【有一些补充的内容】：Windows下安装Hive遇到的几个问题（一）端口50070
Manchesterr·2024-01-16 09:47

抓取namenode 50070 jmx的指标信息

在生产实践过程中，需要把data退役之后需要停机下线，在下线之前需要确认机器是否已下线完成，要去namenode的50070界面上查看显然效率低，为了能够快速拿到节点信息，写了简单的脚本。
运维仙人·2024-01-04 07:00

Python使用hdfs存放文件时报Proxy error: 502 Server dropped connection解决方案

Python3使用hdfs分布式文件储存系统frompyhdfsimport*client=HdfsClient(hosts="testhdfs.org,50070",user_name="web_crawler
Python之战·2024-01-01 05:11

Hadoop基础操作（学习笔记二）

本笔记按照以下四步进行：1、查看hadoop集群的基本信息http://master:50070/HDFS监控服务http://master:8088/cluster/nodes集群的计算资源信息http
Mecury_·2023-12-26 10:32

【hadoop】解决浏览器不能访问Hadoop的50070、8088等端口？！

【hadoop】解决浏览器不能访问Hadoop的50070、8088等端口？！前言【hadoop】解决浏览器不能访问Hadoop的50070、8088等端口？！
博客小梦·2023-12-22 15:09

Hdfs java API

1.在主机上启动hadoopsbin/start-all.sh这里有一个小窍门，可以在本机上打开8088端口查看三台机器的连接状态，以及可以打开50070端口，查看hdfs文件状况。
printcsr·2023-12-16 12:21

Hadoop在mac上的安装与配置

安装指导，指导里面把java换成8：https://medium.com/beeranddiapers/installing-hadoop-on-mac-a9a3649dbc4d验证hdfs的地址不再是50070
大红豆小薏米·2023-12-15 20:45

hadoop的几个接口

8088接口：MapReduce50070接口：HDFS19888接口：jobhistoryseverjob历史服务器端口9000：namenode50090：secondarynamenode
Stephen6Yang·2023-12-02 04:03

hadoop常用的端口号

dfs.namenode.http-address（namenodehttp端口）:50070dfs.datanode.http-address（datanodehttp端口）:50075SecondaryNamenode
星空下的那个人影·2023-11-22 09:42

Hadoop常用端口号及配置文件

对用户的查询端口：9870Yarn查看任务的运行情况：8088历史服务器：90080Hadoop2.xHDFSNameNode内部通常端口号：8020/9000HDFSNameNode对用户的查询端口：50070Yarn
LydiaaLi·2023-11-22 09:09

hadoop常用端口号与配置文件

9820HDFSNameNode对用户的查询端口：9870Yarn查看任务运行情况：8088历史服务器：19888hadoop2.xHDFSNameNode内部通常端口：8020/9000HDFSNameNode对用户的查询端口：50070Yarn
UserOrz·2023-11-22 09:39

Hadoop 3.X 和 2.X 的常用端口号和配置文件

9870HDFSDataNodeHTTPUI：9864Yarn查看任务执行端口：8088历史服务器通信端口：19888Hadoop2.XHDFSNameNode内部通信端口：8020/9000HDFSNameNodeHTTPUI：50070HDFSData
hmyqwe·2023-11-22 09:38

Hadoop常用端口号和配置文件

Hadoop常用端口号dfs.namenode.http-address:50070dfs.datanode.http-address:50075SecondaryNameNode辅助名称节点端口号
cipay666·2023-11-22 09:37

hadoop——常用端口号——常用的配置文件,3.x与2.x区别

9820HDFSNameNode对用户的查询端口：9870Yarn查看任务运行情况：8088历史服务器：19888hadoop2.xHDFSNameNode内部通常端口：8020/9000HDFSNameNode对用户的查询端口：50070Yarn
小魏___·2023-11-22 09:37

Hadoop学习-常用端口和配置文件

9820HDFSNameNode对用户的查询端口：9870Yarn查看任务运行情况：8088历史服务器：19888hadoop2.xHDFSNameNode内部通常端口：8020/9000HDFSNameNode对用户的查询端口：50070Yarn
HaveAGoodDay.·2023-11-22 09:34

hadoop 常用端口号，常用配置文件都有哪些？hadoop3.x端口号 hadoop(十二)

9870yarn查看历史任务运行情况8088历史服务器198882.hadoop2.x系列常用端口号：类型desc端口hdfsNameNode内部通常端口8020/9000hdfsNameNode对用户的查询端口50070yarn
不努力就种地~·2023-11-22 09:34

hdfs集群启动的常见问题

hdfs集群启动的常见问题1、用浏览器访问namenode的50070端口，不正常，需要诊断问题出在哪里：a、在服务器的终端命令行使用jps查看相关进程观察节点是否存活b、如果已经知道了启动失败的服务进程
一溪云~·2023-11-20 12:27

HADOOP学习_grep和wordcount的例子

两个小例子目录操作文件操作追加文件目录操作首先检查一下自己的hdfs是不是有/user路径http://localhost:50070/explorer.html#/没有就新建一个mac@kkkMachadoop
kkkAloha·2023-11-14 23:16

vulhub之 Hadoop-yarn-未授权访问漏洞复现

0x01漏洞简述Hadoop是一个由Apache基金会所开发的分布式系统基础架构，由于服务器直接在开放了Hadoop机器HDFS的50070web端口及部分默认服务端口，黑客可以通过命令行操作多个目录下的数据
冰羽呐·2023-11-11 17:28

hadoop、jboss未授权访问漏洞复现与未授权访问漏洞学习（内含服务器与中间件的区别）

hadoop:Hadoop是一个由Apache基金会所开发的分布式系统基础架构，Hadoop默认开放了很多端口来提供WebUI服务，由于服务器直接在开放了Hadoop机器HDFS的50070web端口及部分默认服务端口
不想当脚本小子的脚本小子·2023-11-11 17:28

MapReduce开发笔记(使用Eclipse编写执行Hadoop)

这里我们直接在浏览器打开：http://192.168.2.144:50070，如果能访问到HDFS的Web端界面，就可以了。
眼君·2023-11-05 20:08

两个重要的端口号

http://ip:50070——Windows进入hdfs的端口号，ip为启动的机器iphttp://ip:8088——Windows进入yarn的端口号，ip为启动的机器ip
怀夕·2023-10-30 14:41

windows 配置kerberos访问启用spnego的CDH 集群web UI页面

一问题描述CDH集群启用HTTPWeb控制台的Kerberos身份验证后，FireFox下HTTP访问HDFS、Yarn、Hive、HBase等Hadoop服务的WebUI(如Namenode的50070
weixin_34038652·2023-10-20 08:18

Windows 配置kerberos访问并启动访问CDH 集群web UI页面

1、问题描述：CDH集群启用HTTPWeb控制台的Kerberos身份验证后，FireFox下HTTP访问HDFS、Yarn、Hive、HBase等Hadoop服务的WebUI(如Namenode的50070
大大大大大大太阳·2023-10-20 08:14

Apache Doris 02|导入数据遇到的问题

1、brokerload数据导入失败loadlabelexample_db.stuscore(datainfile("hdfs://devtest4.com:50070/tmp/testdata/stuscore.txt
爱吃鱼的荔果果·2023-10-20 00:55

解决：hadoop无法访问50070端口

前置整个环境下JDK正常，hadoop配置文件正常，各个守护进程正常启动，防火墙已关闭，但是启动后无法从浏览器中访问50070。
燕山北·2023-10-07 23:09

完全分布式之hive安装

上次hadoop部署完毕并成功启动之后，发现通过ip地址及50070端口不能成功访问：解决方式：云服务器：在控制台-防火墙添加相关端口本地集群：关闭防火墙，并关闭开机自启。
付晓聪·2023-10-06 10:46

CentOS7 中常用命令

1、开放端口开放50070端口firewall-cmd--zone=public--add-port=50070/tcp--permanent关闭50070端口firewall-cmd--zone=public
与李_han·2023-09-22 22:25

hadoop

一、安装单机（用来测试）dockerrun-i-t-p50070:50070-p9000:9000-p8088:8088-p8040:8040-p8042:8042-p49707:49707-p50010
摆烂z·2023-09-14 06:35

HDFS 集群启动 管理界面缺少 DataNode 节点的解决方法

HDFS集群搭建并启动成功，1个NameNode节点和2个DataNode节点也运行正常，可以在各自的虚拟机中用jps命令查看正在运行的Java进程，但是通过http://master:50070/dfshealth.html
da2869237372·2023-09-07 00:51

二. hadoop环境搭建

hdfsnamenode-format启动HDFSsbin/start-dfs.sh验证是否启动成功jpsjpsDataNodeSecondaryNameNodeNameNode浏览器http://localhost:50070
yanghx·2023-08-27 18:39

HDFS部分：8020端口，9000端口和50070端口号，50090,9083,2181，6379的区别

8020端口：在cd/opt/sxt/hadoop-2.6.5/etc/hadoop/coresite.xml下的配置：dfs.namenode.rpc-address.mycluster.nn1node01:80208020是namenode节点active状态下的端口号；9000端口：是fileSystem默认的端口号：在cd/opt/sxt/hadoop-2.6.5/etc/hadoop/c
Mrshao_4308·2023-08-23 21:03

有道云笔记bug整理hadoop集群启动但不能访问50070

这是前年搭建集群遇到的问题，特此在输出，以便于自己这种错误要长记住搭建Hadoop伪集群时，HDFS文件系统成功格式化，节点启动了，jps也有显示，但http://IP:50070就是访问不了。
纯野生程序员·2023-08-23 00:10

hadoop 无法访问hdfs(50070,8088)的web界面

启动集群成功后，[[email protected]]#sbin/yarn-daemon.shstartresourcemanagerstartingresourcemanager,loggingto/opt/hadoop/module/hadoop-2.7.2/logs/yarn-MissZhou-resourcemanager-localhost.localdomain.ou
江湖侠客·2023-08-19 00:54

基于阿里云服务器搭建CDH之后Hadoop50070页面访问不了

在CDH5.12搭建完成之后NameNode的WebUI50070访问不了。遇到这个其实不难解决！首先一定确保hadoop搭建无误。
李指导、·2023-08-11 06:19

Kerberos＋HDP客户端部署与配置

背景说明：在Ambari平台上启用Kerberos之后，一些服务的WebUI如：Namenode:50070、YarnWebUI、sparkhistoryUI等快速链接大部分都是需要Kerberos认证才可以继续使用的
那年夏天110·2023-08-08 13:24

HDFS的操作及高级特性笔记

1、讲解Hadoop三种操作方式1）、通过WebConsole:50070、500902）、命令行（1）操作命令hdfsdfs*****-mkdir创建目录举例：hdfsdfs-mkdir/aaahdfsdfs-mkdir-p
若兰幽竹·2023-08-05 08:36

打开hadoop的网页web端

先启动集群start-dfs.shjps测试一下是否启动方法一：输入虚拟机ip：50070方法二：输入设置好的名称：50070
Link_999·2023-08-04 01:29

hdfs文件系统的健康检查以及修复数据块

:从根目录检查每个文件的数据块是否损坏、丢失[hadoop@ruozedata001sbin]$hdfsfsck/Connectingtonamenodeviahttp://ruozedata002:50070
墨卿风竹·2023-07-26 02:29

HDFS查看文件的两种方式

文件小：下载下来看可以文件大：最好终端在线观看1.localhost：50070图形化界面离线查看可以查看hdfs文件目录的结构，副本数，block大小，文件的大小，但是不能查看文件的内容，要是查看文件的内容的话
苏格拉没底——·2023-07-26 00:06

常用端口汇总

常见端口汇总：Hadoop：50070：HDFSWEBUI端口8020：高可用的HDFSRPC端口9000：非高可用的HDFSRPC端口8088：Yarn的WEBUI接口8485：JournalNode
一枚柚耳·2023-07-16 07:03

CDH常用端口汇总

Hadoop：50070：HDFSWEBUI端口8020：高可用的HDFSRPC端口9000：非高可用的HDFSRPC端口8088：Yarn的WEBUI接口8485：JournalNode的RPC端口8019
AlexYao·2023-06-24 04:56

Spark本地/集群执行wordcount程序

maven项目将打包后的jar包上传到机器编写spark-submit脚本执行脚本，提交spark应用到集群执行hadoopfs-putspark.txt/spark.txthttp://spark1:50070
FantJ·2023-06-22 14:47

再见以前说再见 大数据计算框架复习

web方式查看hdfs目录结构的地址是：http://主机名:50070.linux下存放公钥信息的是id_rsa.pub文件，放在.ssh目录下.下列可以实现定时任务调度的包括：Crontab、Oozie
亖嘁·2023-06-22 12:02

datanode启动后,在web50070端口发现不到datanode节点(能力工场)

直接上问题:这两天为了试验,安装了两套集群:(1)32位hadoop1集群(5个节点);(2)64位hadoop2集群(6个节点)两个集群中都遇到过这样的问题:在namenode正常启动hadoop集群后,查看datanode是正常的显示存在进程,但是在web界面中查看的时候,发现数据节点全部属于宕机,或者就是干脆直接没有datanode.还有种情况,datanode启动后,jps查看是在的,但是
能力工场小马哥·2023-06-20 09:37

基于小米球（Ngrok）实现内网穿透

获取免费的Token2.在后台首页下载对应版本客户端3.将下载的压缩文件解压后将以下两个文件上传到服务器上三、修改ngrok.conf配置属性名解释协议类型auth_token换成注册从后获取的Token50070
njpkhuan·2023-06-20 07:10
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他