50070

hadoop的监控

网页抓取首先，想到的办法是抓取网页，通过抓取50030和50070页面获得监控的数据。不得不说，这个办法实在是太土了，不到万不得已真的不好意思用。
hagretd·2018-11-20 16:29

Docker端口映射不起作用的解决办法

执行命令：dockerrun-d-p50070:50070-p8088:8088--namehadoop1ubuntu:java但是发现命令可以正常执行，但端口映射就是不成功，PORTS一直为空，就像下图这样
Jacen_Chou·2018-11-19 22:05

Hadoop使用爬坑

https://www.cnblogs.com/iberichman/p/7119993.html1清除tmp目录下文件2清除logs目录下文件实在不得已，例如，50070怎么都连不上3格式
艾剪疏·2018-11-14 10:24

Hadoop小笔记

2642DataNode3386Jps2538NameNode2860JobTracker2769SecondaryNameNode2982TaskTracker在linux的浏览器中通过hadoop:50070
bug发现与制造·2018-10-26 11:00

解决hadoop启动时的dfs.namenode.servicerpc-address or dfs.namenode.rpc-address is not configured.错误

今天在搭建完Hadoop的环境，通过start-all.sh启动完毕后，发现localhost:50070对应的HDFS的web管理中心加载不出来，浏览器中一直提示无法连接。
时光仍在·2018-10-25 19:21

马士兵 day2_hdfs集群集中管理和hadoop文件操作

hadoop-daemon.shstartnamenodeslave：hadoop-daemon.shstartdatanode观察集群配置情况：终端查看：hdfsdfsadmin-report|more浏览器查看：http://192.168.56.100:50070web
PC_Repair·2018-10-17 22:51

HDFS操作命令

操作HDFS1、通过WebConsole:50070、500902、命令行（1）操作命令hdfsdfs*****-mkdir创建目录举例：hdfsdfs-mkdir/aaahdfsdfs-mkdir-p
Joy_cj·2018-08-30 19:49

ubuntu-16.04.3-server+hadoop

serverhadoop-master、hadoop-node1、hadoop-node2安装是用户都是zhang2、启用root登录并设计密码sudopasswdroot3、开启和设置防火墙ufwmaster开启22和50070
雪豹235·2018-08-26 18:00

JMX监控Hadoop的部分常用参数位置

NameNodeDataNodeHDFSYarnHBaseMapReduceNameNodeNameNode:50070Hadoop:service=NameNode,name=JvmMetricsMemHeapMaxMMemMaxMHadoop
Eventide·2018-08-20 23:00

logstash out file to HDFS

即http://namenode00:50070/webhdfs/v1/接口安装可以在官网找到相应的版本，我们用的是2.3.1，下载地址：https://www.elastic.co/downloads
北极企鹅ys·2018-08-14 14:43

hadoop distcp 同步集群数据

//newexchangehdfs://Sslave0:9000/newexchange命令2:hadoopdistcp-update-delete-pwebhdfs://192.168.88.22:50070
凡晨_雪杰·2018-08-03 16:52

Hadoop的配置及启动【伪分布式】过程

getting-started-hadoop-mapreduce-hdfs-and-yarn-configuration-and-sample-program-febb1415f945（需要挂代理访问）apt(Advantagepackagetools)伪分布式：NameNode：3.x98702.x50070second
LoganMaaa·2018-07-29 19:48

HBase管理指南

hadoopmasterweb端口50070hadoopslaveweb端口50075hbasemasterweb端口60010通讯端口60000hbaseregionserverweb端口60030通讯端口
hixiaoxiaoniao·2018-07-10 11:55

【hadoop学习笔记】修改linux主机名，以便在windows下面能通过主机名进行访问,解决localhost:50070无法访问

why?为什么要修改linux的主机名呢？因为linux的主机名默认是localhost，如果你在windows下以linux主机名进行访问的话，会直接访问windows环境下对应的端口，所以需要修改linux的主机名how？1、首先得想好你要改个什么名字吧，假如我们要修改为：hadoop012、然后以root账号登录linux，执行：vi/etc/hostname按i进入修改模式，输入hadoo
hlp4207·2018-07-08 19:01

大数据平台常用组件端口号

常见端口汇总：Hadoop：50070：HDFSWEBUI端口8020：高可用的HDFSRPC端口9000：非高可用的HDFSRPC端口8088：Yarn的WEBUI接口8485：JournalNode
Jenrey·2018-06-17 17:05

Hadoop安装成功之后，访问不了web界面的50070端口怎么解决？

Hadoop安装成功之后，访问不了web界面的50070端口先查看端口是否启用[hadoop@s128sbin]$netstat-ano|grep50070然后查看防火墙的状态，是否关闭，如果没有，强制性关闭查看防火墙状态
With__Sunshine·2018-06-06 02:29

平台搭建---不同应用端口使用情况

有时也被文件服务协议（FSP）使用ssh22安全Shell（SSH）服务https443安全超文本传输协议（http）9200ElasticsearchHTTP服务所在的端口8088yarnHTTP服务所在的端口50070hd
diggerTT·2018-05-16 10:06

Tensorflow第二课文件读取

importHdfsClient这个包然后才能进行相应的hdfs文件读取frompyhdfsimportHdfsClientclient=HdfsClient(hosts='172.18.11.72:50070
机智帅气的葫芦娃·2018-05-11 09:38

CM集群管理注意事项

解决办法：3个副本下线机器的时候最好2台2台的下，还要看nn（50070主页面）页面上的进度，到0了以后在删除节点。
just_fuck·2018-04-17 10:13

HDFS 实验 (五) 图形化管理

/bin/hdfsdfsadmin-reporthttp://192.168.209.162:50070/dfshealth.html#tab-overview可以操作目录http://192.168.209.162
pcdog·2018-04-13 22:31

遇到Hadoop 50070端口打不开，该怎么办？

阅读更多遇到Hadoop50070端口打不开，该怎么办？
mo默瑶·2018-04-10 22:00

遇到Hadoop 50070端口打不开，该怎么办？

阅读更多遇到Hadoop50070端口打不开，该怎么办？
mo默瑶·2018-04-10 22:00

Hadoop 50070端口打不开，该如何排查？

阅读更多Hadoop50070端口打不开，该如何排查？
mo默芯·2018-04-10 22:00

Hadoop 50070端口打不开，该如何排查？

阅读更多Hadoop50070端口打不开，该如何排查？
mo默芯·2018-04-10 22:00

遇到Hadoop 50070端口打不开，怎么办？

阅读更多遇到Hadoop50070端口打不开，怎么办？
mo默羽·2018-04-10 22:00

遇到Hadoop 50070端口打不开，怎么办？

阅读更多遇到Hadoop50070端口打不开，怎么办？
mo默羽·2018-04-10 22:00

遇Hadoop 50070端口打不开，如何排查？

遇Hadoop50070端口打不开，如何排查？
mo默芯·2018-04-10 22:59

Linux下HDFS简单的shell操作

安装包上传到hdfs的根目录下:hadoopfs-putjdk-7u76-linux-x64.tar.gzhdfs://master:9000/执行完以后从网页打开http://192.168.1.111:50070
Source_00·2018-04-09 19:59

hadoop监控：JMX

JMXJsonServlet继承父类javax.servlet.http.HttpServlet只提供web页面来访问JMX例如：启动了hadoop集群（masterslave1slave2）通过端口50070
wychen_sunshine·2018-03-30 11:04

HDFS的shell常用命令大全

zkServer.shstart启动HDFS:不管在集群中的那个节点都可以start-dfs.sh启动YARN：只能在YARN主节点中进行启动start-yarn.shHDFS:http://hadoop02:50070YARN
Jenrey·2018-03-28 21:49

Ubuntu 16.04 Hadoop 3.0.0 安装 及 所有问题总结

www.bogotobogo.com/Hadoop/BigData_hadoop_Install_on_ubuntu_single_node_cluster.php2.按照教程安装好之后，可能有的人无法打开50070
HannanKan·2018-03-24 14:56

Hadoop默认端口表及用途

端口用途9000fs.defaultFS，如：hdfs://172.25.40.171:90009001dfs.namenode.rpc-address，DataNode会连接这个端口50070dfs.namenode.http-address50470dfs.namenode.https-address50100dfs.namenode.backup.address50105dfs.nameno
布拉君君·2018-03-22 11:53

hadoopHDFS-2（hdfs NFS 网关）

Hadoop最大的优势就是分布式集群计算,所以在生产环境下都是搭建的最后一种模式:完全分布模式技术准备系统规划搭建测试上线使用HDFS端口8020namenodeRPC交互端口core-site.xml50070NameNodeweb
月月鸟飞·2018-03-06 16:46

十一. 大数据技术之hadoop（11）

三种操作HDFS的方式第一种，web控制台的方式，启动HDFS环境，在本地浏览器上输入linuxIP地址：50070可以看到HDFSweb控制界面第二种：linux命令行的方式操作命令：hdfsdfs*
free_ygh·2018-03-04 16:41

Linux 查看端口是否被占用 开关端口

//命令1lsof-i:端口号比如我查看50070有没有被占用：lsof-i:50070当出现：COMMANDPIDUSERFDTYPEDEVICESIZE/OFFNODENAMEjava26704root178uIPv420172680t0TCPhadoop1
帅气的程序员·2018-02-06 09:34

阿里云部署hadoop问题-hosts文件以及50070/dfshealth.html不能访问

1.在完成start-dfs.sh后jps不显示nameNode问题刚开始这个找这个问题，大多说namenode没有格式化成功，但是重新格式化依旧没有该node；然后就去看日志，日志打印了一个异常org.apache.hadoop.hdfs.server.blockmanagement.CacheReplicationMonitor:Scanned0directive(s)and0block(s)
VincentPeng·2018-01-26 19:06

hadoop 50070页面访问不到的多种排查思路

排查方法1：是否对Windows客户端中的host文件做host解析到此路径下C:\Windows\System32\drivers\etc\hosts打开此文件，做host解析当然，也需要在Linux环境下，做host文件解析排查方法2：查看是否关闭selinuxcatetc/sysconfig/selinux如果没有关闭，执行下面的命令sed-i's#enforcing#disabled#'/
流一&·2018-01-21 09:11

Hadoop中文乱码

eclipse下显示为乱码针对乱码所做实验：0）文件直接上传，在eclipse打开显示正常，但结果显示乱码1）将文件格式改成UTF-8之后，再上传，结果发现在eclipse下打开是乱码，但在namenode:50070
锐湃·2017-12-14 03:35

Hadoop2 无法访问8088端口web页面

10.0.0.151)andhadoop02(slaves-10.0.0.152)whenatypestart-dfs.shandthenvisitwebsitemy_ip(just10.0.0.151above):50070
阳明散人·2017-12-05 22:45

hadoop的使用

http://192.168.14.200:8088/cluster//yarn监控界面http://192.168.14.200:50070/explorer.html#//文件系统监控界面http:
lmem·2017-12-03 06:43

麻烦的安全漏洞解决方案

1.Hadoop未授权访问【原理扫描】2/450%2解决方案：配置防火墙，不允许集群外机器访问50070端口2.OracleMySQLSSL证书验证安全限制绕过漏洞(CVE-2015-3152)2/450%
music378·2017-11-21 20:00

【云星数据---Apache Flink实战系列(精品版)】：Apache Flink实战基础0012--flink分布式部署007

接上文6.验证重启成功6.1zookeeper客户端验证ls/ ls/flink ls/flink/flink0016.2hadoophdfs上验证http://192.168.0.12:50070/explorer.html
云星数据-大数据团队·2017-11-14 19:10

hadoop 8088端口网页无法打开的原因分析

首先master和slaves的节点正常http://server71:50070（HDFS管理界面）正常可以打开http://server71:8088yarn管理界面打不开Master(server71
如何在3年拿到50K·2017-10-31 12:39

HDFS单机版安装

一、准备机器机器编号地址端口110.211.55.89000、50070、8088二、安装学习地址http://www.roncoo.com/course/view/5a057438cc2a4231a8c245695faea2381
Ezuy-Lee·2017-10-21 19:17

Cuurent value:http//hadoop1:50070/webhdfs/v1 Failed to access filesystem root

错误原因是在配置core-site.xml中的用户名，用户组没有与hue中用户名用户组保持一致。core-site.xm配置```xmlhadoop.proxyuser.hue.hosts*hadoop.proxyuser.hduser.groups*```hue.ini配置[desktop]#Webserverrunsasthisuserserver_user=hueserver_group=h
大大鹏123·2017-08-17 14:21

hadoop搭建以及问题

virtualboxcentos7.2搭建的hadoop单机在搭建过程中遇到了很多问题所幸网上答案很多在这里先总结一下问题1.无法上传在搭建macdockerhadoop单机的时候暴露了容器的50010，50070
thecodeofsky·2017-08-11 14:24

单独启动和关闭hadoop服务

Hadoop-daemon.shstartnamenode2)启动数据节点hadoop-daemons.shstartdatanodeslave3）hadoop-daemon.shstartsecondarynamenode4）查看端口50070netstat-anop
大数据部落·2017-08-02 10:04

单独启动和关闭hadoop服务

hadoop-daemon.shstartnamenode2)启动数据节点hadoop-daemons.shstartdatanodeslave3）hadoop-daemon.shstartsecondarynamenode4）查看端口50070netstat-anop
乐搏学院Learnbo·2017-08-02 10:24

Windows通过IDEA开发虚拟机中Hadoop

搭建Hadoop环境，让其能够在Windows中进行开发步骤1关闭防火墙先关闭防火墙，这样可以让比如Hadoop的50070端口供给外界访问centOS6.5关闭防火墙步骤关闭命令：serviceiptablesstop
kason_zhang·2017-07-16 21:19

Apache Zeppelin 中 HDFS文件系统 解释器

配置属性默认描述hdfs.urlhttp://localhost:50070/webhdfs/v1/WebHDFS的URLhdfs.userHDFSWebHDFS用户hdfs.maxlength1000
u010859707·2017-06-16 10:00
上一页 3 4 5 6 7 8 9 10 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他