E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Hadoop安装
Spark在Win10下的环境搭建过程
本章概要1、版本说明2、环境准备:jdk配置;scala安装与配置;spark安装与配置;
hadoop安装
与配置;版本说明jdk:1.8scala:2.11.8spark:2.3.0hadoop:2.8.3
·
2021-04-27 13:31
基于Ubuntu系统下的Hadoop平台搭建详细步骤
链接xhsell3.安装JAVA环境4.创建Hadoop用户4.1创建新用户并设置密码4.2为hadoop用户添加管理员权限5.设置SSH免密登录5.1登录localhost5.2设置为无密码登录6.
Hadoop
_BitterSweet
·
2021-04-25 17:23
Linux
分布式
linux
hadoop
大数据
Hadoop HA的安装
Hadoop集群的安装在master1节点解压
hadoop安装
包tarzxvf.
Davidham3
·
2021-04-21 13:33
Hadoop安装
教程_单机/伪分布式配置---------常见的问题
Hadoop文件安装时的问题在
Hadoop安装
时,要配置JAVA环境变量,注意要下载与之后操作相对应的版本,否则会出现很多问题。
HHHH756
·
2021-04-18 19:20
hadoop
Hadoop + Hbase 安装部署
hadoop安装
链接Linux安装Hadoop软件-##
HADOOP安装
步骤````1.tar-zxvfhadoop_2.7.1--解压hadoop2.pwd--查看当前路径3.ln-shadoop_2.7.1hadoop
有李说布清呀
·
2021-04-14 10:05
Hadoop搭建
系统门户网站yum安装SSH-u012941811的专栏-博客频道-CSDN.NET;ApacheHadoop3.0.0-alpha1–Hadoop:SettingupaSingleNodeCluster.
Hadoop
内心戏很多的慵懒猫
·
2021-04-13 22:35
Deepin(Ubuntu通用)安装Hadoop伪分布环境(集成Hbase、Hive、MySQL、Spark、Scala)
Ubuntu(我用的是虚拟机)安装Hadoop1、安装和配置ssh2、安装和配置Java(一定要安装Java11版本之前的,不然Spark和Scala会报错,我们安装Java8)3、安装Hadoop4、启动
Hadoop
繁华尽头满是殇
·
2021-04-08 12:25
Linux
hadoop
ubuntu
deepin
hive
mysql
超详细 Hadoop 安装(内附ssh免密登录,图文详解,小白必看)
收藏起来看哦)一:安装前准备二:jdk安装,java环境配置三:伪分布hadoop环境安装四:ssh免密登录配置【简化启动】五:总结一:安装前准备安装前工作:确保已经装好虚拟机及linux系统,准备好
hadoop
隔壁邻居老张
·
2021-03-27 10:17
大数据
hadoop
大数据
Hadoop入门(七)——
Hadoop安装
(图文详解步骤2021)
Hadoop入门(七)——
Hadoop安装
(图文详解步骤2021)系列文章传送门Hadoop入门(一)——CentOS7下载+VM上安装(手动分区)图文步骤详解(2021)Hadoop入门(二)——VMware
Leokadia Rothschild
·
2021-03-22 16:51
大数据应用
大数据
hadoop
linux
centos
Hadoop2.7.3环境搭建之伪分布式
Hadoop伪分布式环境搭建一、前置条件二、准备工作三、
Hadoop安装
四、伪分布式配置说明:熟悉Hadoop伪分布式环境搭建基本思路与流程,理解主从式结构体系思想一、前置条件前置条件请自行参考如下资料进行操作
若兰幽竹
·
2021-03-08 21:04
Hadoop
Hadoop生态圈技术栈(上)---hive
archive.apache.org/dist/hive/文档网址:https://cwiki.apache.org/confluence/display/Hive/LanguageManual安装前提:3台虚拟机,安装了
Hadoop
BetterKunPeng
·
2021-03-04 17:29
Hadoop
hadoop
Spark系列--安装与配置
可选的安装:
hadoop安装
windows其他网址Spark在Windows下的环境搭建_大气人生-CSDN博客Windows10安装spark(包括
hadoop安装
)_小白白的博客-CSDN博客1.安装
feiying0canglang
·
2021-02-23 00:50
大数据
Hadoop安装
Hadoop安装
SSH免密登录SSH概念SSH组成实现步骤安装JDK软件下载解压安装包配置环境变量HDFS伪分布式集群搭建软件下载解压安装包配置文件配置环境变量Hadoop集群测试启动和关闭HDFS集群单节点逐个启动和关闭脚本一键启动和关闭查看进程启动情况通过
Ka-Xin
·
2021-02-10 23:21
hadoop
分布式
linux
大数据
Hadoop安装
与配置详细教程
准备三个虚拟机使用vagrant安装虚拟机环境1、首先安装jdk(三台机器都需要)https://www.jianshu.com/p/8829bc3a92172、安装hadoop2.9.2下载hadoop2.9.2,下载地址:http://archive.apache.org/dist/hadoop/core/放到/opt目录下,解压tar-zxvfhadoop-2.9.2.tar.gzmvhad
Y了个J
·
2021-02-02 23:47
Docker配置Hadoop集群并使用WordCount测试
jdk的ubuntu镜像3、进入映像4、升级apt-get5、安装vim6、更新apt-get镜像源7、重新升级apt-get8、安装wget9、创建并进入安装hadoop的文件目录10、通过wget下载
hadoop
莽起来就没有大问题
·
2021-01-29 21:14
学习记录
docker
分布式
hadoop
linux
大数据
大数据基础——Hadoop大数据平台搭建
文章目录前言Hadoop大数据平台搭建一.Hadoop原理和功能介绍二.
Hadoop安装
部署三.Hadoop常用操作总结前言分布式机器学习为什么需求大数据呢?
陈敬雷-充电了么-CEO兼CTO
·
2021-01-27 16:37
人工智能
hadoop
大数据
分布式
大数据
hadoop
人工智能
开发平台
[hadoop]3.0.0版本以上mac hadoop环境配置安装,以及安装的一些坑解决
目录前言:1.下载最新的
hadoop安装
包2.安装hadoop2.1查看java环境位置2.2修改hadoop-env.sh文件2.3修改core-site.xml2.4配置文件系统hdfs-site.xml2.5
pmdream
·
2021-01-26 14:37
hadoop
在飞腾+麒麟上安装hbase
一、软件包版本:1.1.2wgethttps://archive.apache.org/dist/hbase/1.1.2/hbase-1.1.2-bin.tar.gz二、安装安装前提:Java安装,
hadoop
中国信创服务社区
·
2021-01-15 08:08
兼容适配
hbase
电商日志分析大数据实训项目
MySQL-5.7使用yum方式安装:二、CentOS7下Nginx的安装:三、部署前端网站到nginx下四、Tomcat的安装五、电商后台系统部署到Linux服务器上六、AB压测(httpd)安装七、
Hadoop
若兰幽竹
·
2021-01-14 16:08
大数据
hadoop
基于Ubuntu Kylin系统在Hadoop的环境下调用MapReduce进行单词WordCount计数
在Hadoop的环境下调用MapReduce进行单词计数一、
Hadoop安装
创建hadoop用户更新apt安装SSH、配置SSH无密码登陆二、安装Java环境三、安装HadoopHadoop单机配置四、
Moss_xx
·
2020-12-20 17:58
大数据
hadoop
调用MapReduce对文件中各个单词出现的次数进行统计
调用MapReduce对文件中各个单词出现的次数进行统计
Hadoop安装
环境创建hadoop用户更新apt安装SSH、配置SSH无密码登陆安装Java环境安装Hadoop2运行Hadoop伪分布式实例使用
duxial
·
2020-12-18 00:15
大数据
linux
hadoop
服务器环境配置(CentOS7)
安装配置Nginx安装配置Zookeeper安装配置Kafka安装配置ElasticSearch安装配置ElasticSearch-Head_master安装IK分词器安装Kibana安装MongoDB安装
Hadoop
Howareyou?
·
2020-12-16 11:40
Linux
linux
Hadoop02基础操作
Hadoop下几个重要的目录
hadoop安装
在/opt/module/文件夹下1、sbin目录:存放启动或停止hadoop相关服务的脚本2、bin目录:存放对hadoop相关服务(HDFS,YARN)进行操作的脚本
zyi
·
2020-11-23 14:13
namenode节点无法启动解决方法
主页有完整的
hadoop安装
教程,自行查看互联网搜集:第一种可能出错的原因及解决方法:多次初始化这个问题一般是由于两次或两次以上的格式化NameNode(hadoopnamenode-format)造成的
余生羁绊
·
2020-11-15 15:19
Hadoop
解决报错
Hadoop2.7.1伪分布安装及配置
SSH三、安装Java环境四、安装hadoop五、hadoop伪分布式配置运行实例前言上一篇blog介绍了多节点Linux集群的构造,本篇blog介绍基于单一节点Hadoop伪分布安装,有时间再尝试多节点
Hadoop
hhhSir'blog
·
2020-11-08 11:51
hadoop大数据
hadoop
大数据
linux
java
ubuntu
Hadoop安装
教程(单机/伪分布式环境搭建)/Ubuntu18.04
Hadoop安装
教程(单机/伪分布式环境搭建)/Ubuntu18.04本教程使用Ubuntu18.04LTS64位作为系统环境(Ubuntu16.04,Ubuntu20.04也行,32位、64位均可),
auhjin_ai8
·
2020-10-27 14:18
从零开始自学大数据
hadoop
ubuntu
linux
ssh
Hadoop安装
(伪分布式)与使用
实验目的掌握Hadoop在linux环境的安装与部署,掌握hdfs的基本操作命令,初步认识MapReduce程序。实验准备linux操作系统JDK1.8的软件包Hadoop3.x软件包注意事项1.创建用户以及用户的权限分配2.环境变量配置与生效;知识准备1.Linux系统中下载安装文件和解压缩linux系统中需要下载用自带的火狐浏览器下载,并解压到指定的目录下。例如,现在要下载hadoop-3.2
lodew920
·
2020-10-25 21:17
大数据
hadoop
hdfs
mapreduce
大数据
最新hadoop集群搭建(2020)
hadoop集群搭建一、机器准备二、安装JDK三、配置ssh免密码登录四、建立主机名和ip的映射五、安装配置hadoop1.将
hadoop安装
包解压到/opt/module下并配置环境变量2.配置/opt
海绵不老
·
2020-10-11 21:48
hadoop
idea远程连接hadoop(macOS)
windows系统可直接参考因为mac系统的idea中图标位置不太一样,
hadoop安装
位置也不一样,所以这里补充我在mac上的配置方式.前提是电脑中已经安装有hadoop首先下载安装jdk8官网下载JDK8
chain_xx_wdm
·
2020-10-09 13:11
hadoop
Java后台日常学习环境搭建
Java+IntelliJUbuntuJavaIntelliJ**IntelliJ配置**Mac安装环境配置4.用git上传文件到GithubUbuntuMac安装git创建sshkey、配置git5.
Hadoop
蔡希玉
·
2020-09-23 14:51
开发环境搭建
java
spring
mysql
hadoop
Window(win10)下安装Hadoop3.0.0安装步骤介绍
一、准备工作1、下载Hadoop3.0.0安装包
Hadoop安装
包官网下载地址:http://hadoop.apache.org/releases.html点进去后如下图,可以看到并没有最新是3.3.0
抓住尾巴的狮子
·
2020-09-23 14:28
hadoop
hdfs
mapreduce
hadoop
hdfs
mapreduce
大数据
window
错误: 找不到或无法加载主类 org.apache.hadoop.hdfs.server.namenode.NameNode 问题解决
问题描述:运行指令在
hadoop安装
路径下运行bin/hdfsnamenode-format时,出现“错误:找不到或无法加载主类org.apache.hadoop.hdfs.server.namenode.NameNode
renjie223
·
2020-09-17 05:25
hadoop
namenode
-format
hadoop安装
配置和问题处理(部分转载)
安装hadoop前的准备工作1:安装jdk,配置ip,ssh,防火墙,映射2:安装maven配置maven环境变量,存储路径,阿里映射等3安装findbugs,解压后配置findbugs环境变量4在线安装一些依赖包yuminstallautoconfautomakelibtoolcmakeyuminstallncurses-develyuminstallopenssl-develyumyumins
ghx123456ghx
·
2020-09-16 22:52
hadoop
大数据
Hadoop安装
、伪分布式配置及运行Hadoop示例wordcount
本博客没有讲解Java的安装,如未安装Java请看这篇教程:https://blog.csdn.net/wyg1973017714/article/details/106474003本博客默认所有读者均已安装Java环境1、Hadoop下载下载Hadoop请前往官网官网地址:http://hadoop.apache.org/点击Download跳转至下载页面我这里选择的是3.3.0版本的Hadoo
风在哪
·
2020-09-16 19:15
Linux
服务器环境配置
Java基础
hadoop
java
大数据
Hadoop格式化HDFS报错java.net.UnknownHostException: centos0
在
hadoop安装
配置过程中,对HDFS格式化$hdfsnamenode-format出现错误;java.net.UnknownHostException:centos0如下:查看机器名称$hostname
漫天雪_昆仑巅
·
2020-09-16 19:11
Hadoop研究
hadoop
hadoop
hdfs格式化
hdfs格式化
hdfs格式化错误
hadoop 集群安装
一、安装集群A、上传
HADOOP安装
包B、规划安装目录/export/servers/hadoop-2.8.4C、解压安装包D、修改配置文件$HADOOP_HOME/etc/hadoop/1、hadoop-env.shexportJAVA_HOME
diewo3417
·
2020-09-16 18:15
大数据
运维
java
阿里云部署Hbase集群
安装步骤安装vim编辑器安装ssh配置ssh免密码登陆安装jdk安装
hadoop安装
zook
weixin_33913332
·
2020-09-16 17:09
大数据
shell
开发工具
Hadoop伪分布式无法访问HDFS文件系统解决办法50070
关闭系统防火墙查看防火墙状态serviceiptablesstatus永久关闭防火墙chkconfigiptablesoff临时关闭防火墙serviceiptablesstop配置:hadoop-env.sh配置文件在
Hadoop
同道大叔
·
2020-09-16 17:56
无法访问50070
web无法访问HDFS
访问HDFS文件系统
hadoop伪分布式
Hadoop 安装完之后,做一个简单的测试
然后接着上一篇的
Hadoop安装
开始,安装成功之后,我们接下来做一个简单的测试。看到上面的图没?我是这样进行操作的,我先获取了ROOT权限,然后进入根目录。从根目录切换到我之前安装的Ha
学术袁
·
2020-09-16 04:06
Hadoop-learner
hadoop hdfs 50070页面 添加登录验证
hadoop安装
完之后,默认情况下,可以通过http://ip:50070/dfshealth.jsp访问hdfs页面,查看namenode、datanode状态,查看存放的文件等。
TeeLeeJoin
·
2020-09-16 02:45
hadoop
50070
用户校验
hdfs
web
ui
hdfs
安全验证
user.name
hadoop安装
以及启动守护进程出现的几种问题及解决方案
hadoop安装
出现的几种异常的处理方法,hadoop无法启动,nonamenodetostop问题的解决方法,nodatanodehadoop无法正常启动(1)执行$bin/hadoopstart-all.sh
石头魏
·
2020-09-16 01:46
hadoop
learing
Hadoop安装
遇到的各种异常及解决办法(1)
异常一:2014-03-1311:10:23,665INFOorg.apache.Hadoop.ipc.Client:Retryingconnecttoserver:Linux-hadoop-38/10.10.208.38:9000.Alreadytried0time(s);retrypolicyisRetryUpToMaximumCountWithFixedSleep(maxRetries=10
程序员成长史
·
2020-09-15 14:04
hadoop安装
完后打开网页http://localhost:50070/ 没反应
在
hadoop安装
完后,依次执行hadoopnamenode-format,start-dfs.sh,start-yarn.sh之后打开浏览器输入http://localhost:50070/无反应,查了网上很多说法都没有解决
寻找现实扭曲力场
·
2020-09-15 12:43
日记
117道有关大数据面试题解析 希望对你有所帮助
一.简述如何安装配置apache的一个开源的hadoop1.使用root账户登陆2.修改ip3.修改host主机名4.配置ssh免密登陆5.关闭防火墙6.安装JDK7.解压
hadoop安装
包8.配置hadoop
Java架构没有996
·
2020-09-15 12:27
分享心得
Hadoop集群动态增加节点
一、集群基础环境配置关闭防火墙配置ntp服务时钟,与主节点同步:server90.0.25.1配置SSH免密登录配置hosts文件:vim/etc/hosts安装jdk二、Hadoop配置
Hadoop安装
包修改
yiming1012
·
2020-09-15 08:13
大数据平台核心技术-实验记录
大数据平台核心技术-实验记录一、前言二、实验内容实验一:Hadoop集群搭建实验二:使用MapReduce实现倒排索引三、实验过程记录2.1安装准备2.2Hadoop集群搭建1、安装文件上传工具2、JDK安装3、
Hadoop
月色很柔
·
2020-09-15 05:24
hadoop
MapReduce3种运行方式
MapReduce运行3种方式:一、本地方式运行:1、pc环境:1.1、将
Hadoop安装
本地解压1.2、配置Hadoop的环境变量添加%HADOOP_HOME%修改%PATH%添加%HADOOP_HOME
MrGrant
·
2020-09-15 03:19
大数据
hadoop安装
遇到的各种异常及解决办法
异常一:2014-03-1311:10:23,665INFOorg.apache.hadoop.ipc.Client:Retryingconnecttoserver:Linux-hadoop-38/10.10.208.38:9000.Alreadytried0time(s);retrypolicyisRetryUpToMaximumCountWithFixedSleep(maxRetries=10
wodeyuer125
·
2020-09-15 03:00
java
Hadoop之本地运行模式基本环境配置
Hadoop之本地运行模式基本环境配置非专业生产环境配置JDK安装包:jdk-8u212-linux-x64.tar.gz提取码:l5go
Hadoop安装
包:hadoop-3.1.3.tar.gz提取码
Doctor_96
·
2020-09-15 03:56
#
Hadoop
大数据
大数据
hadoop
hadoop完全分布式集群搭建
序:相关软件一、前期准备二、jdk,
hadoop安装
、配置2.1、jdk、
hadoop安装
2.2、配置jdk、hadoop环境变量三、编写集群分发脚本,完成其他服务器的jdk、
hadoop安装
与配置四、
peng.li
·
2020-09-15 02:43
hadoop
hadoop
linux
大数据
分布式
上一页
5
6
7
8
9
10
11
12
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他