E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Hadoop安装
实验一、Hadoop 安装与配置管理
hadoop安装
与配置目标:掌握
Hadoop安装
过程原理Linux环境准备:伪分布式模式的安装和配置步骤:一、准备与配置安装环境:安装虚拟机和linux二、安装jdk三、安装hadoop四、HDFS系统初体验五
Lilianac
·
2023-12-19 00:57
Hadoop
hadoop
linux
hadoop安装
包解压之后的操作
Hadoop解压完成之后配置流程修改hadoop-env.sh和yarn-env.sh进入hadoop-3.2.4/etc/hadoop/修改这两个文件增加:JAVA_HOME={java的路径}修改配置文件core-site.xml和hdfs-site.xml进入hadoop-3.2.4/etc/hadoop/修改这两个文件增加://这是core-site.xmlhadoop.tmp.dir/d
冲鸭嘟嘟可
·
2023-12-19 00:55
hadoop
大数据
分布式
SLF4J: Class path contains multiple SLF4J bindings.
问题截图问题原因这里就是由于hbase安装路径下的一个文件和
hadoop安装
路径下的文件起冲突了解决办法我的路径:这个一定要看自己电脑上的路径/usr/local/hbase/lib/client-facing-thirdparty
To Shine
·
2023-12-18 14:56
hadoop
hadoop
hbase
hbase
环境安装java坏境centos安装javahadoop环境
hadoop安装
hbase配置vi/etc/profile.d/hadoop-eco.sh写入:HBASE_HOME=/opt/hbasePATH
心里没有一点AC数
·
2023-12-18 05:31
hbase
hadoop
big
data
Win10下安装大数据开发环境 spark+hadoop+hive(实测可用)
Win10下安装大数据开发环境spark+hadoop+hive(实测可用)基础环境安装spark安装
Hadoop安装
hive安装总结参考博客基础环境安装首先,我们需要搭建软件的运行环境,本文中所使用的软件均需要运行在
YannAdams
·
2023-12-17 06:30
Spark
Hadoop
Hive
大数据环境
Windows
spark
hadoop
hive
hadoop面试题 5 ---有用
答:第一题:1使用root账户登录2修改IP3修改host主机名4配置SSH免密码登录5关闭防火墙6安装JDK6解压
hadoop安装
包7配置hadoop的核心文件hadoop-env.sh,core-site.xml
okbin1991
·
2023-12-17 05:00
hadoop
hdfs
大数据
分布式
java
第一步:
hadoop安装
基础环境
1.安装vm虚拟机【一路默认】**解决x64的问题需要lenove里面的安全模块启用。2.安装linux安装了5台linux服务器centos准备搭建haddop环境唯一需要配置的就是网络。用nat宿主这种方式。IP192.168.253.12子网掩码255.255.255.0网关192.168.253.2192.168.253.11192.168.253.12192.168.253.13192.
微生命
·
2023-12-17 05:37
ubuntu下hbase的搭建和依赖环境搭建以及相关操作
ubuntu从0安装HBase和HBase所依赖的环境的安装配置简单说三步走java环境的安装和配置
hadoop安装
和配置hbase安装和配置我的搭建环境ubuntu:18软件源阿里云java:openjdkversion
不走小道
·
2023-12-17 05:53
笔记
大数据开发
Spark+Kafka构建实时分析Dashboard案例
目录一、环境准备Ubuntu安装
Hadoop安装
Spark安装Kafka安装Python安装Python依赖库安装vscode安装Python工程目录结构二、数据处理和Python操作Kafka数据集数据预处理运行三
Hay Ha!
·
2023-12-15 22:40
python
大数据
分布式
kafka
spark
大数据存储技术(1)—— Hadoop简介及安装配置
Hadoop的组成(一)Hadoop1.x和Hadoop2.x的区别编辑(二)Hadoop的三种运行模式(三)HDFS架构概述(四)YARN架构概述(五)MapReduce架构概述(六)大数据技术生态体系三、
Hadoop
Francek Chen
·
2023-12-14 19:08
大数据技术基础
Spark编程基础
大数据
hadoop
linux
hadoop伪分布模式搭建(详细步骤)
一、前期准备1.关闭防火墙2.安装好JDK3.准备
hadoop安装
包二、安装hadoop伪分布模式1.在home/hadoop/software/路径下创建hadooptmp目录2.解压hadoop-3.3.0
小-枝-丫
·
2023-12-06 02:23
hadoop
hadoop
大数据
服务器
Hadoop——分布式计算MapReduce和资源调度Yarn
分布式计算MapReduceYARN架构YARN集群部署一、
Hadoop安装
目录下/etc/hadoop修改mapred-env配置文件,mapred-site.xml文件二、etc/hadoop文件内
A尘埃
·
2023-12-04 06:34
hadoop
mapreduce
eclipse
yarn
在centos7上搭建hadoop大数据平台
目录一、安装搭建java环境1、安装方法2、查看是否已安装3、卸载4、安装4.1检查yum中有没有java1.8包4.2开始安装5、验证二、
Hadoop安装
1、下载2、准备启动Hadoop集群2.1配置
船长灬普朗克
·
2023-11-30 13:03
大数据
hadoop
大数据
java
搭建Spark伪分布式
本讲学习目标一、搭建伪分布式Hadoop(一)登录ied虚拟机(二)配置免密登录1、在ied虚拟机上生成密钥对2、将生成的公钥发送到本机3、验证虚拟机是否能免密登录本机(三)下载与Spark版本匹配的
Hadoop
jzy2024
·
2023-11-30 02:00
spark
分布式
hadoop
hadoop安装
简介Hadoop是一个开源的分布式存储和计算框架,最初由Apache软件基金会开发。它的发展背景可以追溯到Google的MapReduce和GoogleFileSystem(GFS)的论文,这两篇论文启发了Hadoop的设计。Hadoop的主要应用场景包括大数据存储、处理和分析,特别是在需要处理海量数据的互联网和企业环境中。它被广泛用于日志分析、数据挖掘、机器学习、图像处理等领域。Hadoop的生
necessary653
·
2023-11-29 14:11
hadoop
大数据
分布式
云计算实验1 基于Hadoop的云计算平台配置和map-reduce编程案例
四、实验步骤请按照线上操作视频和实验知道手册,完成以下实验内容:实验1-1
Hadoop安装
部署(1)登录虚拟机(2)主机配置:主机名、网络和免密登
MrNeoJeep
·
2023-11-28 16:43
#
云计算
hadoop
云计算
大数据
Hadoop2.4.0-Hbase-098.9-完全分布式安装部署
CentOS-6.5-i386-LiveDVD.iso32位centos系统b、jdk-7u71-linux-i586.rpm32位jdk-Linuxrpm文件c、hadoop-2.2.0.tar.gz
hadoop
skynumone
·
2023-11-26 19:19
hbase
Zookeeper+Hadoop+Hbase+Hive+Kylin+Nginx集群搭建
集群搭建一、虚拟机安装Centos71.准备工作2.centos7安装过程3.关闭防火墙(关键)二、安装jdk1.卸载镜像自带jdk2.安装自己的jdk3.配置多机器间免密登录三、搭建Hadoop集群1.
hadoop
桃橙柳
·
2023-11-25 09:15
大数据生态安装
大数据
hadoop
linux
hdfs
centos
XJAU Hadoop课程设计MapReduce及Hive学生成绩查询统计实现
分析每位学生的总分(MapReduce实现和hive实现)分析每门课程的平均成绩(hive实现)显示每位学生详细信息(学号、姓名、系和各门课成绩)(hive实现)使用说明使用VMware安装好Ubuntu16部署
hadoop
7ANGHUAN
·
2023-11-23 20:12
课设
hive
hadoop
hadoop搭建全分布式集群-虚拟机
172.16.29.11slave1:ubuntu16.0464位ip:172.16.29.12slave1:ubuntu16.0464位ip:172.16.29.13jdk9.0.4hadoop2.8.1二、jdk、
hadoop
皓阳当空
·
2023-11-23 14:46
环境搭建
大数据
hadoop
hadoop win11安装hadoop环境 winutils.exe获取,windows安装大数据运行环境 winutils文件获取,winutils文件 hadoop(十四)
GitHub-cdarlint/winutils:winutils.exehadoop.dllandhdfs.dllbinariesforhadoopwindows2.从上述链接,下载工程,复制出来自己的版本,我
hadoop
不努力就种地~
·
2023-11-23 13:11
大数据
大数据
hadoop
分布式
hadoop3.x系列完全分布式集群部署(集群各节点设置与端口号的设置)
(三台虚拟机必须在同一网段)详细配置信息请看hadoop3.x系列完全分布式集群部署(虚拟机网络连接、jdk安装、
hadoop安装
)_杂乱无章的我的博客-CSDN博客一:集群部署规划NameNode与SecondaryNameNode
杂乱无章的我
·
2023-11-22 09:10
分布式
大数据
hadoop
本机idea连接虚拟机中的Hbase
3.5.7JavaIDE:IDEAJDK:8步骤步骤一:在idea创建一个maven项目步骤二:在虚拟机里找到core-site.xml和hbase-site.xml这两个文件我的core-site.xml文件是在
hadoop
mendianyu
·
2023-11-22 00:16
intellij-idea
hbase
java
608.【hadoop】windows上hadoop测试环境的搭建步骤
一、下载
hadoop安装
包:点击下载解压。
七镜
·
2023-11-19 15:44
大数据系列-Hadoop集群搭建(2)集群配置
上篇已经把
Hadoop安装
到各虚拟机(大数据系列-Hadoop集群搭建(1)),本篇通过认识Hadoop,规划虚拟机部署。
zhm6422107
·
2023-11-17 03:59
大数据
hadoop
big
data
hdfs
Hive安装与配置
archive.apache.org/dist/hive/文档网址:https://cwiki.apache.org/confluence/display/Hive/LanguageManual安装前提:3台虚拟机,安装了
Hadoop
悠然予夏
·
2023-11-15 11:16
Hadoop生态圈技术
hive
大数据
hadoop
Ubuntu22.04 Hadoop3.3.4 jdk18.02 安装配置
Hadoop安装
阅读推荐(105条消息)大数据安装之hadoop-3.3.4_x_y_z423的博客-CSDN博客(112条消息)hadoop3.3.4集群安装部署_hwbays的博客-CSDN博客加倍推荐
落非
·
2023-11-15 05:15
hadoop
大数据
分布式
Hadoop伪分布式搭建
Hadoop伪分布式搭建目的准备支持的平台需要的软件下载伪分布式配置设置SSH免密登录启动hadoop验证文件分块查看上传后的文件目的本文档介绍如何设置和配置单节点
Hadoop安装
,以便您可以使用HadoopMapReduce
best program
·
2023-11-15 05:13
hadoop
分布式
hdfs
hadoop安装
网址
Hadoop是什么1)Hadoop是一个有Apache基金会所开发的分布式系统基础架构。2)主要解决海量数据的存储和海量数据的分析计算问题。3)广义上来说,Hadoop通常是指一个更广泛的概念---Hadoop生态圈。Hadoop发行版本Hadoop发行的三个版本:Apache、Cloudera、Hortonworks。1)ApacheHadoop官网地址:http://hadoop.apache
北辰Charih
·
2023-11-14 17:24
hadoop
大数据
大数据
1.搭建hadoop集群步骤(1)准备工作:上传并解压
hadoop安装
包,配置环境变量,ssh免密登录(2)修改配置文件:hadoop-env.sh,core-site.xml,hdfs-site.xml
叫我小王
·
2023-11-13 21:06
Hadoop入门指南之分组实战
Hadoop系列文章索引Hadoop入门指南之HDFS介绍Hadoop入门指南之Linux环境搭建Hadoop入门指南之Linux软件安装Hadoop入门指南之
Hadoop安装
Hadoop入门指南之hdfs
我辈岂是蓬蒿人225
·
2023-11-10 20:24
大数据
hadoop
Hadoop入门指南之统计库存实战
Hadoop系列文章索引:Hadoop入门指南之HDFS介绍Hadoop入门指南之Linux环境搭建Hadoop入门指南之Linux软件安装Hadoop入门指南之
Hadoop安装
Hadoop入门指南之hdfs
我辈岂是蓬蒿人225
·
2023-11-10 20:54
大数据
hadoop
Hadoop入门指南之分区、规约实战
Hadoop系列文章索引Hadoop入门指南之HDFS介绍Hadoop入门指南之Linux环境搭建Hadoop入门指南之Linux软件安装Hadoop入门指南之
Hadoop安装
Hadoop入门指南之hdfs
我辈岂是蓬蒿人225
·
2023-11-10 20:54
大数据
hadoop
Hadoop入门指南之排序实战
Hadoop系列文章索引Hadoop入门指南之HDFS介绍Hadoop入门指南之Linux环境搭建Hadoop入门指南之Linux软件安装Hadoop入门指南之
Hadoop安装
Hadoop入门指南之hdfs
我辈岂是蓬蒿人225
·
2023-11-10 20:54
大数据
hadoop
在linux上脱离
hadoop安装
hbase-2.5.6集群
一、软件版本1.1、jdk1.81.2、hbase2.5.61.3、zookeeper3.8.1二、计算节点准备三台服务器192.168.42.139node1192.168.42.140node2192.168.42.141node3三、配置环境1、每台服务器都配置jdk环境变量[root@node1data]#javac-versionjavac1.8.0_3912、每台服务器都配置zooke
爱上雪茄
·
2023-11-10 03:57
JAVA知识
大数据
linux
hadoop
hbase
在linux上脱离
hadoop安装
hbase-2.5.6
一、下载hbase2.5.6https://mirrors.tuna.tsinghua.edu.cn/apache/hbase/2.5.6/二、把下载好的hbase文件存放在某个目录/usr/local/bigdata/hbase-2.5.6[root@node4hbase-2.5.6]#ll总用量2428drwxr-xr-x.4rootroot409611月917:21bin-rw-r--r--
爱上雪茄
·
2023-11-10 03:27
大数据
JAVA知识
linux
hadoop
hbase
安装配置Hbase
目录安装配置Hbase一,测试
Hadoop安装
1、测试免密登录masterslave1slave2都要配置输入命令sshlocalhost没有好的是这个样子需要输密码输入命令ssh-keygen-trsa
气质&末雨
·
2023-11-09 08:39
大数据
hadoop
大数据
hdfs
big
data
hbase
Hadoop安装
遇到的各种异常及解决办法
转自:https://blog.csdn.net/lifuxiangcaohui/article/details/39269479###;异常一:2014-03-1311:10:23,665INFOorg.apache.Hadoop.ipc.Client:Retryingconnecttoserver:Linux-hadoop-38/10.10.208.38:9000.Alreadytried0t
风是外衣衣衣
·
2023-11-08 13:54
hadoop
hadoop
hadoop 安装到配置-2021-11-4
文章目录本次需要用到软件:1.安装虚拟机2.安装centos73.安装hadoop静态IP的配置更改主机名配置本地域名解析(host)设置linux防火墙关闭防火墙:防火墙配置文件:配置ssh(免密连接)安装java安装
hadoop
JiaJunRun
·
2023-11-08 09:32
工具安装
测试分栏
hadoop
linux
大数据
hadoop安装
与配置
安装和配置Hadoop涉及以下步骤:下载Hadoop:访问Hadoop官方网站(https://hadoop.apache.org/)或其他可信来源,下载适合您操作系统的Hadoop版本。解压文件:将下载的Hadoop压缩文件解压到您选择的目录中。配置Hadoop环境变量:编辑您的操作系统的环境变量文件(如".bashrc"、“.bash_profile"或”~/.profile"),并添加以下行
玥沐春风
·
2023-11-08 01:06
hadoop
大数据
分布式
Hadoop安装
MySQL报错The GPG keys listed for the “MySQL 5.7 Community Server“ repository are already......
目录一、报错描述:二、问题分析:三、问题解决:四、命令运行:五、总结一、报错描述:TheGPGkeyslistedforthe"MySQL5.7CommunityServer"repositoryarealreadyinstalledbuttheyarenotcorrectforthispackage.CheckthatthecorrectkeyURLsareconfiguredforthisre
freshman_y
·
2023-11-06 07:29
Hadoop集群配置相关问题
mysql
hadoop
数据库
CentOS下Hadoop伪分布式集群的搭建(超详细)
1、环境准备jdk1.8下载地址:https://www.oracle.com/java/technologies/downloads/#java8进入官网如下图所示,选择自己合适的安装包下载即可
hadoop
m0_49405757
·
2023-11-05 23:09
hadoop
hadoop
hdfs
big
data
大数据
centos搭建hadoop伪分布式
:https://mirrors.huaweicloud.com/java/jdk/二、java环境安装使用root用户登录并创建文件夹cd/optmkdirappmkdirsoft将下载好的jdk和
hadoop
重蹈覆辙的我
·
2023-11-05 22:24
hadoop
分布式
centos
Hadoop安装
教程 Linux版
Hadoop安装
教程Linux版一、Linux虚拟机安装方法一:使用Windows下Linux子系统(大佬可选)方法二:使用VMware安装Linux虚拟机(小白可选)方法三:安装双系统(不怕麻烦的可以试试
lnlnldczxy
·
2023-11-05 20:19
分布式
环境配置
hadoop
spark
flink
hadoop启动出错 The value of property bind.address must not be null
hadoop安装
************************************************************/21/11/1715:15:56INFOnamenode.NameNode
我从远处聆听你
·
2023-11-05 20:17
大数据
测试用例
单元测试
大数据
hadoop
Hadoop环境搭建及Demo
参考博客Windows10安装Hadoop3.3.0教程(kontext.tech)Hadoop入门篇——伪分布模式安装&WordCount词频统计|LiuBaoshuai’sBlog
Hadoop安装
教程
星航夜空的帆舟
·
2023-11-05 20:10
疑难杂症
hadoop
大数据
分布式
超详解Hadoop集群环境配置,步步附有截图,一篇讲解清楚
写在最前,在配置Hadoop之前,要确定已经准备好了Hadoop的准备环境,并且已经在机器上安装完了Hadoop,以及编写了一些必要的集群脚本,具体操作详情见这两篇文章
Hadoop安装
及集群脚本编写Hadoop
牧码文
·
2023-11-04 11:27
hadoop
hadoop
big
data
hadoop集群搭建之运行环境准备以及群启HDFS,YARN集群
hadoop入门-运行环境的搭建前期准备工作:制作了一模拟机hadoop101,然后在hadoop101的基础上,进行克隆,制作了一台hadoop102的服务器,配置好了jdk1.8以及hadoop3的环境变量
hadoop
倔强的耗子
·
2023-11-04 11:26
hadoop
big
data
hdfs
yarn
hadoop配置文件自检查(解决常见报错问题,超级详细!)
2.是否遗的将文件夹(
Hadoop安装
文件夹,/data数据文件夹)chown授权到hadoop用户这个操作3.是否遗忘了格式化hadoop这一步(hadoopnamenode-format)4.是否是以
syst1m'
·
2023-11-04 11:55
大数据
hadoop
eclipse
java
hadoop集群四之zookeeper、kafka安装
hadoop集群一之虚拟机安装(mac)hadoop集群二之
hadoop安装
hadoop集群搭建完成后,紧接着我们将安装zookeeper组件。
皮皮虾不皮呀
·
2023-11-03 21:03
大数据
hadoop
zookeeper
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他