E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
hadoop学习积累
HADOOP
集群大数据词频统计及设计比较(完整教程)
通过百度网盘分享的文件:
Hadoop
相关需要的软件链接:https://pan.baidu.com/s/1XzDvyhP4_LQzAM1auQCSrg?
鸷鸟之不群
·
2023-11-05 23:22
Hadoop相关
hadoop
网络
linux
Hadoop
搭建的伪分布式(基于centos)
提示:以下是基于centos的
Hadoop
伪分布式搭建(Ubuntu相同流程,但是方法也可能不同)一、准备Linux环境1、(1)windows–>打开网络和共享中心–>更改适配器设置–>右键VMnet1
zhoudado921
·
2023-11-05 23:52
hadoop
hadoop
centos
伪分布
Iceberg数据湖的Table、Catalog、
Hadoop
配置Configuration
目录1.Configuration1.1tableproperties1.1.1Readproperties1.1.2Writeproperties1.1.3Tablebehaviorproperties1.1.4Reservedtableproperties1.1.4Compatibilityflags1.2Catalogproperties1.2.1Lockcatalogproperties1
Bulut0907
·
2023-11-05 23:52
#
Iceberg
iceberg
table
catalog
hadoop
configuration配置
编程实现
Hadoop
按日期统计访问次数
一、实训目标(1)编程实现按日期统计访问次数二、实训环境(1)使用CentOSdLinux操作系统搭建的3个节点(2)使用JDK(3)使用
Hadoop
三、实训内容(1)统计用户在2016年度每个自然日的总访问次数
鸷鸟之不群
·
2023-11-05 23:20
Hadoop相关
hadoop
大数据
CentOS 8系统安装和基本配置以及
Hadoop
的伪分布式搭建
镜像下载下载地址:阿里CentOS8下载清华CentOS8下载CentOS8官网下载CentOS主要镜像文件类型介绍常见的镜像文件类型主要有以下几种:DVDISO:普通光盘完整安装版镜像,可离线安装到计算机硬盘上,包含大量的常用软件,一般选择这种镜像类型即可。EverythingISO:包含了完整安装版的内容,并对其进行补充,集成了所有软件。MinimalISO:这个版本为精简版的镜像,可以安装一
小C的快乐星球
·
2023-11-05 23:18
Hadoop
hadoop
centos
分布式
Centos8中
Hadoop
3.3.1安装详细过程(含图文)
目录
Hadoop
介绍:一、创建
hadoop
用户二、安装SSH、配置SSH无密码登录三、卸载jdk环境四、安装新的java版本五、安装
Hadoop
3六、配置
hadoop
环境变量七、
Hadoop
伪分布式配置
wat-999
·
2023-11-05 23:17
开发语言
hadoop
分布式
Hadoop
(01)
Hadoop
3.3.6安装教程,单机/伪分布式配置
在安装
Hadoop
3.3.6前,需要满足以下前置条件:JavaDevelopmentKit(JDK):
Hadoop
是用Java编写的,因此需要安装并配置适当版本的JDK。
Eufeo
·
2023-11-05 23:16
Hadoop
分布式
hadoop
大数据
Connection refused; For more details see: http://wiki.apache.org/
hadoop
/ConnectionRefused
在启动时出错了,没有启动起来jps2627DataNode2884SecondaryNameNode3267NodeManager3042ResourceManager3891Jps启动namenodesbin/
hadoop
-daemon.shstartnamenode
weixin_30329623
·
2023-11-05 23:16
大数据
操作系统
运维
hive java insert_hive表insert报错
环境hive1,Linux6.5,平台是星环的
Hadoop
4.3建了一张普通表,非ORC表,insert时报错,具体如下:insertintotemp.monitor_testvalues('20160722153748
棒棒的海绵糖
·
2023-11-05 23:16
hive
java
insert
9个步骤,手把手教你在Windows上安装
Hadoop
在Windows上安装
Hadoop
时经常会出现许多错误,很多用户使用基于Linux的操作系统。
Java学研大本营
·
2023-11-05 23:45
windows
hadoop
大数据
Windows系统下安装
Hadoop
文章目录前言安装步骤环境验证结语前言
Hadoop
是一个开源的分布式计算平台,广泛应用于大数据处理。
想你依然心痛
·
2023-11-05 23:15
大数据
hadoop
windows
大数据
HADOOP_HOME
windows 10系统下安装
Hadoop
1、下载jdk1.8,
hadoop
3.2以上(
hadoop
3.2及以下的有点区别),
hadoop
onwindows-master(版本别太低)2、以管理员身份解压
Hadoop
压缩包3、解压
hadoop
onwindows-master4
qq_52771580
·
2023-11-05 23:44
hadoop
hadoop
windows
10
Centos8安装
Hadoop
框架并运行示例程序(伪分布式)
大数据开发入门:二、Centos8安装
Hadoop
框架并运行示例程序(伪分布式)一、新建WinSCP连接二、安装jdk三、安装
Hadoop
框架四、执行
Hadoop
示例程序上一篇:大数据开发入门:一、VMware15.5Pro
达娃里氏
·
2023-11-05 23:42
大数据
hadoop
centos
云计算
Hadoop
集群搭建,基于3.3.4
hadoop
和centos8【图文教程-从零开始搭建
Hadoop
集群】,常见问题解决
Hadoop
集群搭建,基于3.3.4
hadoop
和centos8【小白图文教程-从零开始搭建
Hadoop
集群】,常见问题解决
Hadoop
集群搭建,基于3.3.4
hadoop
1.虚拟机的创建1.1第一台虚拟机的创建
杀死一只知更鸟debug
·
2023-11-05 23:10
Linux
hadoop
大数据
hdfs
hive创建分区表
分区表分的是文件夹2.创建数据[root@
hadoop
dool]#vimdata.txt#创建文本foriin$(seq10)#输入这个脚本,会自动生成数据doecho-e"$(date-d"$RANDOMminu
lambda-小张
·
2023-11-05 23:39
hive
hive
hadoop
完全分布式集群搭建步骤
观看此文档的基础为已经在VMWareWorkStationPro里面安装好了一台centOS7.最好是最小安装版本的.(最好在磁盘预留30G左右空间用于安装三台虚拟机)在这里插入图片描述先确认虚拟机是否可以联网pingwww.baidu.com(正常安装后可以联网)如图所示可以联网,然后可以ctrl+c停掉安装网络工具:yuminstallnet-tools(会出现y/n的选项输入yes即可)输入
xxxyyyttt!
·
2023-11-05 23:09
CentOS下
Hadoop
伪分布式集群的搭建(超详细)
1、环境准备jdk1.8下载地址:https://www.oracle.com/java/technologies/downloads/#java8进入官网如下图所示,选择自己合适的安装包下载即可
hadoop
m0_49405757
·
2023-11-05 23:09
hadoop
hadoop
hdfs
big
data
大数据
搭建
Hadoop
出现的问题,无法ping通,连接不上xshell
综合网络上查找的,我发现问题很简单,是因为自己之前用火绒-安全工具-启动项管理-服务项-VMwarenatservice(这个被我禁止启用了)后来去系统服务处打开发现不能修改为自动只能手动打开这是去火绒修改为允许启用就可以啦以上问题迎刃而解!
m0_62991414
·
2023-11-05 23:09
hadoop
Maven集成
hadoop
实现wordcount
1、环境需求idea开发工具maven3.3.9
hadoop
-2.7.7jdk1.8以上版本非必须,可根据自己的版本并修改下面的pom.xml对应版本号基于windows本地
hadoop
实现2、开始创建项目
重蹈覆辙的我
·
2023-11-05 23:38
hadoop
maven
java
win10安装
hadoop
⼀、软件下载1.
hadoop
-2.7.6下载2.winutils下载二、配置1.配置
hadoop
环境变量2.配置
hadoop
-env.cmd3.配置core-site.xml三、运行⼀、软件下载1.
hadoop
gcr*
·
2023-11-05 23:34
hadoop
hadoop
异常java.net.ConnectException 拒绝连接
[pipstat@PIPtest58
hadoop
]$bin/
hadoop
jarshare/
hadoop
/mapreduce/sources/
hadoop
-mapreduce-examples-2.5.2
emgexgb_sef
·
2023-11-05 23:34
java
hadoop
java
大数据
搜索引擎
数据库
hadoop
操作出现:9000 failed on connection exception java.net.ConnectException拒绝访问(已解决)
准备查看haddop上的文件,输入:
hadoop
fs-ls/出现了:ls:CallFromyx/127.0.1.1to0.0.0.0:9000failedonconnectionexception:java.net.ConnectException
begefefsef
·
2023-11-05 23:02
java
java
后端
Windows 环境下
Hadoop
的安装和配置
Windows环境下
Hadoop
的安装和配置Windows环境下
Hadoop
的安装和配置平台及版本安装Java1.8,并配置环境变量安装
Hadoop
2.7.3
Hadoop
核心配置文件启动
Hadoop
服务
UestcXiye
·
2023-11-05 22:30
数据挖掘
hadoop
windows
大数据
PostgreSQL在windows下如何启动
这段是废话,直接跳过看图即可:Greenplum是区别于
Hadoop
生态的大数据产品,Greenplum由PostgreSQL组成,在当下国内众多机构都采用了Greenplum,例如华为、中国银行等,另外
赫加青空
·
2023-11-05 22:59
SQL
postgresql
数据库
CentOS 7 搭建
Hadoop
3.3.1集群
1.软件准备jdk8:链接:https://pan.baidu.com/s/1zIha0ks8Nokok2cQtO53rA提取码:jd8x
hadoop
3.3.1:链接:https://pan.baidu.com
高过蓝天的云
·
2023-11-05 22:29
centos
hadoop
linux
大数据技术中的数据存储
Hadoop
分布式文件系统(
Hadoop
Di
幻想世界中的绚丽色彩
·
2023-11-05 22:58
大数据
java.net.ConnectException: 拒绝连接; For more details see: http://wiki.apache.org/
hadoop
/ConnectionRefu
java.net.ConnectException:拒绝连接;Formoredetailssee:http://wiki.apache.org/
hadoop
/ConnectionRefused可能是没睡醒的原因
今天也要学习呀~
·
2023-11-05 22:28
hive
hive
hdfs
Hive数据库实现分区表的创建及数据插入
Hive数据库实现分区表的创建及数据插入在大数据领域中,Hive是一种基于
Hadoop
的数据仓库工具,用于处理和分析大规模结构化数据。
艾丽丝的爱情
·
2023-11-05 22:28
hive
数据库
hadoop
大数据
关于出现
hadoop
102拒绝连接
自己通过使用jps查看到
hadoop
102上没有namenode服务启动然后自己通过使用my
hadoop
.shstop停止hdfs和yarn(my
hadoop
.sh是自己编写启动和关闭hdfs和yarn
总会有天明
·
2023-11-05 22:28
问题报错
hadoop
big
data
【项目实战】在win10上安装配置
Hadoop
的环境变量
一、说明注意:该教程适用于:远程连接Linux上的
Hadoop
集群,因此本步骤是不需要在本地再下载
hadoop
的在win10操作系统上,运行
Hadoop
以及其相关依赖包(比如Hbase依赖包)时,我遇到的情况是
本本本添哥
·
2023-11-05 22:57
009
-大数据
AI人工智能
AR&VR
hadoop
hbase
大数据
hadoop
拒绝连接
[root@node001~]#
hadoop
fs-ls/path/to/directoryls:CallFromnode001/192.168.137.155tonode01:9000failedonconnectionexception
爱想才能赢
·
2023-11-05 22:26
hadoop
大数据
hdfs
centos搭建
hadoop
伪分布式
一、环境准备Centos7虚拟机一台jdk1.8
hadoop
-3.1.3附华为开源镜像站下载地址:https://mirrors.huaweicloud.com/java/jdk/二、java环境安装使用
重蹈覆辙的我
·
2023-11-05 22:24
hadoop
分布式
centos
MapReduce开发笔记(使用Eclipse编写执行
Hadoop
)
环境搭建1、测试
Hadoop
集群环境首先我们已经成功部署安装了一个
hadoop
集群,然后本地可以连接到集群的Master节点。假设集群Master节点IP:192.168.2.144。
眼君
·
2023-11-05 20:08
MapReduce WordCount程序实践(IDEA版)
环境Linux:
Hadoop
2.xWindows:jdk1.8、Maven3、IDEA2021步骤编程分析编程分析包括:1.数据过程分析:数据从输入到输出的过程分析。
Hadoop_Liang
·
2023-11-05 20:56
Hadoop
IDEA
mapreduce
intellij-idea
大数据
Hadoop
环境搭建
前言
Hadoop
在大数据技术体系中的地位至关重要,
Hadoop
是大数据技术的基础,对
Hadoop
基础知识的掌握的扎实程度,会决定在大数据技术道路上走多远。
Super乐
·
2023-11-05 20:55
Hadoop
hadoop
分布式
大数据
hadoop
ubantu环境搭建_Ubuntu16.04+
hadoop
2.7.3环境搭建
最近开始学习大数据相关的知识,最著名的就是开源的
hadoop
平台了。这里记录一下目前最新版的
hadoop
在Ubuntu系统下的搭建过程。
lvero王
·
2023-11-05 20:51
hadoop
ubantu环境搭建
使用
Hadoop
命令行执行jar包详解(生成jar、将文件上传到dfs、执行命令、下载dfs文件至本地)
Hadoop
入门配置系列博客目录一览1、Eclipse中使用
Hadoop
伪分布模式开发配置及简单程序示例(Linux下)2、使用
Hadoop
命令行执行jar包详解(生成jar、将文件上传到dfs、执行命令
nana-li
·
2023-11-05 20:20
Hadoop
hadoop
jar包执行
dfs文件上传
dfs文件下载
Hadoop
安装教程 Linux版
Hadoop
安装教程Linux版一、Linux虚拟机安装方法一:使用Windows下Linux子系统(大佬可选)方法二:使用VMware安装Linux虚拟机(小白可选)方法三:安装双系统(不怕麻烦的可以试试
lnlnldczxy
·
2023-11-05 20:19
分布式
环境配置
hadoop
spark
flink
hadoop
启动出错 The value of property bind.address must not be null
hadoop
安装************************************************************/21/11/1715:15:56INFOnamenode.NameNode
我从远处聆听你
·
2023-11-05 20:17
大数据
测试用例
单元测试
大数据
hadoop
史上最详细的
hadoop
环境搭建
转自:https://blog.csdn.net/hliq5399/article/details/78193113前言
Hadoop
在大数据技术体系中的地位至关重要,
Hadoop
是大数据技术的基础,对
Hadoop
xk_一步一步来
·
2023-11-05 20:17
Hadoop
史上最详细的
Hadoop
环境搭建
2017年10月10日15:23:59阅读数:37070GitChat作者:鸣宇淳原文:史上最详细的
Hadoop
环境搭建关注公众号:GitChat技术杂谈,一本正经的讲技术【不要错过文末活动哦】前言
Hadoop
p312011150
·
2023-11-05 20:16
大型网站架构
数据库
hadoop
运行踩坑:Error: Could not find or load main class org.apache.
hadoop
.mapreduce.v2.app.
错误:Error:Couldnotfindorloadmainclassorg.apache.
hadoop
.mapreduce.v2.app.说明:计算wordcount出错,错误提示补充mapred-site.xml
亿钱君
·
2023-11-05 20:45
Bug
Hadoop
伪分布式环境搭建
一.虚拟机系统配置1.安装镜像文件CentOS7Minimal2.默认硬盘分区格式化选择虚拟机的位置,处理机配置使用默认的4核,磁盘大小默认为20G,根据自己需要选择大小。将虚拟磁盘储存为单个文件。3.设置root密码二.网络环境配置1.静态IP配置使用ipaddr确认网卡名称ens33编辑系统中关于网卡的配置文件/etc/sysconfig/network-scripts/ifcfg-ens32
九月暮
·
2023-11-05 20:43
hadoop
分布式
hdfs
Hadoop
环境搭建及Demo
参考博客Windows10安装
Hadoop
3.3.0教程(kontext.tech)
Hadoop
入门篇——伪分布模式安装&WordCount词频统计|LiuBaoshuai’sBlog
Hadoop
安装教程
星航夜空的帆舟
·
2023-11-05 20:10
疑难杂症
hadoop
大数据
分布式
大数据入门:
Hadoop
HDFS存储原理
在
Hadoop
生态当中,解决大数据存储,主要依靠就是HDFS,再配合数据库去完成。今天的大数据入门分享,我们就来讲讲
Hadoop
HDFS存储原理。1、什么是HDFS?
成都加米谷大数据
·
2023-11-05 16:35
大数据-Hive相关知识点介绍
Hive是基于
Hadoop
的一个数据仓库工具,可以将结构化的数据文件映射为一张表,并提供类SQL查询功能。基于一个统一的查询分析层,通过SQL语句的方式对HDFS上的数据进行查询、统计和分析。
ziania_cumt
·
2023-11-05 16:12
hive
大数据
hive知识点
Hive知识点1.hive定义hive是基于
Hadoop
的一个数据仓库工具,可以将结构化的数据文件映射为一张表,并提供类SQL查询功能本质:将HQL转化成MapReduce程序2.hive优缺点优点:①
^ω^菁菁
·
2023-11-05 16:41
笔记
hive
big
data
hadoop
大数据开发笔记(四):Hive分区详解
✨大数据开发笔记推荐:大数据开发面试知识点总结_GoAI的博客-CSDN博客_大数据开发面试本文详细介绍大数据
hadoop
生态圈各部分知识,包括不限于hdfs、yarn、mapreduce、hive、sqoop
GoAI
·
2023-11-05 16:08
#
Hive
大数据笔记
分区表
大数据
hive
三步
hadoop
搭建
1前期准备ubuntu(此例用18.10)虚拟机下载地址:https://mirrors.tuna.tsinghua.edu.cn/为了方便两个虚拟机的用户名都设置为
hadoop
,密码随意。
橙皇cc
·
2023-11-05 14:44
java程序设计大作业题目,附答案+考点
思维导图前言在很多时候,我们都可以在各种框架应用中看到ZooKeeper的身影,比如Kafka中间件,Dubbo框架,
Hadoop
等等。为什么到处都看到ZooKeeper?
MySQL学习笔记
·
2023-11-05 13:33
程序员
java
经验分享
面试
上一页
59
60
61
62
63
64
65
66
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他