hadopp

Hadopp未授权访问导致RCE

前言：Hadoop是一个开源的分布式计算框架，用于处理大规模数据集的存储和处理。它基于Google的MapReduce算法和GoogleFileSystem（GFS）的论文，旨在提供一个可靠、可扩展、分布式存储和处理大规模数据的解决方案。漏洞产生原因：负责对资源进行同一管理调度的ReasourceManager组件的UI管理界面开放在8080/8088端口，攻击者无需认证即可通过RESTAPI部署
安鸾彭于晏·2024-02-02 22:27

Hive安装与配置

hadopp安装与配置Hive的基本安装从官网下载Hive二进制包，下载好放在/opt目录下。
qq_58647543·2024-01-12 11:50

mapreduce 本地开发环境

.*.tar.gz2、解压缩hadoop.dll、winutils.exe等安装文件，并拷贝到hadopp解压缩文件夹的bin目录下3、配置环境变量HADOOP_HOME，并将%HADOOP_HOME%
mr_酱·2023-09-07 04:12

记一次hadoop.tmp.dir配置因重启机器导致无法启动

缘由线上一直运行的hadopp集群，突然有一天服务器断电重启，集群正常启动，但是sparkonyarn上的任务无法提交，报错一提交任务AM就被kill掉。
spark大数据玩家·2023-08-31 03:17

HDFS源码-DataNode启动流程

HDFS源码-DataNode启动流程版本号：hadopp2.7.0文章目录HDFS源码-DataNode启动流程前言一、DataNode启动1、相关类2、重点代码二、DN注册流程1、BPServiceActor
尹忠政·2023-08-20 21:38

HDFS编程实践（Hadoop3.1.3）

执行如下命令：一、利用Shell命令与HDFS进行交互1.目录操作:2.文件操作:二、利用Web界面管理HDFS三、编程实现以下指定功能，和使用Hadopp提供的Shell命令完成相同的任务。
一 乐·2023-01-30 15:53

Hadoop RPC

Hadopp作为分布式存储系统，为了便于各个节点之间的通信和交互，基于IPC进程间通信模型，实现了一套高效的轻量级RPC框架，这套RPC框架底层采取了javaNIO，java动态代理以及protobuf
小小少年Boy·2021-04-25 21:28

使用python实现MapReduce的wordcount实例

Hadopp的基本框架是用java实现的，而各类书籍基本也是以java为例实现mapreduce，但笔者日常工作都是用python，故此找了一些资料来用python实现mapreduce实例。
lpty·2020-09-15 03:33

详细介绍虚拟机上单节点安装Hadopp

虚拟机上安装Hadoop我虚拟机上装的Centos7一、去Hadoop官网下载安装包我下载的是2.7.3版本稳定版http://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common/hadoop-2.7.3/hadoop-2.7.3.tar.gz二、解压文件[root@localhost~]#tar-xzvfhadoop-2.7.3.tar.gz三、将
H_w·2020-09-13 01:26

hadopp 环境搭建

我的配置我在虚拟机中设置了三个实例，以下是它们的名字s1：masters2：slaves3：slave虚拟机的网络配置配置固定IPvi/etc/network/interfacesautoeth0ifaceeth0inetstaticaddress192.168.191.128netmask255.255.255.0gateway192.168.191.1配置机器的名称vi/etc/hosts12
bluedraam_pp·2020-09-10 12:31

hadopp ubuntu

最近一直在自学Hadoop，今天花点时间搭建一个开发环境，并整理成文。首先要了解一下Hadoop的运行模式：单机模式（standalone）单机模式是Hadoop的默认模式。当首次解压Hadoop的源码包时，Hadoop无法了解硬件安装环境，便保守地选择了最小配置。在这种默认模式下所有3个XML文件均为空。当配置文件为空时，Hadoop会完全运行在本地。因为不需要与其他节点交互，单机模式就不使用H
锅里的汤包X·2020-08-19 06:57

Hadoop单节点及伪分布式文件系统的搭建

实验环境：rhel7.3虚拟机主机信息实现功能server1hadoop真机测试1.hapdoop单节点的搭建hadoop单节点是在本地创建一个文件系统，与伪分布式文件系统的不同之处在于单节点在hadopp
大海，星空·2020-07-28 23:45

Hadoop2.7.3安装配置

hadopp各个版本地址：http://archive.apache.org/dist/hadoop/core/环境准备：centos7,jdk8hadoop四大模块1common2hdfs//namenode
jessDL·2020-07-13 06:58

模块一：Hadoop核心框架（四）----Apache Hadoop的重要组成部分

Hadopp=HDFS+MapReduce+Yarn+Common1.HadoopHDFS:一个高可用、高吞吐量的分布式文件系统。
没有眉毛的阿斗叶·2020-07-08 22:21

大数据技术原理与应用 - 实验二 熟悉常用的 HDFS 操作

JavaIDE：IDEA三、实验内容和要求（1）编程实现以下指定功能，并利用Hadopp提供的Shell命令完成相同的任务。1.向HDFS中上
weixin_33922672·2020-07-08 16:07

使用hadoop自带的例子作测试 笔记三

hadoopdfs-ls/Found1itemsdrwxr-xr-x-rootsupergroup02015-10-0213:25/opt#将操作系统中的文件放到hadoop中Hadoopdfs-put本地文件hadopp
weixin_30458043·2020-07-08 13:35

Hadoop多节点集群安装配置

Hadoop分布式操作系统的安装与配置本次安装的配置文件如下表：除此之外，还需要用到WinScp软件用来从本地上传Hadopp和Jdk到虚拟机。
渡口的夕阳·2020-07-05 17:55

hadoop之slaves文件详细分析

hadoop之saves文件详细分析（一）注：所有操作基于hadopp-2.7.5，本篇文章主要涉及一些对于slaves文件之于hadoop平台的思考首先大家都知道，要想配置一个完全分布式平台，首先要配置
韩冬_Yeah·2020-07-05 07:43

hadoop+Kylin服务器搭建教程

公司准备使用Kylin进行数据分析，因此需要进行hadopp+Kylin服务器的搭建和使用。
weixin_34043301·2020-06-28 10:20

windows安装hbase步骤

1下载hbase，需要注意对应的hadopp的版本，参照http://hbase.apache.org/book.html#configuration查看适配性。
superhanliu·2020-06-26 16:35

HDFS，MapRdeuce介绍

HDFS（HadoopDistributedFileSystem）Hadopp分布式文件系统，Hadoop的设计起源于ApacheLucene，是一个开源的分布式计算平台，也是属于Apache基金会的。
fancy宸·2020-04-07 05:27

hadoop框架学习笔记三 2020-04-01

Hadoop运行环境搭建1.1虚拟机环境准备1.2安装JDK1.3安装Hadoop1.4Hadopp目录结构bin目录（存放的系统服务）etc目录（系统配置文件）
熊大呀·2020-04-01 14:46

Linux执行 .sh 脚本报错

一、问题背景今天在学习hadopp框架时，编写一个hadoop启动进程的sheel脚本，由于不想使用Linux自带的VM编辑器，就在Windows下编辑脚本的内容，然后在Linux下运行此脚本，接着就报了几个错误报错原文
紫菱_cmx·2019-12-25 14:00

Hadopp3.11的伪分布式搭建

准备软件软件下载地址VMwareWorkstation14中文破解版https://pan.baidu.com/s/1pbDXpgpNQTdTRzzKNWfE1Aubuntu-18.10-desktop-amd64http://releases.ubuntu.com/18.10/ubuntu-18.10-live-server-amd64.isoJDKhttps://download.oracle
Dreamy_Z·2019-02-22 14:12

Hadopp3.11的伪分布式搭建

准备软件软件下载地址VMwareWorkstation14中文破解版https://pan.baidu.com/s/1pbDXpgpNQTdTRzzKNWfE1Aubuntu-18.10-desktop-amd64http://releases.ubuntu.com/18.10/ubuntu-18.10-live-server-amd64.isoJDKhttps://download.oracle
Dreamy_Z·2019-02-22 14:12

Hadoop shuffle过程

转自：http://langyu.iteye.com/blog/992916，多谢分享，学习Hadopp性能调优的可以多关注一下Shuffle过程是MapReduce的核心，也被称为奇迹发生的地方，Shuffle
upupfeng·2018-11-15 21:29

【Hive篇】Hive的安装

HIVE的搭建比较简单，依托于Hadopp集群，以及mysql服务端。多种搭建方式，主要介绍单一用户和多用户的场景，其中node01放置mysql服务端，node02放hive的单一用户模式。
塵世星空·2018-03-04 12:48

hadoop安装

及其它下载站点http://www.oracle.com/technetwork/java/javase/downloads/index.html oracle-jdk下载站点，要求jdk不要太旧，要和hadopp
wang__tao·2016-04-06 19:00

hbase总结：hbase连接异常

versions:hbase1.1.2+hadopp-2.2.0一、异常提示：java.io.IOException:Couldnotlocateexecutablenull\bin\winutils.exeintheHadoopbinaries
jamin_tan007·2015-11-26 12:24

3、Hbase

hbase---Hadopp database   HBase的数据模式 将众多表按行健和时间戳合并成一个虚表，形成一个“BigTable” anchor Row Key Time
nickfover·2014-11-13 15:00

Hadopp简介

http://baike.baidu.com/view/908354.htm（自） 一个分布式系统基础架构，由Apache基金会开发。用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力高速运算和存储。Hadoop实现了一个分布式文件系统（Hadoop Distributed File System），简称HDFS。HDFS有着高容错性的特点，并且设计用来部署在低廉的（lo
疯狂的草儿·2010-10-11 13:00

Hadopp简介

http://baike.baidu.com/view/908354.htm（自） 一个分布式系统基础架构，由Apache基金会开发。用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力高速运算和存储。Hadoop实现了一个分布式文件系统（Hadoop Distributed File System），简称HDFS。HDFS有着高容错性的特点，并且设计用来部署在低廉的（lo
疯狂的草儿·2010-10-11 13:00

Apache Hadoop Wins Terabyte Sort Benchmark

100亿100字节的纪录，yahoo拥有13000以上各节点的Hadopp集群。
masterkey·2008-07-29 20:00

Apache Hadoop Wins Terabyte Sort Benchmark

100亿100字节的纪录， yahoo拥有13000以上各节点的Hadopp集群。
masterkey·2008-07-29 20:00

Apache Hadoop Wins Terabyte Sort Benchmark

100亿100字节的纪录，yahoo拥有13000以上各节点的Hadopp集群。
masterkey·2008-07-29 20:00
上一页 1 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他