Hadoop-2.6.0

hadoop出现slave：nice:/root/app/hadoop-2.6.0/bin/hdfs：no such file错误

在配置完hadoop-2.6.0，用start-all.sh进行启动时，发现数据节点slave1出现slave：nice:/root/app/hadoop-2.6.0/bin/hdfs：nosuchfileordirectory
reedom1991·2020-02-23 16:26

单机部署Spark-1.4.0总结（Hadoop-2.6.0采用伪分布式）【已测】

安装JDK1.7+【下载网址】http://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html环境变量设置（最好不要采用openjdk）：exportJAVA_HOME=/usr/java/java-1.7.0_71exportJRE_HOME=$JAVA_HOME/jreexportPATH=$
popsheng·2020-01-03 06:35

Hadoop 2.6.0分布式环境安装

网站上提供的Hadoop包是32位的，关于如何在64位机器上如何重新编译Hadoop，请参考我的上一篇文章：编译Hadoop2.6.0说明：Hadoop和Zookeeper的工作目录分别为：/opt/hadoop
明月的味道·2020-01-02 08:16

flume消费kafka数据，以时间戳的形式创建文件，保存到hdfs

组件：flume-1.8、hadoop-2.6.0、kafka-2.10-0.10.2.1目的：flume消费kafka数据，以时间戳的形式创建文件，保存到hdfsSINKS.HDFS配置说明：channeltypehdfspath
HeCCXX·2018-12-28 15:13

动态加载hive-jdbc

亲测版本：hive-jdbc-1.1.0集群版本：CDH5.13.2(hadoop-2.6.0)相关jar包：packagecom.zcah.healthScan.common;importjava.
Mr.差啥呀·2018-11-09 16:00

搭建大数据环境二（hadoop2.0集群搭建）

Hadoop2.0下载安装包：wgethttp://archive.apache.org/dist/hadoop/common/hadoop-2.6.0/hadoop-2.6.0.tar.gz解压安装包增加配置
西瓜和葡萄·2018-10-24 10:08

解决Hadoop报错：Failed to locate the winutils binary in the hadoop binary path

出错的原因在于window本地无法获取hadoop的配置解决策略：1.http://archive.apache.org/dist/hadoop/core/hadoop-2.6.0/下载到本地并解压D:
飞魔006·2018-05-11 18:02

Window下的Spark开发环境配置

Window的Spark环境配置分三步：1.Hadoop下载与配置下载：http://archive.apache.org/dist/hadoop/core/，比如hadoop-2.6.0版本配置：配置
cleargy·2018-05-07 16:54

Hadoop-2.6.0完全分布式集群+Zookeeper安装测试(二)

1.描述：大数据平台环境搭建连载。Hadoop集群+Zookeeper集群安装2.环境介绍环境配置：    虚拟机：          vmwareworkstation10.0.0    系统：             CentOS-6.5-x86_64    节点：             192.168.73.100  Master          192.168.73.101  Slav
少半个西瓜·2018-03-08 15:59

Hadoop-2.6.0完全分布式集群搭建和测试(一)

1.描述：大数据平台环境搭建连载。2.环境介绍环境配置：虚拟机：vmwareworkstation10.0.0系统：CentOS-6.5-x86_64节点：192.168.73.100Master192.168.73.101Slave01192.168.73.102Slave02JDK:jdk-8u161-linux-x64.tar.gzHadoop:hadoop-2.6.0.tar.gz3.Ha
少半个西瓜·2018-02-26 08:52

spark windows开发调试环境

spark在windows搭建开发测试环境，需要进行配置1、JDK本人用的是jdk1.7.0_152、hadoop-2.6.0.tar.gz下载hadoop-2.6.0.tar.gz，解压，假如解压到D:\hadoop
trista0929·2017-11-24 17:45

在Hadoop上运行python程序错误集合

1.file参数，在Hadoop上执行时一定要加file参数hadoopjar/softs/hadoop/hadoop-2.6.0/share/hadoop/tools/lib/hadoop-streaming
coffeeCandy·2017-08-31 19:57

HBase与hive集成

集成环境：hadoop-2.6.0（Master，Slave1，Slave2），hbase-0.98.6-hadoop2，hive-1.2.11.hive和hbase集成需要的jar包有guava，hbase-common
一只小飞狐·2017-08-25 09:21

Hadoop入门（四）之hadoop集群搭建（一主二从）

我的Hadoop版本是hadoop-2.6.0、JDK1.7。
wabishi_fly·2017-08-10 22:14

hadoop搭建四个配置文件(core-site.xml hdfs-site.xml mapred-site.xml yarn-site.xml )的简单介绍

一、core-site.xmlfs.defaultFShdfs://master:9000hadoop.tmp.dirfile:///usr/hadoop/hadoop-2.6.0/tmpfs.checkpoint.period3600
Howie Lee·2017-08-10 14:52

Hbase进行RowCount统计

测试环境：Apache版的hadoop-2.6.0（cdh版的hadoop-2.6.0-cdh5.5.2也可以）Apache版的hbase-1.0.0（一开始我用的是cdh版的hbase-1.0.0-cdh5.5.2
小强签名设计·2017-07-18 11:32

在linux环境下搭建hadoop

配置hadoop参数配置mapred-site.xmlmapred.job.trackerlocalhost:9001配置core-site.xmlhadoop.tmp.dir/usr/local/hadoop
SeaHBJ·2017-06-23 20:15

MapReduce配置

details/71566137http://blog.csdn.net/ymf827311945/article/details/71258273Step2：执行命令：vi/opt/apps/hadoop/hadoop
Star-Technology·2017-06-17 11:22

Hadoop-2.6.0完全分布式搭建

准备工作：Ubuntu14.04镜像文件；xshell；xftp；virtualbox；开始安装：装好Ubuntu虚拟机；在虚拟机上安装opensshserverapt-get-yinstallopenssh-server安装vimapt-get-yinstallvim修改主机名vim/etc/hostname将三台机器的主机名分别修改成Master,Slave1,Slave2安装JDK&&环境变
Lamborghinsz·2017-05-08 17:34

(17)mapreduce 提交任务两种方式

1.本地提交代码打包到jar里面，上传到服务器，然后用命令行启动/app/soft/hadoop-2.6.0/bin/hadoopjar/app/soft/hadoop-2.6.0/hadoop.jarcom.bigdata.task.keywordCount2
GE12·2017-05-03 11:41

基于hadoop2.6.0的hive-1.2.1安装

1.安装环境:有一个完全分布式的Hadoop-2.6.0。2.安装准备:需要在网上下一个Hive的压缩包，我这儿用的是apache-hive-1.2.1-bin.tar.gz。
Ypersistence·2017-03-31 10:31

Spark生态之Alluxio学习11--alluxio-1.3.0集群配置

更多代码请见：https://github.com/xubo245/SparkLearningSpark生态之Alluxio学习版本：alluxio（tachyon）1.3.0，spark-1.5.2,hadoop
bob601450868·2016-11-10 14:00

ganglia学习1之ganglia集群版搭建（支持hadoop和spark）

更多代码请见：https://github.com/xubo245/SparkLearningspark源码解读系列环境：spark-1.5.2、hadoop-2.6.0、scala-2.10.4，ganglia
bob601450868·2016-11-09 15:00

ganglia学习2之Spark编译带有ganglia的版本

更多代码请见：https://github.com/xubo245/SparkLearningspark源码解读系列环境：spark-1.5.2、hadoop-2.6.0、scala-2.10.4，ganglia
bob601450868·2016-11-09 15:00

spark源码解读1之Partitioner

更多代码请见：https://github.com/xubo245/SparkLearningspark源码解读系列环境：spark-1.5.2、hadoop-2.6.0、scala-2.10.41.理解
bob601450868·2016-11-04 19:00

Hadoop2.6.0启动脚本分析

抛出注释，内容很少：#Startallhadoopdaemons.Runthisonmasternode.这个脚本在hadoop-2.6.0被建议不要使用。
sooner高·2016-10-17 12:34

hive-2.0安装

版本与前提条件：hadoop-2.6.0,hive-2.0.0一、hive安装1、官网下载地址：http://hive.apache.org/downloads.html下载后解压到指定目录,例如/usr
JamesFen·2016-09-03 17:37

Hadoop集群化搭建（四）Hadoop-2.6.0安装

虚拟机VMwareWorkstation12.0JDK1.71安装Hadoop-2.6.01.1下载wgethttp://mirrors.hust.edu.cn/apache/hadoop/common/hadoop
MAXCA·2016-06-30 08:27

hdfs dfs -ls

[[email protected]]#pwd/user/local/hadoop-2.6.0[[email protected]]#bin/hdfsdfs-mkdirxmkdirmkdir
hzdxw·2016-06-17 12:37

Hadoop错误积累

DataNode查看hadoop-root-datanode-node1.log报错信息：java.io.IOException:IncompatibleclusterIDsin/usr/local/hadoop
罗森内里的红·2016-06-15 23:38

hadoop +hbase +zookeeper 完全分布搭建 (版本一)

最新的hadoop-2.6.0又增加了YARNHA注意：apache提供的hadoop-2.6.0的安装包是在32位操作系统编译的，因为hadoop依赖一些C++的本地库，所以如果在64位的操作上安装hadoop
u013378306·2016-05-29 09:00

Spark on Yarn运行测试

1.启动hdfs：root@Master:/usr/local/hadoop/hadoop-2.6.0/sbin#.
唐予之_·2016-05-24 16:28

HADOOP/HBase动态新增节点

版本是否相同并拷贝JDK，并配置/etc/profile文件的JAVA_HOME和CLASSPATH属性2.配置/etc/hosts文件，新增新加机器的计算机名，包括原有机器和新增机器都要修改该文件3.拷贝hadoop
谁伴我闯荡·2016-05-24 14:02

hadoop集群中的时间同步

版本信息：CentOS6.5,hadoop-2.6.0,jdk1.8.0_66测试集群hosts：192.168.1.144master192.168.1.145slave01192.168.1.146slave021
agent_bin·2016-05-15 10:50

hadoop-2.6.0 完全分布式安装

hadoop-2.6.0集群的配置安装：机器环境是64位的centos-6.5、jdk-1.8、64位的hadoop-2.6.05个机器，机器的主机名分别为slave01、slave02、master、
ZH519080·2016-05-14 15:00

虚拟机中搭建hadoop

Hadoop搭建过程一、安装准备虚拟机：CentOS-6.5-x86_64-bin-DVD1.isoJava：jdk-7u79-linux-x64.gzHadoop：hadoop-2.6.0安装过程为先在一台虚拟机中配置好时钟
jyli2_11·2016-05-09 14:00

hadoop平台搭建（2.6.0）

一.环境准备环境：VMware,xshellOS:Ubuntuserver(选择最简安装，只安装OpenSSH-Server)版本：hadoop-2.6.0三个节点：192.168.16.131master
svmachine·2016-05-06 19:00

linux Shell入门

打开调试记录输出 set–x #打印123 echo"123" #定义一个变量 STR="HELLOTOM" #输出变量 echo"$STR" #执行一个hadoopMR hadoopjar/itcast/hadoop
u014726937·2016-04-30 15:00

Hadoop--HDFS

Hadoop：分布式系统基础架构HDFS（分布式文件系统）配置的位置：/letv/data/hadoop-2.6.0/etc/Hadoop配置hdfs-site.xml：hadoop2.0官方提供了两种
JackLi31742·2016-04-28 15:00

基于HDFS的SparkStreaming案例实战和内幕源码解析

一、环境准备1.启动Hadoop集群 cd/usr/local/hadoop/hadoop-2.6.0/sbin/ .
lxhandlbb·2016-04-19 10:00

CentOS6.5上hive安装过程与常见错误调试

CentOS6.5上hive安装过程准备：已安装hadoop，这里我使用hadoop-2.6.0单进伪分布式，将hive安装在hadoop用户下第一部分：安装配置mysql1.确保系统中已安装了MySQL
agent_bin·2016-04-15 16:25

Hadoop2.6.0配置过程

core-site.xmlfs.defaultFShdfs://master:9000Thenameofthedefaultfilesystemhadoop.tmp.dir/usr/local/hadoop/hadoop
_Hong_·2016-04-14 14:13

linux环境下编译hadoop-2.6.0源码

软件准备：hadoop-2.6.0-srcjdk1.7mavenprotobuffindbugsant对jdk、maven、findbugs、ant设置环境变量；protobuf需要单独安装exportJAVA_HOME=/app/jdk7 exportMAVEN_HOME=/app/apache-maven-3.0.5 exportANT_HOME=/app/ant exportFINDBUGS
y0367·2016-04-13 14:00

第73课内幕资料详细版 Spark SQL Thrift Server 实战 每天晚上20：00YY频道现场授课频道68917580

***王家林老师授课http://weibo.com/ilovepains*/ 每天晚上20：00YY频道现场授课频道689175801.启动hadooproot@master:/usr/local/hadoop
duan_zhihua·2016-04-04 20:00

Hadoop集群环境搭建详细步骤

jdk1.7.0_72192.168.5.231ubuntu231192.168.5.232ubuntu232192.168.5.233ubuntu2332、ubuntu231选择作为主节点Master下载hadoop
codepeng·2016-03-30 14:24

Hadoop-2.6.0 + Zookeeper-3.4.6 + HBase-0.98.9-hadoop2环境搭建示例

1   基本信息1.1    软件信息hadoop-2.6.0zookeeper-3.4.6hbase-0.98.9-hadoop2(以下示例中使用的操作系统是Centos6.5，请将下载的3个tar包分别解压并放置在/usr/local/目录下)(Hbase包中lib里可以看到zookeeper的jar包，从文件名可以确定使用的zookeeper版本)1.2    集群组成：ServerName
yekang12·2016-03-20 11:05

IMF 传奇行动 启动SPARK master无法启动 内存不够问题解决) failed to map 715849728 bytes for committing reserved memory.

[root@masterhadoop]#cd/usr/local[root@masterlocal]#lsapache-hive-1.2.1 hadoop-2.6.0  lib          sharebin
duan_zhihua·2016-03-13 20:00

27课 ：SPARK 运行在yarn资源调度框架 client 、cluster方式 ！！

分布式集群root@master:/usr/local/hadoop-2.6.0/etc/hadoop#vi/etc/hosts127.0.0.1   localhost192.168.189.1master192.168.189.2worker1192.168.189.3worker2192.168.189.4worker3192.168.189.5worker4192.168.189.6wor
duan_zhihua·2016-03-05 21:00

ubuntu 15.10安装mysql数据库 开启远程端口

最近基于hadoop-2.6.0安装apache-hive-1.2.1-bin，需要安装mysql数据库（Hive默认使用的derby）。
Kevin12·2016-03-05 19:46

ubuntu 15.10安装mysql数据库 开启远程端口

阅读更多最近基于hadoop-2.6.0安装apache-hive-1.2.1-bin，需要安装mysql数据库（Hive默认使用的derby）。
Kevin12·2016-03-05 14:00
上一页 1 2 3 4 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他