Hadoop开发

Hadoop - Hadoop开发环境搭建

卸载JDK查看当前jdk信息rpm-qa|grepjdk卸载rpm-e--nodepsjava-1.6.0-openjdk-1.6.0.0-1.66.1.13.0.el6.x86_64安装JDK将JDK放置在/usr/local/java中配置环境变量exportJAVA_HOME=/usr/local/java/jdk1.8.0_45exportCLASSPATH=.:$JAVA_HOME/li
Name_Larry·2016-04-06 10:09

Win7+Eclipse+Hadoop2.6.4开发环境搭建

阅读更多Hadoop开发环境搭建感谢参考网站：http://www.cnblogs.com/huligong1234/p/4137133.html一、软件准备JDK：jdk-7u80-windows-x64
wenhai_zhang·2016-04-05 11:00

Win7+Eclipse+Hadoop2.6.4开发环境搭建

Hadoop开发环境搭建感谢参考网站：http://www.cnblogs.com/huligong1234/p/4137133.html一、软件准备JDK：jdk-7u80-windows-x64.exehttp
wenhai_zhang·2016-04-05 11:00

用URL来操作Hadoop

在我们部署好hadoop开发环境的时候，接下来就是学习编写代码，真正的进入Hadoop的世界。
温润如风·2016-03-23 11:19

用URL来操作Hadoop

在我们部署好hadoop开发环境的时候，接下来就是学习编写代码，真正的进入Hadoop的世界。
hsl_1990_08_15·2016-03-23 11:00

Hadoop技巧（01）：插件，终端权限

文章是哥(mephisto)写的，SourceLink 序   在hadoop开发或者使用中，可能会使用到一些插件或3方软件，比如：Eclipse的Hadoop插件，ETL的Kettle。
sinodzh·2016-02-29 10:00

在ubuntu上搭建hadoop开发环境

一,安装eclipse 因为系统是64位,所以eclipse也要64位,下载好了后直接解压 tar-zxvf下载的文件 -C 目标路径 -C更改当前目录为目标路径 -z一般格式为xx.tar.gz或xx.tgz -x:解圧缩 -v：压缩的过程中显示文件！这个常用 -f：使用档名，请留意，在f之后要立即接档名喔！不要再加其他参数！ 解圧后,在图形界面的终端中输入,目标路径/eclipse/eclip
皇驴西太·2016-02-26 07:46

Hadoop MapReduce 初级入门算法总结

HadoopMapReduce初级入门算法总结： 前提知识点：1、掌握HadoopHDFS文件系统（文件上传、下载等基本操作）2、理解HadoopMapReduce的Map、Redcue的原理及过程3、搭建ecliplse的Hadoop
duan_zhihua·2016-02-16 12:00

hadoop与mysql数据库的那点事

   转眼间已经接触了hadoop两周了，从之前的极力排斥到如今的有点喜欢,刚开始被搭建hadoop开发环境搞得几乎要放弃，如今学会了编写小程序,每天都在成长一点挺好的，好好努力,为自己的装备库再填一件武器挺好的
背着理想去闯荡·2016-02-02 16:00

Cloudera Hadoop4实战视频教程下载

ClouderaManager介绍与安装 第二讲：ClouderaManager详解 第三讲：CDH4.1介绍与环境搭建一 第四讲：CDH4.1环境搭建二 第五讲：Hadoop工作原理、调度策略 第六讲：Hadoop
神的一生·2016-01-18 11:05

Cloudera Hadoop4视频教程下载

平台数据处理流程总览第一讲：ClouderaManager介绍与安装第二讲：ClouderaManager详解第三讲：CDH4.1介绍与环境搭建一第四讲：CDH4.1环境搭建二第五讲：Hadoop工作原理、调度策略第六讲：Hadoop
80后的童年2·2016-01-18 10:00

配置 hadoop 开发环境+运行 wordcount 程序

一eclipse中hadoop环境部署概览二前期准备三配置Hadoop开发环境四Eclipse中直接提交MapReduce任务1新建MapReduce工程2新建java工程五以Jar包方式运行1系统Export
u011414200·2016-01-14 11:00

hadoop开发—Java零基础,开发选择什么开发工具比较合适

转载：http://www.aboutyun.com/thread-6892-1-1.html本文为解疑贴：可以带着下面问题来阅读本文：1.你对下面的开发工具了解多少？2.下面那些常用开发工具？思考：在你想开发hadoop的时候，你认为自己会碰到什么问题？零基础还可以查看：零基础Java开发hadoop环境需要考虑的问题首先我们看一下Java有哪些开发工具Java开发工具介绍1、JDK(JavaD
sherri_du·2016-01-10 21:00

hadoop开发—Java零基础,开发选择什么开发工具比较合适

转载：http://www.aboutyun.com/thread-6892-1-1.html本文为解疑贴：可以带着下面问题来阅读本文：1.你对下面的开发工具了解多少？2.下面那些常用开发工具？思考：在你想开发hadoop的时候，你认为自己会碰到什么问题？零基础还可以查看：零基础Java开发hadoop环境需要考虑的问题首先我们看一下Java有哪些开发工具Java开发工具介绍1、JDK(JavaD
tianbwin2995·2016-01-10 15:00

1、JAVA的简单介绍、入门，开发环境搭建、开发Java程序

    hadoop开发方式总结及操作指导（这个中对这部分有详细的讲解）     http://www.aboutyun.com/thread-6950-1-1.html  Java的简单了解    JavaSE
sherri_du·2016-01-10 13:00

学习大数据，实战Hadoop开发视频课程你学会了吗？

课程名称：实战Hadoop开发视频课程课程目标：了解Hadoop/MapReduce架构原理；掌握HDFS文件系统操作；掌握Hadoop大数据实战开发技术；胜任大数据开发工程师岗位。
让往事随风·2016-01-06 16:00

Yarn的JVM重用功能——uber

2、本文中uber的配置部分，主要参考之前Hadoop开发者的言论。但是我当初看该言论的时候对一些细节有所疑惑，因此在本文中
xiewenbo·2015-12-30 13:00

windows7下eclipse连接ubuntu中的hadoop开发环境配置

工具下载eclipse-jee-mars-1-win32-x86_64下载地址：http://www.eclipse.org/downloads/hadoop-2.5.2下载地址：http://hadoop.apache.org/releases.htmlhadoop-src-2.5.2下载地址：http://hadoop.apache.org/#Download+Hadoophadoop2x-e
Jumay0612·2015-12-24 18:55

MAC下hadoop开发环境搭建系列（五）

 分享一个mapreduce程序，作用：将hdfs文件数据批量加载进redis内存数据库：1.源代码： /***Program:*TheprogramisusedtobatchloaddatatoredisbyJedis.*History:*CreatedbyQingshouChenon15/11/13.*/packagecom.asiainfo.bdcenter;importorg.apache
qingshou117·2015-12-21 19:00

MAC下hadoop开发环境搭建系列（五）

阅读更多分享一个mapreduce程序，作用：将hdfs文件数据批量加载进redis内存数据库：1.源代码：/***Program:*TheprogramisusedtobatchloaddatatoredisbyJedis.*History:*CreatedbyQingshouChenon15/11/13.*/packagecom.asiainfo.bdcenter;importorg.apac
qingshou117·2015-12-21 19:00

MAC下hadoop开发环境搭建系列（五）

阅读更多分享一个mapreduce程序，作用：将hdfs文件数据批量加载进redis内存数据库：1.源代码：/***Program:*TheprogramisusedtobatchloaddatatoredisbyJedis.*History:*CreatedbyQingshouChenon15/11/13.*/packagecom.asiainfo.bdcenter;importorg.apac
qingshou117·2015-12-21 19:00

MAC下hadoop开发环境搭建系列（四）

好的开发工具可以显著提高效率，这里推荐一款IntelliJIDEA。下载地址：https://www.jetbrains.com/idea/download/一般开发Community版就够用了。下面用java写个简单的HelloWorld。1.新建项目HelloWorld： 2.新建HelloWorld类： 3.编写代码： 4.点右上角EditConfigurations->“+”->"Appl
qingshou117·2015-12-21 19:00

MAC下hadoop开发环境搭建系列（三）

Hadoop伪分布式安装，可以在单节点上模拟分布式的各个进程，本地开发环境建议采用这种方式：#配置免密钥登陆 ssh-keygen-tdsa-P''-f~/.ssh/id_dsacat~/.ssh/id_dsa.pub>>~/.ssh/authorized_key  #创建目录cd/Users/Administrator/hadoopmkdirtmpmkdir-phdfs/namemkdirhdf
qingshou117·2015-12-20 20:00

MAC下hadoop开发环境搭建系列（三）

阅读更多Hadoop伪分布式安装，可以在单节点上模拟分布式的各个进程，本地开发环境建议采用这种方式：#配置免密钥登陆ssh-keygen-tdsa-P''-f~/.ssh/id_dsacat~/.ssh/id_dsa.pub>>~/.ssh/authorized_key#创建目录cd/Users/Administrator/hadoopmkdirtmpmkdir-phdfs/namemkdirhd
qingshou117·2015-12-20 20:00

MAC下hadoop开发环境搭建系列（三）

阅读更多Hadoop伪分布式安装，可以在单节点上模拟分布式的各个进程，本地开发环境建议采用这种方式：#配置免密钥登陆ssh-keygen-tdsa-P''-f~/.ssh/id_dsacat~/.ssh/id_dsa.pub>>~/.ssh/authorized_key#创建目录cd/Users/Administrator/hadoopmkdirtmpmkdir-phdfs/namemkdirhd
qingshou117·2015-12-20 20:00

MAC下hadoop开发环境搭建系列（二）

 Hadoop的安装，hadoop有三种安装方式：1）Standalone单机模式，仅用于调试2）Pseudo-Distributed伪分布模式，单节点上同时启动NameNode、DataNode、ResourceManager、NodeManager、SecondaryNamenode等进程，模拟分布式运行的各个节点。3）Fully-Distributed完全分布式模式，真正的hadoop集群，
qingshou117·2015-12-17 11:00

MAC下hadoop开发环境搭建系列（二）

阅读更多Hadoop的安装，hadoop有三种安装方式：1）Standalone单机模式，仅用于调试2）Pseudo-Distributed伪分布模式，单节点上同时启动NameNode、DataNode、ResourceManager、NodeManager、SecondaryNamenode等进程，模拟分布式运行的各个节点。3）Fully-Distributed完全分布式模式，真正的hadoop
qingshou117·2015-12-17 11:00

MAC下hadoop开发环境搭建系列（二）

阅读更多Hadoop的安装，hadoop有三种安装方式：1）Standalone单机模式，仅用于调试2）Pseudo-Distributed伪分布模式，单节点上同时启动NameNode、DataNode、ResourceManager、NodeManager、SecondaryNamenode等进程，模拟分布式运行的各个节点。3）Fully-Distributed完全分布式模式，真正的hadoop
qingshou117·2015-12-17 11:00

MAC下hadoop开发环境搭建系列（一）

（一）JDK的安装hadoop是java语言写的，依赖jdk，所以要部署hadoop首先要安装jdk，操作系统环境：   MAC下jdk的安装步骤如下：1.下载jdk1.7(1.8),官网地址：http://www.oracle.com/technetwork/java/javase/downloads/index.html 我选的版本是1.7.0_45，跟生产集群一致。2. 打开下载好的jdk-
qingshou117·2015-12-16 10:00

MAC下hadoop开发环境搭建系列（一）

阅读更多（一）JDK的安装hadoop是java语言写的，依赖jdk，所以要部署hadoop首先要安装jdk，操作系统环境：MAC下jdk的安装步骤如下：1.下载jdk1.7(1.8),官网地址：http://www.oracle.com/technetwork/java/javase/downloads/index.html我选的版本是1.7.0_45，跟生产集群一致。2.打开下载好的jdk-7
qingshou117·2015-12-16 10:00

MAC下hadoop开发环境搭建系列（一）

阅读更多（一）JDK的安装hadoop是java语言写的，依赖jdk，所以要部署hadoop首先要安装jdk，操作系统环境：MAC下jdk的安装步骤如下：1.下载jdk1.7(1.8),官网地址：http://www.oracle.com/technetwork/java/javase/downloads/index.html我选的版本是1.7.0_45，跟生产集群一致。2.打开下载好的jdk-7
qingshou117·2015-12-16 10:00

win7搭建hadoop开发环境之编译hadoop-eclipse-xxx.jar插件

下载软件下载hadoop-1.2.1.tar.gz文件，在该压缩包中包含hadoop-eclipse的插件（https://archive.apache.org/dist/hadoop/common/hadoop-1.2.1/hadoop-1.2.1.tar.gz）下载apache-ant-1.9.6-bin.tar.gz文件，用于编译生成插件（http://mirrors.cnnic.cn/ap
Jerry_keyman·2015-12-11 15:24

win7搭建hadoop开发环境之编译hadoop-eclipse-xxx.jar插件

下载软件下载hadoop-1.2.1.tar.gz文件，在该压缩包中包含hadoop-eclipse的插件（https://archive.apache.org/dist/hadoop/common/hadoop-1.2.1/hadoop-1.2.1.tar.gz）下载apache-ant-1.9.6-bin.tar.gz文件，用于编译生成插件（http://mirrors.cnnic.cn/ap
Jerry_keyman·2015-12-11 15:24

Hadoop能力测试图谱

一张图测试你的Hadoop能力-Hadoop能力测试图谱1.引言看到一张图，关于Hadoop技术框架的图，基本上涉及到Hadoop当前应用的主要领域，感觉可以作为测试Hadoop开发人员当前能力和水平的比较好的一个工具
·2015-12-09 11:52

Eclipse安装Hadoop插件配置Hadoop开发环境

一、下载Hadoop插件注意：Hadoop插件要跟自己安装的Hadoop版本相对应。这儿有一个Hadoop2.X版本对应的Hadoop插件，前往下载，下载hadoop2x-eclipse-plugin.zip。解压后，release文件夹下的hadoop.eclipse-kepler-plugin-2.2.0.jar即为我们所需要的插件。二、放置插件并重启Eclipse将插件hadoop.ecli
garfielder007·2015-11-17 13:34

Eclipse安装Hadoop插件配置Hadoop开发环境

一、下载Hadoop插件注意：Hadoop插件要跟自己安装的Hadoop版本相对应。这儿有一个Hadoop2.X版本对应的Hadoop插件，前往下载，下载hadoop2x-eclipse-plugin.zip。解压后，release文件夹下的hadoop.eclipse-kepler-plugin-2.2.0.jar即为我们所需要的插件。二、放置插件并重启Eclipse将插件hadoop.ecli
GarfieldEr007·2015-11-17 13:00

Hadoop集群（第7期）_Eclipse开发环境设置

文章来源：http://www.cnblogs.com/xia520pi/archive/2012/05/20/2510723.htmlHadoop集群（第7期）_Eclipse开发环境设置1、Hadoop
buster2014·2015-11-16 18:00

Yarn的JVM重用功能——uber

2、本文中uber的配置部分，主要参考之前Hadoop开发者的言论。但是我当初看该言论的时候对一些细节有所疑惑，因此在本文中
Oozie123·2015-11-16 15:47

Hadoop完全分布式搭建过程中遇到的问题小结

    前一段时间，终于抽出了点时间，在自己本地机器上尝试搭建完全分布式Hadoop集群环境，也是借助网络上虾皮的Hadoop开发指南系列书籍一步步搭建起来的，在这里仅代表hadoop初学者向虾皮表示衷心的感谢
龙须子·2015-11-14 14:00

eclipse安装hadoop插件

win7下安装hadoop完成后，接下来就是eclipse hadoop开发环境配置了。
·2015-11-13 10:23

王家林的81门一站式云计算分布式大数据&移动互联网解决方案课程第三门课程：云计算分布式大数据Hadoop征服之旅：HDFS&MapReduce&HBase&Hive&集群管理

本课程会助你深入浅出的掌握Hadoop开发（
·2015-11-13 06:46

Hadoop学习笔记目录

CentOS6.5安装（Hadoop环境配置） Linux 常用远程管理工具介绍 SSH免密码登录配置 Hadoop安装及配置 Hadoop验证-WordCount执行 Hadoop
·2015-11-13 06:30

windows下hadoop伪分布式模式开发环境的搭建(Cygwin)以及Eclipse集成开发环境下的搭建

首先是搭建开发环境：我建议搭建看视频吧，讲的比较清楚，我是看了好几遍的视频搭建起来的（http://v.youku.com/v_show/id_XMzc5MzM1NDQw.html）： Windows下搭建Hadoop
·2015-11-13 04:46

在Windos上使用Eclipse进行Hadoop开发的环境搭建

使用eclipse的hadoop开发环境搭建 1.准备 1.1 完成linux上的hadoop集群安装,并且能够从WIN上远程到linux      如果你还未完成安装集群可以参考我的这篇博文
·2015-11-12 21:57

【hadoop】——window下elicpse连接hadoop集群基础超详细版

1、Hadoop开发环境简介 1.1 Hadoop集群简介 　　Java版本：jdk-6u31-linux-i586.bin 　　Linux系统：CentOS6.0 　　Hadoop版本：hadoop
·2015-11-12 19:11

用eclipse的maven构建hadoop开发环境

1.首先安装好maven插件2.修改eclipse.ini文件，添加以下两行信息。否则会报找不到tools.jar啥的错误-vmC:/ProgramFiles/Java/jdk1.7.0_75/bin/javaw.exe3.启动eclipse，新建maven项目4.修改pom.xml文件，如下：               jdk.tools         jdk.tools         1
haidian_fengyu·2015-11-12 10:08

基于eclipse的hadoop开发-----HDFS API学习

环境：ubuntu8.04.4        hadoop1.0.2       eclipse3.7.2 概要：本文主要是记录HDFS中常用API的使用，如文件上传、创建文件、重命名、删除、读取文件内容等。   一、实验步骤 1、启动Hadoop,切
·2015-11-12 10:09

mapreduce 编程SequenceFile类的使用

对于基于MapReduce的数据处理，将每个二进制数据的大对象融入自己的文件中并不能实现很高的可扩展性，针对上述情况，Hadoop开发了一组更高层次的容器SequenceFile。
·2015-11-11 08:50

Hadoop集群（第7期）_Eclipse开发环境设置

1、Hadoop开发环境简介 1.1 Hadoop集群简介 　　Java版本：jdk-6u31-linux-i586.bin 　　Linux系统：CentOS6.0 　　Hadoop版本：hadoop
·2015-11-11 06:20

Hadoop开发周期（一）：基础环境安装

Hadoop的开发周期一般是： 1）开发和部署环境准备 2）编写mapper和reducer 2）单元测试 3）编译、打包 4）提交作业和结果检索        在用Hadoop处理大数据之间，需要首先将运行和开发环境部署好，下面是基础环境的安装过程，所有软件都安装在Linux系统上。下面先介绍在一台机器上的部署，该机器信息如下： 1 JDK安装
·2015-11-11 03:43
上一页 3 4 5 6 7 8 9 10 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他