Hadoop开发

第5周 Map-Reduce编程实战，eclipse与Hadoop集群连接

/7084603http://www.cnblogs.com/xia520pi/archive/2012/05/20/2510723.htmlwin7下安装hadoop完成后，接下来就是eclipsehadoop
zq9017197·2014-01-11 00:00

Hadoop2.2.0版本多节点集群及eclipse开发环境搭建

Hadoop2.2.0版本多节点集群及eclipse开发环境搭建分类：Hadoop开发2013-12-3116:33457人阅读评论(0)收藏举报目录(?)
细雨纷纷欲断魂·2014-01-08 14:00

[置顶] 【Hadoop】Win7上搭建Hadoop开发环境，方法一

在Win7上，编写hadoop程序 操作系统：win7hadoop版本：CDH3u6 1、下载安装JDK，以及Eclipse  具体看此链接：http://blog.csdn.net/weixuehao/article/details/177157932、新建JAVAProject3、去cloudera网站下载hadoop的CDH3u6版本。将起解压到win7的某个目录4、选中OperateHDF
weixuehao·2013-12-31 16:00

初识Marp(二)——MapR standbox for Hadoop

概观该MAPRsandboxHadoop的是，轻轻地引入业务分析，目前，有抱负的Hadoop开发人员和管理员（数据库，系统和Hadoop），以Hadoop和其生态系统的大数据的承诺一个全功能的单节点群集
maoxiao_jsd·2013-12-30 22:42

hadoop错误之ClassNotFoundException(下)

　hadoop开发环境：window上eclipse+虚拟机的ubuntu13.04+hadoop-1.1.2+JDK1.7 在win7下运行hadoop-1.1.2 worldcount代码的时候出现下面的错误
·2013-12-28 16:00

hadoop错误之ClassNotFoundException

　　hadoop开发环境：window上eclipse+虚拟机的ubuntu13.04+hadoop-1.1.2+JDK1.7 今天在eclipse上（eclipse在window上）运行hadoop
·2013-12-27 20:00

[置顶] Eclipse下搭建Hadoop开发环境，并运行第一个实例

  有同学无法正常运行程序，这里将Eclipse下Hadoop环境配置进行一下说明：  1.新建Map/Reduce工程  2.设置HadoopLocaiton，第一次使用的话，点击大象，新建配置。     3.设置内容（配置需要和Hadoop的配置文件相同）：  Locationname和Host填写localhost，Map/ReduceMaster的端口号必须和Mapred-site.xml
twlkyao·2013-12-26 11:00

简单的MapReduce程序（Hadoop2.2.0）

继上篇文章： 配置Hadoop开发环境（Eclipse） http://blog.csdn.net/zythy/article/details/17397153我们以简化版的气温统计为例，演示如何开发一个
zythy·2013-12-18 18:00

配置Hadoop开发环境（Eclipse）

通常我们可以用Eclipse作为Hadoop程序的开发平台。1） 下载Eclipse下载地址：http://www.eclipse.org/downloads/根据操作系统类型，选择合适的版本下载并安装。2） 下载并编译Hadoop的Eclipse插件网上可直接下载到Hadoop1.x的Eclipse插件，但是该插件和Hadoop2.2不兼容，所以无法使用。Hadoop2.2的Eclipse插件正
zythy·2013-12-18 16:00

大数据潮流已经来临 ---- ITSoku带你一周快速掌握Hadoop开发与实战!

大数据的潮流已经来临，未来也将是数据的时代，Hadoop正是为大数据而来，为此ITSoku搜集了目前最好的相关视频，然后进行整理出能让我们在最短的时间中掌握该技术的整套视频专辑，分享给各位想学习Hadoop的朋友们，只希望大家学习Hadoop更容易更高效一些。   1. 炼数成金 hadoop 视频教程 （此专辑更注重于理论） 2.Hadoop实战视频专辑&nb
lk557·2013-12-16 10:00

hadoop 的HDFS 分布式存储系统

第一步当然是先把hadoop开发环境搭建起来并运行HDFS和maoReduce是hadoop的核心组成吧，也是hadoop的基础，我也是一直在学习这方面的知识，通过一些文档和视频教程进行学习。
wuzhilon88·2013-12-15 20:00

在oracle Virtual Box 虚拟机中搭建hadoop1.2.1完全分布式环境

在宿主机器上安装eclipse进行Hadoop开发。Hadoop环境搭建很大部分
twlkyao·2013-12-15 17:00

[置顶] Hadoop常用端口（以Hadoop2.2.0为例，不保证其他版本）

  在进行Hadoop开发的时候，经常需要在可视化界面中查看当前运行状态，可以通过一些特定端口查看，这里将Hadoop常用端口进行总结，备忘（我使用的是伪分布式，请按照自己的实际情况进行地址修改）。
twlkyao·2013-12-14 11:00

hadoop提供的一种程序驱动管理程序

hadoop开发包里一般都携带一些基准测试程序，这是一批程序，如何管理好大型项目的测试程序，做一个方便好用的工具呢？
tracymkgld·2013-12-04 12:00

hadoop经典系列(六)2.x的mapreduce过程图解

在过去的几年中，hadoop开发团队做了一些bug的修复，但是最近这些修复的成本越来越高，这表明对原框架做出改变的难度越来越大。   为从根本上解决旧MapReduce框架的性能瓶颈，
85977328·2013-12-02 23:00

hadoop经典系列(六)2.x的mapreduce过程图解

在过去的几年中，hadoop开发团队做了一些bug的修复，但是最近这些修复的成本越来越高，这表明对原框架做出改变的难度越来越大。   为从根本上解决旧MapReduce框架的性能瓶颈，
85977328·2013-12-02 23:00

hadoop经典系列(六)2.x的mapreduce过程图解

在过去的几年中，hadoop开发团队做了一些bug的修复，但是最近这些修复的成本越来越高，这表明对原框架做出改变的难度越来越大。   为从根本上解决旧MapReduce框架的性能瓶颈，
85977328·2013-12-02 23:00

windows 环境下Eclipse开发MapReduce环境设置

1、Hadoop开发环境简介1.1Hadoop集群简介Java版本：jdk-6u31-linux-i586.binLinux系统：CentOS6.0Hadoop版本：hadoop-1.0.0.tar.gz1.2Windows
加油_张·2013-11-30 11:00

Mahout学习路线图

Mahout为数据分析人员，解决了大数据的门槛；为算法工程师，提供基础的算法库；为Hadoop开发人员，提供了数据建模的标准；为运维人员，打通了和Hadoop连接。Maho
dong976209075·2013-11-18 22:00

Yarn的JVM重用功能——uber

2、本文中uber的配置部分，主要参考之前Hadoop开发者的言论。但是我当初看该言论的时候对一些细节有所疑惑，因此在本文中
samhacker·2013-11-12 22:00

myeclipse配置hadoop开发环境,及遇到问题解决

eclipse版本：eclipse-jee-indigo-SR2-win321、安装Hadoop开发插件hadoop安装包contrib/目录下有个插件hadoop-1.2.1-eclipse-plugin.jar
caoshichaocaoshichao·2013-11-12 00:23

myeclipse配置hadoop开发环境,及遇到问题解决

eclipse版本：eclipse-jee-indigo-SR2-win32 1、安装Hadoop开发插件    hadoop安装包contrib/目录下有个插件hadoop-1.2.1-eclipse-plugin.jar
caoshichaocaoshichao·2013-11-12 00:00

cygwin在Windows8.1中设置ssh无密码登录

cygwin在Windows8.1中设置ssh的问题解决为了在Windows8.1上直接使用Linux环境和hadoop开发，装了cygwin,同时设置ssh无密码登录。
佚名·2013-11-07 10:30

一张图测试你的Hadoop能力-Hadoop能力测试图谱

1.引言看到一张图，关于Hadoop技术框架的图，基本上涉及到Hadoop当前应用的主要领域，感觉可以作为测试Hadoop开发人员当前能力和水平的比较好的一个工具，特此分享给大家。
zhangziliang09·2013-10-30 12:00

hadoop学习必备书籍汇总

Java_TCPIP_Socket编程：hadoop开发socket编程必不可少。JAVA2核心技术第1卷.基
superwuedu·2013-10-29 11:04

hadoop安装

A)版本 hadoop-1.0.3 jdk1.6.0_32eclipsehadoop开发插件 hadoop-eclipse-plugin-1.0.3.jarhadoop-1.0.3 使用单机模式安装，端口
tywei2012·2013-10-22 14:00

Hadoop集群_Eclipse开发环境设置

1、Hadoop开发环境简介1.1Hadoop集群简介Java版本：jdk-6u31-linux-i586.binLinux系统：CentOS6.0Hadoop版本：hadoop-1.0.0.tar.gz1.2Windows
stefshawn·2013-10-16 15:00

招聘 hadoop开发工程师

淘宝招聘hadoop工程师若干,面向在校生(2014年毕业),工作地点:杭州或北京Hadoop研发工程师职位描述您将负责：1．预研、开发、测试hdfs/mapreduce/hive/hbase的功能、性能和扩展；2．对有助于提升集群处理能力/高可用性/高扩展性的各种解决方案进行跟踪和落地；3．解决海量数据不断增长面临的挑战，解决业务需求。您需要具备：1、熟练运用java语言；2、熟悉jvm运行机制
shenh062326·2013-09-15 18:00

ubuntu下hadoop开发java编译错误

eclipse下hadoop开发 java project eclipse设置run configuration 1.java Application 2.右键new一个新的application
yousky027·2013-09-06 16:00

基于Hadoop开发网络云盘系统客户端界面设计初稿

基于Hadoop开发网络云盘系统客户端界面设计初稿前言：本文是《基于Hadoop开发网络云盘系统架构设计方案》的第二篇，针对界面原型原本考虑有两个方案：1、类windows模式，文件夹、文件方式，操作习惯完全按照
·2013-09-03 09:00

基于Hadoop开发网络云盘系统客户端界面设计初稿

前言：本文是《基于Hadoop开发网络云盘系统架构设计方案》的第二篇，针对界面原型原本考虑有两个方案：1、类windows模式，文件夹、文件方式，操作习惯完全按照Windows方式进行，提供右键菜单管理命令
zhangziliang09·2013-09-02 17:00

Win7-64位hadoop开发环境准备_Cygwin安装

Cygwin（a collection of tools which provide a Linux look and feel environment for Windows.） 下载地址：http://www.cygwin.com/  Install Cygwin 从网络安装，注意勾选必要的软件包； cygwin编译搭建hadoop环境需要安装的软件包： &
lihc_sd0531·2013-08-29 13:00

基于Hadoop开发网络云盘系统架构设计方案

基于Hadoop开发网络云盘系统架构设计方案第一稿引言云计算技术的发展，各种网络云盘技术如雨后春笋，层出不穷，百度、新浪、网易都推出了自己的云盘系统，本文基于开源框架Hadoop设计实现了一套自己的网络云盘系统
·2013-08-28 21:00

基于Hadoop开发网络云盘系统架构设计方案第一稿

引言云计算技术的发展，各种网络云盘技术如雨后春笋，层出不穷，百度、新浪、网易都推出了自己的云盘系统，本文基于开源框架Hadoop设计实现了一套自己的网络云盘系统，方案为初步设计方案，不断完善中。一、总体架构二、方案说明2.1系统切分从用户角度，整个系统划分为ECDisk客户端、ECDisk运营管理平台、HDFS分布式文件存储集群和账户数据应用平台四部分。2.2功能需求文件管理：浏览、文件上传、文件
zhangziliang09·2013-08-28 16:00

基于Hadoop开发网络云盘系统架构设计方案第一稿

引言云计算技术的发展，各种网络云盘技术如雨后春笋，层出不穷，百度、新浪、网易都推出了自己的云盘系统，本文基于开源框架Hadoop设计实现了一套自己的网络云盘系统，方案为初步设计方案，不断完善中。一、总体架构二、方案说明2.1系统切分从用户角度，整个系统划分为ECDisk客户端、ECDisk运营管理平台、HDFS分布式文件存储集群和账户数据应用平台四部分。2.2功能需求文件管理：浏览、文件上传、文件
数据饕餮·2013-08-28 15:19

基于Hadoop开发网络云盘系统架构设计方案第一稿

引言云计算技术的发展，各种网络云盘技术如雨后春笋，层出不穷，百度、新浪、网易都推出了自己的云盘系统，本文基于开源框架Hadoop设计实现了一套自己的网络云盘系统，方案为初步设计方案，不断完善中。一、总体架构二、方案说明2.1系统切分从用户角度，整个系统划分为ECDisk客户端、ECDisk运营管理平台、HDFS分布式文件存储集群和账户数据应用平台四部分。2.2功能需求文件管理：浏览、文件上传、文件
zhangziliang04·2013-08-28 15:19

Eclipse开发环境设置

原文：http://www.cnblogs.com/xia520pi/archive/2012/05/20/2510723.htmlHadoop集群（第7期）_Eclipse开发环境设置1、Hadoop
liou825·2013-08-14 16:00

Hadoop配置启动

其实这不是首次触电hadoop,早在大学毕设中就已经采用hadoop开发了，当时开发的是一个hadoop为基础的搜索引擎，包括爬虫，倒排索引、查询都基于hadoop的分布式平台实现。
jingmiaowill·2013-07-17 22:00

CentOS 6.4 安装伪分布式Hadoop 1.0.3

阅读更多在本章中学习如何在CentOS6.4上安装配置Hadoop开发环境。
flyingdutchman·2013-07-02 00:00

CentOS 6.4 安装伪分布式Hadoop 1.0.3

       在本章中学习如何在CentOS6.4上安装配置Hadoop开发环境。              
flyingdutchman·2013-07-02 00:00

ubuntu系统下eclipse配置hadoop开发环境并运行wordcount程序

ubuntu12eclipse3.6hadoop1.1.2ubuntu12环境下hadoop1.1.2伪分布式配置成功，然后用Ant编译eclipsehadoopplugin插件，接下来就是eclipsehadoop
yonghutwo·2013-06-30 14:00

eclipse下hadoop开发

环境：ubantu12.4 EclipseJunoapachehadoop1.1.2如果安装插件成功，打开Window-->Preferens，你会发现HadoopMap/Reduce选项，在这个选项里你需要配置Hadoopinstallationdirectory。配置完成后退出。3.配置Map/ReduceLocations。 在Window-->ShowView中打开Map/ReduceLo
cywhoyi·2013-06-13 13:00

eclipse下hadoop开发

环境：ubantu12.4 EclipseJunoapachehadoop1.1.2如果安装插件成功，打开Window-->Preferens，你会发现HadoopMap/Reduce选项，在这个选项里你需要配置Hadoopinstallationdirectory。配置完成后退出。3.配置Map/ReduceLocations。 在Window-->ShowView中打开Map/ReduceLo
cywhoyi·2013-06-13 13:00

【Hadoop】Hadoop开发中wrong key/value与type mismatch错误

在hadoop开发中需要自己定义mapper域reducer，而在定义这两个类的时候需要相应实现map与reduce方法。其实开发需要遵守的规则还是蛮固定的，但是在开发过程中遇到的问题还是挺多的。
s120922718·2013-06-08 22:00

hadoop 集群Eclipse设置

Hadoop集群（第7期）_Eclipse开发环境设置1、Hadoop开发环境简介1.1Hadoop集群简介Java版本：jdk-6u31-linux-i586.binLinux系统：CentOS6.0Hadoop
ganliang13·2013-05-30 16:00

Windows下使用Eclipse开发Hadoop程序

1、目标：在三台ubuntu上搭建hadoop开发环境；在windows下利用Eclipse访问ubuntu下的hadoop环境，进行开发；2、软硬件要求：软件：hadoop-0.20.2，jdk-1.6
anhuidelinger·2013-05-12 20:00

Hadoop 三台主机 集群搭建 详解

Windows下配置Eclipse连接Hadoop开发环境部署环境：OS：Redhat5.5EnterpriseJDK：jd
leoleocmm·2013-05-04 18:00

eclipse中配置hadoop开发环境

1、下载eclipse，我下载的是eclipse-jee-juno-SR2-linux-gtk-x86_64.tar.gz2、解压到/home/coder/eclipse3、把hadoop安装路径中的/home/coder/hadoop-0.20.2/contrib/eclipse-plugin目录中的hadoop-0.20.2-eclipse-plugin.jar复制到eclipse安装路径中的
dyllove90·2013-04-28 19:59

Hadoop安装感悟

Hadoop开发指南一：开发环境的搭建  1：环境准备：     若有Linux系统则直接跳到2。若无Linux则在虚拟机上虚拟一个Linux系统。
寻梦2012·2013-04-22 08:00

编译hadoop-0.20.2的eclipse-plugin插件

hadoop-0.20.2自带的eclipse-plugin对版本在3.3以上的eclipse不起作用，在eclipse hadoop开发环境配置中，我用的是第三方编译的eclipse插件，但它也有可能在你的电脑上不起作用
wliufu·2013-04-21 23:00
上一页 6 7 8 9 10 11 12 13 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他