hadoop教程

虚拟机搭建单机版Hadoop教程（惨痛经历）

虚拟机搭建Hadoop教程（惨痛经历）目录1.JDK环境2.防火墙和SELinux关闭3.ssh免密登录配置（多台服务器一样的配置）3.1设置主机名3.2配置hosts3.3配置sshd3.4配置密钥3.4.1
qq_33705546·2020-07-05 05:38

Hadoop教程

Hadoop教程Hadoop是一个开源框架，它允许在整个集群使用简单编程模型计算机的分布式环境存储并处理大数据。它的目的是从单一的服务器到上千台机器的扩展，每一个台机都可以提供本地计算和存储。
lianhedaxue·2020-07-02 08:29

目前hadoop大数据的视频教程谁讲的比较好？我个人对比，欢迎评论补充

1，马士兵老师的Hadoop教程以及相关大数据教程我刚看完，实在斗鱼直播上进行的，所以含有大量冗余。但是作为入门教程是十分合适的。首先因为马士兵老师是个明白人，说话都准确干练，入门的思路也很简单。
如何在3年拿到50K·2020-07-02 07:32

大数据Hadoop教程：Hadoop核心架构详细解析

通过这一阶段的调研总结，从内部机理的角度详细分析，HDFS、MapReduce、Hbase、Hive是如何运行，以及基于Hadoop数据仓库的构建和分布式数据库内部具体实现。如有不足，后续及时修改。更多精彩内容请点我学HDFS的体系架构整个Hadoop的体系结构主要是通过HDFS来实现对分布式存储的底层支持，并通过MR来实现对分布式并行任务处理的程序支持。HDFS采用主从(Master/Slave
HAOXUAN168·2020-07-01 09:00

Hadoop教程：多节点集群

本章介绍了Hadoop多节点集群在分布式环境中的设置。由于无法演示整个集群，我们使用三个系统(一个主系统和两个从系统)解释Hadoop集群环境;以下是他们的IP地址。HadoopMaster:192.168.1.15(hadoop-master)HadoopSlave:192.168.1.16(hadoop-slave-1)HadoopSlave:192.168.1.17(hadoop-slave
逍遥ii·2020-06-30 13:27

Hadoop教程(一) Hadoop入门教程

Hadoop教程(一)Hadoop入门教程1Hadoop入门教程Hadoop是Apache开源组织的一个分布式计算开源框架(http://hadoop.apache.org/)，用java语言实现开源软件框架
_否极泰来_·2020-06-30 09:20

虚拟机安装的三台Ubuntu系统下搭建Hadoop

在Linux上安装Hadoop教程在虚拟机中安装的Ubuntu系统下搭建Hadoop集群时首先要解决的问题是将宿主机的文件拷贝到虚拟机上。
weixin_30293135·2020-06-27 15:54

Hadoop安装教程_单机/伪分布式配置_Hadoop2.6.0/Ubuntu14.04

如果用的是CentOS/RedHat系统，请查看相应的CentOS安装Hadoop教程_单机伪分布式配置。
汪酱0110·2020-06-23 02:34

新版Hadoop视频教程 Hadoop教程八天完全攻克Hadoop视频教程 Hadoop开发入门教程

最新在学习hadoop、storm大数据相关技术，发现网上hadoop、storm相关学习视频少之又少，更可恶的是不少机构使用段海涛老师Hadoop视频进行商业买卖，气愤至急，我这里整理了传智播客段海涛老师的hadoop学习视频，分享出来给大家学习交流。ps：传智播客是个不错的学习地方，段海涛老师视频中的表达也很有趣，中间还有内涵段子哈哈，希望大家多支持传智播客；此次分享只是供喜欢技术钻研新技术的
dukasi87·2020-04-12 05:17

Hadoop教程：Hadoop数据传输工具Sqoop

ApacheSqoop（SQL-to-Hadoop）项目旨在协助RDBMS与Hadoop之间进行高效的大数据交流。用户可以在Sqoop的帮助下，轻松地把关系型数据库的数据导入到Hadoop与其相关的系统(如HBase和Hive)中；同时也可以把数据从Hadoop系统里抽取并导出到关系型数据库里。除了这些主要的功能外，Sqoop也提供了一些诸如查看数据库表等实用的小工具。理论上，Sqoop支持任何一
LeiLv·2020-04-06 08:14

Hadoop教程：HDFS概述

Hadoop文件系统采用分布式文件系统设计开发。它在普通硬件上运行。与其他分布式系统不同，HDFS具有很高的容错性，并且使用低成本的硬件进行设计。HDFS存储大量数据并提供更容易的访问。为了存储如此巨大的数据，文件被存储在多台机器上。这些文件以冗余的方式存储，以便在发生故障时将系统从可能的数据损失中拯救出来。HDFS还使应用程序可用于并行处理。HDFS的特点适用于分布式存储和处理。Hadoop提供
逍遥ii·2020-02-06 03:21

Hadoop教程：特性，组件，集群和拓扑

翻译自:http://www.guru99.com/learn-hadoop-in-10-minutes.htmlApacheHADOOP是用于开发在分布式计算环境中执行的数据处理应用程序的框架。类似于存储在个人计算机系统的本地文件系统中的数据，在Hadoop中，数据存储在被称为Hadoop分布式文件系统的分布式文件系统中。处理模型基于“数据局部性”概念，其中计算逻辑被发送到包含数据的集群节点（服
杰克家的猫·2019-12-16 01:11

Hadoop教程：Hadoop核心架构详细解析

通过这一阶段的调研总结，从内部机理的角度详细分析，HDFS、MapReduce、Hbase、Hive是如何运行，以及基于Hadoop数据仓库的构建和分布式数据库内部具体实现。如有不足，后续及时修改。HDFS的体系架构整个Hadoop的体系结构主要是通过HDFS来实现对分布式存储的底层支持，并通过MR来实现对分布式并行任务处理的程序支持。HDFS采用主从(Master/Slave)结构模型，一个HD
LeiLv·2019-11-03 06:15

CentOS7环境下安装配置Hadoop教程

CentOS7环境下安装配置Hadoop教程在CentOS7环境下，安装配置Hadoop教程。
AtlantisChina·2019-09-25 17:48

大数据 Spark 架构，Spark企业级大数据项目实战视频，项目集成Hadoop教程，Spark

26套Spark企业级项目实战，源码深度剖析，实时流处理，机器学习，数据分析，运行原理，性能调优，图计算，性能调优，缓存优化，监控分析SparkCore，SparkSQL，SparkStreaming，Kafka，Flume，Scale，Python视频课程视频课程包含：26套Spark项目实战包含：大数据之Spark高级课程，企业级项目实战，源码深度剖析，实时流处理，机器学习，数据分析，运行原理
wx5d089cc7a67a3·2019-06-19 16:29

大数据 Spark 架构，Spark企业级大数据项目实战视频，项目集成Hadoop教程，Spark

26套Spark企业级项目实战，源码深度剖析，实时流处理，机器学习，数据分析，运行原理，性能调优，图计算，性能调优，缓存优化，监控分析SparkCore，SparkSQL，SparkStreaming，Kafka，Flume，Scale，Python视频课程视频课程包含：26套Spark项目实战包含：大数据之Spark高级课程，企业级项目实战，源码深度剖析，实时流处理，机器学习，数据分析，运行原理
wx5d089cc7a67a3·2019-06-19 16:26

Hadoop教程免费视频 小象《Hadoop 2.X大数据平台V3》

学习Hadoop最权威的当然是hadoop权威指南了，之前在学校的图书馆借过，不过很可惜，当时没有看完，因为学习上没有用到hadoop，只是单纯的对齐感兴趣，可以参考这本书!为什么要学hadoop？：这是现在流行的大数据处理平台几乎已经成为大数据的代名词，所以这个是必学的。Hadoop里面包括几个组件HDFS、MapReduce和YARN，HDFS是存储数据的地方就像我们电脑的硬盘一样文件都存储在
fengliaoai·2019-05-02 13:06

大数据Hadoop Hive HBase Spark Storm 和分布式流数据系统Kafka

blog.csdn.net/zwgdft/article/details/54633105ApachePig教程https://www.w3cschool.cn/apache_pig/index.htmlHadoop
高级点工·2019-02-21 11:53

Hadoop教程：安装与环境设置

Hadoop支持Windows,Mac,Linux,但推荐是用Linux环境学习Hadoop。因此，我们必须安装一个Linux操作系统来设置Hadoop环境。如果您的操作系统不是Linux，那么您可以在其中安装一个Virtualbox软件，并在Virtualbox中包含Linux。安装前配置在将Hadoop安装到Linux环境之前，我们需要使用ssh(SecureShell)来设置Linux。按照
逍遥ii·2018-12-01 21:25

Hadoop教程：大数据概述

由于新技术、新设备和社交网站等通信手段的出现，人类产生的数据量每年都在迅速增长。2003年之前的所有数据量总和是50亿G。如果你把数据以磁盘的形式堆起来，它可能会填满整个足球场。到了2011年，每两天就能创造同样的数量，2013年每十分钟创造同样的数量。这一比例仍在大幅增长。虽然所有这些信息都是有意义的，并且在处理时很有用，但它却被忽略了。世界上90%的数据是在过去几年生成的。什么是大数据大数据其
逍遥ii·2018-11-30 21:06

Hadoop教程

目前在市场上的各种技术，从不同的供应商，包括亚马逊，IBM，微软等来处理大数据。尽管找到了处理大数据的技术，我们研究了以下两类技术：操作大数据这些包括像MongoDB系统，提供业务实时的能力，这里主要是数据捕获和存储互动工作。NoSQL大数据系统的设计充分利用已经出现在过去的十年，而让大量的计算，以廉价，高效地运行新的云计算架构的优势。这使得运营大数据工作负载更容易管理，更便宜，更快的实现。一些N
首席数据师·2018-07-27 14:18

hadoop教程

阅读更多Hadoop教程Hadoop简介Hadoop是一个开源框架，允许使用简单的编程模型在跨计算机集群的分布式环境中存储和处理大数据。
shenkerer·2018-06-12 21:00

新手自学hadoop教程（一）

百科释义：Hadoop是一个由Apache基金会所开发的分布式系统基础架构。Hadoop是一个专为离线和大规模数据分析而设计的，并不适合那种对几个记录随机读写的在线事务处理模式。Hadoop=HDFS（文件系统，数据存储技术相关）+Mapreduce（数据处理），Hadoop的数据来源可以是任何形式，在处理半结构化和非结构化数据上与关系型数据库相比有更好的性能，具有更灵活的处理能力，不管任何数据形
CXY_xn·2018-05-16 13:48

新手自学hadoop教程（一）

百科释义：Hadoop是一个由Apache基金会所开发的分布式系统基础架构。Hadoop是一个专为离线和大规模数据分析而设计的，并不适合那种对几个记录随机读写的在线事务处理模式。Hadoop=HDFS（文件系统，数据存储技术相关）+Mapreduce（数据处理），Hadoop的数据来源可以是任何形式，在处理半结构化和非结构化数据上与关系型数据库相比有更好的性能，具有更灵活的处理能力，不管任何数据形
CXY_xn·2018-05-16 13:48

虚拟机VMware Workstation Pro14+Hadoop-3.1.0环境配置+Ubuntu-16.04.3-desktop系统+完全分布式搭建hadoop教程

概述：在Windows下搭建hadoop，使用虚拟机进行。应用的是虚拟机VMwareWorkstationPro14+Hadoop-3.1.0环境配置+ubuntu-16.04.3-desktop-amd64系统+完全分布式（创建了3台虚拟机进行搭建）。//个人的配置以及种种会使过程会有差异，写在下面的过程仅供参考。写在前面：不推荐用VMware的Player版本来做hadoop的搭建，因为Pla
追溯千年·2018-04-24 20:43

OS X 安装Hadoop教程 单机 伪分布式配置

题外话。。。这是一个Markdown知识点。。。在段首我都想输入空格，在markdown下打不出，遂求知乎我很喜欢这个回答：Markdown奉行的是样式和内容分开的哲学。来自王成 //半角空格（英文） //全角空格（中文）步入正题这个是我上手就想发布的，临近发布出现问题，so一直拖到了现在。。。Hadoop是一个由Apache基金会所开发的分布式系统基础架构。Hadoop的框架
harrytc·2017-12-27 21:08

linux安装hadoop教程

一安装jdk，配置jdk环境变量1、下载linux版本jdk2、vim打开/etc/profile，加入以下配置输入命令：vim/ect/profile，然后按i进行编辑模式输入以下内容exportJAVA_HOME=exportJRE_HOME=$JAVA_HOME/jreexportCLASSPATH=$JAVA_HOME/lib:$JRE_HOME/lib:$CLASSPATHexportP
冷de猫·2017-12-03 12:03

在Linux上安装hadoop教程

1准备Linux环境1.修改主机名称vi/etc/sysconfig/networkNETWORK=yesHOSTNAME=www.hadoopone.comcentos7修改主机名hostnamectlset-hostnamewww.hadoopone.com--修改完成主机名称之后要重启才能生效2.修改IP地址vi/etc/sysconfig/network-scripts/ifcfg-eth
lxover3·2017-11-30 09:36

单节点部署Hadoop教程

单节点部署Hadoop教程搭建HDFS增加主机名我这里仅仅增加了master主机名[root@10/xinghl/hadoop/bin]$cat/etc/hosts127.0.0.1localhost10.0.67.101
xing halo·2016-07-28 09:00

Hadoop安装教程_单机/伪分布式配置_CentOS6.4/Hadoop2.6.0

本Hadoop教程由厦门大学数据库实验室出品，转载请注明。
qjc_501165091·2016-05-04 23:00

Hadoop教程(五)Hadoop分布式集群部署安装

Hadoop教程(五)Hadoop分布式集群部署安装1Hadoop分布式集群部署安装在hadoop2.0中通常由两个NameNode组成，一个处于active状态，另一个处于standby状态。
_否极泰来_·2016-04-17 21:28

Hadoop教程(五)Hadoop分布式集群部署安装

  Hadoop教程(五)Hadoop分布式集群部署安装  1Hadoop分布式集群部署安装在hadoop2.0中通常由两个NameNode组成，一个处于active状态，另一个处于standby状态。
yuan_xw·2016-04-17 21:00

Hadoop安装教程_单机/伪分布式配置

转载自Hadoop安装教程_单机/伪分布式配置_CentOS6.4/Hadoop2.6.0本Hadoop教程由厦门大学数据库实验室出品，转载请注明。
u012877472·2016-03-07 18:00

hadoop教程之HDFS常用文件操作命令

北京尚学堂提供1.lshadoopfs-ls/ 列出hdfs文件系统根目录下的目录和文件hadoopfs-ls-R/ 列出hdfs文件系统所有的目录和文件2.puthadoopfs-put hdfsfile的父目录一定要存在，否则命令不会执行hadoopfs-put… hdfsdir一定要存在，否则命令不会执行hadoopfs-put- 从键盘读取输入到hdfsfile中，按Ctrl+D结束输入，
Spartacus_·2016-01-18 16:41

hadoop 2.6.0伪分布式安装

如果用的是CentOS/RedHat系统，请查看相应的CentOS安装Hadoop教程_单机伪分布式配置。
benladeng5225·2016-01-08 11:00

Hadoop教程(四)HDFS文件系统JavaAPI接口

  Hadoop教程(四)HDFS文件系统JavaAPI接口 HDFS是存取数据的分布式文件系统，HDFS文件操作常有两种方式，一种是命令行方式，即Hadoop提供了一套与Linux文件命令类似的命令行工具
yuan_xw·2015-12-22 23:00

Hadoop安装教程_单机/伪分布式配置_Hadoop2.6.0/Ubuntu14.04

如果用的是RedHat/CentOS系统，请查看相应的CentOS安装Hadoop教程_单机伪分布式配置。本教程基于原生Hadoop2，在Hadoop2.6.0(stable
jec·2015-12-21 05:00

Hadoop教程（五）：Flume、Sqoop、Pig、Hive、OOZIE

在我们了解Flume和Sqoop之前，让我们研究数据加载到Hadoop的问题：使用Hadoop分析处理数据，需要装载大量从不同来源的数据到Hadoop集群。从不同来源大容量的数据加载到Hadoop，然后这个过程处理它，这具有一定的挑战。维护和确保数据的一致性，并确保资源的有效利用，选择正确的方法进行数据加载前有一些因素是要考虑的。主要问题：1.使用脚本加载数据传统的使用脚本加载数据的方法，不适合于
garfielder007·2015-12-11 13:12

Hadoop教程（一）：简介、大数据解决方案、介绍快速入门

Hadoop是一个开源框架，它允许在整个集群使用简单编程模型计算机的分布式环境存储并处理大数据。它的目的是从单一的服务器到上千台机器的扩展，每一个台机都可以提供本地计算和存储。“90％的世界数据在过去的几年中产生”。由于新技术，设备和类似的社交网站通信装置的出现，人类产生的数据量每年都在迅速增长。美国从一开始的时候到2003年产生的数据量为5十亿千兆字节。如果以堆放的数据磁盘的形式，它可以填补整个
garfielder007·2015-12-11 12:33

Hadoop教程(三)HDFS文件系统Shell命令

  Hadoop教程(三)HDFS文件系统Shell命令 1Hadoop-Shell命令HDFS是存取数据的分布式文件系统，那么对HDFS的操作，就是文件系统的基本操作，比如文件的创建、修改、删除、修改权限等
yuan_xw·2015-12-07 10:00

Hadoop教程(二)Hadoop伪集群环境安装

  Hadoop教程(二)Hadoop伪集群环境安装 1Hadoop伪分布式安装1.1相关下载1、JDK下载地址：jdk-8u66-linux-x64.tar.gzLinux安装JDK及环境变量配置，参见
yuan_xw·2015-11-25 17:00

Hadoop教程(一) Hadoop入门教程

 Hadoop教程(一)Hadoop入门教程  1Hadoop入门教程Hadoop是Apache开源组织的一个分布式计算开源框架(http://hadoop.apache.org/)，用java语言实现开源软件框架
yuan_xw·2015-11-23 23:00

RHadoop教程翻译系列 _Mapreduce(1)_第一个Mapreduce任务

如果单从概念上来说，Mapreduce和R中的函数lapply, tapply并无差别，它们都是把元素转化成列，然后计算索引（Mapreduce中的键），最后合并成一个定义好的组合。首先，让我们看一个简单的lappy的例子。   small.ints = 1:1000 sapply(small.ints, function(x) x^2)   这个例子比较简单，只
·2015-11-09 12:28

MapReduce基础

　　这篇文章翻译自Yahoo的Hadoop教程，很久之前就看过了，感觉还不错。最近想总结一下以前学的东西，看到现在关于Hadoop的中文资料还比较少，就有了把它翻译出来的想法，希望能帮助到初学者。
·2015-11-01 10:14

MapReduce基础

这篇文章翻译自 Yahoo的Hadoop教程， 很久之前就看过了，感觉还不错。最近想总结一下以前学的东西，看到现在关于Hadoop的中文资料还比较少，就有了把它翻译出来的想法，希望能帮助到初学 者。
·2015-10-31 08:16

Hadoop教程（一）

英文原文：cloudera，编译：ImportNew – Royce Wong Hadoop从这里开始!和我一起学习下使用Hadoop的基本知识，下文将以Hadoop Tutorial为主体带大家走一遍如何使用Hadoop分析数据! 这个专题将描述用户在使用Hadoop MapReduce(下文缩写成MR)框架过程中面对的最重要的东西。Mapreduce由client AP
·2015-10-30 13:09

hadoop-2.2.0 vm 安装

hadoop vmwarecentos安装hadoop教程，以及个人的简单笔记http://note.youdao.com/share/?
郭彩峰·2015-09-25 17:25

Hadoop安装配置及问题总结

学习了一下慕课网上的hadoop教程，看着很简单，但是做起来碰到的问题确实不少。搞了一个下午，总算是搞定了，本博文主要记录一下我在配置hadoop过程碰到的一些问题。
u013598660·2015-08-04 10:00

（11.1.6）Hadoop教程之编写HelloWorld(2)

前面我们写了一个Hadoop程序，并让它跑起来了。但想想不对啊，Hadoop不是有两块功能么，DFS和MapReduce。没错，上一节我们写了一个MapReduce的HelloWorld程序，那这一节，我们就也学一学DFS程序的编写。DFS是什么，之前已经了解过，它是一个分布式文件存储系统。不管是远程或本地的文件系统，其实从接口上讲，应该是一至的，不然很难处理。同时在第2节的最后，我们列出了很多一
fei20121106·2015-05-27 18:00

Mac OS X Yosemite上安装Hadoop教程

1.安装Homebrew和Cask打开Mac终端,安装OSX不可或缺的套件管理器homebrew和homebrewcask复制代码代码如下:$ruby-e"$(curl-fsSLhttps://raw.githubusercontent.com/Homebrew/install/master/install)"$brewinstallcaskroom/cask/brew-cask2.安装JavaH
佚名·2015-04-21 14:15
上一页 1 2 3 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他