E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
hadoop相关
Hadoop和大数据：60款顶级开源工具
一、
Hadoop相关
工具1.HadoopApache的Hadoop项目已几乎与大数据划上了等号。它不断壮大起来，已成为一个完整的生态系统，众多开源工具面向高度扩展的分布式计算。
doitmyway
·
2016-09-20 16:52
大数据
大数据相关60款顶级开源工具
原文链接：https://my.oschina.net/Rayn/blog/748008一、
Hadoop相关
工具1.HadoopApache的Hadoop项目已几乎与大数据划上了等号。
chuhui1765
·
2016-09-18 15:00
crontab环境变量问题
在crontab中运行脚本来查看
hadoop相关
信息，由于hadoop、java默认部署在/usr/local下面，所以导致crontab执行时出现报错。具体与环境变量有关系，下文描述比较清楚。
Wilson9527
·
2016-09-18 14:28
crontab
linux
hadoop相关
进程介绍
1.NameNode:相当于一个领导者，负责调度，比如你需要存一个1280m的文件如果按照128m分块那么namenode就会把这10个块（这里不考虑副本）分配到集群中的datanode上并记录对于关系。当你要下载这个文件的时候namenode就知道在那些节点上给你取这些数据了。它主要维护两个map一个是文件到块的对应关系一个是块到节点的对应关系。2.secondarynamenode：它是nam
木戈不是猪
·
2016-09-15 10:39
hadoop
大数据与云计算
Linux下连接Mysql出现：Access denied for user 'root'@'localhost' (using password:YES)的解决方法
问题简介：本人近期在学习
hadoop相关
技术，在使用hive连接mysql数据库的时候，出现Accessdeniedforuser'root'@'localhost'(usingpassword:YES
专业的程序员
·
2016-08-23 14:35
数据库
大数据工具：Spark配置遇到的坑
start-all.sh启动所有的服务时遇到问题，抛出Java异常：Unsupportedmajor.minorversion51.0原因分析看了sprak启动脚本代码，基本上就是config加载相关环境变量（
Hadoop
Utopi_a
·
2016-08-04 18:43
Flume学习笔记（二）问题整理
需要添加
Hadoop相关
的包到flume的classpath配置中（或者直接拷贝到flume的lib文件夹中）。具体需要的包，我是在maven项目中配置： org.a
Lnho2015
·
2016-08-04 13:00
hadoop
Flume
kafka
Hive源码编译注意事项
一、指定Hadoop版本如果不明确指定引用Hadoop版本会在编译途中产生找不到
Hadoop相关
依赖class错误mvncleaninstall-DskipTests-Phadoop-2二、关于部分引用
DV2
·
2016-07-04 09:40
Hadoop-Hive
ubuntu 16.04搭建hadoop2.7.2(Vmware 12.0搭建完全分布式三台虚拟机)
此做法无实际意义，只是用来学习搭建过程和了解
hadoop相关
配置。
BearFishCai
·
2016-06-30 00:05
云计算
虚拟机安装Ambari和
Hadoop相关
服务
一、环境准备通过vmware三台虚拟机172.16.120.15，172.16.120.25，172.16.120.35系统：centOS6.7 镜像地址：https://www.centos.org/download/镜像说明： CentOS-7.0-x86_64-DVD-1503-01.iso 标准安装版，一般下载这个就可以了（推荐） CentOS-7.0-x86
zqqnancy
·
2016-06-29 15:00
hadoop
虚拟机
hostname
ambari安装
VMWARE克隆出现的网络问题
电商之梳理
hadoop相关
知识---分布式架构
Hadoop编辑本词条由“科普中国”百科科学词条编写与应用工作项目审核。Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力进行高速运算和存储。[1]Hadoop实现了一个分布式文件系统（HadoopDistributedFileSystem），简称HDFS。HDFS有高容错性的特点，并且设计用来部署在低廉的（
u014586894
·
2016-06-09 18:00
hadoop
HDFS配置Kerberos认证
article/details/42173023HDFS配置Kerberos认证2014.11.04本文主要记录CDHHadoop集群上配置HDFS集成Kerberos的过程，包括Kerberos的安装和
Hadoop
SIMONE
·
2016-05-31 17:00
大数据以及
Hadoop相关
概念介绍
一、大数据的基本概念1.1、什么是大数据大数据指的就是要处理的数据是TB级别以上的数据。大数据是以TB级别起步的。在计算机当中，存放到硬盘上面的文件都会占用一定的存储空间，例如：文件占用的存储空间代表的就是该文件的大小，在计算机当中，文件的大小可以采用以下单位来表示，各个单位之间的转换关系如下：平时我们在我们自己的电脑上面常见的就是Byte、KB、MB、GB这几种，那么究竟什么是大数据呢，大数据的
DaveBobo
·
2016-05-31 08:40
大数据和云计算
大数据以及
Hadoop相关
概念介绍
一、大数据的基本概念1.1、什么是大数据大数据指的就是要处理的数据是TB级别以上的数据。大数据是以TB级别起步的。在计算机当中，存放到硬盘上面的文件都会占用一定的存储空间，例如：文件占用的存储空间代表的就是该文件的大小，在计算机当中，文件的大小可以采用以下单位来表示，各个单位之间的转换关系如下：平时我们在我们自己的电脑上面常见的就是Byte、KB、MB、GB这几种，那么究竟什么是大数据呢，大数据的
DaveBobo
·
2016-05-31 08:40
大数据和云计算
[置顶] 魅族大数据上云之路
在开始之前我们默认今天参与直播的各位同学对
Hadoop相关
技术和docker都有一定的了解，另外以下提到Hadoop是泛指目前魅族大数据使用的Hadoop生态圈技术，资源除特别说明则泛指存储资源、计算资源和网络资源的总和
tech_meizu
·
2016-05-16 17:00
hadoop
大数据
docker
在centOS6.5中安装jdk1.7.0_65
在centOS6.5中安装jdk1.7.0_65从
hadoop相关
软件这里下载jdk-7u65-linux-i586.tar.gz，通过ftp上传到centOS系统中，然后通过tar-zxvf命令，对其进行解压
Levi_moon
·
2016-05-08 13:09
hadoop相关软件
Hadoop招聘数据分析
观察对象：
Hadoop相关
工作的招聘数据统计时间：2016.4.1数据采集：李晨光数据处理：郭创图表制作：郭创文章编写：郭创特别感谢：DataAnswer请微信搜索公众号并添加：DataAnswer一、
Dr_Guo
·
2016-04-02 02:00
hadoop
数据分析
大数据
hadoop面试记录（二）
hadoop-env.sh JAVA_HOME，HADOOP_CONF_DIR，HADOOP_LOG_DIR，HADOOP_PID_DIR，HADOOP_CLASSPATH，
hadoop相关
进程
等待救赎
·
2016-03-22 23:00
hadoop实例分析之WordCount单词统计分析
WordCount单词统计分析 最近在网上看了
hadoop相关
资料以及单词计数的一个实例，结合网上的资料和自己的看法简要分析一下执行过程。
mingtianhaiyouwo
·
2016-03-11 16:00
意图与逻辑
伪分布式vs分布式什么叫分布式什么叫伪分布式，之前我们说与
hadoop相关
的java进程如果只运行在一个物理机器中，为伪分布式，如果运行在多台物理机器中则为分布式，伪分布式的本质是该节点既为主节点，也为从节点
lanchunhui
·
2016-03-05 18:00
大数据以及
Hadoop相关
概念介绍
一、大数据的基本概念1.1、什么是大数据大数据指的就是要处理的数据是TB级别以上的数据。大数据是以TB级别起步的。在计算机当中，存放到硬盘上面的文件都会占用一定的存储空间，例如：文件占用的存储空间代表的就是该文件的大小，在计算机当中，文件的大小可以采用以下单位来表示，各个单位之间的转换关系如下：平时我们在我们自己的电脑上面常见的就是Byte、KB、MB、GB这几种，那么究竟什么是大数据呢，大数据的
淘气小男孩
·
2016-02-12 17:00
hadoop生态系统
这里收集整理了跟
Hadoop相关
的Apache下的开源项目，以供后续分析研究。ApacheHadoopHadoop是一个大数据处理框架，它可用于从单台到数以千计的服务器集群的存储和计算服务。
淘气小男孩
·
2016-02-12 12:00
zookeeper 分布式锁服务
zookeeper是hadoop下面的一个子项目,用来协调跟
hadoop相关
的一些分布式的框架,如hadoop,hive,pig等,其实他们都是动物,所以叫z
八戒_o
·
2016-02-02 10:00
zookeeper
分布式锁服务
Hadoop相关
命令中的【--config configdir】
当我们在profile文件中配置好hadoop的环境变量后，在执行hadoop的时候会出现如下这说明在执行hadoop的时候，可以带参数来执行相关的操作，比如我们有好几个版本的hadooop，那么我们在执行hadoop的时候，到底运行哪个呢？那么这样就可以执行hadoop命令时加上后面的参数来指定具体要执行那个版本的hadoop。例：hadoop--config/opt/hadoop/hadoop
hsl_1990_08_15
·
2016-02-01 12:00
hadoop参数
azkaban web-server源码解析
注：请先看azkaban官方文档，然后安装好azkaban-web-server并熟悉使用流程后，再往下看一、概述azkaban主要用于
hadoop相关
job任务的调度，但也可以应用任何需要调度管理的任务
gstc110
·
2016-01-27 20:00
Hadoop学习总结（1）——大数据以及
Hadoop相关
概念介绍
一、大数据的基本概念1.1、什么是大数据大数据指的就是要处理的数据是TB级别以上的数据。大数据是以TB级别起步的。在计算机当中，存放到硬盘上面的文件都会占用一定的存储空间，例如：文件占用的存储空间代表的就是该文件的大小，在计算机当中，文件的大小可以采用以下单位来表示，各个单位之间的转换关系如下：平时我们在我们自己的电脑上面常见的就是Byte、KB、MB、GB这几种，那么究竟什么是大数据呢，大数据的
zhanghaiyang
·
2016-01-20 14:00
Hadoop学习总结（1）——大数据以及
Hadoop相关
概念介绍
一、大数据的基本概念1.1、什么是大数据大数据指的就是要处理的数据是TB级别以上的数据。大数据是以TB级别起步的。在计算机当中，存放到硬盘上面的文件都会占用一定的存储空间，例如：文件占用的存储空间代表的就是该文件的大小，在计算机当中，文件的大小可以采用以下单位来表示，各个单位之间的转换关系如下：平时我们在我们自己的电脑上面常见的就是Byte、KB、MB、GB这几种，那么究竟什么是大数据呢，大数据的
zhanghaiyang
·
2016-01-20 14:00
Hadoop学习总结（1）——大数据以及
Hadoop相关
概念介绍
一、大数据的基本概念1.1、什么是大数据大数据指的就是要处理的数据是TB级别以上的数据。大数据是以TB级别起步的。在计算机当中，存放到硬盘上面的文件都会占用一定的存储空间，例如：文件占用的存储空间代表的就是该文件的大小，在计算机当中，文件的大小可以采用以下单位来表示，各个单位之间的转换关系如下：平时我们在我们自己的电脑上面常见的就是Byte、KB、MB、GB这几种，那么究竟什么是大数据呢，大数据的
zhanghaiyang
·
2016-01-20 13:00
Hadoop学习总结（1）——大数据以及
Hadoop相关
概念介绍
一、大数据的基本概念1.1、什么是大数据大数据指的就是要处理的数据是TB级别以上的数据。大数据是以TB级别起步的。在计算机当中，存放到硬盘上面的文件都会占用一定的存储空间，例如：文件占用的存储空间代表的就是该文件的大小，在计算机当中，文件的大小可以采用以下单位来表示，各个单位之间的转换关系如下：平时我们在我们自己的电脑上面常见的就是Byte、KB、MB、GB这几种，那么究竟什么是大数据呢，大数据的
zhanghaiyang
·
2016-01-20 13:00
Hadoop学习总结（1）——大数据以及
Hadoop相关
概念介绍
一、大数据的基本概念1.1、什么是大数据大数据指的就是要处理的数据是TB级别以上的数据。大数据是以TB级别起步的。在计算机当中，存放到硬盘上面的文件都会占用一定的存储空间，例如：文件占用的存储空间代表的就是该文件的大小，在计算机当中，文件的大小可以采用以下单位来表示，各个单位之间的转换关系如下：平时我们在我们自己的电脑上面常见的就是Byte、KB、MB、GB这几种，那么究竟什么是大数据呢，大数据的
zhanghaiyang
·
2016-01-20 13:00
Hadoop学习总结（1）——大数据以及
Hadoop相关
概念介绍
一、大数据的基本概念1.1、什么是大数据大数据指的就是要处理的数据是TB级别以上的数据。大数据是以TB级别起步的。在计算机当中，存放到硬盘上面的文件都会占用一定的存储空间，例如：文件占用的存储空间代表的就是该文件的大小，在计算机当中，文件的大小可以采用以下单位来表示，各个单位之间的转换关系如下：平时我们在我们自己的电脑上面常见的就是Byte、KB、MB、GB这几种，那么究竟什么是大数据呢，大数据的
zhanghaiyang
·
2016-01-08 13:00
Impala学习笔记（一）CDH5.4.0安装
0、扩展VM虚拟机空间原来给虚拟机分配了10G的硬盘空间，用来安装和测试
Hadoop相关
的框架，但是下
luchunli1985
·
2016-01-06 23:46
impala
学习笔记
Impala学习笔记（一）CDH5.4.0安装
0、扩展VM虚拟机空间原来给虚拟机分配了10G的硬盘空间，用来安装和测试
Hadoop相关
的框架，但是下
luchunli1985
·
2016-01-06 23:46
impala
学习笔记
java写hadoop全局排序
但是有些情况，如全排序等等用streaming的方式往往不好处理，于是乎用原生语言来写map-reduce;开发环境eclipse,windows,把
hadoop相关
的jar附加到程序中，打包后放回linux
finallyly
·
2015-12-31 14:00
Hadoop学习总结（1）——大数据以及
Hadoop相关
概念介绍
一、大数据的基本概念1.1、什么是大数据大数据指的就是要处理的数据是TB级别以上的数据。大数据是以TB级别起步的。在计算机当中，存放到硬盘上面的文件都会占用一定的存储空间，例如：文件占用的存储空间代表的就是该文件的大小，在计算机当中，文件的大小可以采用以下单位来表示，各个单位之间的转换关系如下：平时我们在我们自己的电脑上面常见的就是Byte、KB、MB、GB这几种，那么究竟什么是大数据呢，大数据的
u012562943
·
2015-12-29 13:00
hadoop完全分布式模式的安装和配置步骤
-1.2.1为例，介绍hadoop完全分布式的部署和配置步骤实验条件：三台阿里云云服务器(已经配置好Java环境)一台PC机用于远程登录服务器前排提示：JAVA环境需每个服务器单独配置(注意路径一致)
hadoop
brianway
·
2015-12-16 00:00
分布式
环境配置
hadoop
hadoop相关
整理
1.数据结构与算法1.1书籍（1）算法导论（2）编程之美（3）编程珠玑（4）数据结构（C语言版）（5）CareerCup.Cracking.the.Technical.Interview.Ed4.2010：http://ishare.iask.sina.com.cn/f/12828753.html（6）《程序员面试笔试宝典》，何昊、叶向阳、窦浩编著1.2 博客（1）July的博客：http://b
qq_26562641
·
2015-12-09 17:00
Hadoop和大数据：60款顶级大数据开源工具
一、
Hadoop相关
工具1.HadoopApache的Hadoop项目已几乎与大数据划上了等号。它不断壮大起来，已成为一个完整的生态系统，众多开源工具面向高度扩展的分布式计算。
DavidZang
·
2015-12-07 11:00
重学hadoop技术
最近因为做了些和
hadoop相关
的项目（虽然主要是运维），但是这段经历让我对hadoop的实际运用有了更加深入的理解。
夏天的森林
·
2015-12-06 14:00
查看
hadoop相关
版本的方法
1.查看Hadoop的版本：hadoop-version2.查看hive版本没有好办法，可以去hive目录下的lib文件夹下查看jar包的版本3.查看hbase版本方法：3.1直接用hbaseshell命令进入shell的时候就会显示版本号进入shell后#hbaseshell HBaseShell;enter'help'forlistofsupportedcommands. Type"exi
lifuxiangcaohui
·
2015-11-30 14:00
高效搭建Spark全然分布式集群
写在前面二： 使用软件说明 约定，Spark相关软件存放文件夹：/usr/local/yujianxin/spark，
Hadoop相关
软件存放文件夹： /home/yujianxin
·
2015-11-13 20:33
spark
hadoop相关
端口详解
Hadoop端口说明 默认端口 设置位置
·
2015-11-13 10:21
hadoop
hadoop相关
Exception
Problem 1: 程序 'java' 已包含在下列软件包中： * default-jre * gcj-4.6-jre-headless * gcj-4.7-jre-headless * openjdk-7-jre-headless * openjdk-6-jre-headless 请尝试：sudo apt-get install &l
·
2015-11-13 10:20
exception
HBASE松散数据存储设计初识
引 最近关注Hadoop，因此也顺便关注了一下
Hadoop相关
的项目。HBASE就是基于Hadoop的一个开源项目，也是对Google的BigTable的一种实现。
·
2015-11-13 09:38
hbase
hadoop相关
问题
发现一篇不错的文章，转一下。http://www.cnblogs.com/xuekyo/p/3386610.html HDFS导论（转） 1.流式数据访问 HDFS的构建思想是这样的：一次写入，多次读取是最高效的访问模式。数据集通常有数据源生成或从数据源复制而来，接着长时间在此数据集上进行各类分析。每次分析都将设计数据集的大部分数据甚至全部，因此读取整个数据集的时间延迟
·
2015-11-12 22:30
hadoop
【Hadoop环境配置】Hadoop安装，配置和试用
1、
Hadoop相关
网站 1.1 官方网站 Hadoop套件： http://hadoop.apache.org/ Hive工具：http://hive.apache.org/ 1.2 国内的镜像下载服务器
·
2015-11-09 11:51
hadoop
Cloudera Hadoop 管理员 广州
ClouderaAdministratorTrainingforApacheHadoop(管理员课程)建议学员：具备基本Linux系统管理经验，无需具备
Hadoop相关
知识；课时：4天Cloudera大学的
一只树懒
·
2015-11-09 11:00
大数据
管理员
Cloudera
MapReduce and MachineLearning——笔记四（配置开发环境—上）
在windows上进行
hadoop相关
的开发，需要在eclipse上安装hadoop开发插件。
·
2015-11-08 15:53
mapreduce
大数据时代的宠儿——Hadoop简介和实践分享
这篇文章简单介绍了
Hadoop相关
的技术生态圈，同时共享一份前一阵编写的实践教程，需要者自取。
·
2015-11-02 12:50
hadoop
关于Hadoop结合RDBMS应用的一些思考
最近一段时间一直在从事和
hadoop相关
的工作，主要是技术内容学习、安装配置优化以及一些框架结构的设计。
·
2015-11-01 10:08
hadoop
上一页
3
4
5
6
7
8
9
10
下一页
按字母分类：
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他