E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
haddop
基于
haddop
的HDFS和Excel开源库POI导出大数据报表(二)
接着上一篇《基于
haddop
的HDFS和Excel开源库POI导出大数据报表(一)》的遗留的问题开始,这篇做优化处理。
Joyven
·
2016-08-28 00:00
excel
restful
hdfs
poi
java
基于
haddop
的HDFS和Excel开源库POI导出大数据报表(一)
关键词Java、PHP、hdfs、mqrocket、excel、poi、报表需求背景在业务需求方面,每个企业或多或少都会有报表导出的作业,量少则可是使用输出流或者字符串的输出即可完成,只要指定respose的相应Content-Type即可。如果大量的数据需要导出,尤其是订单这类业务逻辑复杂的报表,导出的时候需要加入各种条件和权限,从数据处理方面就已经很费力了,更何况导出的需求不是一天两天,而是半
Joyven
·
2016-08-21 00:00
php
excel
poi
hdfs
java
putty SSH免密码登录
研究
haddop
,发现要求设定ssh免登陆,折腾了半天,最后搞定最简单的方法是让服务器和SSH的客户端相互认证,也就是说SSH客户端在连接服务器时传递私钥,SSH服务器通过公钥认证,最终实现自行安全认证
Panlg
·
2016-07-28 22:17
ssh免密码
Linux
Hadoop是什么?
实现在大量计算机组成的集群中对海量数据进行分布式计算.Hadoop框架中最核心设计就是:HDFS和MapReduce.HDFS提供了海量数据的存储,MapReduce提供了对数据的计算.数据在Hadoop中处理的流程可以简单的按照下图来理解:数据通过
Haddop
baidu_21578557
·
2016-07-03 12:00
hadoop
RHadoop实践系列之一:Hadoop环境搭建
Haddop
环境准备Hadoop完全分步式集群搭建HDFS测试每一章节,都会分为”文字说明部分”和”代码部分”,保持文字说明与代码的连贯性。
happyduoduo1
·
2016-07-01 16:00
hadoop
集群
操作系统
HADOOP集群
HDFS 文件权限
superuser是启动namenode的用户,例如,如果你用root用户安装的并且启动hdfs,那么superuser就是root,如果用hadoop用户安装并且启动的hdfs那么superuser就是
haddop
dajiangu
·
2016-06-01 12:37
Hadoop安装
Hadoop
HDFS 文件权限
superuser是启动namenode的用户,例如,如果你用root用户安装的并且启动hdfs,那么superuser就是root,如果用hadoop用户安装并且启动的hdfs那么superuser就是
haddop
dajiangu
·
2016-06-01 12:37
Hadoop安装
Hadoop
告诉你Hadoop是什么 [转]
实现在大量计算机组成的集群中对海量数据进行分布式计算.Hadoop框架中最核心设计就是:HDFS和MapReduce.HDFS提供了海量数据的存储,MapReduce提供了对数据的计算.数据在Hadoop中处理的流程可以简单的按照下图来理解:数据通过
Haddop
qq1175421841
·
2016-04-18 19:00
新版本Hadoop安装过程
DataNode ResourceManager旧版本HadoopSecondaryNamenode,JobTracker,NameNode,DataNode,TraskTracker五个进程 安装新版本
Haddop
gaojingsong
·
2016-04-07 22:00
新版本Hadoop安装过程
告诉你Hadoop是什么
实现在大量计算机组成的集群中对海量数据进行分布式计算.Hadoop框架中最核心设计就是:HDFS和MapReduce.HDFS提供了海量数据的存储,MapReduce提供了对数据的计算.数据在Hadoop中处理的流程可以简单的按照下图来理解:数据通过
Haddop
clerk0324
·
2016-03-14 14:00
Hbase学习记录(1)|伪分布式安装
概述 Hbase –
Haddop
Database 是一个高性能,高可靠性、面向列、可伸缩的分布式存储系统。
·
2015-11-11 04:19
hbase
告诉你Hadoop是什么
数据在Hadoop中处理的流程可以简单的按照下图来理解:数据通过
Haddop
的集
·
2015-11-01 13:48
hadoop
Hadoop HA 学习
众所周知,
Haddop
是一个SPOF(single point of failure)系统,存在单点问题。对于7×24生产环境,是具有极大的风险。
·
2015-10-31 11:27
hadoop
[zz]HDFS文件读写 使用c api
1.用
haddop
提供的C API to HDFS来实现文件写入到HDFS中。
·
2015-10-23 08:37
hdfs
demo程序WordCount
最近在学习云计算,研究
Haddop
框架,费了一整天时间将Hadoop在Linux下完全运行起来,看到官方的map-reduce的demo程序WordCount,仔细研究了一下,算做入门了。
moonpure
·
2015-07-21 11:00
apache hadoop简介及核心机制
实现在大量计算机组成的集群中对海量数据进行分布式计算.Hadoop框架中最核心设计就是:HDFS和MapReduce.HDFS提供了海量数据的存储,MapReduce提供了对数据的计算.数据在Hadoop中处理的流程可以简单的按照下图来理解:数据通过
Haddop
xinklabi
·
2014-02-20 10:00
apache
Hadoop是什么
实现在大量计算机组成的集群中对海量数据进行分布式计算.Hadoop框架中最核心设计就是:HDFS和MapReduce.HDFS提供了海量数据的存储,MapReduce提供了对数据的计算.数据在Hadoop中处理的流程可以简单的按照下图来理解:数据通过
Haddop
dwj200810
·
2013-11-29 14:17
Hadoop是什么
实现在大量计算机组成的集群中对海量数据进行分布式计算.Hadoop框架中最核心设计就是:HDFS和MapReduce.HDFS提供了海量数据的存储,MapReduce提供了对数据的计算.数据在Hadoop中处理的流程可以简单的按照下图来理解:数据通过
Haddop
dengwenjun
·
2013-11-29 14:00
hadoop
看完阿里云的
haddop
云梯集群设计思路有感
上次去hadoop大会,听了互联网的专场,对于阿里的云梯这个主题颇有些印象,但是由于对hadoop纯属概念党,所以听的也不是太懂,今天在网上查了下这个云梯,其实网关于这个上面的还是挺多的,所以特别看了下:背景:阿里的云梯集群是承载了阿里巴巴过去五年来的集团及其子公司(淘宝、天猫、一淘、B2B等)业务的绝大部分业务数据基础平台,经历了近5年数据量的增长,服务器也不断的增长,从300到1000...直
marvelyu
·
2013-11-28 20:08
hadoop
云梯
集群设计思路
Hadoop示例程序WordCount运行及详解
最近在学习云计算,研究
Haddop
框架,费了一整天时间将Hadoop在Linux下完全运行起来,看到官方的map-reduce的demo程序WordCount,仔细研究了一下,算做入门了。
dreaminthewind
·
2013-09-09 14:19
hadoop
Hadoop示例程序WordCount运行及详解
最近在学习云计算,研究
Haddop
框架,费了一整天时间将Hadoop在Linux下完全运行起来,看到官方的map-reduce的demo程序WordCount,仔细研究了一下,算做入门了。
dreaminthewind
·
2013-09-09 14:19
hadoop
配置hadoop.tmp.dir 目录
感谢原有发帖人,内容来源:http://f.dataguru.cn/thread-23704-1-1.htmlHADOOP配置
HADDOP
.TMP.DIR注意先说说,场景,在开发环境中,由于意外断电.
bluetropic
·
2013-07-26 11:00
用maven的ant run插件自动部署MR job依赖的jar到HDFS
所以打算在mavenpackage时将所有jar通过脚本上传到远程HDFS上 编写ant脚本使用了,
haddop
的ant插件。说白了就是一些util方法,调用了fsshell。
ldd600
·
2012-09-07 20:00
maven
haddop
RPC如何处理IO
Hadoop的RPC如何处理IO Hadoop在RPC的Server端使用了NIO的方式来处理客户端的请求。 Server端没有线程池,Listener类会打开一个线程,该类拥有一个Selector,该Selector负责接收链接,处理链接的输入流。一旦一个客户端链接被接受,Listener会构造一个Connection对象。该C
bofang
·
2012-09-04 11:00
rpc
Hadoop概述
实现在大量计算机组成的集群中对海量数据进行分布式计算.Hadoop框架中最核心设计就是:HDFS和MapReduce.HDFS提供了海量数据的存储,MapReduce提供了对数据的计算.数据在hadoop中处理的流程可以简单的按照下图来理解:数据通过
Haddop
kkdelta
·
2012-06-27 14:00
mapreduce
框架
hadoop
集群
分布式计算
存储
Hadoop示例程序WordCount详解
最近在学习云计算,研究
Haddop
框架,费了一整天时间将Hadoop在Linux下完全运行起来,看到官方的map-reduce的demo程序WordCount,仔细研究了一下,算做入门了。
rao_warrior
·
2012-02-15 21:00
解决
Haddop
配置 SecondNameNode 引起的 java.io.IOException: GetImage failed.
Haddop
配置引起的WARNorg.mortbay.log:/getimage:java.io.IOException:GetImagefailed.java.io.IOException:Content-Lengthheaderisnotprovidedby
七重天
·
2011-09-13 11:00
Hadoop示例程序WordCount运行及详解
Hadoop示例程序WordCount运行及详解博客分类:HadoopLinux编程Apache框架Hadoop 最近在学习云计算,研究
Haddop
框架,费了一整天时间将Hadoop在Linux下完全运行起来
yzhou86
·
2011-08-29 21:00
编程
hadoop
框架
String
任务
output
HDFS文件读写
1.用
haddop
提供的CAPItoHDFS来实现文件写入到HDFS中。
aidayei
·
2011-07-05 20:00
api
struct
File
null
buffer
Data
big
Hadoop HDFS权限控制
在linux命令行下,可以使用下面的命令修改文件的权限、文件所有者,文件所属组: hadoop fs –chmod (修改文件所有者,文件所属组,其他用户的读、写、执行权限)
haddop
fs –
jbm3072
·
2011-05-18 15:00
apache
hadoop
Web
linux
Yahoo
Haddop
学习~
http://hadoop.apache.org/common/docs/r0.18.2/cn/quickstart.html
Skai_CSDN
·
2011-03-03 01:00
Hadoop示例程序WordCount运行及详解
最近在学习云计算,研究
Haddop
框架,费了一整天时间将Hadoop在Linux下完全运行起来,看到官方的map-reduce的demo程序WordCount,仔细研究了一下,算做入门了。
samuschen
·
2010-09-15 15:00
apache
编程
框架
linux
hadoop
Hadoop示例程序WordCount详解
最近在学习云计算,研究
Haddop
框架,费了一整天时间将Hadoop在Linux下完全运行起来,看到官方的map-reduce的demo程序WordCount,仔细研究了一下
dapp66
·
2010-03-03 15:00
apache
编程
hadoop
linux
框架
Haddop
学习1--cygwin的安装
阅读更多如果想在windows下使用Hadoop,我们需要安装Cygwin。CygwinisaLinux-likeenvironmentforWindows.Itconsistsoftwoparts:ADLL(cygwin1.dll)whichactsasaLinuxAPIemulationlayerprovidingsubstantialLinuxAPIfunctionality.Acollec
swingboat
·
2009-07-18 13:00
Hadoop
Linux
Windows
SSH
HTML
Haddop
学习1--cygwin的安装
如果想在windows下使用Hadoop,我们需要安装Cygwin。 Cygwin is a Linux-like environment for Windows. It consists of two parts: A DLL (cygwin1.dll) which acts as a Linux API emulation layer providing substantial Lin
swingboat
·
2009-07-18 13:00
html
hadoop
linux
windows
ssh
上一页
1
2
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他