E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
大数据系列
大数据系列
11：Gora – 大数据持久化
borm – 大数据的对象持久化 wget http://archive.apache.org/dist/gora/0.3/apache-gora-0.3-src.zip unzip apache-gora-0.3-src.zip cd apache-gora-0.3 mvn clean package 1、创建项目 mvn archetype:create
yangshangchuan
·
2013-10-09 14:00
搜索引擎
大数据
hbase
网络爬虫
gora
大数据系列
11：Gora – 大数据持久化
borm – 大数据的对象持久化 wget http://archive.apache.org/dist/gora/0.3/apache-gora-0.3-src.zip unzip apache-gora-0.3-src.zip cd apache-gora-0.3 mvn clean package 1、创建项目 mvn archetype:create
yangshangchuan
·
2013-10-09 14:00
搜索引擎
大数据
hbase
网络爬虫
gora
大数据系列
10：Spark – 内存计算
wget http://mirrors.cnnic.cn/apache/incubator/spark/spark-0.8.0-incubating/spark-0.8.0-incubating-bin-hadoop1.tgz tar -zxvf spark-0.8.0-incubating-bin-hadoop1.tgz mv spark-0.8
yangshangchuan
·
2013-10-04 05:00
spark sql
spark streaming
Apache Spark
MLlib
GraphX
大数据系列
10：Spark – 内存计算
wget http://mirrors.cnnic.cn/apache/incubator/spark/spark-0.8.0-incubating/spark-0.8.0-incubating-bin-hadoop1.tgz tar -zxvf spark-0.8.0-incubating-bin-hadoop1.tgz mv spark-0.8
yangshangchuan
·
2013-10-04 05:00
spark sql
spark streaming
MLlib
GraphX
Apache Spark
大数据系列
10：Spark – 内存计算
wget http://mirrors.cnnic.cn/apache/incubator/spark/spark-0.8.0-incubating/spark-0.8.0-incubating-bin-hadoop1.tgz tar -zxvf spark-0.8.0-incubating-bin-hadoop1.tgz mv spark-0.8
yangshangchuan
·
2013-10-04 05:00
spark sql
spark streaming
Apache Spark
GraphX
MLlib
大数据系列
10：Spark – 内存计算
wget http://mirrors.cnnic.cn/apache/incubator/spark/spark-0.8.0-incubating/spark-0.8.0-incubating-bin-hadoop1.tgz tar -zxvf spark-0.8.0-incubating-bin-hadoop1.tgz mv spark-0.8
yangshangchuan
·
2013-10-04 05:00
spark sql
spark streaming
Apache Spark
MLlib
GraphX
大数据系列
5：Pig – 大数据分析平台
wget http://mirror.bit.edu.cn/apache/pig/pig-0.11.1/pig-0.11.1.tar.gz tar -xzvf pig-0.11.1.tar.gz sudo vi /etc/profile 增加： export PIG_HOME=/home/ysc/pig-0.11.1 exportPATH=$PATH:$PIG_HOME/bin sou
yangshangchuan
·
2013-10-04 02:00
搜索引擎
pig
大数据
网络爬虫
pig latin
大数据系列
5：Pig – 大数据分析平台
wget http://mirror.bit.edu.cn/apache/pig/pig-0.11.1/pig-0.11.1.tar.gz tar -xzvf pig-0.11.1.tar.gz sudo vi /etc/profile 增加： export PIG_HOME=/home/ysc/pig-0.11.1 exportPATH=$PATH:$PIG_HOME/bin sou
yangshangchuan
·
2013-10-04 02:00
搜索引擎
pig
大数据
网络爬虫
pig latin
大数据系列
5：Pig – 大数据分析平台
wget http://mirror.bit.edu.cn/apache/pig/pig-0.11.1/pig-0.11.1.tar.gz tar -xzvf pig-0.11.1.tar.gz sudo vi /etc/profile 增加： export PIG_HOME=/home/ysc/pig-0.11.1 exportPATH=$PATH:$PIG_HOME/bin sou
yangshangchuan
·
2013-10-04 02:00
搜索引擎
pig
大数据
网络爬虫
pig latin
大数据系列
5：Pig – 大数据分析平台
wget http://mirror.bit.edu.cn/apache/pig/pig-0.11.1/pig-0.11.1.tar.gz tar -xzvf pig-0.11.1.tar.gz sudo vi /etc/profile 增加： export PIG_HOME=/home/ysc/pig-0.11.1 exportPATH=$PATH:$PIG_HOME/bin sou
yangshangchuan
·
2013-10-04 02:00
搜索引擎
pig
大数据
网络爬虫
pig latin
大数据系列
4：Hive – 基于HADOOP的数据仓库
wget http://mirror.bit.edu.cn/apache/hive/hive-0.11.0/hive-0.11.0-bin.tar.gz tar -xzvf hive-0.11.0-bin.tar.gz cd hive-0.11.0-bin sudo vi /etc/profile 增加： export HIVE_HOME=/home/ysc/hive-0.10.0-bi
yangshangchuan
·
2013-10-03 00:00
搜索引擎
hive
大数据
网络爬虫
hcatalog
大数据系列
4：Hive – 基于HADOOP的数据仓库
wget http://mirror.bit.edu.cn/apache/hive/hive-0.11.0/hive-0.11.0-bin.tar.gz tar -xzvf hive-0.11.0-bin.tar.gz cd hive-0.11.0-bin sudo vi /etc/profile 增加： export HIVE_HOME=/home/ysc/hive-0.10.0-bi
yangshangchuan
·
2013-10-03 00:00
hive
搜索引擎
大数据
网络爬虫
hcatalog
大数据系列
4：Hive – 基于HADOOP的数据仓库
wget http://mirror.bit.edu.cn/apache/hive/hive-0.11.0/hive-0.11.0-bin.tar.gz tar -xzvf hive-0.11.0-bin.tar.gz cd hive-0.11.0-bin sudo vi /etc/profile 增加： export HIVE_HOME=/home/ysc/hive-0.10.0-bi
yangshangchuan
·
2013-10-03 00:00
hive
搜索引擎
大数据
网络爬虫
hcatalog
大数据系列
4：Hive – 基于HADOOP的数据仓库
wget http://mirror.bit.edu.cn/apache/hive/hive-0.11.0/hive-0.11.0-bin.tar.gz tar -xzvf hive-0.11.0-bin.tar.gz cd hive-0.11.0-bin sudo vi /etc/profile 增加： export HIVE_HOME=/home/ysc/hive-0.10.0-bi
yangshangchuan
·
2013-10-03 00:00
hive
搜索引擎
大数据
网络爬虫
hcatalog
大数据系列
9：Mahout – 机器学习
wget http://mirrors.ustc.edu.cn/apache/mahout/0.8/mahout-distribution-0.8.tar.gz tar -xzvf mahout-distribution-0.8.tar.gz cd mahout-distribution-0.8 sudo vi /etc/profile 增加： ex
yangshangchuan
·
2013-10-03 00:00
搜索引擎
大数据
Mahout
机器学习
网络爬虫
大数据系列
9：Mahout – 机器学习
wget http://mirrors.ustc.edu.cn/apache/mahout/0.8/mahout-distribution-0.8.tar.gz tar -xzvf mahout-distribution-0.8.tar.gz cd mahout-distribution-0.8 sudo vi /etc/profile 增加： ex
yangshangchuan
·
2013-10-03 00:00
搜索引擎
大数据
Mahout
机器学习
网络爬虫
大数据系列
9：Mahout – 机器学习
wget http://mirrors.ustc.edu.cn/apache/mahout/0.8/mahout-distribution-0.8.tar.gz tar -xzvf mahout-distribution-0.8.tar.gz cd mahout-distribution-0.8 sudo vi /etc/profile 增加： ex
yangshangchuan
·
2013-10-03 00:00
搜索引擎
大数据
Mahout
机器学习
网络爬虫
大数据系列
9：Mahout – 机器学习
wget http://mirrors.ustc.edu.cn/apache/mahout/0.8/mahout-distribution-0.8.tar.gz tar -xzvf mahout-distribution-0.8.tar.gz cd mahout-distribution-0.8 sudo vi /etc/profile 增加： ex
yangshangchuan
·
2013-10-03 00:00
搜索引擎
大数据
Mahout
机器学习
网络爬虫
大数据系列
8：Sqoop – HADOOP和RDBMS数据交换
Sqoop1： wget http://mirrors.ustc.edu.cn/apache/sqoop/1.4.4/sqoop-1.4.4.bin__hadoop-1.0.0.tar.gz tar -xzvf sqoop-1.4.4.bin__hadoop-1.0.0.tar.gz mv sqoop-1.4.4.bin__hadoop-1.0.0 sqoop-1.4.4 cd sqoop
yangshangchuan
·
2013-10-03 00:00
搜索引擎
大数据
数据迁移
网络爬虫
sqoop
大数据系列
8：Sqoop – HADOOP和RDBMS数据交换
Sqoop1： wget http://mirrors.ustc.edu.cn/apache/sqoop/1.4.4/sqoop-1.4.4.bin__hadoop-1.0.0.tar.gz tar -xzvf sqoop-1.4.4.bin__hadoop-1.0.0.tar.gz mv sqoop-1.4.4.bin__hadoop-1.0.0 sqoop-1.4.4 cd sqoop
yangshangchuan
·
2013-10-03 00:00
搜索引擎
大数据
数据迁移
网络爬虫
sqoop
大数据系列
8：Sqoop – HADOOP和RDBMS数据交换
Sqoop1： wget http://mirrors.ustc.edu.cn/apache/sqoop/1.4.4/sqoop-1.4.4.bin__hadoop-1.0.0.tar.gz tar -xzvf sqoop-1.4.4.bin__hadoop-1.0.0.tar.gz mv sqoop-1.4.4.bin__hadoop-1.0.0 sqoop-1.4.4 cd sqoop
yangshangchuan
·
2013-10-03 00:00
搜索引擎
大数据
数据迁移
网络爬虫
sqoop
大数据系列
8：Sqoop – HADOOP和RDBMS数据交换
Sqoop1： wget http://mirrors.ustc.edu.cn/apache/sqoop/1.4.4/sqoop-1.4.4.bin__hadoop-1.0.0.tar.gz tar -xzvf sqoop-1.4.4.bin__hadoop-1.0.0.tar.gz mv sqoop-1.4.4.bin__hadoop-1.0.0 sqoop-1.4.4 cd sqoop
yangshangchuan
·
2013-10-03 00:00
搜索引擎
大数据
数据迁移
网络爬虫
sqoop
大数据系列
7：Storm – 流计算
wget http://download.zeromq.org/zeromq-2.1.7.tar.gz tar -xzvf zeromq-2.1.7.tar.gz cd zeromq-2.1.7 sudo apt-get install gcc sudo apt-get install g++ sudo apt-get install libuuid-dev ./configure
yangshangchuan
·
2013-10-02 23:00
storm
搜索引擎
大数据
流计算
网络爬虫
大数据系列
7：Storm – 流计算
wget http://download.zeromq.org/zeromq-2.1.7.tar.gz tar -xzvf zeromq-2.1.7.tar.gz cd zeromq-2.1.7 sudo apt-get install gcc sudo apt-get install g++ sudo apt-get install libuuid-dev ./configure
yangshangchuan
·
2013-10-02 23:00
storm
搜索引擎
大数据
流计算
网络爬虫
大数据系列
7：Storm – 流计算
阅读更多wgethttp://download.zeromq.org/zeromq-2.1.7.tar.gztar-xzvfzeromq-2.1.7.tar.gzcdzeromq-2.1.7sudoapt-getinstallgccsudoapt-getinstallg++sudoapt-getinstalllibuuid-dev./configuresudoapt-getinstallmakem
yangshangchuan
·
2013-10-02 23:00
storm
流计算
大数据
搜索引擎
网络爬虫
大数据系列
7：Storm – 流计算
阅读更多wgethttp://download.zeromq.org/zeromq-2.1.7.tar.gztar-xzvfzeromq-2.1.7.tar.gzcdzeromq-2.1.7sudoapt-getinstallgccsudoapt-getinstallg++sudoapt-getinstalllibuuid-dev./configuresudoapt-getinstallmakem
yangshangchuan
·
2013-10-02 23:00
storm
流计算
大数据
搜索引擎
网络爬虫
大数据系列
7：Storm – 流计算
wget http://download.zeromq.org/zeromq-2.1.7.tar.gz tar -xzvf zeromq-2.1.7.tar.gz cd zeromq-2.1.7 sudo apt-get install gcc sudo apt-get install g++ sudo apt-get install libuuid-dev ./configure
yangshangchuan
·
2013-10-02 23:00
storm
搜索引擎
大数据
流计算
网络爬虫
大数据系列
7：Storm – 流计算
wget http://download.zeromq.org/zeromq-2.1.7.tar.gz tar -xzvf zeromq-2.1.7.tar.gz cd zeromq-2.1.7 sudo apt-get install gcc sudo apt-get install g++ sudo apt-get install libuuid-dev ./configure
yangshangchuan
·
2013-10-02 23:00
storm
搜索引擎
大数据
流计算
网络爬虫
大数据系列
2：建立开发环境编写HDFS和Map Reduce程序
1、在eclipse中配置hadoop插件 将hadoop-eclipse-plugin-1.2.1.jar 复制到eclipse/plugins目录下，重启eclipse。 2、打开MapReduce视图 Window-> Open Pe
yangshangchuan
·
2013-10-02 23:00
hadoop
搜索引擎
大数据
网络爬虫
搭建hadoop开发环境
大数据系列
2：建立开发环境编写HDFS和Map Reduce程序
1、在eclipse中配置hadoop插件 将hadoop-eclipse-plugin-1.2.1.jar 复制到eclipse/plugins目录下，重启eclipse。 2、打开MapReduce视图 Window-> Open Pe
yangshangchuan
·
2013-10-02 23:00
hadoop
搜索引擎
大数据
网络爬虫
搭建hadoop开发环境
大数据系列
2：建立开发环境编写HDFS和Map Reduce程序
1、在eclipse中配置hadoop插件 将hadoop-eclipse-plugin-1.2.1.jar 复制到eclipse/plugins目录下，重启eclipse。 2、打开MapReduce视图 Window-> Open Pe
yangshangchuan
·
2013-10-02 23:00
hadoop
搜索引擎
大数据
网络爬虫
搭建hadoop开发环境
大数据系列
2：建立开发环境编写HDFS和Map Reduce程序
1、在eclipse中配置hadoop插件 将hadoop-eclipse-plugin-1.2.1.jar 复制到eclipse/plugins目录下，重启eclipse。 2、打开MapReduce视图 Window-> Open Pe
yangshangchuan
·
2013-10-02 23:00
hadoop
搜索引擎
大数据
网络爬虫
搭建hadoop开发环境
大数据系列
3：用Python编写MapReduce
vi mapper.py 输入： #!/usr/bin/env python &n
yangshangchuan
·
2013-10-02 23:00
hadoop
python
搜索引擎
大数据
网络爬虫
大数据系列
3：用Python编写MapReduce
vi mapper.py 输入： #!/usr/bin/env python &n
yangshangchuan
·
2013-10-02 23:00
hadoop
python
搜索引擎
大数据
网络爬虫
大数据系列
3：用Python编写MapReduce
vi mapper.py 输入： #!/usr/bin/env python &n
yangshangchuan
·
2013-10-02 23:00
hadoop
python
搜索引擎
大数据
网络爬虫
大数据系列
3：用Python编写MapReduce
vi mapper.py 输入： #!/usr/bin/env python &n
yangshangchuan
·
2013-10-02 23:00
hadoop
python
搜索引擎
大数据
网络爬虫
算法系列-
大数据系列
-Bloom Filter
这几天一直看到bloomfilter这个算法。网上的资料很不错了，先摘录下，最后自己给出一个具体的应用。 bloomfilter的wiki 几个应用问题写道A和B中各存放着一亿条不重复的URL，URL存放时无序的，且URL是没有特征的，A和B可以试任意数据结构，也可以是存在数据库中。如何找出A中有而B中没有的URL。问题写道给你A,B两个文件，各存放50亿条URL，每条URL占用64字节，内存限制
mxdba321123
·
2010-09-29 12:00
jvm
数据结构
.net
算法
J#
算法系列-
大数据系列
-Bloom Filter
这几天一直看到bloomfilter这个算法。网上的资料很不错了，先摘录下，最后自己给出一个具体的应用。 bloomfilter的wiki 几个应用问题写道A和B中各存放着一亿条不重复的URL，URL存放时无序的，且URL是没有特征的，A和B可以试任意数据结构，也可以是存在数据库中。如何找出A中有而B中没有的URL。问题写道给你A,B两个文件，各存放50亿条URL，每条URL占用64字节，内存限制
mxdba321123
·
2010-09-29 12:00
jvm
数据结构
算法
.net
J#
上一页
4
5
6
7
8
9
10
11
下一页
按字母分类：
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他