E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
spar
DT_大数据梦工厂 第8课 彻底实战详解使用IDE开发Spark程序
Scala2.10.xScalaLibrarycontainer:2.10.6第二步:加入Spark1.6.0的jar文件依赖JRESystemLibrary:JavaSE-1.8开发第三步:找到依赖的
Spar
chinsun_1
·
2016-01-10 16:09
想要征服Spark吗?这几个经典课程必学!
课程目录:27.创建SparkContext简介与环境准备 28.使用Scala创建
Spar
让往事随风
·
2015-12-29 17:00
编译spark-project的hive
src/spark_hive/hive-release-1.2.1-spark/packaging/target/tmp [delete]Deletingdirectory/usr/local/src/
spar
侯上校
·
2015-12-17 17:00
1-2、Spark的standalone模式安装
cpspark-env.sh.templatespark-env.sh [root@spark0conf]#vimspark-env.sh SPARK_MASTER_IP=192.168.6.2 [root@
spar
baolibin528
·
2015-12-13 21:00
http://blog.csdn.net/wankunde/article/details/41675079/Spark 学习入门教程
lib/spark/examples/lib/spark-examples-1.1.0-cdh5.2.0-hadoop2.5.0-cdh5.2.0.jar 移动到/usr/lib/spark/lib/
spar
qq_24729325
·
2015-12-03 23:00
spark
[spark]Spark性能调优实战
Spark常见的调优工具有nman、Jmeter和Jprofile,以下是Spark调优的一个实例分析:1、场景:精确客户群对一个容量为300g的客户信息表在
spar
xiewenbo
·
2015-11-25 19:00
理解Spark的核心RDD
要理解
Spar
GarfieldEr007
·
2015-11-25 15:00
spark
RDD
distribute
弹性分布式数据集
Resilient
Datasets
sparseArray
而
Spar
鬼风
·
2015-11-17 12:00
Spark集群测试
测试案例1: [Spark@Master spark]$ MASTER=
spar
·
2015-11-13 07:39
spark
将assembly包添加到自己的maven仓库
-Dpackaging=jar -Dfile=/home/spark/software/source/compile/deploy_spark/assembly/target/scala-2.10/
spar
·
2015-11-12 23:44
assembly
查询某库所有表的rows &查看当前sql的注册信息
查询某库所有表的rows &查看当前sql的注册信息 1 2 3 4 5 6 7 select sobj.name,
spar
.rows
·
2015-11-12 23:04
rows
Opencv+C++之人脸识别
Two-Phase Test Sample Sparse Representation Method for Use With Face Recognition;当前人脸识别方面最热的方法就是稀疏表示方法(
spar
·
2015-11-12 15:23
opencv
Spark RCFile的那些“坑”
数据分析师使用PySpark构建
Spar
demigelemiao
·
2015-11-11 15:00
Spark目录
Spar
·
2015-11-11 13:03
spark
Spark,一种快速数据分析替代方案
Spar
·
2015-10-31 08:35
spark
【Spark】概述
Spar
·
2015-10-27 15:19
spark
Spark修炼之道(高级篇)——Spark源码阅读:第一节 Spark应用程序提交流程
作者:摇摆少年梦微信号:zhouzhihubeyondspark-submit脚本应用程序提交流程在运行
Spar
应用程序时,会将spark应用程序打包后使用spark-submit脚本提交到Spark中运行
lovehuangjiaju
·
2015-10-19 12:00
spark
源码分析
spark 连接使用 hbase
2、修改
spar
杰仪
·
2015-10-13 14:00
第85讲:Scala中For表达式的强大表现力实战
person.ismale;child<-persion.children) yield(person.name,child.name)println(forResule) DT大数据微信公众账号:DT_
Spar
duan_zhihua
·
2015-08-16 15:00
运行spark示例Pi可能出现的问题及解决
Exceptioninthread"main"org.apache.spark.SparkException:AmasterURLmustbesetinyourconfiguration atorg.apache.
spar
u012432611
·
2015-08-04 11:00
scala
spark
idea
Node.js笔记(九)Nodejs与shell
核心模块之一大多数情况下应该用不到这个模块,但child_process却能做很多有意思的事情shell调用最近用到的比较实用的功能,在做大数据处理的时候,需要根据客户在页面上的点击转化为spark集群的命令
spar
u010668495
·
2015-07-27 16:00
shell
node.js
spark-env.sh常用配置项
SPARK_MASTER_WEBUI_PORT Master的web UI端口 (默认: 8080),这个端口太常用,建议换一个 SPARK_WORKER_PORT 启动Spark worker 的专用端口(默认:随机)
SPAR
jxauwxj
·
2015-05-18 10:00
spark
Spark学习之1:Master启动流程
$SPARK_MASTER_IP--port$SPARK_MASTER_PORT--webui-port$SPARK_MASTER_WEBUI_PORT参数:(1)SPARK_MASTER_IP(2)
SPAR
ktlinker1119
·
2015-04-20 15:57
Spark
spark1.3.0__for_hadoop2.4.1编译、安装与初步测试
spark.apache.org/docs/latest/sql-programming-guide.html#overview--主要包括:--1.Spark基于hadoop2.4.1编译;--2.
Spar
javastart
·
2015-03-23 08:00
spark第一篇--简介,应用场景和基本原理
Spar
crazyhacking
·
2015-03-20 14:11
spark
倒排索引
设计思路先读取所有文件,数据项为(文档ID,文档词集合)的RDD,然后将数据映射为(词,文档ID)的RDD,去重,最后在reduceByKey阶段聚合每个单词的文档ID3.代码importorg.apache.
spar
435116
·
2015-03-03 23:47
spark
大数据
倒排索引
记录一则Spark读写和Lost Excutor错误的分析和解决过程
(下面的Spark部署模式为
spar
zengzhaozheng
·
2015-02-27 18:20
hadoop
spark
【Spark七十九】Spark RDD API一
//测试RDD的aggregate方法 object AggregateTest { def main(args: Array[String]) { val conf = new
Spar
bit1129
·
2015-02-25 19:00
spark
【Spark七十九】Spark RDD API一
//测试RDD的aggregate方法 object AggregateTest { def main(args: Array[String]) { val conf = new
Spar
bit1129
·
2015-02-25 19:00
spark
【Spark七十九】Spark RDD API一
//测试RDD的aggregate方法 object AggregateTest { def main(args: Array[String]) { val conf = new
Spar
bit1129
·
2015-02-25 19:00
spark
Spark 1.2.1 发布,开源集群计算系统
Spark是一种与Hadoop相似的开源集群计算环境,但是两者之间还存在一些不同之处,这些有用的不同之处使Spark在某些工作负载方面表现得更加优越,换句话说,
Spar
黑肚皮的窝
·
2015-02-25 10:06
spark
Spark Streaming初探
SparkStreaming是核心的
Spar
Jackson_Mu
·
2015-01-23 10:00
spark
Streaming
DStream
spark编译安装及部署
可以根据自己机器的环境修改相应的pom.xml配置,我的环境是hadoop2.4.1修改个小版本号即可,编译包括了对hive、yarn、ganglia等的支持tar xzf ~/source/spark-1.2.0.tgzcd
spar
tjbklx33
·
2014-12-29 16:44
spark
spark
2014年spark开发者大赛火热进行中!
无论是对Spark有浓厚兴趣的初学者、或者
Spar
HiHeartFirst
·
2014-10-14 17:07
spark热点
spark大赛
Spark视频第2期:Shark、SparkSQL
在
Spar
Rocky2014
·
2014-10-04 11:00
王家林
Spark视频
Spark培训
Spark企业内训
Spark公开课
【Spark亚太研究院系列丛书】Spark实战高手之路-第一章 构建Spark集群(第四步)(7)
打开
Spar
HiHeartFirst
·
2014-09-25 14:30
spark
技术
书籍
热点
【互动问答分享】第13期决胜云计算大数据时代Spark亚太研究院公益大讲堂
Impala已经被官方宣布“安乐死”,被官方温柔的放弃; SparkSQL是
Spar
HiHeartFirst
·
2014-09-24 10:18
spark
大数据
云计算
spark技术
【互动问答分享】第13期决胜云计算大数据时代Spark亚太研究院公益大讲堂
Impala已经被官方宣布“安乐死”,被官方温柔的放弃; SparkSQL是
Spar
Spark亚太研究院
·
2014-09-24 10:00
spark
大数据
云计算
spark技术
spark热点
spark互动问答
Spar
学习3:Spark运行概览
中文版Spark运行核心概念解析名词解释Application基于Spark的用户程序,包含了driver程序和集群上的executorDriverProgram运⾏行main函数并且新建SparkContext的程序ClusterManager在集群上获取资源的外部服务(例如:standalone,Mesos,Yarn)WorkerNode集群中任何可以运行应用代码的节点Executor是在一个
yunlong34574
·
2014-09-06 20:00
理解Spark的核心RDD
要理解
Spar
张逸
·
2014-08-31 00:00
理解Spark的核心RDD
要理解
Spar
张逸
·
2014-08-31 00:00
表驱动法 -《代码大全》读书笔记
这么算的话,平时用的的HashMap,
Spar
·
2014-05-29 16:00
读书笔记
基于ARM的数据中心路在何方?
虽然,在服务器领域,以Intel为首的X86架构一度将MIPS、
SPAR
wuzhongjie
·
2014-05-25 00:38
数据中心
ARM
硬件技术
基于ARM的数据中心路在何方?
虽然,在服务器领域,以Intel为首的X86架构一度将MIPS、
SPAR
wuzhongjie
·
2014-05-25 00:38
数据中心
ARM
在mongodb上使用Spark
所以连接mongodb和spark理论上是可行的然后怎么配置mongo-hadoop来连接
spar
1987times
·
2014-05-16 10:00
在eclipse中部署spark源代码
安装sbt3.安装ScalaIDE http://scala-ide.org/download/current.html (要注意eclipse和ScalaIDE的版本匹配问题,网页上有说明)4.下载
spar
chenxingzhen001
·
2014-05-15 17:00
ViewHolder简单写法
Iaddedagenericreturntypetoreducethecastingnoiseinclientcode @SuppressWarnings("unchecked") publicstaticTget(Viewview,intid){
Spar
zhang31jian
·
2014-02-08 16:00
Flex4 outerDocument
quot;http://ns.adobe.com/mxml/2009" xmlns:s="library://ns.adobe.com/flex/
spar
·
2013-10-12 12:00
document
Mysql 百万级数据优化资料
-----------------------------------------------------二、优化硬件如果你需要庞大的数据库表(>2G),你应该考虑使用64位的硬件结构,像Alpha、
Spar
sforiz
·
2013-03-20 18:00
IP PIM autorp listener
而这个命令就是使得dense-mode的auto-rptraffic可以通过
spar
bboykin
·
2012-12-17 10:24
listener
Multicast
AutoRP
上一页
3
4
5
6
7
8
9
10
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他