E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
spark2
DStream, DStreamGraph 详解
本文内容适用范围:2016.02.25update,
Spark2
.0全系列√(2.0.0-SNAPSHOT尚未正式发布)2016.03.10update,Spark1.6全系列√(1.6.0,1.6.1
nengyu
·
2016-06-05 15:00
详解
DStream
DStreamGraph
Spark Streaming 实现思路与模块概述
本文内容适用范围:2016.02.25update,
Spark2
.0全系列√(2.0.0-SNAPSHOT尚未正式发布)2016.03.10update,Spark1.6全系列√(1.6.0,1.6.1
nengyu
·
2016-06-05 14:00
spark
Streaming
第117课: Spark Streaming性能优化:如何最大程度的确保Spark Cluster和Kafka链接的稳
第117课:SparkStreaming性能优化:如何最大程度的确保SparkCluster和Kafka链接的稳定性1SparkStreaming与Kafka连接问题2KafkaReceiver
spark2
段智华
·
2016-06-04 21:37
Apache Spark 2.0预览: 机器学习模型持久化
在即将发布的Apache
Spark2
.0中将会提供机器学习模型持久化能力。
Joseph Bradley
·
2016-06-03 00:00
第18课:Spark Streaming中空RDD处理及流处理程序优雅的停止
机器学习在
spark2
段智华
·
2016-06-01 19:34
Spark源码版本定制发行班
spark 2.0主要特性预览
2016-05-29 朱洁 hadoop技术学习
spark2
.0相比老版本变化很大,已经发布了预览版本。
jiezhu2007
·
2016-05-31 21:11
sql
编程
hadoop
scala
spark
spark 2.0主要特性预览
阅读更多2016-05-29朱洁hadoop技术学习
spark2
.0相比老版本变化很大,已经发布了预览版本。
jiezhu2007
·
2016-05-29 14:00
hadoop
spark
scala
编程
sql
spark 2.0主要特性预览
阅读更多2016-05-29朱洁hadoop技术学习
spark2
.0相比老版本变化很大,已经发布了预览版本。
jiezhu2007
·
2016-05-29 14:00
hadoop
spark
scala
编程
sql
spark 2.0主要特性预览
阅读更多2016-05-29朱洁hadoop技术学习
spark2
.0相比老版本变化很大,已经发布了预览版本。
jiezhu2007
·
2016-05-29 14:00
hadoop
spark
scala
编程
sql
Spark 2.0
Apache
Spark2
.0:Faster,Easier,andSmarterhttp://blog.madhukaraphatak.com/categories/spark-two/https://amplab.cs.berkeley.edu
fxjwind
·
2016-05-27 14:00
Spark 2.0介绍:SparkSession创建和使用相关API
《
Spark2
.0技术预览:更容易、更快速、更智能》文章中简单地介绍了
Spark2
.0带来的新技术等。
Spark2
.0是ApacheSpark的下一个主要版本。
Wei-L
·
2016-05-22 18:24
Big
Data
Spark学习资料汇总
以上是楼主自己收集的spark学习的一些资料,希望对大家有所帮助1.书籍LearningSparkMasteringApache
Spark2
.网站officialsiteusermailinglistsparkchannelonyoutubesparksummitmeetupsparkthirdpartypackagesdatabricksblogdatabricksdocsdatabrickst
wangxiaotongfan
·
2016-05-13 14:00
Spark 2.0技术预览:更容易、更快速、更智能
在过去的几个月时间里,我们一直忙于我们所爱的大数据开源软件的下一个主要版本开发工作:Apache
Spark2
.0。Spark1.0已经出现了2年时间,在此期间,我们听到了赞美以及投诉。
dingchenxixi
·
2016-05-13 09:00
spark
技术
大数据
Spark 2.0 技术预览版: Easier, Faster, and Smarter
Forthepastfewmonths,wehavebeenbusyworkingonthenextmajorreleaseofthebigdataopensourcesoftwarewelove:Apache
Spark2
.0
sunbow0
·
2016-05-12 11:00
spark
2.0
大数据工程师技能图谱
原文链接:http://toutiao.com/a6267290210372747522/一、大数据通用处理平台1、
Spark2
、Flink3、Hadoop二、流式计算1、Storm/JStorm2、SparkStreaming3
tterminator
·
2016-03-31 13:00
大数据
5-1、Spark环境搭建
2、Spark环境搭建2.1、官网下载Spark官网地址:http://spark.apache.org/ 下载后如下: Linux上安装部署SparkJdkScalaSSHHadoop
Spark2
.2
baolibin528
·
2016-03-12 15:00
5-1Spark环境搭建
基于Flume+Kafka+Spark-Streaming的实时流式处理完整流程
基于Flume+Kafka+Spark-Streaming的实时流式处理完整流程1、环境准备,四台测试服务器spark集群三台,spark1,
spark2
,spark3kafka集群三台,spark1,
kwu_ganymede
·
2016-02-28 22:33
Spark
spark
flume
kafka
基于Flume+Kafka+Spark-Streaming的实时流式处理完整流程
基于Flume+Kafka+Spark-Streaming的实时流式处理完整流程1、环境准备,四台测试服务器spark集群三台,spark1,
spark2
,spark3kafka集群三台,spark1,
u010850027
·
2016-02-28 22:00
spark
Flume
kafka
大数据IMF传奇 java开发hadoop wodcount和hdfs文件 !
windows32ecliplse连接虚拟机的hadoop集群1、使用hadoop-eclipse-plugin-2.6.0.jar加入eclipse的插件区G:\IMFBigData
Spark2
016
段智华
·
2016-02-09 19:56
Hadoop
大数据IMF传奇 java开发hadoop wodcount和hdfs文件 !
windows32ecliplse连接虚拟机的hadoop集群1、使用hadoop-eclipse-plugin-2.6.0.jar加入eclipse的插件区G:\IMFBigData
Spark2
016
duan_zhihua
·
2016-02-09 19:00
大数据IMF传奇行动 IDEA导入spark源代码! 走入spark源代码世界!
maven的setting:G:\IMFBigData
Spark2
016\IMFIdeaWorkspace\tools\apache-maven-3.3.9-bin\apache-maven-3.3.9
duan_zhihua
·
2016-02-06 22:00
大数据IMF传奇行动 IDEA 安装运行 编译出错Error:scalac: Multiple 'scala-library*.jar'
www.jetbrains.com/idea/2、下载到D:\IMFSpark_SoftWare_ALL\Big_Data_Software、ideaIC-15.0.2.exe3、复制到G:\IMFBigData
Spark2
016
段智华
·
2016-01-16 23:57
Hadoop
大数据IMF传奇行动 IDEA 安装运行 编译出错Error:scalac: Multiple 'scala-library*.jar'
www.jetbrains.com/idea/2、下载到D:\IMFSpark_SoftWare_ALL\Big_Data_Software、ideaIC-15.0.2.exe3、复制到G:\IMFBigData
Spark2
016
duan_zhihua
·
2016-01-16 23:00
大数据IMF传奇行动 scala IDE 本地local开发wordcount 无法加载主类问题解决
大数据IMF传奇行动安装工具存放的目录G:\IMFBigData
Spark2
016\Bigdata_Software1、scalaIDE4.3.0下载页面scala-SDK-4.3.0-vfinal-2.11
段智华
·
2016-01-13 12:40
Hadoop
大数据IMF传奇行动 scala IDE 本地local开发wordcount 无法加载主类问题解决
大数据IMF传奇行动安装工具存放的目录G:\IMFBigData
Spark2
016\Bigdata_Software1、scalaIDE4.3.0下载页面scala-SDK-4.3.0-vfinal-2.11
duan_zhihua
·
2016-01-13 12:00
spark源码梳理(0)-说明
各主线直接没有必然的先后联系 如无特别说明,本文基于
Spark2
.10版本源码,并且仅讨论Standalone部署模式
distantlight1
·
2016-01-03 16:00
源码
spark
改写Spark JdbcRDD,支持自己定义分区查询条件
,支持自己定义分区查询条件(转)2015-04-2215:51 597人阅读 评论(0) 收藏 举报 分类: 大数据(102) 改写SparkJdbcRDD,支持自己定义分区查询条件分类: 大数据
Spark2
015
buster2014
·
2015-11-19 20:00
spark
大数据
spark streaming updateStateByKey 用法
文章来源:http://blog.csdn.net/stark_summer/article/details/47666337 sparkstreamingupdateStateByKey用法分类:
spark2
015
buster2014
·
2015-11-16 14:00
spark
spark
Spark社区可能放弃Spark 1.7而直接发布Spark 2.x
最近由ReynoldXin给Spark开发者发布的一封邮件透露,Spark社区很有可能会跳过Spark 1.7版本的发布,而直接转向
Spark2
.x。
wind520
·
2015-11-14 09:00
spark
2.x
openfire中配置msn网关后spark客户端不能显示msn功能的原因
在openfire中配置了msn 网关并测通后(msn网关配置需要从网上找到一个有效的msn服务器地址),登陆spark没有发现配置msn帐号的信息,我当时配置的时候用的是
spark2
.5.4,后来决定用
·
2015-11-13 19:51
openfire
java即时通信解决方案openfire+spark完整安装指南
本文介绍基于java的即时通信解决方案openfire3.6.4+
spark2
.5.8的完整的安装说明,并介绍了使用smack的java类库如何与im用户交互的例子,这样使得业务系统的消息可以通过smack
·
2015-11-13 19:37
openfire
基于xmpp openfire smack开发之openfire介绍和部署[1]
即时通信客户端可使用
spark2
.6.3,这个版本是目前最新的release版本,经过测试发现上一版本在视频支持,msn
·
2015-11-13 15:04
openfire
基于xmpp openfire smack开发之openfire介绍和部署[1]
即时通信客户端可使用
spark2
.6.3,这个版本是目前最新的release版本,经过测试发现上一版本在视频支持,msn
·
2015-11-13 05:11
openfire
java领域即时通信的解决方案一(openfire+spark+smack)
即时通信客户端可使用
spark2
.5.8,这个版本是目前最新的release版本,经过测试发现上一版本在视频支持
·
2015-10-31 19:08
openfire
Databricks:2015 Spark调查报告(部分译文)
are-now-available.htmlSANFRANCISCO,CA–(Marketwired-Sep24,2015)-由ApacheSpark创建者所成立的公司——Databricks公司,对外发布了
Spark2
015
lovehuangjiaju
·
2015-09-27 10:00
spark
Eclipse Mars Release (4.5.0)下安装编译
Spark2
.7.1
一、当然是下载啦!提供下载地址:http://www.igniterealtime.org/downloads/source.jsp这里讲的是不走寻常路的直接下载源码,而不是通过github或者svn~所以直接上图了。既不想下载github又不想下载svn怎么办呢?看到github的url了吗?Openfire: gitclonehttps://github.com/igniterealtime/
changqing5818
·
2015-09-01 11:00
Spark 伪分布式 & 全分布式 安装指南
2015-04-0203:58) 阅读(3891) | 评论(5)156人收藏此文章,我要收藏赞6目录[-]0、前言1、安装环境2、伪分布式安装2.1解压缩、配置环境变量即可2.2让配置生效2.3启动
spark2
.4
moonpure
·
2015-07-23 15:00
spark启动时 问题
我的spark是搭建在hadoop上面的,启动hadoop以后,接着启动spark的时候,会在启动命令行提示一下信息,
spark2
:failedtolaunchorg.apache.spark.deploy.worker.Worker
wangxiaotongfan
·
2015-07-16 15:00
Spark集群基于Zookeeper的HA搭建部署笔记
1.环境介绍(1)操作系统RHEL6.2-64(2)两个节点:spark1(192.168.232.147),
spark2
(192.168.232.152)(3)两个节点上都装好了Hadoop2.2集群
矩阵
·
2015-07-06 09:58
spark
zookeeper
Spark集群基于Zookeeper的HA搭建部署笔记
1.环境介绍(1)操作系统RHEL6.2-64(2)两个节点:spark1(192.168.232.147),
spark2
(192.168.232.152)(3)两个节点上都装好了Hadoop2.2集群
矩阵
·
2015-07-06 09:58
zookeeper
spark
Spark集群部署
软件环境:64为Ubuntu12.04LTS;主机名分别为spark1、
spark2
,IP地址分别为1**.1*.**.***/***。JDK版本为1.
nysyxxg
·
2015-06-24 15:00
Spark集群基于Zookeeper的HA搭建部署
1.环境介绍(1)操作系统RHEL6.2-64(2)两个节点:spark1(192.168.232.147),
spark2
(192.168.232.152)(3)两个节点上都装好了Hadoop2.2集群
wwwxxdddx
·
2015-05-11 19:00
spark
spark
HA
HA
改写Spark JdbcRDD,支持自己定义分区查询条件(转)
改写SparkJdbcRDD,支持自己定义分区查询条件分类:大数据
Spark2
015-02-0611:58139人阅读评论(0)收藏举报SparkJdbcRDDSpark自带的JdbcRDD,只支持
javastart
·
2015-04-22 15:00
spark
大数据
Spark 伪分布式 & 全分布式 安装指南
4月1日spark官方正式宣布
Spark2
.0 对Spark重构,更好支持手机等移动终端。Databricks创始人之一hashjoin透漏了相关的重构方法:利用Sca
xrzs
·
2015-04-02 03:00
基于xmpp openfire smack开发之openfire介绍和部署[1]
即时通信客户端可使用
spark2
.6.3,这个版本是目前最新的release版本,经过测试发现上一版本在视频支持,msn网关支持上可
wangjie142
·
2015-02-22 14:00
基于openfire+smack的Android、消息推送服务
即时通信客户端可使用
spark2
.6.3,这个版本是目前最新的release版本,经过测试发现上一版本在视频支持,msn网关支持上
wind520
·
2014-12-05 13:00
基于openfire+smack的Android、Web、PC开发(一)
即时通信客户端可使用
spark2
.6.3,这个版本是目前最新的release版本,经过测试发现上一版本在视频支持,msn网关支持上可
程序袁_绪龙
·
2014-11-25 15:00
openfire
基于xmpp openfire smack开发之openfire介绍和部署
即时通信客户端可使用
spark2
.6.3,这个版本是目前最新的release版本,经过测试发现上一版本在视频支持,msn网关支持上可
jdsjlzx
·
2014-11-11 16:00
openfire
XMPP
即时通信
[转]基于xmpp openfire smack开发之openfire介绍和部署[1]
即时通信客户端可使用
spark2
.6.3,这个版本是目前最新的release版本,经过测试发现上一版本在视频支持,msn网关支持上可
sk719887916
·
2014-10-21 17:00
Hadoop2.2集群安装配置-Spark集群安装部署
环境描述本实验在一台Windows7-64下安装Vmware,在Vmware里安装两虚拟机分别如下主机名spark1(192.168.232.147),RHEL6.2-64操作系统,用户名Root从机名
spark2
panguoyuan
·
2014-10-18 14:04
java
内存溢出
eclipse
异常
内存
storm
spark)
上一页
37
38
39
40
41
42
43
44
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他