E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
spark1.1.0
sparkSQL1.1
http://blog.csdn.net/bluejoe2000/article/details/412478572014年9月11日,
Spark1.1.0
忽然之间发布。
ryantotti
·
2023-11-30 02:42
sparkSQL1.1入门
http://blog.csdn.net/book_mmicky/article/details/392887152014年9月11日,
Spark1.1.0
忽然之间发布。
laiwenqiang
·
2023-10-13 15:36
【Spark】
spark1.1.0
学习路线
从
Spark1.1.0
开始,重新规划了一下学习路线,由于涉及的内容比较多,会不断的完善其中的内容,争取在Spark1.2.0形成一个完整的体系,最迟到Spark
mmicky20110730
·
2020-08-22 21:37
spark1.1.0
spark学习路线
spark
Spark函数讲解:aggregateByKey
Spark1.1.0
版本才正式引入该函数。
小狼_百度
·
2020-08-03 08:26
spark
Spark1.1.0
Spark Programming Guide
SparkProgrammingGuideOverviewLinkingwithSparkInitializingSparkUsingtheShellResilientDistributedDatasets(RDDs)ParallelizedCollectionsExternalDatasetsRDDOperationsBasicsPassingFunctionstoSparkWorkingwit
luyee2010
·
2020-07-28 03:29
spark
spark streaming kafka1.4.1中的低阶api createDirectStream使用总结
原来使用
spark1.1.0
版本中的createStream函数,但是在数据处理速度跟不上数据消费速度且job异常退出的情况下,可能造成大量的数据丢失。
kwu_ganymede
·
2020-07-13 06:21
Spark
spark
spark streaming kafka1.4.1中的低阶api createDirectStream使用总结
原来使用
spark1.1.0
版本中的createStream函数,但是在数据处理速度跟不上数据消费速度且job异常退出的情况下,可能造成大量的数据丢失。
ligt0610
·
2020-06-24 04:15
KAFKA
SPARK
hadoop2.2.0安装
spark1.1.0
(maven编译)
1.环境配置hadoop-2.2.0spark-1.1.0maven-3.3.92.spark安装问题hadoop2.2.x版本支持
spark1.1.0
版本以及更低。
TurboBoost
·
2016-08-16 12:30
spark
maven
源码
hadoop
spark
spark streaming kafka1.4.1中的低阶api createDirectStream使用总结(转)
原来使用
spark1.1.0
版本中的createStream函数,但是在数据处理速度跟不上数据消费速度且job异常退出的情况下,可
Mrknowledge
·
2016-06-16 17:00
spark streaming kafka1.4.1中的低阶api createDirectStream使用总结
原来使用
spark1.1.0
版本中的createStream函数,但是在数据处理速度跟不上数据消费速度且job异常退出的情况下,可能造成大量的数据丢失。
Mrknowledge
·
2016-05-24 16:00
spark streaming kafka1.4.1中的低阶api createDirectStream使用总结
原来使用
spark1.1.0
版本中的createStream函数,但是在数据处理速度跟不上数据消费速度且job异常退出的情况下,可能造成大量的数据丢失。
kwu_ganymede
·
2016-03-01 16:00
spark
spark1.1.0
源码阅读-executor
1. executor上执行launchTask 1 def launchTask( 2 context: ExecutorBackend, taskId: Long, taskName: String, serializedTask: ByteBuffer) { 3 val tr = new TaskRunner(context, taskId, taskName
·
2015-11-11 07:40
executor
spark1.1.0
源码阅读-taskScheduler
1. sparkContext中设置createTaskScheduler 1 case "yarn-standalone" | "yarn-cluster" => 2 if (master == "yarn-standalone") { 3 logWarning(
·
2015-11-11 07:40
scheduler
spark1.1.0
源码阅读-dagscheduler and stage
1. rdd action ->sparkContext.runJob->dagscheduler.runJob 1 def runJob[T, U: ClassTag]( 2 rdd: RDD[T], 3 func: (TaskContext, Iterator[T]) => U, 4 partitions: Seq[I
·
2015-11-11 07:39
scheduler
Spark1.1.0
源码编译和部署包生成
本文转至《
Spark1.1.0
源码编译和部署包生成》:http://blog.csdn.net/book_mmicky/article/details/25714445虽然是转载的,但是笔者也尝试了其中的
u011414200
·
2015-10-26 15:00
在Windows上build Spark
我下的是
Spark1.1.0
,目前最新的release,链接spark-1.1.0.tgz。按照文档上运行bin/spark-shell,会提示找不到所需的jar包,需要重新build生
m635674608
·
2015-10-14 16:00
spark streaming kafka1.4.1中的低阶api createDirectStream使用总结
原来使用
spark1.1.0
版本中的createStream函数,但是在数据处理速度跟不上数据消费速度且job异常退出的情况下,可能造成大量的数据丢失。
ligt0610
·
2015-08-06 09:00
sparkSQL1.1
http://blog.csdn.net/bluejoe2000/article/details/412478572014年9月11日,
Spark1.1.0
忽然之间发布。
·
2015-01-22 15:00
Apache
Spark1.1.0
部署与开发环境搭建 - Mark Lin
原文链接:http://www.tuicool.com/articles/2e2q2y Spark是Apache公司推出的一种基于HadoopDistributedFileSystem(HDFS)的并行计算架构。与MapReduce不同,Spark并不局限于编写map和reduce两个方法,其提供了更为强大的内存计算(in-memorycomputing)模型,使得用户可以通过编程将数据
wishchin
·
2015-01-19 17:00
spark1.1.0
下使用SparkSQL
spark1.1.0
的安装参见http://blog.csdn.net/bluejoe2000/article/details/41391407安装了spark之后,可以在shell中执行SparkSQL
bluejoe2000
·
2014-11-23 18:00
最新版
spark1.1.0
集群安装配置
在主节点(bluejoe0)上安装
spark1.1.0
:wgethttp://mirror.bit.edu.cn/apache/spark/spark-1.1.0/spark-1.1.0
bluejoe2000
·
2014-11-22 23:00
sparkSQL1.1入门
http://blog.csdn.net/book_mmicky/article/details/392887152014年9月11日,
Spark1.1.0
忽然之间发布。
白乔
·
2014-11-18 15:15
大数据技术与系统
sparkSQL1.1入门
http://blog.csdn.net/book_mmicky/article/details/392887152014年9月11日,
Spark1.1.0
忽然之间发布。
bluejoe2000
·
2014-11-18 15:00
sparkSQL1.1入门之一:为什么sparkSQL
2014年9月11日,
Spark1.1.0
忽然之间发布。笔者立即下载、编译、部署了
Spark1.1.0
。
哭你吃完
·
2014-11-14 09:00
spark
sparksql
在Windows上build Spark
我下的是
Spark1.1.0
,目前最新的release,链接spark-1.1.0.tgz。按照文档上运行bin/spark-shell,会提示找不到所需的jar包,需要重新build生
wangyugod
·
2014-11-13 17:00
spark stand alone 集群部署
以
Spark1.1.0
为例1、编译源码 .
escaflone
·
2014-11-07 14:00
[置顶]
spark1.1.0
学习路线
从
Spark1.1.0
开始,重新规划了一下学习路线,由于涉及的内容比较多,会不断的完善其中的内容,争取在Spark1.2.0形成一个完整的体系,最迟
book_mmicky
·
2014-10-24 12:00
spark
spark1.1.0windows安装报错解决方案
spark的windows版本的安装:
spark1.1.0
的安装会报一下的错误: 解决的方法是: 到该连接下,下载需要的文件,放到spark_home的bin目录下: https://github.com
YHX1014
·
2014-09-26 11:00
scala
spark
spark1.1.0
部署standalone分布式集群
配置三个节点的spark集群,集群模式为standalone模式,其中sp1节点作为主节点,sp2节点和sp3节点为从节点。***注意所有操作均为root用户。 创建3个CentOS虚拟机,如下: sp1 192.168.1.21 //master节点 sp2 192.168.1.22 //slave节点 sp3 192.168.1.23 //slave节点
my0113
·
2014-09-23 20:00
spark1.10
spark1.1.0
snappy依赖高版本gcc
最近更新了spark到1.1.0版本。跑任务出错。Causedby:java.lang.UnsatisfiedLinkError:/tmp/snappy-1.0.5.3-6ceb7982-8940-431c-95a8-25b3684fa0be-libsnappyjava.so:/usr/lib64 /libstdc++.so.6:version`GLIBCXX_3.4.9'notfound(re
wennan
·
2014-09-17 13:00
sparkSQL1.1入门之一:为什么sparkSQL
2014年9月11日,
Spark1.1.0
忽然之间发布。笔者立即下载、编译、部署了
Spark1.1.0
。关于Spark1.1的编译和部署,请参看笔者博客
Spark1.1.0
源码编译和部署包生成。
mmicky20110730
·
2014-09-15 09:59
spark1.1.0
spark学习路线
sparkSQL1.1入门之一:为什么sparkSQL
2014年9月11日,
Spark1.1.0
忽然之间发布。笔者立即下载、编译、部署了
Spark1.1.0
。
book_mmicky
·
2014-09-15 09:00
spark
sparksql
开源集群计算环境:Spark 1.1.0发布
近日,Spark开发团队宣布开源集群计算环境
Spark1.1.0
发布,该版本是Spark1.X系列版本的第二个API兼容版本,它是目前改变最大的一个版本,具有171个开发者。
昵称4
·
2014-09-15 05:00
spark 1.1.0 on hadoop 2.4.1 安装笔记 (resourcemanager ha 支持)
由于
spark1.1.0
还没正式发布只是v1.1.0-snapshot2版本。
jiushuai
·
2014-08-22 15:00
Spark1.1.0
源码编译和部署包生成
Spark1.1.0
的源码编译和部署包生成,其本质只有两种:Maven和SBT,只不过针对不同场景而已:Maven编译SBT编译IntelliJIDEA编译(可以采用Maven或SBT插件编译),适用于开发人员部署包生成
book_mmicky
·
2014-05-13 15:00
spark
编译
上一页
1
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他