SparkConf

【Spark七十六】Spark计算结果存到MySQL

{SparkContext, SparkConf} object SparkMySQLInteg
bit1129·2015-02-21 19:00

【Spark六十六】Spark求数据集平均值以及单词词频TopK

{SparkConf, SparkContext} import org.apache.spark.SparkContext._ object SparkAvg { def main(args
bit1129·2015-02-16 13:00

【Spark六十六】Spark求数据集平均值以及单词词频TopK

{SparkConf, SparkContext} import org.apache.spark.SparkContext._ object SparkAvg { def main(args
bit1129·2015-02-16 13:00

spark读hdfs文件实现wordcount并将结果存回hdfs

www.cnblogs.com/xiaodf/packageiie.udps.example.operator.spark;importscala.Tuple2;importorg.apache.spark.SparkConf
DF_XIAO·2015-02-09 11:52

spark读hdfs文件实现wordcount并将结果存回hdfs

www.cnblogs.com/xiaodf/packageiie.udps.example.operator.spark;importscala.Tuple2;importorg.apache.spark.SparkConf
DF_XIAO·2015-02-09 11:52

spark streaming 实现接收网络传输数据进行WordCount功能

packageiie.udps.example.operator.spark;importscala.Tuple2;importorg.apache.spark.SparkConf;importorg.apache.spark.api.java.function.FlatMapFunction
DF_XIAO·2015-02-09 11:37

spark streaming 实现接收网络传输数据进行WordCount功能

packageiie.udps.example.operator.spark;importscala.Tuple2;importorg.apache.spark.SparkConf;importorg.apache.spark.api.java.function.FlatMapFunction
DF_XIAO·2015-02-09 11:37

spark mllib k-means算法实现

packageiie.udps.example.spark.mllib;importjava.util.regex.Pattern;importorg.apache.spark.SparkConf;importorg.apache.spark.api.java.JavaRDD
DF_XIAO·2015-02-09 11:19

【Spark五十三】Spark Streaming整合Kafka

Spark Streaming程序代码   package spark.examples.streaming import org.apache.spark.SparkConf import
bit1129·2015-02-08 23:00

【Spark五十三】Spark Streaming整合Kafka

Spark Streaming程序代码   package spark.examples.streaming import org.apache.spark.SparkConf import
bit1129·2015-02-08 23:00

【Spark五十二】Spark Streaming整合Flume-NG一

  Spark Stream代码： package spark.examples.streaming import org.apache.spark.SparkConf import
bit1129·2015-02-08 23:00

【Spark五十二】Spark Streaming整合Flume-NG一

  Spark Stream代码： package spark.examples.streaming import org.apache.spark.SparkConf import
bit1129·2015-02-08 23:00

【Spark四十五】RDD算子逻辑执行图第五部分

{SparkContext,SparkConf} importorg.apache.spark.SparkContext._ objectSparkRDDCoalesc
bit1129·2015-02-06 18:00

【Spark四十五】RDD算子逻辑执行图第五部分

{SparkContext,SparkConf} importorg.apache.spark.SparkContext._ objectSparkRDDCoalesc
bit1129·2015-02-06 18:00

【Spark四十五】RDD算子逻辑执行图第五部分

{SparkContext,SparkConf} importorg.apache.spark.SparkContext._ objectSparkRDDCoalesc
bit1129·2015-02-06 18:00

【Spark四十三】RDD算子逻辑执行图第三部分

{SparkContext,SparkConf} importorg.apache.spark.SparkContext._ objectSparkRDDIntersection{ defmain
bit1129·2015-02-06 14:00

【Spark四十三】RDD算子逻辑执行图第三部分

{SparkContext,SparkConf} importorg.apache.spark.SparkContext._ objectSparkRDDIntersection{ defmain
bit1129·2015-02-06 14:00

【Spark四十二】RDD算子逻辑执行图第二部分

{SparkContext,SparkConf} importorg.apache.spark.SparkContext._ objectSparkRDDDistinct{ defmain
bit1129·2015-02-06 13:00

【Spark四十二】RDD算子逻辑执行图第二部分

{SparkContext,SparkConf} importorg.apache.spark.SparkContext._ objectSparkRDDDistinct{ defmain
bit1129·2015-02-06 13:00

Spark Streaming示例

import org.apache.spark.SparkContext import org.apache.spark.SparkConf import org.apache.spark.SparkContext
南洋牧师·2015-02-03 17:00

Spark Streaming实例分析

Example代码分析valssc=newStreamingContext(sparkConf,Seconds(1));//获得一个DStream负责连接监听端口:地址valli
aaa1117a8w5s6d·2015-02-02 21:00

SparkStream 使用

炼数成金课程1、监控本地文件夹下的文件信息importorg.apache.spark.SparkConf importorg.apache.spark.streaming.
escaflone·2015-01-31 16:00

【Spark二八Spark Shuffle读过程源代码代码剖析

    package spark.examples import org.apache.spark.SparkConf import org.apache.spark.SparkContext
bit1129·2015-01-25 11:00

【Spark二八Spark Shuffle读过程源代码代码剖析

    package spark.examples import org.apache.spark.SparkConf import org.apache.spark.SparkContext
bit1129·2015-01-25 11:00

【Scala】分析Spark源代码总结的Scala语法三

{SparkConf, SparkContext} 表示同一个包下的多个类，可以写到一起 impo
bit1129·2015-01-25 00:00

【Scala】分析Spark源代码总结的Scala语法三

{SparkConf, SparkContext} 表示同一个包下的多个类，可以写到一起 impo
bit1129·2015-01-25 00:00

【Spark二七】Spark Shuffle写过程源代码代码剖析

，最简单情况的Shuffle过程为例，展示SparkShuffle的读写过程，WordCount代码： packagespark.examples importorg.apache.spark.SparkConf
bit1129·2015-01-24 11:00

【Spark二七】Spark Shuffle写过程源代码代码剖析

，最简单情况的Shuffle过程为例，展示SparkShuffle的读写过程，WordCount代码： packagespark.examples importorg.apache.spark.SparkConf
bit1129·2015-01-24 11:00

【Spark二七】Spark Shuffle写过程源代码代码剖析

，最简单情况的Shuffle过程为例，展示SparkShuffle的读写过程，WordCount代码： packagespark.examples importorg.apache.spark.SparkConf
bit1129·2015-01-24 11:00

本地开发spark代码上传spark集群服务并运行（基于spark官网文档）

._ importorg.apache.spark.SparkConf objectSimpleApp{ defmain(args:Array
Stark_Summer·2015-01-08 18:00

本地开发spark代码上传spark集群服务并运行（基于spark官网文档）

._ importorg.apache.spark.SparkConf objectSimpleApp{ defmain(args:Array
Stark_Summer·2015-01-08 18:00

本地开发spark代码上传spark集群服务并运行（基于spark官网文档）

._ importorg.apache.spark.SparkConf objectSimpleApp{ defmain(args:Array[Stri
stark_summer·2015-01-08 18:00

第一个Spark程序（编码+Spark-submit提交运行）

{SparkContext,SparkConf}importorg.apache.spark.SparkContext._objectSogouQA{defmain(ar
congliibm·2014-12-23 15:23

第一个Spark程序（编码+Spark-submit提交运行）

{SparkContext,SparkConf} importorg.apache.spark.SparkContext._ objectSogouQA{ defmain(args:Array
congli·2014-12-23 15:00

spark配置

1.spark可以在3处配置系统：sparkproperties控制大多数应用程序的参数，通过SparkConf对象或者Java系统property设置；环境变量在每一台机器上可以通过conf/spark-env.sh
jhonephone·2014-12-05 16:00

Spark源码分析（二）-SparkContext创建

本文主要分析下在SparkContext类创建过程中进行的一些重要操作：1、创建SparkConf对象创建SparkConf对象来管理spark应用的属性设置。
tovin·2014-07-29 21:00

第一个GraphX程序

._ importorg.apache.spark.SparkConf importscala.collection.mutable.Map importorg.ap
liuxuejiang158·2014-07-16 14:00

Spark1.0.0 属性配置

在Spark1.0.0提供了3种方式的属性配置：SparkConf方式SparkConf方式可以直接将属性值传递到SparkContext；SparkConf可以对某些通用属性直接配置，如master使用
book_mmicky·2014-06-09 01:00
上一页 13 14 15 16 17 18 19 20 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他