SparkStream

spark概述随笔 // todo

6、spark核心由sparksql、sparkstream
逸新·2015-12-21 15:00

Spark修炼之道（进阶篇）——Spark入门到精通：第十四节 Spark Streaming 缓存、Checkpoint机制

主要内容本节内容基于官方文档：http://spark.apache.org/docs/latest/streaming-programming-guide.htmlSparkStream缓存Checkpoint案例1.SparkStream
lovehuangjiaju·2015-11-30 23:00

keepalived,代理及双主模型

nginxHA：Keepalived，heartbeat，corosync，cmanHP：高性能集群并行处理：分布式存储：HDFS：分布式计算：YARNbatch：MapReducein-memory：sparkstream
chaochao3·2015-10-21 22:05

第一个sparkstream例子

目录用[TOC]来生成目录：目录第一个SPARKSTREAM例子第一个SPARKSTREAM例子在这个例子中，程序从监听TCP套接字的数据服务器获取文本数据，然后计算文本中包含的单词数。
u012432611·2015-08-15 10:00

spark streaming测试之一使用本地数据源

直接上代码吧说下测试思路：该代码监控的/tmp/sparkStream/目录；首先，创建该目录mkdir-p/tmp/sparkStream；然后，运行spark程序；最后，向监控目录/tmp/sparkStream
996440550·2015-05-31 11:59

spark streaming测试之一使用本地数据源

直接上代码吧说下测试思路：    该代码监控的/tmp/sparkStream/目录；    首先，创建该目录mkdir-p/tmp/sparkStream；    然后，运行spark程序；    最后
996440550·2015-05-31 11:59

SparkStream 使用

炼数成金课程1、监控本地文件夹下的文件信息importorg.apache.spark.SparkConf importorg.apache.spark.streaming.{Seconds,StreamingContext} importorg.apache.spark.streaming.StreamingContext._ objectHdfsWordCount{ defmain(arg
escaflone·2015-01-31 16:00
上一页 1 2 3 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他