E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
SparkR
Spark组件之
SparkR
学习5--R语言函数调用(跨文件调用)
更多代码请见:https://github.com/xubo245/SparkLearning环境:RStudioR-3.2.1Spark组件之
SparkR
学习5--R语言函数调用(跨文件调用)1.在文件夹
bob601450868
·
2016-04-21 02:00
Spark组件之
SparkR
学习4--Eclipse下R语言环境搭建
更多代码请见:https://github.com/xubo245/SparkLearning1.下载R地址:eclipse下http://download.walware.de/eclipse-4.3/LearningR这本书上第5页有讲从http://www.walware.de/goto/statet下载,但是没试成功,不确定是否可行2.配置:参考【2】,注意:RunConfiguratio
bob601450868
·
2016-04-20 13:00
Spark组件之
SparkR
学习3--使用spark-submit向集群提交R代码文件data-manipulation.R
更多代码请见:https://github.com/xubo245/SparkLearning1.数据准备:1.1下载数据文件wgethttp://s3-us-west-2.amazonaws.com/
sparkr
-data
bob601450868
·
2016-04-20 13:00
Spark组件之
SparkR
学习2--使用spark-submit向集群提交R代码文件dataframe.R
更多代码请见:https://github.com/xubo245/SparkLearning环境:spark1.5.2,R-3.2.11.examples1 dataframe.R 1.1文件来源:参考【1】./bin/spark-submitexamples/src/main/r/dataframe.R中代码运行有问题:hadoop@Master:~/cloud/testByXubo/spa
bob601450868
·
2016-04-20 12:00
Spark组件之
SparkR
学习1--安装与测试
github.com/xubo245/SparkLearning环境:ubuntu:Spark1.5.2(已装)、R3.2.1Window:Rstudio1Ubuntu下配置1.1.R安装:Spark安装后直接启动
SparkR
bob601450868
·
2016-04-19 23:00
[原]海纳百川 有容乃大:
SparkR
与Docker的机器学习实战
作为学统计出身的人,我们想折腾大数据但又不想学习Hadoop或者Java,我们更倾向于把精力放在建模和算法设计上,
SparkR
和Docker的完美结合,让R的计算直接从一架战斗机的当兵作战华丽转变为一个航空母舰战斗群
HarryZhu
·
2016-03-21 00:00
机器学习
docker
spark
r
sparkR
通过data.table中的fread函数读取大数据集
spark集群搭建及介绍:敬请关注数据集:http://pan.baidu.com/s/1i4yMwHB总结:
sparkR
通过data.table中的fread函数读取大数据集,相比于正常读取方式大致有
qq_16365849
·
2016-02-18 11:00
sparkr
大数据集
data.table
sparkR
处理Gb级数据集
spark集群搭建及介绍:敬请关注数据集:http://pan.baidu.com/s/1sjYN7lF总结:使用
sparkR
进行数据分析建模相比R大致有3-5倍的提升查看原始数据集:通过iris数据集生成
qq_16365849
·
2016-02-18 11:06
sparkR
sparkR
处理Gb级数据集
spark集群搭建及介绍:敬请关注数据集:http://pan.baidu.com/s/1sjYN7lF总结:使用
sparkR
进行数据分析建模相比R大致有3-5倍的提升查看原始数据集:通过iris数据集生成
qq_16365849
·
2016-02-18 11:00
数据分析
sparkr
大数据集
[译]打造大数据产品:Shiny的Spark之旅
概述我对如何开发和部署"Shiny-
SparkR
"的应用一直很感兴趣,本文将展示如何使用
SparkR
来驱动Shiny应用。什么是SparkRSparkR是一个为R提供了轻量级的Spark前端的R包。
HarryZhu
·
2016-02-18 00:00
shiny
spark
r
编译spark1.6.0出现 Failed to execute goal org.codehaus.mojo:exec-maven-plugin:1.4.0:exec (
sparkr
-pkg)
spark1.6编译1、下载spark1.6源码2、安装maven3、解压spark1.6 执行exportMAVEN_OPTS="-Xmx2g-XX:MaxPermSize=512M-XX:ReservedCodeCacheSize=512m"cdspark1.6.0./make-distribution.sh--namehadoop2.6--tgz-Psparkr-Phadoop-2.6.0-
wuzhilon88
·
2016-02-02 18:00
spark
Tachyon
Rstudio &
SparkR
#SetthistowhereSparkisinstalled Sys.setenv(SPARK_HOME="/Users/shivaram/spark") #ThislineloadsSparkRfromtheinstalleddirectory .libPaths(c(file.path(Sys.getenv("SPARK_HOME"),"R","lib"),.libPaths()))
攻城狮科学家
·
2016-01-28 17:00
4.Spark之简介MLlib
易用性:可以在Java、Scala、Python和
SparkR
中使用。MLlib融入Spark的API,并且能够在Python中与MumPy交互。
鞋底留个洞
·
2016-01-27 13:00
SparkR
数据分析
(如果你在终端输入
sparkR
运行成功的话就证明你成功了)如果还没有配置成功的话,参考这里,安装SPARK只需三步1.下载示例数据MovieLens100k数据集它包含了用户和电影信息,以及10万次用户对电影的评价
a358463121
·
2016-01-20 16:00
数据分析
spark
R语言
sparkr
常见创建RDD的方法
课程会涵盖Scala编程详解、Spark核心编程、SparkSQL和SparkStreaming、SparkGraphX、
SparkR
、MachineLearning、Spark内核以及源码剖析、性能调优
kxr0502
·
2016-01-20 08:20
spark
Install
SparkR
6HomeCreatingaSparkRDevelopmentVMSettingupanIDEontheSparkRDevelopmentVMSparkRExample:DigitRecognitiononEC2SparkRonEC2
SparkR
Rest721
·
2016-01-19 15:00
Install
sparkr
SparkR
grammer
TheyaredifferentbetweenlocalRandsparkR:
sparkR
跑通的函数:http://blog.csdn.net/wa2003/article/details/46777237
攻城狮科学家
·
2016-01-18 15:00
[置顶]
SparkR
简介
SparkR
是一个提供从R中使用Spark的轻量级前端的R包。在Spark1.6以后,
SparkR
提供了分布式数据框,它支持selection,filtering,aggregation等操作。
u012432611
·
2016-01-17 16:00
spark
机器学习
r
大数据系列第七课:RDD于Spark运行机制
课程会涵盖Scala编程详解、Spark核心编程、Spark SQL和Spark Streaming、Spark GraphX、
SparkR
、Machine Learning、Spark内核以及源码剖析
kxr0502
·
2016-01-09 13:00
spark
解析Spark大数据分析框架的核心部件
Spark大数据分析框架的核心部件包含RDD内存数据结构、Streaming流计算框架、GraphX图计算与网状数据挖掘、MLlib机器学习支持框架、SparkSQL数据检索语言、Tachyon文件系统、
SparkR
勿忘初心321
·
2015-12-23 13:00
R语言学习笔记之<在Linux上遇到的问题集锦>
现在版本的
SparkR
只能运行在standalone模式下问题1:安装问题由于R涉及到Fortran语言,要下载gcc-gfortran包安装步骤:1)将R-3.2.3.tar.gz解压 2).
bgk083
·
2015-12-16 16:00
SparkR
详解
Spark是处理大数据的利器,R是统计学的利器,
SparkR
的诞生可以让数据分析人员方便的处理海量数据成为可能。
1000sprites
·
2015-12-09 16:00
Spark1.4.0-SparkSQL与Hive整合-支持窗口分析函数
Spark1.4发布,除了重量级的
SparkR
,其中的SparkSQL支持了我期待已久的窗口分析函数(windowfunctions),关于Hive中窗口分析函数的用法可参考 Hive分析函数系列 文章
wuzhilon88
·
2015-11-03 17:00
spark
hive
Centos 安装R和
sparkR
安装环境centos6.564位jdk1.7spark1.50第一步安装依赖yuminstallgccyuminstallgcc-c++yuminstallgcc-gfortranyuminstallpcre-develyuminstalltcl-develyuminstallzlib-develyuminstallbzip2-develyuminstallreadline-develyumins
zzlzzh
·
2015-11-02 17:00
centos
spark
阅读List
SparkR
:数据科学家的新利器阿里深度学习实践网络爬虫+相似矩阵—技术运作流程Cassandra+Akka+Spark分布式机器学习架构百度大规模数据处理架构之“不平凡之路”双11剁手幕后的阿里“黑科技
alive2012
·
2015-10-23 10:00
机器学习
阅读单
基于spark1.4.1的
sparkR
的实例操作
[Author]:kwu 基于spark1.4.1的
sparkR
的实例操作,
sparkR
的操作基本语法与R一致,其中添加了rJava、rhdfs、
SparkR
的依赖库的支持。
kwu_ganymede
·
2015-10-13 13:00
spark
r
实例
sparkR
集群启动脚本的封装
实现
sparkR
的集群启动,需要指定master地址,占用内存、CPU,及UI端口等,这对分析人员来说是比较麻烦的。
kwu_ganymede
·
2015-10-13 13:00
spark
r
基于CDH5.4的Spark1.4.1下
SparkR
的部署
[Author]:kwu基本CDH5.4的Spark1.4.1下
SparkR
的部署,R与Spark的结合为数据分析提供高效的解决方案,Hadoop的中hdfs为数据分析提供分布式存储。
kwu_ganymede
·
2015-10-13 13:00
hadoop
spark
r
spark学习笔记总结-spark入门资料精化
SparkSQL、SparkStreaming、MLlib、GraphX、
SparkR
等核心组件解决了很
u013719780
·
2015-09-14 22:00
30天了解30种技术系列---(23)
SparkR
阅读更多
SparkR
源于AMPLab,是将R易用性和Spark扩展性整合的一个探索。在这个前提之下,
SparkR
开发者预览版最早在2014年1月开源。
jackchan
·
2015-09-14 13:00
Spark
30天了解30种技术系列---(23)
SparkR
阅读更多
SparkR
源于AMPLab,是将R易用性和Spark扩展性整合的一个探索。在这个前提之下,
SparkR
开发者预览版最早在2014年1月开源。
jackchan
·
2015-09-14 13:00
Spark
30天了解30种技术系列---(23)
SparkR
SparkR
源于AMPLab,是将R易用性和Spark扩展性整合的一个探索。在这个前提之下,
SparkR
开发者预览版最早在2014年1月开源。
jackchan
·
2015-09-14 13:00
spark
SparkR
(1)Naive Bayesian
SparkR
(1)NaiveBayesian1.NaiveBayesianP(A|B)=P(B|A)P(A)/P(B)Features-F1,F2,…FnCategory-C1,C2,…CmP(C|F1F2
sillycat
·
2015-09-09 06:00
spark1.4.1中
sparkR
的编译使用全过程
**本文针对那些和我一样,对spark还挺熟悉但对R知之甚少甚至之前没听过的同学,在spark引入了
sparkR
后才开始零基础地开始学习使用。如果你本身对R和
sparkR
已经很熟悉了,就不用看了。
amber_amber
·
2015-09-06 17:33
spark学习分享
sparkR
集群启动脚本的封装
实现
sparkR
的集群启动,需要指定master地址,占用内存、CPU,及UI端口等,这对分析人员来说是比较麻烦的。
大数据部
·
2015-08-29 22:08
Spark大数据分析框架的核心部件
Spark大数据分析框架的核心部件包含RDD内存数据结构、Streaming流计算框架、GraphX图计算与网状数据挖掘、MLlib机器学习支持框架、SparkSQL数据检索语言、Tachyon文件系统、
SparkR
openthings
·
2015-08-07 11:00
spark
RDD
GraphX
MLlib
Streaming
Tachyon
sparkr
SparkR
with Rstudio in Ubuntu 12.04
http://www.r-bloggers.com/
sparkr
-with-rstudio-in-ubuntu-12-04/ sessionrequired/lib64/security/pam_limits.so
moonpure
·
2015-08-02 10:00
SparkR
基本操作
http://blog.sina.com.cn/s/blog_4ac9f56e0102w73t.htmlSparkR基本操作转载2015-07-2319:46:30标签:sparkrr语言由于装的
sparkr
moonpure
·
2015-08-01 13:00
SparkR
安装
http://blog.sina.com.cn/s/blog_4ac9f56e0102w6hc.html期望spark能让R的迭代循环快一点,在测试环境装了
sparkr
1)安装spark:下载了1.1.0
moonpure
·
2015-07-31 18:00
sparkR
介绍及安装
SparkR
提供了Spark中弹性分布式数据集(RDD)的API,用户可以在集群上通过Rshell交互性的运行job。
moonpure
·
2015-07-30 20:00
spark1.4.0基于yarn的安装心得体会
spark1.4.0新出的支持
SparkR
,其他用R的同时很期待试用该版本看看
sparkR
好不好用,于是乎打算升级一下spark的版本。
xiao_jun_0820
·
2015-06-19 14:00
Spark1.4.0-SparkSQL与Hive整合-支持窗口分析函数
Spark1.4发布,除了重量级的
SparkR
,其中的SparkSQL支持了我期待已久的窗口分析函数(windowfunctions),关于Hive中窗口分析函数的用法可参考 Hive分析函数系列
zhou_yuefei
·
2015-06-17 16:00
spark
Spark1.4.0-SparkSQL与Hive整合-支持窗口分析函数
Spark1.4发布,除了重量级的
SparkR
,其中的SparkSQL支持了我期待已久的窗口分析函数(window functions),关于
superlxw1234
·
2015-06-17 12:00
sparkSQL与Hive整合
Spark1.4.0-SparkSQL与Hive整合-支持窗口分析函数
阅读更多Spark1.4发布,除了重量级的
SparkR
,其中的SparkSQL支持了我期待已久的窗口分析函数(windowfunctions),关于Hive中窗口分析函数的用法可参考Hive分析函数系列文章
superlxw1234
·
2015-06-17 12:00
sparkSQL与Hive整合
Spark1.4.0-SparkSQL与Hive整合-支持窗口分析函数
Spark1.4发布,除了重量级的
SparkR
,其中的SparkSQL支持了我期待已久的窗口分析函数(window functions),关于
superlxw1234
·
2015-06-17 12:00
sparkSQL与Hive整合
Spark 1.4 新特性概述
功能介绍Scala & Apache Spark经过4个RC版本,Spark1.4最终还是赶在SparkSummit前发布了,本文简单谈下本版本中那些非常重要的新feature和improvement.
SparkR
北京起航
·
2015-06-12 19:00
安装spark的前端展示可视化
sparkR
[-]安装R语言1更新源到fedoraproject2安装RrJava安装1rJava介绍2rJava安装
SparkR
的安装1
sparkR
的代码下载2
sparkR
的代码编译3运行
sparkR
3运行
sparkR
矩阵
·
2015-04-17 10:40
sparkr
spqrk前端
安装spark的前端展示可视化
sparkR
[-]安装R语言1更新源到fedoraproject2安装RrJava安装1rJava介绍2rJava安装
SparkR
的安装1
sparkR
的代码下载2
sparkR
的代码编译3运行
sparkR
3运行
sparkR
矩阵
·
2015-04-17 10:40
sparkR
spqrk前端
Spark
在CentOS上安装并运行
SparkR
环境配置——操作系统:CentOS6.5JDK版本:1.7.0_67Hadoop集群版本:CDH5.3.0 安装过程——1、安装Ryuminstall-yR 2、安装curl-devel(非常重要!否则无法进行RCurl包的安装,进而无法安装devtools)yuminstall-ycurl-devel 3、设置必要的环境变量(非常重要!这里必须设置成Hadoop环境对应的版本和Yarn对应的版本
学海无涯
·
2015-04-10 12:00
通过
SparkR
在R上运行Spark
R依然是数据学家手中最强大的语言之一,其实早在2014年一月底,加州大学伯克利分校的AMPLab就宣布发布了其
SparkR
项目的开发者预览版,该版本使用了基于原生R语言的ApacheSaprk,但是其使用难度还是在不断增加
u010022051
·
2015-04-02 16:00
上一页
1
2
3
4
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他