SparkR

编译spark1.6.0出现 Failed to execute goal org.codehaus.mojo:exec-maven-plugin:1.4.0:exec (sparkr-pkg)

spark1.6编译1、下载spark1.6源码2、安装maven3、解压spark1.6执行exportMAVEN_OPTS="-Xmx2g-XX:MaxPermSize=512M-XX:ReservedCodeCacheSize=512m"cdspark1.6.0./make-distribution.sh--namehadoop2.6--tgz-Psparkr-Phadoop-2.6.0-P
奔跑的小象·2020-07-10 03:21

SparkR的第一个测试例子Spark Pi计算

安装SparkR颇费周折，网上看到的各种安装方法，其实最终测试都很不好用。可能是国内有些网站被屏蔽的关系吧。
sparkexpert·2020-07-05 13:45

教你如何用R进行数据挖掘

其中一些R包，例如MASS，SparkR，ggplot2，使数据操作,可视化和计算功
数据分析技术·2020-07-04 19:34

Spark大数据分析框架的核心是什么？

Spark大数据分析框架的核心部件包含RDD内存数据结构、Streaming流计算框架、GraphX图计算与网状数据挖掘、MLlib机器学习支持框架、SparkSQL数据检索语言、Tachyon文件系统、SparkR
大数据在说话·2020-07-04 14:45

《从0到1学习spark》-- spark前世今生

Apache孵化项目2014年2月成为Apache顶级项目目前，Spark生态系统已经发展成为一个包含多个子项目的集合，其中包含SparkSQL、SparkStreaming、GraphX、MLib、SparkR
小强的进阶之路·2020-06-27 04:29

R︱Rstudio 1.0版本尝鲜（R notebook、下载链接、sparkR、代码时间测试profile）

每每以为攀得众山小，可、每每又切实来到起点，大牛们，缓缓脚步来俺笔记葩分享一下吧，please~———————————————————————————2016年11月1日，RStudio1.0版本正式发布！这是自2011年2月RStudio发布以来的第10个主要版本，也是更新最大的一次。主要亮点如下：1.RNotebooks的辅助工具（实时反馈结果，这个RMD做不来）2.对sparklyr包的集成
悟乙己·2020-06-26 10:53

sparkR调用R的执行分布式计算

环境spark2.4.5,R3.6,install.package("SparkR"),默认sparkR提供的函数支持对应的版本为spark2.4.5不支持2.4.0如:将data.table,data.framedt.score
我的海_·2020-06-24 01:59

Spark Mongodb集成 - Python版

Spark采用Scala语言编写，但同时支持Scala，Python与Java做为开发语言，甚至SparkR项目的出现某种程度上支持了R语言。MongoDB做为NoSQL比较早的实现
ZhenchongLi·2020-06-22 22:02

如何避免jps中一大堆spark-submit+Spark交互模式启动速度+正确的退出spark-shell/pyspark/SparkR/hbase的习惯

启动交互式模式的命令所属大数据组件启动速度编程语言退出命令spark-shell--masteryarnSpark磨蹭scalascala>:qpyspark--masteryarnSpark最慢python>>>quit()sparkR
Applied Sciences·2020-05-05 14:34

9个R语言项目教程

但是与其他工具交互就能漂亮地解决问题，例如与Spark配合(sparkR)解决数据量较大的情况，
实验楼·2020-04-09 05:13

1. 通过案例对SparkStreaming 透彻理解三板斧之一：解密SparkStreaming另类实验

Spark非常强大的地方在于它的流式处理可以在线的利用机器学习、图计算、SparkSQL或者SparkR的成果，这得益于Spark多元化、一体化的基础架构设计。
milkfan·2020-04-07 01:27

听大数据十年工作经验大牛来讲Spark核心技术与高级应用

Spark集成SparkSQL、SparkStreaming、MLlib、GraphX.SparkR等子框架，并且提供了全新的大数据处理方式，让从业者的工作变得越来越便捷。本篇从基础讲起，
IT程序员·2020-04-02 16:06

Spark介绍及搭建

Spark提供了大数据处理的一站式解决方案，以SparkCore为基础推出了SparkSQL、SparkStreaming、MLlib、GraphX、SparkR等组件。
零度沸腾_yjz·2020-03-31 04:31

1.Writing R data frames returned from SparkR:::map

stackoverflow原文地址弱鸡小白在使用SparkR处理大规模的Rdataframe时想使用map的方式进行数据操作。数据都是结构化的，并且每个分区都是相同的结构。
HOHOOO·2020-03-25 17:06

[SparkR]

words=13ANDage%summarize(avg(flightsDF$dep_delay),avg(flightsDF$arr_delay))->dailyDelayDF#Printthecomputeddataframehead(dailyDelayDF)}#StoptheSparkContextnowsparkR.stop()
HOHOOO·2020-03-14 16:32

[R]高性能计算SparkR

WhySparkRSpark是一种与Hadoop相似的开源集群计算环境，但是两者之间还存在一些不同之处，这些有用的不同之处使Spark在某些工作负载方面表现得更加优越，换句话说，Spark启用了内存分布数据集，除了能够提供交互式查询外，它还可以优化迭代工作负载。而Spark力图整合机器学习（MLib）、图算法（GraphX）、流式计算（SparkStreaming）和数据仓库（SparkSQL）等
HOHOOO·2020-02-11 20:29

Spark介绍和集群模式搭建

Spark提供了大数据处理的一站式解决方案，以SparkCore为基础推出了SparkSQL、SparkStreaming、MLlib、GraphX、SparkR等组件。
零度沸腾_yjz·2020-02-07 13:30

1 Spark Streaming 透彻理解之一

1.6.1Spark最初只有SparkCore，通过逐步的发展，现在已扩展出SparkSQL、SparkStreaming、SparkMLlib(machinelearning)、GraphX(graph)、SparkR
海纳百川_spark·2020-02-01 04:00

SparkR on Yarn 安装配制

刚完成SparkR的支持，顺手记录下流程…1编译SparkR1.1生成SparkR的lib包#where/home/username/RiswhereRisinstalledand/home/username
荒湖·2019-12-26 03:16

如何在impala中计算多个数值字段的相关系数矩阵？

如果用PySpark或SparkR，可以在内存撑得住的情况下，把集群数据转化为单机数据，再用单机datafra
真依然很拉风·2019-12-12 15:47

[译]打造大数据产品：Shiny的Spark之旅

概述我对如何开发和部署"Shiny-SparkR"的应用一直很感兴趣，本文将展示如何使用SparkR来驱动Shiny应用。什么是SparkRSparkR是一个为R提供了轻量级的Spark前端的R包。
FinanceR·2019-11-01 05:13

Spark介绍（六）SparkR

一、SparkR简介SparkR是一个R语言包，它提供了轻量级的方式使得可以在R语言中使用ApacheSpark。
kxiaozhuk·2018-09-14 11:59

Spark选择题

转载：http://www.aboutyun.com/thread-24246-1-1.html1.Spark的四大组件下面哪个不是(D)A.SparkStreamingB.MlibCGraphxD.SparkR2
MirandaGirl2018·2018-08-30 21:10

[spark streaming] 架构和运行机制

SparkStreaming容错架构和运行机制Spark大数据分析框架的核心部件：sparkCore、sparkStreaming流计算、GraphX图计算、MLlib机器学习、SparkSQL、Tachyon文件系统、SparkR
风一样的男人_·2018-08-28 11:19

spark学习笔记总结

SparkSQL、SparkStreaming、MLlib、GraphX、SparkR等核心组件解决了很多的大数据问题，其
kdy·2018-04-27 11:00

jupyter pyspark 开发环境搭建(在线、离线)

技术方案的选择有很多，然由于多方面原因终究要探索出适合自己的~实现方案方案1利用ApacheToree在Jupyter中引入Spark,从而建立Scala,PySpark,SparkR,SQL内核内核配置命令
kngines·2018-04-07 18:51

[原] 深入对比数据科学工具箱: SparkR vs Sparklyr

背景介绍SparkR和Sparklyr是两个基于Spark的R语言接口，通过简单的语法深度集成到R语言生态中。
HarryZhu·2018-03-18 00:00

sparkR 安装

SparkR的安装和配置1集成在CLOUDERAMANAGER里由于cdh集成的spark2不支持sparkR所以要手动将sparkR的相关内容放入spark2的目录下1下载已经编译过的spark2包wgethttps
cy19871228cy·2018-02-05 18:33

Apache Spark 2.2.0 中文文档 - SparkR (R on Spark) | ApacheCN

SparkR(RonSpark)概述SparkDataFrame启动:SparkSession从RStudio来启动创建SparkDataFrames从本地的dataframes来创建SparkDataFrames
Joyyx·2017-09-27 10:38

Apache Spark 2.2.0 中文文档 - SparkR (R on Spark) | ApacheCN

SparkR(RonSpark)概述SparkDataFrame启动:SparkSession从RStudio来启动创建SparkDataFrames从本地的dataframes来创建SparkDataFrames
片刻_ApacheCN·2017-09-26 12:03

R语言-linux下devtools包、SparkR包安装

安装SparkR有两种方法，一种是通过devtools进行安装，一种是自行进行解压安装在安装之前SparkR之前需要安装：rjava;spark;R;Rstudio;一、通过devtools进行安装1.
炫炫有牛腩·2016-12-13 15:07

Spark2.0.1 on yarn with hue 集群安装部署（七）livy安装测试

livy安装测试一、R安装如果未安装R，可以先安装R，用于支持SparkR，如果yum源中没有R语言的安装包，可以从官网下载相应版本进行手动编译安装。
荷籽花结·2016-11-25 00:42

SparkR：数据科学家的新利器

作为增强Spark对数据科学家群体吸引力的最新举措，最近发布的Spark1.4版本在现有的Scala/Java/PythonAPI之外增加了RAPI（SparkR）。
转角_遇到你·2016-10-12 14:32

新的可视化帮助更好地了解Spark Streaming应用程序

之前，我们展示了在Spark1.4.0中新推出的可视化功能（《Spark1.4：SparkR发布，钨丝计划锋芒初露》[中文版]），用以更好的了解Spark应用程序的行为。
guohecang·2016-10-09 17:34

数据产品设计专题（5）- 分布式数据仓库技术架构

一、分布式数据仓库技术架构 二、核心内容解读 （1）分布式数据仓库存储技术：hive+hdfs； （2）事实计算平台技术框架：spark； （3）数据挖掘算法技术框架：mllib+sparkR 
张子良·2016-08-19 08:00

sparkR-入门知识

一、sparkR的简介SparkR是一个R语言包，它提供了轻量级的方式使得可以在R语言中使用ApacheSpark。
qq_34941023·2016-07-09 18:00

SparkR环境搭建

--------------------------目录----------------------------------------------------------R的安装Rstudio的安装SparkR
legotime·2016-06-21 08:00

在Windows和Rstudio下本地安装SparkR

blog.sina.com.cn/s/blog_614408630102vyom.html原文地址：http://www.r-bloggers.com/installing-and-starting-sparkr-locally-on-windows-os-and-rstudio
JLOGAN·2016-06-08 11:10

SparkR初探

好久没有发博客了，一是因为工作本身的事情挺多，第二是因为开发者大会，也正是由于开发者大会，所以虾神我又捡起了好多年不玩的大数据……好吧，好几个月没有玩的大数据了，捡起的方式，就是去github上看看esri那边对gistoolsforhadoop这个东东有没有啥更新。果然，让我发现了一个灰常重要的更新情况，如下图：Spatialframeworkforhadoop里面，开始正式加入对Spark的支
大虾卢·2016-05-21 21:00

SparkR 编程指南

概论SparkR是一个R语言包，它提供了轻量级的方式使得可以在R语言中使用ApacheSpark。
Wei-L·2016-05-20 23:43

SparkR初体验

搜了下发现13年SparkR这个项目就启动了，感谢美帝！1.你肯定得先装个spark吧。看这：Spark本地模式与SparkStandalone伪分布模式2.你肯定得会R吧。
光于前裕于后·2016-05-11 20:19

SparkR初体验

搜了下发现13年SparkR这个项目就启动了，感谢美帝！1.你肯定得先装个spark吧。看这：Spark本地模式与SparkStandalone伪分布模式2.你肯定得会R吧。
光于前裕于后·2016-05-11 20:19

SparkR初体验

搜了下发现13年SparkR这个项目就启动了，感谢美帝！1.你肯定得先装个spark吧。看这：Spark本地模式与SparkStandalone伪分布模式2.你肯定得会R吧。
Dr_Guo·2016-05-11 20:00

Spark中文手册8：spark GraphX编程指南（1）

GraphX通过引入ResilientDistributedPropertyGraph：带有顶点和边属性的有向多重图，来扩展SparkR
wanmeilingdu·2016-05-09 21:00

第2课:通过案例对 spark streaming 透彻理解三板斧之二：spark streaming运行机制

SparkStreaming运行机制Spark大数据分析框架的核心部件：sparkCore、sparkStreaming流计算、GraphX图计算、MLlib机器学习、SparkSQL、Tachyon文件系统、SparkR
kaden·2016-05-09 20:12

[置顶] spark、sparkR部署

1、配置java环境tar-zxvfjdk-8u77-linux-x64.tar.gz-C/opt/java/vi/etc/profileexportJAVA_HOME=/opt/java/jdk1.8.0_77 exportJRE_HOME=${JAVA_HOME}/jre exportCLASSPATH=.:{JAVA_HOME}/lib:${JRE_HOME}/lib exportPATH=
Ssxysxy123·2016-05-08 17:00

第1课：通过案例对Spark Streaming透彻理解三板斧之一Spark Streaming另类实验及本质解析

Spark一开始并没我们今天看到的SparkSQL,SparkStreaming,MLlib(machinelearning),GraphX(graph)，SparkR等相关内容,只有原始的SparkCore
love205088·2016-05-02 22:17

14.RDD深度解析

意味着1：RDD本身提供了通用的抽象，2：spark现在有5个子框架，sql，Streaming，流式处理，机器学习，图计算，sparkR。可以根据具体领域的内容建模，建第6个库，第7个库。
zhou_yuefei·2016-04-22 20:00

14.RDD深度解析

意味着1：RDD本身提供了通用的抽象，2：spark现在有5个子框架，sql，Streaming，流式处理，机器学习，图计算，sparkR。可以根据具体领域的内容建模，建第6个库，第7个库。
zhou_yuefei·2016-04-22 20:00

14.RDD深度解析

意味着1：RDD本身提供了通用的抽象，2：spark现在有5个子框架，sql，Streaming，流式处理，机器学习，图计算，sparkR。可以根据具体领域的内容建模，建第6个库，第7个库。
zhou_yuefei·2016-04-22 20:00
上一页 1 2 3 4 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他