sparkr

window环境下安装spark

并且spark有R、python的调用接口，在R中可以用SparkR包操作spark，在python中可以使用pyspark模块操作spark。本文介绍spark在window环境下的安装。
FTDdata·2024-01-31 17:06

R 安装 devtools 报错信息

在编译spark源码时遇到sparkr有依赖R环境，当然一般用不到sparkr时可以不加入编译在安装R环境和一些依赖包时遇到一些问题Rscript-e"install.packages(c('knitr
第一次看海·2024-01-17 15:00

Sparkr

https://spark.rstudio.com/index.html如何使用spark在上述这个链接有详细文档。下一个问题，如搭建一个spark平台！
Liam_ml·2024-01-16 12:57

window环境下安装spark

并且spark有R、python的调用接口，在R中可以用SparkR包操作spark，在python中可以使用pyspark模块操作spark。本文介绍spark在window环境下的安装。
FTDdata·2023-11-26 22:42

[Spark版本更新]--2.3.0发行说明（二）

通过查询将数据写入文件系统”·[SPARK-12139]-Hive查询的REGEX列规范·[SPARK-14516]-聚类评估器·[SPARK-15689]-数据源APIv2·[SPARK-15767]-SparkR
浅汐王·2023-11-22 13:54

08 SparkR (R on Spark)

转载请注明出处，谢谢合作～暂时没用到，留个占位符，以后来填~SparkR(RonSpark)
Whaatfor·2023-11-02 03:39

Spark的基础

Spark的基础一、Spark的诞生背景二、Spark概念2.1SparkCore2.2.SparkSQL2.3SparkStreaming2.4SparkMLlib2.5SparkGraphX2.6SparkR
cai-4·2023-09-21 18:56

spark期末考试测试题

1.下列哪个不是RDD的缓存方法（memory）2.DataFrame和RDD最大的区别（多了schema）3.下面哪个操作肯定是宽依赖（reduceByKey）4.spark的四大组件下面哪个不是（SparkR
小W子·2023-07-15 07:43

【Apache Spark】

文章目录ApacheSpark的安装与配置ApacheSpark用法ApacheSpark的组件1.SparkCore2.SparkSQL3.SparkStreaming4.MLib5.GraphX6.SparkR7
我是廖志伟·2023-06-19 16:58

spark 面试题（2）

33.选择题二、选择题1.Spark的四大组件下面哪个不是(D)A.SparkStreamingB.MlibCGraphxD.SparkR2.下面哪个端口不是spark自带服务的端口(C)A.8080B
小癫僧·2023-03-17 05:53

spark 序列化错误 集群提交时_spark 面试题（2）

33.选择题二、选择题1.Spark的四大组件下面哪个不是(D)A.SparkStreamingB.MlibCGraphxD.SparkR2.下面哪个端口不是spark自带服务的端口(C)A.8080B
wongzo·2023-02-18 21:13

SparkR的R3.3.1源码安装

如果想要在spark上使用sparkR必须首先在集群的所有机器上安装R包，前面有安装过R.3.2.1，但是因为很多R包不支持，所以更新为3.3.1。
孟夏1988·2022-12-15 11:47

【备忘】《图解Spark 核心技术与案例实战》PDF

2Spark生态系统1．2．1SparkCore1．2．2SparkStreaming1．2．3SparkSQL1．2．4BlinkDB1．2．5MLBase/MLlib1．2．6GraphX1．2．7SparkR1
qq_38472089·2022-12-06 02:46

java中向量化_Apache Spark 3.0 中的向量化执行

这篇博客文章概述了SparkR中Spark和R的交互，并对比了没有向量化执行和有向量化执行的性能差异。Spa
Smile'Y·2022-09-28 07:30

1.Spark 基础解析之概述及集群安装

2014年2月成为Apache顶级项目，由Scala语言编写目前，Spark生态系统已经发展成为一个包含多个子项目的集合，其中包含SparkSQL、SparkStreaming、GraphX、MLib、SparkR
harveybd·2022-09-24 00:46

[原]海纳百川 有容乃大：SparkR与Docker的机器学习实战

作为学统计出身的人，我们想折腾大数据但又不想学习Hadoop或者Java，我们更倾向于把精力放在建模和算法设计上，SparkR和Docker的完美结合，让R的计算直接从一架战斗机的当兵作战华丽转变为一个航空母舰战斗群
weixin_33887443·2022-05-03 07:16

Apache Spark 2.4 and 3.0

闲话少说，直接上Slides:https://www.slidestalk.com/s/ApacheSpark24andBeyond由于时间有限，很多feature其实没有提及，比如，SparkR那边gapply
smilegator·2021-06-24 03:29

4个教程带你入门R语言

但是与其他工具交互就能漂亮地解决问题，例如与Spark配合(sparkR)解决数据量较大的情况，
蓝桥云课·2021-03-11 18:32

sparkR的一个运行的例子

在sparkR在配置完成的基础上，本例采用Sparkonyarn模式，介绍sparkR运行的一个例子。
weixin_34405354·2020-09-16 04:21

【大数据处理架构】SparkR

一、从R说起R是用于统计分析、绘图的语言和操作环境。R是属于GNU系统的一个自由、免费、源代码开放的软件，它是一个广泛应用于统计计算和统计制图的优秀编程语言。优点：开源，有许多工具包，可塑性强。例子:quantmond用于股票分析>install.packages('quantmod')#安装quantmod包>require(quantmod)#引用quantmod包>getSymbols("G
tintinsnowy·2020-09-16 04:00

通过SparkR在R上运行Spark

R依然是数据学家手中最强大的语言之一，其实早在2014年一月底，加州大学伯克利分校的AMPLab就宣布发布了其SparkR项目的开发者预览版，该版本使用了基于原生R语言的ApacheSaprk，但是其使用难度还是在不断增加
奔跑的小象·2020-09-16 03:43

sparkR-入门知识

一、sparkR的简介SparkR是一个R语言包，它提供了轻量级的方式使得可以在R语言中使用ApacheSpark。
小丁丁_ddxdd·2020-09-16 03:43

Spark组件之SparkR学习1--安装与测试

github.com/xubo245/SparkLearning环境：ubuntu：Spark1.5.2（已装）、R3.2.1Window：Rstudio1Ubuntu下配置1.1.R安装：Spark安装后直接启动SparkR
KeepLearningBigData·2020-09-16 02:43

SparkR对R的支持情况

开发十年，就只剩下这套Java开发体系了>>>Spark分为两大块：1基于hive的sql操作，2基于mllib的机器学习模型1.SparkOnHive：在R下通过sql命令可完美支持对hive的增删改查；2.MLLib的机器学习模型：分为普通机器学习模型和RDD版的机器学习模型，由于Spark目前将逐渐淘汰掉RDD版的API，所以这里不再包含RDD版的API：1.基本数据统计：无R版，大概是R通
邵可佳·2020-09-16 02:14

SparkR的安装配置以及数据分析

1.1.R与Rstudio的安装1.1.1.R的安装我们的工作环境都是在Ubuntu下操作的，所以只介绍Ubuntu下安装R的方法：1）在/etc/apt/sources.list添加源debhttp://mirror.bjtu.edu.cn/cran/bin/linux/ubuntuprecise/，然后更新源apt-getupdate；2）通过apt-get安装：sudoapt-getinst
maomaogo·2020-09-16 02:13

sparkR介绍及安装

SparkR是AMPLab发布的一个R开发包，为ApacheSpark提供了轻量的前端。
aoluochou3553·2020-09-16 01:19

SparkR的R3.3.1源码安装

原文地址：http://blog.csdn.net/meng___xia/article/details/54923363如果想要在Spark上使用sparkR必须首先在集群的所有机器上安装R包，前面有安装过
jiabiao1602·2020-09-13 12:44

SparkR去数据子集错误：object of type 'S4' is not subsettable

sparkR在加载完数据之后取数据子集的时候出现如下错误：>coincidence.indicator<-coincidence.indicator.original[1:coincidence.indicator.date
奔跑的小象·2020-09-13 06:38

sparkR could not find function "textFile"

Yeah,that’sprobablybecausethehead()you’reinvokingthereisdefinedforSparkRDataFrames[1](notehowyoudon’thavetousetheSparkR:::namepsaceinfrontofit),butSparkR:::textFile()returnsanRDDobject,whichismorelike
富兰克林008·2020-09-12 06:24

在anaconda环境下搭建python3.5 + jupyter sparkR，scala，pyspark

在anaconda环境下搭建python3.5+jupytersparkR，scala，pyspark多用户jupyterhub+kubernetes认证：https://my.oschina.net/u/2306127/blog/1837196https://ojerk.cn/Ubuntu%E4%B8%8B%E5%A4%9A%E7%94%A8%E6%88%B7%E7%89%88jupyterhu
ljtyxl·2020-09-12 03:31

[译]打造大数据产品：Shiny的Spark之旅

概述我对如何开发和部署"Shiny-SparkR"的应用一直很感兴趣，本文将展示如何使用SparkR来驱动Shiny应用。什么是SparkRSparkR是一个为R提供了轻量级的Spark前端的R包。
HarryZhu·2020-08-24 13:56

Spark

ApacheSpark2.2.0中文文档http://spark.apachecn.org/docs/cn/2.2.0/sparkr.html在Spark中一个大文件会被有序的分为多个输入分片，每个分片对应一个分区
高级大数据工程师·2020-08-23 03:17

SparkR的启动

spark在1.5及其版本之后内置有sparkR，我用的服务器上安装的spark的版本为2.2，安装位置在/usr/lib/spark-current，此目录下有一个R文件夹，SparkR就装在.
余含军·2020-08-20 05:57

Hadoop学习笔记（1）－Hadoop生态系统

中间红框部分是saprk的生态圈，有RDD，sparkCore，sparkSQL，sparkGraphX，sparkML，sparkR，sparkStreaming。
XianMing的博客·2020-08-18 12:55

一篇文章教你如何用R进行数据挖掘

其中一些R包，例如MASS，SparkR，ggplot2，使数据操作，可
weixin_30570101·2020-08-18 12:47

spark学习笔记总结-spark入门资料精化

SparkSQL、SparkStreaming、MLlib、GraphX、SparkR等核心组件解决了很
weixin_30763397·2020-08-13 20:06

SparkR读取CSV格式文件错误java.lang.ClassCastException: java.lang.String cannot be cast to org.apache.spark.u

使用如下命令启动sparkRshell：bin/sparkR--packagescom.databricks:spark-csv_2.10:1.0.3之后读入csv文件：flights<-read.df
奔跑的小象·2020-08-13 19:09

我的第一次R会

邮箱：[email protected]精彩回顾：无缝对接Spark与R：Sparklyr系列—探讨属于数据科学家的SparkR语言二分类问题案例分析：以泰坦尼克号沉船为例R与Python手牵手
R语言中文社区·2020-08-11 03:48

【R】在centOS7下编译安装R3.3.2和R

缘起在spark和hive配置完毕后，没有实质性的分析业务的基础上，想结合一部分SparkR的技术来分析hive中的数据。
乐扣老师lekkoliu·2020-08-05 10:25

大数据课程30天掌握 spark内存计算（python ）-徐培成-专题视频课程

人已学习课程介绍本部分内容全面涵盖了Spark生态系统的概述及其编程模型，深入内核的研究，SparkonYarn,SparkStreaming流式计算原理与实践，SparkSQL,Spark的多语言编程以及SparkR
十八掌教育·2020-08-04 22:31

若泽大数据--玩转大数据之Spark入门到实战--专题视频课程

课程收益全面涵盖了Spark生态系统的概述及其编程模型，深入内核的研究，SparkonYarn,SparkStreaming流式计算原理与实践，SparkSQL,Spark的多语言编程以及SparkR的原理和运行
ruozedata·2020-08-04 17:24

R︱sparkR的安装与使用、函数尝试笔记、一些案例

本节内容转载于博客：wa2003spark是一个我迟早要攻克的内容呀~—————————————————————————————————————一、SparkR1.4.0的安装及使用1、.
悟乙己·2020-08-04 00:45

Spark组件之SparkR学习3--使用spark-submit向集群提交R代码文件data-manipulation.R

更多代码请见：https://github.com/xubo245/SparkLearning1.数据准备：1.1下载数据文件wgethttp://s3-us-west-2.amazonaws.com/sparkr-data
KeepLearningBigData·2020-07-29 13:29

Apache Spark 3.0 中的向量化 IO

通过在ApacheSpark中使用SparkR，可以很容易地扩展R代码。要交互式地运行作业，可以通过运行Rshell轻松地在分布式集群中运行R的作业。
weixin_45906054·2020-07-28 23:24

spark on yarn的理解

最近在安装调测CDH5.5,发现官方文档明确不支持spark-sql（需要自己去编译）和sparkR。
富兰克林008·2020-07-28 04:42

spark 将一列的值赋值给另外一列

Spark将一列的值赋值给另外一列如果有如下数据:我要使col1=col2，得到如下的结果:在sparkR里面只需要df$col1=df$col2就可以实现了，那么在scala里面没有这样的方式，我要如何去实现呢
善皮之·2020-07-27 16:29

Apache Spark 3.0 中的向量化 IO

通过在ApacheSpark中使用SparkR，可以很容易地扩展R代码。要交互式地运行作业，可以通过运行Rshell轻松地在分布式集群中运行R的作业。
过往记忆·2020-07-15 02:03

Spark总结

SparkSQL、SparkStreaming、MLlib、GraphX、SparkR等核心组件解决了很多的大数据问题，其
zhigang1007·2020-07-13 23:59

『 Spark 』10. spark 机器学习

spark有两个层次的概念：一个通用的分布式计算框架，sparkcore基于sparkcore设计，无缝实现的库，dataframe，sql，mllib，graphx，bagel,streaming,sparkR
fengyuruhui123·2020-07-11 06:32

编译spark1.6.0出现 Failed to execute goal org.codehaus.mojo:exec-maven-plugin:1.4.0:exec (sparkr-pkg)

spark1.6编译1、下载spark1.6源码2、安装maven3、解压spark1.6执行exportMAVEN_OPTS="-Xmx2g-XX:MaxPermSize=512M-XX:ReservedCodeCacheSize=512m"cdspark1.6.0./make-distribution.sh--namehadoop2.6--tgz-Psparkr-Phadoop-2.6.0-P
wuzhilon88·2020-07-10 12:54
上一页 1 2 3 4 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他