E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
MLlib
sparkSQL1.1入门之一:为什么sparkSQL
Spark1.1.0中变化较大是sparkSQL和
MLlib
,sparkSQL1.1.0主要的变动有:增加了JDBC/ODBCServer(ThriftServer),用户可以在应用程序中连接到SparkS
mmicky20110730
·
2014-09-15 09:59
spark1.1.0
spark学习路线
sparkSQL1.1入门之一:为什么sparkSQL
Spark1.1.0中变化较大是sparkSQL和
MLlib
,sparkSQL1.1.0主要的变动有:增加了JDBC/ODBCServer(ThriftServer),用户可以在应用程序中连接
book_mmicky
·
2014-09-15 09:00
spark
sparksql
开源集群计算环境:Spark 1.1.0发布
该版本带来了一些操作性和性能的提升,主要体现在核心模块上,扩展了Spark的一些最新模块(
MLlib
和SparkSQL)的功能;该版本开始支持Python,并为Sparkstreaming模块增加了新的组件
昵称4
·
2014-09-15 05:00
sparkSQL1.1入门之八:sparkSQL之综合应用
,还使用了其他Spark组件:店铺分类,根据销售额对店铺分类,使用sparkSQL和MLLibPageRank,计算最有价值的网页,使用sparkSQL和GraphX 前者将使用sparkSQL+
MLlib
book_mmicky
·
2014-09-11 09:00
spark
sparksql
Spark上矩阵运算库(四)基本API搭建完毕
重写
MLlib
矩阵相关API上周工作时所用到的矩阵相关API,均是extendsMLlib中相关分布式矩阵API,但是很快便遇到了问题,由于我需要重写原先IndexedRow的toString方法,所以写了一个类
u014252240
·
2014-08-03 01:00
Spark上矩阵运算库(三)代码重构与优化
迁往
MLlib
的APISpark的
MLlib
库中提供了分布式矩阵的API,本着不重复造轮子的原则,目前项目将代码重构使用
MLlib
提供的矩阵API,这些API都在org.apache.spark.
mllib
.linalg.distributed
u014252240
·
2014-07-28 01:00
scala
spark
3 分钟学会调用 Apache Spark
MLlib
KMeans
ApacheSparkMLlib是ApacheSpark体系中重要的一块拼图:提供了机器学习的模块。不过,目前对此网上介绍的文章不是很多。拿KMeans来说,网上有些文章提供了一些示例程序,而这些程序基本和ApacheSpark官网上的程序片断类似:在得到训练模型后,几乎都没有展示如何使用该模型、程序执行流程、结果展示以及举例测试数据等部分。笔者根据ApacheSpark官网上的程序片断,写了一个
samhacker
·
2014-07-27 17:00
Spark机器学习库
mllib
之协同过滤
很久就想写一篇ML的实践文章,虽然看过肯多资料,总觉得纸上谈兵印象不深刻,过不了多久就忘了,现在就借Spark的
Mllib
来简单的实际一下推荐算法吧。
u014388509
·
2014-06-25 18:00
spark
机器学习
推荐算法
协同过滤算法
spark未来的发展方向
语言开发的基于内存的计算框架,作者MateiZaharia,在未来的发展方向:1、sparkstreaming:提高spark的流处理能力,使得spark更适于通过一套代码进行大数据流处理和批量计算;2、
MLlib
zcc_0015
·
2014-06-18 23:00
spark介绍
它还支持一组丰富的更高级别的工具:shark(hiveonspark),
MLlib
(机器学习),GrapX(图表处理),sparkstreaming;#graph可以理解为报表吗?
1987times
·
2014-05-13 19:00
Spark 0.9.1
MLLib
机器学习库
by月禾Spark0.9.1
MLLib
机器学习库简介依赖二元分类线性回归聚类协同过滤隐性反馈vs显性反馈梯度下降基础算法用Scala调用
MLLib
二元分类线性回归聚类协同过滤用Java调用
MLLib
用Python
Johnny_Lee
·
2014-05-12 22:00
spark
机器学习
分布式计算
Mlib
Spark0.9.0机器学习包
MLlib
-Classification代码阅读
本章主要讲述
MLlib
包里面的分类算法实现,目前实现的有LogisticRegression、SVM、NaiveBayes,前两种算法针对各自的目标优化函数跟正则项,调用了Optimization模块下的随机梯度的优化
kobeshow
·
2014-03-28 13:00
Spark0.9.0机器学习包
MLlib
-Optimization代码阅读
基于Spark的一个生态产品--
MLlib
,实现了经典的机器学算法,源码分8个文件夹,classification文件夹下面包含NB、LR、SVM的实现,clustering文件夹下面包含K均值的实现,
kobeshow
·
2014-03-25 13:00
spark0.9.0安装
利用周末的时间安装学习了下最近很火的Spark0.9.0(江湖传言,要革hadoop命,O(∩_∩)O),并体验了该框架下的机器学习包
MLlib
(spark解决的一个重点就是高效的运行迭代算法),下面是整个安装过程
kobeshow
·
2014-03-23 15:00
利用In-Database Analytics技术在大规模数据上实现机器学习的SGD算法
库有很多,如专为数据分析用途而设计的R语言,Python语言的机器学习库Scikits,支持分布式环境扩展的有基于Map-Reduce实现的Mahout,以及分布式内存计算框架Spark上的机器学习库
MLlib
梁堰波 徐伟辰
·
2014-03-14 00:00
Spark0.9分布式运行
MLlib
的线性回归算法
MLlib
支持线性回归以及L2(ridge)和L1(lasso)正则化参数调整。
Mllib
还有一个回归算法,原始梯度下降(在下面描述),和上面描述的有相同的参数二元分类算法。
myboyliu2007
·
2014-02-17 22:00
scala
spark
机器学习
MLlib
Spark0.9分布式运行
MLlib
的协同过滤
1什么是协同过滤协同过滤推荐(CollaborativeFilteringrecommendation)是在信息过滤和信息系统中正迅速成为一项很受欢迎的技术。与传统的基于内容过滤直接分析内容进行推荐不同,协同过滤分析用户兴趣,在用户群中找到指定用户的相似(兴趣)用户,综合这些相似用户对某一信息的评价,形成系统对该指定用户对此信息的喜好程度预测。1.1与传统文本过滤相比,协同过滤有下列优点:1.1.
myboyliu2007
·
2014-02-14 21:00
scala
spark
MLlib
Spark0.9分布式运行
MLlib
的二元分类算法
MLlib
是的Spark实现一些常见的机器学习(ML)的功能并且提供一些相关的测试和数据生成器的功能。
myboyliu2007
·
2014-02-10 23:00
spark
MLlib
Spark的机器学习算法mlib的例子运行
Spark自带了机器学习的算法mlib,页面网址 http://spark.incubator.apache.org/docs/latest/
mllib
-guide.html 但是运行的时候
·
2014-02-04 23:00
spark
Spark-0.8 release新增特性及看点
主要有几方面最大的改动:
MLlib
机器学习库面世;支持YARN;Python的提升及API的丰富;增加webUI监控。
zbf8441372
·
2013-09-26 13:00
spark
Mllib
机器学习工具包在Hadoop上的使用
同样
mllib
也是我们算法组同学经常使用的一个机器学习工具包。但目前
mllib
工具包只提供了供C++程序调用的so链接库,没有可供java程序调用的jar包。
yuanhan 小丑鱼
·
2010-12-22 08:00
hadoop
数据挖掘
jni
Mlib
上一页
17
18
19
20
21
22
23
24
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他