GraphX

SPARK 知识地图

1  TableofContentsspark总揽sparkcoresparksqlsparkmllibsparkgraphxsparkstreaming2  spark总揽spark官网：https:
bigsloth·2015-09-14 19:00

Spark入门实战系列--9.Spark GraphX介绍及实例

【注】该系列文章以及使用到安装包/测试数据可以在《倾情大奉送–Spark入门实战系列》获取1、GraphX介绍1.1GraphX应用背景SparkGraphX是一个分布式图处理框架，它是基于Spark平台提供对图计算和图挖掘简洁易用的而丰富的接口
yirenboy·2015-09-14 09:00

Spark入门实战系列--9.Spark图计算GraphX介绍及实例

【注】该系列文章以及使用到安装包/测试数据可以在《倾情大奉送--Spark入门实战系列》获取1、GraphX介绍1.1 GraphX应用背景SparkGraphX是一个分布式图处理框架，它是基于Spark
shishanyuan·2015-09-14 08:00

GraphX的基本介绍

1、GraphX的需要懂的三个问题：(1)提供给用户的API,各家提供的差不多(2)图在分布式系统中如何存储？每个机器存哪个边？哪个点？(3)分布式图是如何通信的呢？
feige1990·2015-09-04 23:56

Spark MLlib LDA 源码解析

SparkMLlibLDA源码解析http://blog.csdn.net/sunbow0SparkMLlibLDA应该算是比较难理解的，其中涉及到大量的概率与统计的相关知识，而且还涉及到了SparkGraphX
sunbow0·2015-08-14 15:00

Spark GraphX Programming Guide 编程指南

6、SparkGraphX ProgrammingGuide6.1概述GraphX是spark的一个新组件用于图和并行图计算。
sunbow0·2015-08-13 14:00

Spark Graphx 构建graph和aggregateMessages聚合消息

Graphx:构建graph和聚合消息@玄畅2014.12.29About最近在优化kcore算法时，对Graphx代码看了几遍。
sunbow0·2015-08-13 12:00

Spark大数据分析框架的核心部件

Spark大数据分析框架的核心部件Spark大数据分析框架的核心部件包含RDD内存数据结构、Streaming流计算框架、GraphX图计算与网状数据挖掘、MLlib机器学习支持框架、SparkSQL数据检索语言
openthings·2015-08-07 11:00

GraphX 实现K-Core

背景graphx实现k-core比较简单，参考淘宝技术部之前的文章，已经给出了一个代码片段，基本上改改就可以定制自己的需求了。
zbf8441372·2015-08-06 17:00

GraphX 图数据建模和存储

背景简单分析一下GraphX是怎么为图数据建模和存储的。
zbf8441372·2015-08-05 10:00

[置顶] 倾情大奉送--Spark入门实战系列

这个系列基本上围绕了Spark生态圈进行介绍，从Spark的简介、编译、部署，再到编程模型、运行架构，最后介绍其组件SparkSQL、SparkStreaming、SparkMLib和SparkGraphX
yirenboy·2015-08-05 09:00

GraphX实现N度关系

之前通过官方文档学习和理解了一下GraphX的计算接口。N度关系目标：在N轮里，找到某一个点的N度关系的点集合。实现思路：1.准备好边数据集，即”13”,“4,1”这样的点关系。
zbf8441372·2015-08-04 12:00

倾情大奉送--Spark入门实战系列

这个系列基本上围绕了Spark生态圈进行介绍，从Spark的简介、编译、部署，再到编程模型、运行架构，最后介绍其组件SparkSQL、SparkStreaming、SparkMLib和SparkGraphX
shishanyuan·2015-08-03 16:00

倾情大奉送--Spark入门实战系列

这个系列基本上围绕了Spark生态圈进行介绍，从Spark的简介、编译、部署，再到编程模型、运行架构，最后介绍其组件SparkSQL、SparkStreaming、SparkMLib和SparkGraphX
shishanyuan·2015-08-03 16:00

Spark GraphX源码解析启动篇（1）

    一直负责公司的大数据平台技术建设，也一直在使用并研究spark，讲spark架构和原理的文章非常多，但是真正对graphx，mllib，sql，r等API实现源码介绍的文章非常少
yixiaohuamax·2015-07-02 16:00

Spark与Shark的原理

Graphx和MLBase提供数据挖掘服务，如图计算和挖掘迭代计算等。Shark提供SQL查询服务，兼容Hiv
paulwong·2015-06-18 13:00

Spark与Shark的原理

Graphx和MLBase提供数据挖掘服务，如图计算和挖掘迭代计算等。Shark提供SQL查询服务，兼容Hive语法，性能比Hive快3-
wangmengbk·2015-06-17 09:00

Kafka+Spark Streaming+Redis实时计算整合实践

基于Spark通用计算平台，可以很好地扩展各种计算类型的应用，尤其是Spark提供了内建的计算库支持，像SparkStreaming、SparkSQL、MLlib、GraphX，这些内建库都提供了高级抽象
Yanjun·2015-04-28 13:00

spark概述

它还支持一组丰富的更高级的工具,包括:SQL方面的SparkSQL和结构化数据处理,机器学习方面的MLlib,图形处理方面的GraphX以及SparkStreaming。
newlife111·2015-04-03 10:00

Spark GraphX学习资料

《SparkGraphX大规模图计算和图挖掘》http://book.51cto.com/art/201408/450049.htm http://www.csdn.net/article/2014-03
逸云丫丫·2015-03-31 11:00

Spark中文手册10：spark部署：提交应用程序及独立部署模式

-编程指南Spark之一个快速的例子Spark之基本概念Spark之基本概念Spark之基本概念（2）Spark之基本概念（3）Spark-sql由入门到精通Spark-sql由入门到精通续sparkGraphX
ichsonx·2015-03-24 17:04

Spark中文手册10：spark部署：提交应用程序及独立部署模式

-编程指南Spark之一个快速的例子Spark之基本概念Spark之基本概念Spark之基本概念（2）Spark之基本概念（3）Spark-sql由入门到精通Spark-sql由入门到精通续sparkGraphX
ichsonx·2015-03-24 17:00

学习GraphX

._ importorg.apache.spark.graphx._ importorg.apache.spark.rdd.RDD创建如上graph对象：//CreateanRDDforthevertices
bluejoe2000·2015-03-16 16:00

Spark 1.2.1 发布，开源集群计算系统

Spark1.2.1发布，此版本是个维护版本，包括69位贡献者，修复了一些Spark的bug，包括核心API，Streaming，PySpark，SQL，GraphX和MLlib方面的。
黑肚皮的窝·2015-02-25 10:06

Spark GraphX示例

ProgrammingGuide中的例子import org.apache.spark.graphx._ val users: RDD[(VertexId, (String, String))] = 
南洋牧师·2015-02-03 17:00

mr与spark的比较

spark生态圈更具优势，spark sql、spark streaming、spark graphx、spark mllib都基于spark core，之间可以无缝串联。
南洋牧师·2015-01-22 11:00

Spark 1.0.0企业级开发动手：实战世界上第一个Spark 1.0.0课程，涵盖Spark 1.0.0所有的企业级开发技术

Spark1.0.0企业级实践课程，课程包含Spark的架构设计、Spark编程模型、Spark内核框架源码剖析、Spark的广播变量与累加器、Shark的原理和使用、Spark的机器学习、Spark的图计算GraphX
wangruoze·2014-12-24 16:00

Spark GraphX 入门实例完整scala代码

SparkGraphX是作为Spark技术堆栈中的一员，担负起了Spark在图计算领域中的重任。网络上已经有很多图计算和SparkGraphX的概念介绍，此处就不再赘述。
samhacker·2014-12-20 20:00

GraphX PageRank

GraphX算法模型：PageRank一：算法介绍    PageRank是Google专有的算法，用于衡量特定网页相对于搜索引擎索引中的其他网页而言的重要程度。    
lsshlsw·2014-11-16 20:00

spark0.9.1集群模式运行graphx测试程序（LiveJournalPageRank,新增Connected Components）

    spark最新版发布了，之前的版本就已经集成了graphx，这个版本还改了一些bug。
哭你吃完·2014-11-14 09:00

腾讯TDW千台Spark千亿节点对相似度计算

本文将介绍腾讯TDW使用千台规模的Spark集群来对千亿量级的节点对进行相似度计算这个案例，通过实验对比，我们优化后的性能是MapReduce的6倍以上，是GraphX的2倍以上。
Johnny_Lee·2014-11-10 09:00

Spark视频第9期：深入掌握图计算领域的屠龙刀Spark GraphX原理和实战

深入掌握图计算领域的屠龙刀SparkGraphX原理和实战     视频地址： http://pan.baidu.com/share/link?
Rocky2014·2014-10-04 11:00

Spark视频第9期：Spark亚太研究院决胜大数据时代公益大讲坛：深入掌握图计算领域的屠龙刀Spark GraphX原理和实战

深入掌握图计算领域的屠龙刀SparkGraphX原理和实战  视频地址：http://pan.baidu.com/share/link?
Rocky_wangjialin·2014-10-04 09:00

Spark学习笔记-GraphX-2

SparkGraphX的一些其他有用操作：importorg.apache.spark._ importorg.apache.spark.SparkContext importorg.apache.spark.graphx
wulinshishen·2014-09-29 17:00

Spark学习笔记-GraphX-1

    SparkGraphX是一个分布式图处理框架，SparkGraphX基于Spark平台提供对图计算和图挖掘简洁易用的而丰富多彩的接口，极大的方便了大家对分布式图处理的需求。
wulinshishen·2014-09-29 13:00

sparkSQL1.1入门之八：sparkSQL之综合应用

下面简单模拟了几个综合应用场景，不仅使用了sparkSQL，还使用了其他Spark组件：店铺分类，根据销售额对店铺分类，使用sparkSQL和MLLibPageRank，计算最有价值的网页，使用sparkSQL和GraphX
book_mmicky·2014-09-11 09:00

基于GraphX实现的community detection算法--Label Propagation分析

LabelPropagation（简称LPA）算法的优点是一个简单容易理解的算法，主要用于communitydetection，它不用我们预先给定community的数量，可以控制迭代的次数去将图中节点去分类。LPA的另一个极大的优点在于scalability，非常适合用来处理largegraph，因为算法的实质是vertex-centricmodel，所以其实是可以在Map-Reduce上实现它
tangshangwen·2014-09-06 14:39

基于GraphX实现的community detection算法--Label Propagation分析

LabelPropagation（简称LPA）算法的优点是一个简单容易理解的算法，主要用于communitydetection，它不用我们预先给定community的数量，可以控制迭代的次数去将图中节点去分类。LPA的另一个极大的优点在于scalability，非常适合用来处理largegraph，因为算法的实质是vertex-centricmodel，所以其实是可以在Map-Reduce上实现它
TangShangWen·2014-09-06 14:39

基于GraphX实现的community detection算法--Label Propagation分析

LabelPropagation（简称LPA）算法的优点是一个简单容易理解的算法，主要用于communitydetection，它不用我们预先给定community的数量，可以控制迭代的次数去将图中节点去分类。LPA的另一个极大的优点在于scalability，非常适合用来处理largegraph，因为算法的实质是vertex-centricmodel，所以其实是可以在Map-Reduce上实现它
TangShangWen·2014-09-06 14:00

基于spark的图计算框架GraphX

基于Spark的GraphX.pptx1.PropertyGraph：用户定义的有向图，图中的每个顶点和每条边都附加一个用户定义的对象，允许在两个顶点之间并行存在多条边。
jhonephone·2014-09-04 11:00

用图的存储结构实现ItemCF

由于最近在学GraphX，其实user和Item之间也可以用图的方式去描述，至于为什么要做这么做？会不会多余呢，其实还是可以拥有自己的观点。
tangshangwen·2014-08-31 01:07

用图的存储结构实现ItemCF

由于最近在学GraphX，其实user和Item之间也可以用图的方式去描述，至于为什么要做这么做？会不会多余呢，其实还是可以拥有自己的观点。
TangShangWen·2014-08-31 01:00

Spark GraphX宝刀出鞘，图文并茂研习图计算秘笈与熟练的掌握Scala语言【大数据Spark

SparkGraphX宝刀出鞘，图文并茂研习图计算秘笈     大数据的概念与应用，正随着智能手机、平板电脑的快速流行而日渐普及，大数据中图的并行化处理一直是一个非常热门的话题。
Spark亚太研究院·2014-08-29 17:00

【互动问答分享】第9期决胜云计算大数据时代Spark亚太研究院公益大讲堂

“决胜云计算大数据时代”Spark亚太研究院100期公益大讲堂【第9期互动问答分享】 Q1：SparkGraphX的用途在哪里？       
Spark亚太研究院·2014-08-25 17:00

【互动问答分享】第9期决胜云计算大数据时代Spark亚太研究院公益大讲堂

“决胜云计算大数据时代”Spark亚太研究院100期公益大讲堂【第9期互动问答分享】 Q1：SparkGraphX的用途在哪里？       
wwttz1974·2014-08-25 17:00

浅谈GraphX

最近在学Spark的GraphX，希望通过博客或者总结的方式对学过的东西有所积累，同时也希望能有读者可以提出建议和意见。
tangshangwen·2014-08-18 22:43

浅谈GraphX

最近在学Spark的GraphX，希望通过博客或者总结的方式对学过的东西有所积累，同时也希望能有读者可以提出建议和意见。
TangShangWen·2014-08-18 22:00

快刀初试：Spark GraphX在淘宝的实践

快刀初试：SparkGraphX在淘宝的实践作者：明风（本文由团队中梧苇和我一起撰写，并由团队中的林岳，岩岫，世仪等多人Review，发表于程序员的8月刊，由于篇幅原因，略作删减，本文为完整版）    
阿里云官方博客·2014-08-13 21:00

Spark的Graphx学习笔记--Pregel

1、PregelAPI图本质上是一种递归的数据结构，其顶点的属性值依赖于其邻接顶点，而其邻接顶点属性又依赖于其邻接顶点，许多重要的图算法通过迭代计算每个顶点的属性直到到达定点条件，这些迭代的图算法被抽象成一系列图并行操作。2、Pregel的计算模型主要分为三个函数：1、vertexProgram函数2、sendMessage函数3、messageCombiner函数在进行了解之前，先对相关知识进行
TangShangWen·2014-08-11 21:17

Spark的Graphx学习笔记--Pregel

1、PregelAPI图本质上是一种递归的数据结构，其顶点的属性值依赖于其邻接顶点，而其邻接顶点属性又依赖于其邻接顶点，许多重要的图算法通过迭代计算每个顶点的属性直到到达定点条件，这些迭代的图算法被抽象成一系列图并行操作。2、Pregel的计算模型主要分为三个函数：1、vertexProgram函数2、sendMessage函数3、messageCombiner函数在进行了解之前，先对相关知识进行
tangshangwen·2014-08-11 21:17
上一页 6 7 8 9 10 11 12 13 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他