E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
SpatialHadoop
分布式空间分析引擎-Simba架构分析与源码阅读之总体架构
它基于SparkSQL框架进行扩展,针对空间场景进行了一系列的算法研究和工程优化,在spatialjoin领域相对geospark、
SpatialHadoop
、HadoopGIS等空间分析引擎具有一定的优势
airfan92
·
2020-08-03 05:34
#
Hadoop中空间数据的存储(二)
今天我们就基于比较完善成熟的
SpatialHadoop
平台做一下同样的实验,来看下在
SpatialHadoop
平台中如何体现空间数据的特性。
GeoWin_CAU
·
2020-07-29 01:05
大数据技术篇
SpatialHadoop
GIS系统开发
Hadoop代码编写
SpatialHadoop
中空间索引系列之(九)B树索引
B树索引B-树类型的索引树是一种高度平衡的多路径检索树结构,在传统的数据库中应用非常广泛。但是传统的B-树只能检索多属性数据,对于空间数据却无能为力。因此,需要对传统B-树进行扩展,开拓创新,提出更多的基于B-树的专用空间索引技术,如R-树、R+-树、R*-树等。R树R-树就是基于B-树的专用扩展索引树,由Guttman于1984年提出,是一颗高度平衡的索引树。它是用空间对象的最小边界矩形(M
GeoWin_CAU
·
2020-07-29 01:05
GIS基础概念
SpatialHadoop
网易视频云:Hadoop中空间数据的存储(二)
今天,网易视频云就基于比较完善成熟的
SpatialHadoop
平台做一下同样的实验,来看下在
SpatialHadoop
平台中如何体现空间数据的特性。
vcould163
·
2016-05-27 11:00
云计算
网易
技术开发
互联网科技
网易视频云
[置顶]
SpatialHadoop
中的 Operations 层 之 Range Query
基于存储层的空间索引和MapReduce层新的空间函数,构成了
SpatialHadoop
框架的核心内容,也使得基于
SpatialHadoop
的各种高效的空间操作成为了可能。
yaoxiaochuang
·
2016-02-13 07:00
hadoop
Gis
query
range
SpatialHadoop
GeoHadoop
[置顶]
SpatialHadoop
中的 MapReduce 层
和Hadoop类似,
SpatialHadoop
中的MapReduce层是执行MapReduce项目时的查询操作层。
yaoxiaochuang
·
2016-02-13 05:00
mapreduce
源码
hadoop
Gis
SpatialHadoop
GeoHadoop
[置顶]
SpatialHadoop
中空间索引系列之(十)R-Tree 索引源码解析
前面章节已经大概描述了在
SpatialHadoop
中R-Tree空间索引实现的步骤,本章节就从源码角度来看下该算法是怎么实现的。
yaoxiaochuang
·
2016-02-11 05:00
源码
索引
Gis
SpatialHadoop
R-tree
GeoHadoop
SpatialHadoop
中空间索引系列之(九)B树索引
B树索引 B-树类型的索引树是一种高度平衡的多路径检索树结构,在传统的数据库中应用非常广泛。但是传统的B-树只能检索多属性数据,对于空间数据却无能为力。因此,需要对传统B-树进行扩展,开拓创新,提出更多的基于B-树的专用空间索引技术,如R-树、R+-树、R*-树等。R树 R-树就是基于B-树的专用扩展索引树,由Guttman于1984年提出,是一颗高度平衡的索引树。它是用空
yaoxiaochuang
·
2016-02-10 04:00
数据库
索引
index
spatial
SpatialHadoop
SpatialHadoop
中空间索引系列之(七)RTree/R+Tree的实现
R-Tree 本节主要描述下在章节V-B中是如何通过基于集群节点的R-Tree索引对空间数据进行分割的。如图4(b)所示,是每个分区中R-Tree局部索引。 在数据分割阶段,为了计算分块的边界,我们通过批量加载一个输入文件的随机样本到内存中,R-Tree采用文献30中的Sort-Tile-Recursive(STR)算法实现。随机样本的大小为输入文件大小的1%的默认比率,最
yaoxiaochuang
·
2016-02-09 07:00
index
spatial
SpatialHadoop
R-tree
SpatialHadoop
中空间索引系列之(六)R树索引原理
R树(ReferenceTree)R树是处理空间数据的B+树的改进,它像B+树一样,是一个高度平衡的数据结构。R树算法是由美国加州大学的AntommGuttman教授在1984年提出的一种空间数据库动态索引算法,现已成为空间数据库索引中应用最广泛的算法之一。R树较好地解决了许多传统算法未解决的空间数据动态索引问题。==========================================
yaoxiaochuang
·
2016-02-09 06:00
index
spatial
SpatialHadoop
SpatialHadoop
中空间索引系列之(五)四叉树索引原理
四叉树基本思想:二维空间范围被划分为一系列大小相等的棋盘状矩形,即将地理空间的长和宽在X和Y方向上进行2N等分,形成2N×2N的网格,并以此建立N级四叉树。 四叉树是具有一个根节点,其中的每个中间节点都有四个孩子。四叉树的每个节点对应一个正方形。==============================================================
yaoxiaochuang
·
2016-02-09 05:00
index
spatial
SpatialHadoop
SpatialHadoop
中空间索引系列之(四)空间格网索引实现
这里我们根据
SpatialHadoop
中具体的实现,来详细讲解下。格网索引是一级索引,格网的个数取决于两个参数,一个是数据集的大小,另外一个就是格网的大小。
yaoxiaochuang
·
2016-02-09 05:00
java
index
spatial
SpatialHadoop
[置顶] Hadoop中空间数据的存储(二)
今天我们就基于比较完善成熟的
SpatialHadoop
平台做一下同样的实验,来看下在
SpatialHadoop
平台中如何体现空间数据的特性。
yaoxiaochuang
·
2016-02-06 01:00
hadoop
数据
存储
空间数据
SpatialHadoop
SpatialHadoop
中空间索引系列之(三)格网索引原理
接着上一篇继续吧!!!!!!!!!!!!!!这一篇来描述下什么是空间格网索引。格网型空间索引的基本思想是将研究区域用横竖线条划分大小相等或不等的格网,记录每一个格网所包含的空间实体。当用户进行空间查询时,首先计算出用户查询对象所在格网,然后再在该网格中快速查询所选空间实体,这样一来就大大地加速了空间索引的查询速度。====================================
yaoxiaochuang
·
2016-02-04 05:00
索引
index
spatial
格网索引
SpatialHadoop
中空间索引系列之(二)空间对象索引原理
空间索引(SpatialIndex)是指依据空间对象的位置和形状或空间对象之间的某种空间关系按一定的顺序排列的一种数据结构,其中包含空间对象的概要信息,如对象的标识、外接矩形及指向空间对象实体的指针。(不知所云,还给老师吧!) 数据库的索引用来快速访问一条特定查询所请求的数据,而无需遍历整个数据库。 ==========================================
yaoxiaochuang
·
2016-02-04 05:00
索引
对象
index
spatial
SpatialHadoop
中空间索引系列之(一)空间索引构建
今天就讨论下在
spatialhadoop
当中,空间索引是如何构建的。
yaoxiaochuang
·
2016-02-03 07:00
hadoop
index
spatial
SpatialHadoop
Spark for Spatial,相关资源
这里收集了
SpatialHadoop
/GeoSpark/PCL/OpenSLAM等几个前沿的开源项目资源,可以从中学习,有能力的可以参与其中,真正去开展前沿技术的研究。1、
openthings
·
2015-12-24 09:00
hadoop
spark
PCL
SpatialSpark
SpatialHadoop
OpenSLAM
GeoWave
SpatialHadoop
:有效的分析你的空间数据
一、简介
SpatialHadoop
是一个开源的MapReduce扩展,专门用于在ApacheHadoop集群上处理空间数据。
openthings
·
2015-12-19 17:00
hadoop
SpatialHadoop
SpatialHadoop
实例:面向空间数据的高效MapReduce框架
作者:AhmedEldawy;MohamedF.Mokbel摘要:本文实例介绍了
SpatialHadoop
平台,它是第一个基于成熟MapReduce对空间数据具有原生支持的框架。
openthings
·
2015-12-19 17:00
hadoop
SpatialHadoop
空间数据下载-资源列表
来自于UMN的
SpatialHadoop
(概念介绍)可以处理下面的数据。
openthings
·
2015-12-19 17:00
hadoop
数据下载
SaptialHadoop
[置顶]
SpatialHadoop
实例:面向空间数据的高效MapReduce框架
摘要:本文实例介绍了
SpatialHadoop
平台,它是第一个基于成熟MapReduce对空间数据具有原生支持的框架。
yaoxiaochuang
·
2014-12-17 12:00
开源
大数据
Gis
系统测试
Amazon
EC2
HADOOP集群
上一页
1
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他