快速搭建iServer大数据分布式空间分析服务

一、环境说明

本文档采用单机部署,分析数据则采用共享目录的方式进行,其中8090端口iServer为主节点

  • 单机部署
    1. 启动2个iServer,端口分别为8090(默认),8091,关闭端口分别为8015(默认),8016
      (修改端口在iServer安装目录下/conf/server.xml,修改8090启动端口,8015关闭端口)
    2. 准备一份需要分析的数据,可以参考产品包中自带的范例
      (范例数据iServer安装目录下/samples/data/ProcessingData)

二、部署流程

  1. 主节点(8090)开启Spark集群,自身加入集群并开启分布式服务
  2. 子节点(8091)加入主节点Spark集群
  3. 所有节点拷贝数据(单机部署数据仅存放主节点即可)
  4. 主节点使用分布式分析服务进行分析

三、详细步骤

  1. 启动主节点iServer,开启集群。
    快速搭建iServer大数据分布式空间分析服务_第1张图片

  2. 启动主节点iServer,在iServer中通过集群-》加入集群-》添加报告器并保存的方式加入集群,服务地址使用主节点的ip和端口,如:http://192.168.15.136:8090/iserver/services/cluster。
    快速搭建iServer大数据分布式空间分析服务_第2张图片

  3. 开启分布式分析服务。
    快速搭建iServer大数据分布式空间分析服务_第3张图片

  4. 访问http://IP:8080/ 查看Spark集群节点情况,当前状态下有一个节点。
    快速搭建iServer大数据分布式空间分析服务_第4张图片

  5. 主节点iServer注册数据
    快速搭建iServer大数据分布式空间分析服务_第5张图片
    快速搭建iServer大数据分布式空间分析服务_第6张图片
    注意:如下图所示,当看到有?号时,需要指定CSV的XY列
    快速搭建iServer大数据分布式空间分析服务_第7张图片
    快速搭建iServer大数据分布式空间分析服务_第8张图片
    快速搭建iServer大数据分布式空间分析服务_第9张图片

  6. 启动子节点iServer,通过集群-》加入集群-》添加报告器填写主节点ip地址,保存加入集群快速搭建iServer大数据分布式空间分析服务_第10张图片

  7. 子节点数据拷贝(由于是单机部署数据路径相同,这一步可略过,若是多机集群,则需将数据拷贝到每个子节点,且数据存放路径需与主节点一致)。

  8. 访问http://IP:8080/ 查看Spark集群节点情况,当前状态下有两个节点。
    快速搭建iServer大数据分布式空间分析服务_第11张图片
    9.访问主节点iServer 进入大数据分析页面(http://IP:8090/iserver/services)
    快速搭建iServer大数据分布式空间分析服务_第12张图片
    一直往里面点,当看到如下界面时,可以看到当前版本所支持的大数据分析操作!快速搭建iServer大数据分布式空间分析服务_第13张图片

  9. 此次我们使用aggregatePoints(点聚合分析)功能,填写相关参数
    快速搭建iServer大数据分布式空间分析服务_第14张图片
    快速搭建iServer大数据分布式空间分析服务_第15张图片
    最终会弹出如下分析成功页面,点击使用JS方式浏览,即可可视化查看分析结果内容
    快速搭建iServer大数据分布式空间分析服务_第16张图片
    快速搭建iServer大数据分布式空间分析服务_第17张图片

四、注意事项

  1. 多节点分析,需将数据拷贝到每个子节点,且数据存放路径与主节点一致。
  2. 分析时,可以查看8080端口查看Spark集群情况,当任务写到Completed时,表明执行成功。
  3. 创建分析任务选项卡如果为灰色,则表明未登录或登陆超时失效,需要重新登陆。
  4. 如果运行时间过长,可以查看http://IP:4040/地址查看当前执行进度
    快速搭建iServer大数据分布式空间分析服务_第18张图片

你可能感兴趣的:(大数据,云GIS,大数据,分布式,数据)