【GBASE】GBase 8a MPP Cluster 架构介绍

GBase 8a MPP Cluster 采用 MPP + Shared Nothing 的分布式联邦架构,节点间通过TCP/IP 网络进行通信,每个节点采用本地磁盘来存储数据,支持对称部署和非对称部署。

Shared Nothing(SN)是一种分布式计算架构。这这种架构中,每一个节点都是独立的,自给的,在系统中不存在单点竞争。更明确地说,没有节点共享存储和硬盘。

MPP (Massively Parallel Processing),即大规模并行处理,简单来说,MPP是将任务并行的分散到多个服务器和节点上,在每个节点上计算完成后,将各自部分的结果汇总在一起得到最终的结果(与Hadoop相似)。

【GBASE】GBase 8a MPP Cluster 架构介绍_第1张图片
 

GBase 8a MPP Cluster 产品总共包含三大核心组件及辅助功能组件,其中核心组件
包含分布式管理集群 GCWare、分布式调度集群 GCluster 和分布式存储计算集群
GNode, 所有组件的功能分别为:


GCWare
组成分布式管理集群,为集群提供一致性服务。主要负责记录并保存集群结构、节
点状态、节点资源状态、并行控制和分布式排队锁等信息。在多副本数据操作时,
记录和查询可操作节点,提供各节点数据一致性状态。


GCluster
组成分布式调度集群,是整个集群得统一入口。主要负责从业务端接受连接并将查
询结果返回给业务端。 GCluster 会接受 SQL、进行解析优化,生成分布式执行计划,
选取可操作的节点执行分布式调度,并将结果反馈给业务端。

GNode
组成分布式存储集群,是集群数据的存储和计算单元。主要负责存储集群数据、接
收和执行 GCluster 下发的 SQL 并将执行结果返回给 GCluster、 从加载服务器接收
数据进行数据加载。


GCMonit
用于实时监测 GCluster 和 GNode 核心组件的运行状态, 一旦发现某个服务程序的进
程状态发生变化,就根据配置文件中的内容来执行相应的服务启动命令,从而保证
服务组件正常运行。


GCware_Monit
用于实时监测 GCware 组件的运行状态, 一旦发现服务进程状态发生变化,就根据
配置文件中的内容来执行相应的服务启动命令,从而保证服务组件正常运行。


GCRecover & GCSyncServer
用于多副本间的数据同步。一旦发生多副本间数据文件不一致则调用该进程进行同
步,从而保证多副本数据文件的一致性。
 

【GBASE】GBase 8a MPP Cluster 架构介绍_第2张图片

GCware 节点推荐部署在 GCluster 节点服务器上,这种将 GCluster 节点和 GCware 节点部署在一起的复合节点又称为 Coordinator 节点。

上述的所有组件按照逻辑概念和虚拟概念划分,又可分为如下几部分:


逻辑概念划分:
GCluster Cluster
集群的分布式调度集群,是集群的统一入口节点集合。 GCluster Cluster 的节点上运
行 gclusterd、 gcrecover、 gcmonit、 gcmmonit 服务。
GCware Cluster
集群的分布式管理集群, 是集群的一致性管理节点集合。 GCware Cluster 的节点上
运行 gcware、 gcware_monit、 gcware_mmonit 服务。
Data Cluster
集群的分布式数据存储计算集群,是集群的数据存储计算节点集合。 Data Cluster
的节点上运行有 gbased、 gc_sync_server、 gcmonit、 gcmmonit 服务


虚拟概念划分:
VC( Virtual Cluster)

虚拟集群, 是对 Data Cluster 节点的划分,每个 VC 拥有固定数量的 Data Cluster 节
点。 整个集群是由若干个 VC 组成,所有的 VC 由同一套 GCluster Cluster 和 GCware
Cluster 管理,共享统一的入口。可以将不同 Date 集群节点按不同业务特点进行物
理隔离,形成各自独立运行的 VC。
RC( Root Cluster)
根集群,是所有 GCluster Cluster 节点、 GCware Cluster 节点和 Data Cluster 节点的
集合,不对用户提供服务。包含一个 GCluster Cluster、 一个 GCware Cluster、 多个
VC 和 Free Nodes。
 

你可能感兴趣的:(GBASE,架构,数据库,数据仓库,数据库架构,hadoop)