greenplum 第19页

PostgreSQL DBA(60) - 列式存储zedstore

本节简单介绍了Greenplum开源的列式存储zedstore的安装和使用.安装从Github上下载源码,与普通PG一样,编译安装即可[root@localhostpostgres-zedstore]#

cuichao1900·2020-07-01 21:32

greenplum版本升级

一、准备工作当前数据库版本为greenplum5.12.0，

风行无极·2020-07-01 19:11

Greenplum的Oracle兼容性函数安装

许多Oracle的SQL函数可以应用到Greenplum数据库中。Greenplum默认安装完成后并不能使用Oracle的兼容性函数。

Michael_林·2020-07-01 11:03

maven+druid +springboot+ 连接greenplum数据库

1.说明1.1该案例为了展示连接greenplum的jar包和集成方式仅供参考，没有详细说明，请查阅相关资料。

我思故我在zzzl3·2020-06-30 18:00

GreenPlum数据库查询数据表名称、字段名称、类型、描述信息

SELECTUPPER(A.SCHEMANAME)ASSCHEMANAME,UPPER(A.TABLENAME)ASTABLENAME,--D.ATTRELID,--D.ATTRELID::regclass,UPPER(D.ATTNAME)ASATTNAME,REPLACE(REPLACE(REPLACE(FORMAT_TYPE(D.ATTTYPID,D.ATTTYPMOD),'numeric',

zhijianwomen·2020-06-30 16:23

助力Greenplum数据库开发之接口篇（上）——Golang，C、Python和Perl

Greenplum作为一款强大的HTAP数据库，针对大多数流行语言都有相应的连接库。大部分均是与PostgreSQL采用相同的接口，但是也有部分接口是Greenplum专门优化后用于自身使用的。

Greenplum·2020-06-30 14:02

Impala查询详解第一篇——简介

Impala的定位是一种新型的MPP查询引擎，但是它又不是典型的MPP类型的SQL引擎，提到MPP数据库首先想到的可能是GreenPlum，它的每一个节点完全独立，节点直接不共享数据，节点之间的信息传递全都通过网络实现

教练_我要踢球·2020-06-30 09:22

【greenplum】greenplum 常用数据库管理语句,sql工具

作者：lianghc在greenplum使用过程中积累的一些常用查询语句，整理出来备忘。欢迎各位留言补充。都是SQL命令以及数据字典的使用。熟悉数据字典非常重要。

百事悠弦·2020-06-30 08:30

PostgreSQL （PG）高效分区表实现 - pg_pathman

商业版本EDB，以及数据仓库Greenplum都有比较好的分区支持。去年GP开源后，阿里云RDSPostgreSQL的小伙伴将Greenplum的分区表功能port到PostgreSQ

涛(微信yetaoaiueo)专注互联网·2020-06-30 07:13

【无中生有】---16---大数据系统搭建

而Greenplum也可以尝试下。如果

无人境域·2020-06-30 03:24

greenplum（五） greenplum开发笔记之建表规范

背景：某运营商经分分析系统底层数据仓库；离线分析系统物理模型表表多批量操作批量插入、更新，truncate操作，全表分组分析等。1非分区表，建表样例语句：--droptabledwctr.tc_term_xxx;createtabledwctr.tc_term_xxx(acyc_idintegernotnull,bcyc_idvarchar(6)notnull,user_idvarchar(14)

果木·2020-06-30 00:24

Greenplum6.x安装PXF插件

目录Greenplum6.x安装PXF插件目录1安装Hadoop与Hive的客户端1.1在大数据平台的主节点(namenode)上打包客户端1.2把文件scp到Greenplum的master节点上2Greenplum

小徐xfg·2020-06-29 23:17

Greenplum内核揭秘之执行引擎

Greenplum内核揭秘之执行引擎目录Greenplum内核揭秘之执行引擎1目录11执行器介绍21.1什么是执行器21.2PlanNode(执行计划节点)21.3PlanTree(执行计划树)21.3

小徐xfg·2020-06-29 23:17

Greenplum针对最常见的内存错误OOM

针对最常见的内存错误OOM，需要说明(针对4.1之后版本，早起版本请前去查询相关文档)：单语句的内存消耗受3个参数控制：gp_resqueue_memory_policy、statement_mem、max_statement_mem A、缺省gp_resqueue_memory_policy配置为eager_free，在此情况下，内存将物尽其用(我从词面理解的，官方并未给出详细说明)，但不能超

小徐xfg·2020-06-29 23:16

greenplum数据库之MADlib安装——笔记

环境：——greenplum版本：greenplum-db-5.9.0——操作系统：CentOSLinuxrelease7.4.1708(Core)下载MADlib二进制安装压缩包：下载地址：https

精神病院里病最重的人·2020-06-29 13:23

greenplum基本使用操作——笔记

psql-dpostgrespsql是greenplum登陆命令，-d选项是指定GP的某个库进行登入，greenplum必须要指定一个库才能登入，postgres是初始化时默认创建的。

精神病院里病最重的人·2020-06-29 13:52

jdbc连接greenplum

使用jdbc连接greenplumpackageaaaa;importjava.sql.Connection;importjava.sql.DriverManager;importjava.sql.ResultSet

蒙奇奇的故事·2020-06-28 22:28

SpringBoot 多数据源连Greenplum ：“Driver does not support get/set network timeout for connections.” 有什么影响

异常日志：14:04:54.696tpmp-app[Thread-10]INFOcom.zaxxer.hikari.HikariDataSource-HikariPool-2-Starting...14:04:54.865tpmp-app[Thread-10]INFOcom.zaxxer.hikari.pool.PoolBase-HikariPool-2-Driverdoesnotsupportg

叮嘱我丶跌倒不应放弃·2020-06-28 20:25

GreenPlum 数据库启动关闭及数据库状态检查

本篇文章主要记录GreenPlum数据库的启动、关闭及状态查询。GreenPlum数据库提供gpstart和gpstop脚本来启动和关闭数据库，可以通过—help参数来查看这些脚本的帮助信息。

weixin_34413065·2020-06-28 19:58

GreenPlum 数据备份与恢复

GreenPlum数据备份与恢复gp_dump是GP并行备份的备份工具，在运行gp_dump的时候master与所有的segment节点都开始备份（standby节点和segment节点中的mirror

weixin_34401479·2020-06-28 18:04

Greenplum 调优--数据分布法则 - 分布列与分区的选择

分布列选择黄金法则由于Greenplum是一个分布式的数据库，数据是分散存储在各个数据节点的，所以需要告诉Greenplum数据应该如何分布。

weixin_34376986·2020-06-28 18:12

java 使用jdbc连接Greenplum数据库和Postgresql数据库

1、公司使用的Greenplum和Postgresql，确实让我学到不少东西。简单将使用jdbc连接Greenplum和Postgresql数据库。

weixin_34234721·2020-06-28 14:26

阿里云HybridDB for PG实践 - 行存、列存，堆表、AO表的原理和选择

标签PostgreSQL,Greenplum,向量计算,行存储,列存,AO表背景Greenplum支持行存和列存，支持堆表和AO表，那么他们有什么不同，如何选择呢？

weixin_34232744·2020-06-28 14:05

Doris进驻顶级开源社区Apache 彰显百度“开源速度”

Doris是百度开发的面向在线报表和分析的数据仓库系统，可以对标于商业的MPP数据仓库系统，比如Greenplum、Vertica、Teradata等。

weixin_34198881·2020-06-28 13:44

Greenplum 如何直连segment节点

Greenplum展开阅读全文直连greenplumsegment节点的方法,utility模式:使用这种方式，不与其他节点通讯，只操作当前节点。也没有数据分布的概念。

weixin_34194702·2020-06-28 13:09

Greenplum 调优--查看子节点SQL运行状态

摘自《Greenplum企业应用实战》重点：使用gp_dist_random函数，将查询下发到每个Segement创建查看子节点SQL运行状态视图1）创建v_active_sql视图方便查看SQLcreateviewv_active_sqlasselectpg_stat_activity.procpid

weixin_34167043·2020-06-28 12:04

Greenplum 表空间和filespace的用法

转载：https://yq.aliyun.com/articles/190Greenplum支持表空间，创建表空间时，需要指定filespace。

weixin_34138377·2020-06-28 12:18

Greenplum 调优--数据倾斜排查（一）

对于分布式数据库来说，QUERY的运行效率取决于最慢的那个节点。当数据出现倾斜时，某些节点的运算量可能比其他节点大。除了带来运行慢的问题，还有其他的问题，例如导致OOM，或者DISKFULL等问题。如何监控倾斜1、监控数据库级别倾斜2、监控表级倾斜出现数据倾斜的原因和解决办法1.分布键选择不正确，导致数据存储分布不均。例如选择的字段某些值特别多，由于数据是按分布键VALUE的HASH进行分布的，导

weixin_34112181·2020-06-28 11:37

采用非常规方法（非gprecoverseg) 恢复greenplum数据库

greenplum数据库中mirror的作用就是作为primary的备份存在。

weixin_34038293·2020-06-28 10:08

Greenplum 函数 gp_dist_random

articles/7593函数作用：gp_dist_random('gp_id')本质上就是在所有节点查询gp_id，gp_dist_random('pg_authid')就是在所有节点查询pg_authid，使用greenplum

weixin_34032621·2020-06-28 10:30

如何评估Greenplum master 空间以及segment元数据占用的空间.

Greenplummaster节点是用来存储元数据的，包括:序列，表，临时表，分区，函数，视图，类型，操作符，规则，触发器等。

weixin_33985507·2020-06-28 09:40

Greenplum 监控segment是否正常

在greenplum运行过程中，Segement很有可能因为压力大出现不可用的情况，主备Segement发现了切换，或是主备Segement网络断开，数据不同步了。

weixin_33881140·2020-06-28 07:43

Greenplum 调优--数据倾斜排查（二）

上次有个朋友咨询我一个GP数据倾斜的问题，他说查看gp_toolkit.gp_skew_coefficients表时花费了20-30分钟左右才出来结果，后来指导他分析原因并给出其他方案来查看数据倾斜。其实很多朋友经常使用如下的方式来检查数据分布：selectgp_segment_id,count(1)fromperson_infogroupby1;但是这种方法太简单，只有判断存储是否倾斜，不能够去

weixin_33875564·2020-06-28 07:45

Greenplum行存与列存的选择以及转换方法

在数据仓库产品中，如Greenplum，支持行存，也支持列存。还有很多存储格式，本文将讨论行存和列存应该如何选择呢？行存储优劣分析Greenplum行存储(

weixin_33860528·2020-06-28 06:01

Greenplum行存与列存性能对比

>>>今天给大家分享一个Greenplum中行存与列存的性能对比，在分析型业务中，如果对数据查询的列数不是很多，还是建议优先选用列存。本文涉及的测试用例就能看出列存恰当使用时，性能能提升3倍！！

weixin_33859231·2020-06-28 06:41

GreenPlum 锁表以及解除锁定

最近遇到truncate表，无法清理的情况，在master节点查看加锁情况，并未加锁这种情况极有可能是segment节点相关表加了锁，所以遇到这种情况除了排查master节点的锁，所有的segment也要查看锁的持有情况，然后根据情况，进行处理。master节点：查看segment锁情况selectgp_execution_dbid(),pid,relation::regclass,locktyp

weixin_33827590·2020-06-28 06:41

GreenPlum常用SQL

下面整理记录一些时常会使用到的SQL,也方便以后查阅：描述SQL添加分区（在没有创建DEFAULTPARTITION的情况下）altertabletablenameaddpartitionpartition_namestart(BIGINT'1471276800000')inclusiveend(BIGINT'1471363200000')exclusive;添加分区（在创建DEFAULTPART

weixin_33827590·2020-06-28 06:09

PostgreSQL、Greenplum 日常监控和维护任务

背景Greenplum的日常监控点、评判标准，日常维护任务。展示图层由于一台主机可能跑多个实例，建议分层展示。

weixin_33770878·2020-06-28 05:38

Greenplum 调优--VACUUM系统表

Greenplum调优--VACUUM系统表1、VACUUM系统表原因Greenplum是基于MVCC版本控制的，所有的delete并没有删除数据，而是将这一行数据标记为删除，而且update其实就是delete

weixin_33757911·2020-06-28 04:49

greenplum(postgresql) 数据字典

greenplum是基于postgresql开发的分布式数据库，里面大部分的数据字典是一样的。我们在维护gp的时候对gp的数据字典比较熟悉，特此分享给大家。

weixin_33751566·2020-06-28 04:29

Greenplum 执行计划之广播与重分布

关联数据在不同节点上，对于普通关系型数据库来说，是无法进行连接的。关联的数据需要通过网络流入到一个节点中进行计算，这样就需要发生数据迁移。数据迁移有广播和重分布两种。在GP中，每一个广播或重分布会产生一个切片，每一个切片在每个数据节点上都会对应发起一个进程来处理该slice负责的数据，上一层负责该slice的进程会读取下级slice广播或重分布的数据，然后进行相应的计算。当两张表关联的时候，如果有

weixin_33743703·2020-06-28 04:51

Greenplum 查看连接与锁信息数据字典

查看系统中会话/连接/SQL与锁情况1、查看当前活动的客户端连接数SELECTcount(*)FROMpg_stat_activityWHERENOTpid=pg_backend_pid();2、查询客户端连接的情况SELECTpid,casewhenwaiting='f'then'alreadygetlock,sqlexecuting'whenwaiting='t'then'waitingget

weixin_33725272·2020-06-28 04:22

开源OLAP引擎测评报告(SparkSql、Presto、Impala、HAWQ、ClickHouse、GreenPlum) ...

本文为博主公司原创文章，仿冒必究，转载请回复留言**开源OLAP引擎测评报告(SparkSql、Presto、Impala、HAWQ、ClickHouse、GreenPlum)易观CTO郭炜序现在大数据组件非常多

weixin_33724659·2020-06-28 04:04

Greenplum 海量数据，大宽表行存 VS 列存

标签PostgreSQL,Greenplum,大宽表,行存,列存背景GPDB支持行存列存，而且相关的选择原理我们之前的文章也有很详细的分析，同时在性能方面也做过较多的评测对比。

weixin_33717298·2020-06-28 03:22

Greenplum列存压缩表原理

用法createtabletestao(idint,nametext)with(APPENDONLY=true,ORIENTATION=column,COMPRESSTYPE=zlib,COMPRESSLEVEL=5,BLOCKSIZE=1048576,OIDS=false)APPENDONLY=true,ORIENTATION=column这两个属性决定了这是列存压缩表。COMPRESSTYPE

weixin_33705053·2020-06-28 03:42

Greenplum 模糊查询实践

标签PostgreSQL,Greenplum,orafunc,阿里云HybridDBforPostgreSQL,reverse,like,模糊查询背景文本搜索的需求分为：1、全匹配，如：select*fromtablewherecolumn

weixin_33697898·2020-06-28 03:02

Kylin设置JDBC配置greenplum数据源

2019独角兽企业重金招聘Python工程师标准>>>Kylin设置JDBC配置greenplum数据源kylin最开始的时候支持hive和kafka作为数据源，从2.3.0版本之后开始支持JDBC作为第第三种数据源

weixin_33691598·2020-06-28 03:24

[转]greenplum(postgresql)之数据字典