greenplum

在Greenplum中使用zhparser实现全文检索

这个方法是借用PG的插件zhparser，要求PG的版本在9.2以上，在GP上实现的话，目前需要GP6.0以上的版本，因为6.0集成的是9.4beta1。由于是在集群上使用，所以下面的所有操作都要同时在每个节点上操作。安装SCWS下载scws解压缩tar-vfx./configuremake&&makeinstall安装SCWS，makeinstall时必须root用户安装zhparser下载zh
mingli_a·2020-07-16 03:17

greenplum的几个内存配置

max_statement_mem设置每个查询最大使用的内存量，该参数是防止statement_mem参数设置的内存过大导致的内存溢出statement_mem设置每个查询在segment主机中可用的内存，该参数设置的值不能超过max_statement_mem设置的值，如果配置了资源队列，则不能超过资源队列设置的值，其计算公式为(gp_vmem_protect_limitGB*.9)/max_e
远处的一只猫·2020-07-16 03:33

GreenPlum常用操作命令

GreenPlum常用操作命令GreenPlum常用操作命令启动命令停止命令状态检查命令修复命令psqlpg_dump备份与恢复其它常用命令GreenPlum常用操作命令启动命令命令解释gpstart-a
芷芸liu·2020-07-16 02:27

真正的让greenplum 4.x支持uuid 使用python扩展

step1:为数据库添加python支持先保证$GPHOME/ext/中包含python文件夹，否则无法增加python扩展执行扩展命令(注意是在shell中执行，不是进入gp的命令行)createlangplpythonu-dfb09注意：上面的命令中只需要替换fb09为需要扩展的数据库即可step2:创建gp自定义函数createorreplacefunctionpublic.uuid_pyt
leandzgc·2020-07-16 01:16

第10章-窗口函数

WindowFunctions以下内置的窗口函数是PostgreSQL数据库的Greenplum扩展。所有的窗口函数都是不可变的。
kygoal·2020-07-16 01:15

第6章gp_toolkit管理架构-Checking Database Object Sizes and Disk Space

CheckingDatabaseObjectSizesandDiskSpaceThegp_size_*familyofviewscanbeusedtodeterminethediskspaceusageforadistributedGreenplumDatabase
kygoal·2020-07-16 01:15

Chapter 18 Greenplum 特性总结

Chapter18Greenplum特性总结Thissectionprovidesahigh-leveloverviewofthesystemrequirementsandfeaturesetofGreenplumDatabase.Itcontainsthefollowingtopics
kygoal·2020-07-16 01:15

第6章gp_toolkit管理架构-Checking Server Configuration Files

CheckingServerConfigurationFilesGreenplum数据库系统的每个组件（主数据库，备用主数据库，主数据段和镜像数据块）都有自己的服务器配置文件（postgresql.conf
kygoal·2020-07-16 01:14

第6章gp_toolkit管理架构-Checking for Locks

有关锁的类型的更多信息，请参阅“Greenplum数据库管理员指南”中的“管理数据”。Greenplum数据库资源队列（用于工作负载管理）也使用锁来控制查询进入系统。
kygoal·2020-07-16 01:14

第5章 系统目录参考-gp_distribution_policy

gp_distribution_policy该gp_distribution_poiicy表包含Greenplum数据表和跨段分布表中的数据策略信息。此表只在主填充。
kygoal·2020-07-16 01:43

Greenplum中游标的使用

CLOSE描述：关闭一个游标语法：CLOSEcursor_name注意：Greenplum数据库不支持显示地打开(open)游标，当一个游标被声明的时候就会被打开，使用declare语句声明并且打开一个游标
jmx_bigdata·2020-07-16 01:27

在greenplum中自定义数组去重函数（亲测可用）

在greenplum数据库中自定义数组函数背景：我的A表里面有一个字段叫taskidArraytext[]，是数组类型，这个字段里面存的是一个一个的taskid。
一刻轻狂·2020-07-16 01:05

（greenplum）自定义函数，从数组字段中删除某个元素（亲测可用）

参数解释：taskidArray：你想要从中删除元素的数组字段oneTaskid：你想要删除的那个元素CREATEORREPLACEfunctionmy_array_remove(taskidArraytext[],oneTaskidtext)returnstext[]as$BODY$declarextext;declarenew_arraytext[];beginiftaskidArrayisn
一刻轻狂·2020-07-16 01:05

Greenplum或DeepGreen数据库查看表倾斜的方法总结

目前他使用的版本是最新的版本为：GreenplumVersion:'postgres(GreenplumDatabase)4.3.8.2build1'其实很多朋友经常使用如下的方式来检查数据分布：my
DataFlow范式·2020-07-16 01:25

Greenplum中Heap表膨胀查看和解决方案

在某些情况下，因为底层存储架构的原因，Greenplum的Heap表很容易出现膨胀(Bloat)。Bloat会影响表的扫描性能，从而影响查询性能。1.什么是表膨胀？
DataFlow范式·2020-07-16 01:25

GreenPlum安装性能监控工具GPCCC（Greenplum Command Center Console）

Greenplum安装完毕，将原有数据迁移过去，可以进行查询了，接下来就是GP的使用了，除了基本的语法外，我们比较关注的是性能监控和性能优化了，后面的两篇就是针对这两个方面的操作。
jameswangcnbj·2020-07-16 00:32

Greenplum数据库架构导出复制

目的：导出现场的GP数据库架构：包含表结构，函数，视图等，不包含具体表数据。在所内恢复一套同样架构的数据库出来，方便所内查询定位。步骤：1、导出时间，挑选一个GP事务比较清闲的时间段进行操作2、查看现场数据库里有多少模式schema（要根据现场实际的schema）：如下图3、利用gpadmin用户登录master主机，依次执行导出语句pg_dump-EUTF8-s-vDB1-nSCHEMA1>DB
rickhuan08·2020-07-16 00:48

GreenPlum锁表以及解除锁定

--GP查看锁SELECTpid,rolname,rsqname,granted,current_query,datnameFROMpg_roles,gp_toolkit.gp_resqueue_status,pg_locks,pg_stat_activityWHEREpg_roles.rolresqueue=pg_locks.objidANDpg_locks.objid=gp_toolkit.g
housen1987·2020-07-16 00:36

GreenPlum分区表原理

Greenplum分区表的原理和PostgreSQL的原理相同，都是把一张大表按照适合的维度进行分割，通过表的继承，规则，约束实现。
hmxz1024·2020-07-16 00:11

GreenPlum数据加载方式总结

在GreenPlum中有以下几种方式来进行数据的加载，包括通过insert命令来实现少量数据的导入；通过copy命令来实现数据的导入导出；通过建立外部表及gpfdist实现数据的导入导出；通过gpload
hmxz1024·2020-07-16 00:11

GreenPlum角色与权限控制

Greenplum数据库使用角色(role)管理数据库访问权限。角色角色的概念把用户(user)和组(group)的概念包括在内。一个角色可能是一个数据库用户、一个组或者两者兼具。
hmxz1024·2020-07-16 00:39

GreenPlum数据库集群故障检测与恢复

Segment镜像概述当Greenplum数据库高可用性被启用时，有两种类型的Segment：主Segment和镜像Segment，每个主Segment都有一个对应的镜像Segment。
hmxz1024·2020-07-16 00:39

Greenplum实践总结

实际使用greenplum中的一些问题或知识点，做一个汇总，会不断进行更新。
hmxz1024·2020-07-16 00:39

Greenplum自定义递归函数

Greenplum自定义递归函数--删除自定义递归函数DROPFUNCTIONF_RECURSION_WAREHOUSE(IDTEXT[]);--创建自定义递归函数CREATEORREPLACEFUNCTIONF_RECURSION_WAREHOUSE
Gansuper7012·2020-07-15 23:03

「揭秘GP」Greenplum 数据库进军深度学习领域

深度学习（DeepLearning）开始成为企业计算的一个更重要的部分，这是因为人工神经网络在自然语言处理，图像识别，欺诈检测和推荐系统等领域非常有效。在过去的五到十年中，计算机的计算能力有了极大的增强，以及海量数据的出现，这一切促使人们对使用深度学习算法解决问题产生了兴趣。另一方面，企业的业务系统大多基于SQL的基础架构，在软件和员工培训方面进行了大量投资。然而，深度学习的主要创新发生在SQL世
Greenplum中文社区·2020-07-15 23:01

GreenPlum的Primary和Mirro切换恢复

gp节点出现了actingasprimarychangetracking错误，判断是节点primary和mirror发生了切换1.没有配置gp的日志，无法获取为什么切换了，待会儿看看默认日志在哪里目前只有gpadmin、gprecover的操作日志在gpadmin和master的日志pg_log中也没有报错切换的提示。--那么切换的日志在哪里呢？？？2.执行gprecoverseg命令，提示共享内
dimawei2225·2020-07-15 22:55

记一次GreenPlum性能调优

在部署了的GreenPlum集群中进行数据查询时，发现数据量一旦大了，查询一跑就中断，提示某个segment中断了连接。
dimawei2225·2020-07-15 22:55

Failed to complete obtain psql count Master gp_segment_configuration Script Exiti

ScripthasleftGreenplumDatabaseinanincompletestate解决方法：echo"RemoveIPC=no">>/etc/systemd/log
dechen6073·2020-07-15 22:21

Greenplum tablespace与filespace的关系

GP里面和PG不同的是，多了个filespace概念，在GP里面tablespace必须建立在filespace上面，所以建立表空间之前，先要有指定的filespacefilespace可以认为是多个文件目录的集合，可以对应一个或者多个tablespace下面介绍一下创建filespace的实例：1.su-gpadmin2.创建新的目录赋予权限192-168-101-115192-168-101-
dazuiba008·2020-07-15 22:05

Greenplum gpfdist使用

192.168.101.116gpfdist-d/data02/files/-p8081-l/data02/files/gpfdist.log-m102400000&需要读取的文件：cat/data02/files/test.txt1,apple2,banana3,pumk4,plantegg5,orange6,water192.168.101.115\chankhank确保以下两个参数是on，如
dazuiba008·2020-07-15 22:05

greenplum 开窗函数

greenplum分析函数开窗函数（每一行返回结果）区分于聚合函数，聚合函数统计的是汇总后的结果，没有明细数据，如果统既要计结果又要明细，开窗函数就比较简单tutorial=>select*fromtest002orderbyname
cuishaobo1694·2020-07-15 21:53

greenplum 5.13 + ubuntu 16.04 + make

os:ubuntu16.04db:greenplum5.13ip规划如下192.168.0.99mas192.168.0.100sla192.168.0.101seg1192.168.0.102seg2OS
数据库人生·2020-07-15 21:11

greenplum 5.7 + gp_toolkit

gp_toolkit是greenplum的一个功能schema。包含了大量实用的函数。
数据库人生·2020-07-15 21:10

Greenplum函数编程心得

声明：文中观点为作者的个人观点、不代表官方、如需更多帮助，请联系Pivotal官方·转载必须注明出处1、Greenplum函数中的预编译SQL无法识别分区条件，遭遇该问题的用户极为普遍，而EMC通常给出的意见是采用
ctd33591·2020-07-15 21:37

Greenplum中内存设置不合理导致的报错

针对Greenplum中主要的内存设置参数做如下说明(不涉及OS级别参数)：statement_mem：ERROR:insufficientmemoryreservedforstatement(memqu
ctd33591·2020-07-15 21:37

Greenplum中查看数据分布情况

声明：文中观点为作者的个人观点、不代表官方、如需更多帮助，请联系Pivotal官方·转载必须注明出处用过GP的都清楚GP是一个并行数据仓库系统，数据是分散在不同的instance(磁盘|目录)的，这种架构很多时候我们必须小心注意数据的分布情况，包括instance上的平坦性，以及partition上的平坦性，如果数据集中在少数instance上，那么我们的分布策略是低效的甚至是失败的，如果分布在个
ctd33591·2020-07-15 21:36

最新的Greenplum4.2.2管理员指南-20130412

声明：文中观点为作者的个人观点、不代表官方、如需更多帮助，请联系Pivotal官方·转载必须注明出处由于之前的链接失效了，现更新连接:链接:http://pan.baidu.com/s/1nt9eo1z提取密码:esli声明：文中观点为作者的个人观点、不代表官方、如需更多帮助，请联系Pivotal官方·转载必须注明出处来自“ITPUB博客”，链接：http://blog.itpub.net/110
ctd33591·2020-07-15 21:36

Greenplum使用index处理like条件是很有趣的

声明：文中观点为作者的个人观点、不代表官方、如需更多帮助，请联系Pivotal官方·转载必须注明出处早先也没注意过like在GP是如何使用index处理like条件的，因为在常见的场景中，OLAP的使用方式不太会使用这种查询方式，所以也就没太考虑使用index来加速like的查询。最近有人问到这个问题，建好了索引，analyze也做了，但是like条件怎么都不走索引，于是我开始自己找问题。开始为一
ctd33591·2020-07-15 21:36

Greenplum中like查询与index~补充完善之前讨论

声明：文中观点为作者的个人观点、不代表官方、如需更多帮助，请联系Pivotal官方·转载必须注明出处通常情况下，如果我们使用默认的初始化方式去gpinitsystem，在这种情况下，创建一个column的index后，like查询并不会使用索引来优化查询，因为查询计划不知道该如何使用索引来加速，索引通常可以处理的运算符是普通的数学比较符号：>=根据InstallGuide和PostgreSQL8.
ctd33591·2020-07-15 21:36

Greenplum中pg_hba.conf文件配置错误导致的无法启动

声明：文中观点为作者的个人观点、不代表官方、如需更多帮助，请联系Pivotal官方·转载必须注明出处以下是启动错误日志，在配置pg_hba.conf文件时需要小心，这样的错误属于低级错误20120405:10:43:14:001887gpstart:mdw:gpadmin-[CRITICAL]:-FailedtostartMasterinstanceinadminmode20120405:10:4
ctd33591·2020-07-15 21:36

几款开源的BI套件介绍

1、BizgreBizgree为GreenPlum公司主导的开源项目，和Sun公司达成合作关系。
csl39245·2020-07-15 21:29

Greenplum gp_vmem_protect_limit 出错

运行的Greenplum报这个错：'53400','[53400]ERROR:Outofmemory(seg30slice3bbsod:40002pid=26372)\nVMProtectfailedtoallocate8388608bytes
csdn666666666·2020-07-15 21:47

Greenplum工具GPCC和GP日志中时间不匹配的问题分析

今天同事反馈了一个问题，之前看到没有太在意，虽然无伤大雅，但是想如果不重视，那么后期要遇到的问题就层出不穷，所以就作为我今天的任务之一来看看吧。能不能定位和解决，当然从事后来看，也算是找到了问题处理的一个通用思路。问题的现象很明显：GPCC工具可以显示出GP的日志内容，但是和GP日志里的时间明显不符。GPCC的一个截图如下，简单来说就好比Oracle的OEM一样的工具。能够查看集群的状态，做一些基
congbao6525·2020-07-15 21:45

greenPlum Load实验

greenPlum数据库管理文档Load实验Mdw做为ETL抽取组件，抽取file文件所在的机器。
chizunzhou5985·2020-07-15 21:24

《编程狂人》第九十八期，程序员必看的技术周刊

业界新闻Delphi、C#之父AndersHejlsberg首次访华推广TypeScriptXcodeGhostS：变种带来的又一波影响Pivotal开源基于PostgreSQL的数据库GreenplumAngular2
推酷·2020-07-15 21:19

第3章 关于 Greenplum 中的并发控制

第3章关于Greenplum中的并发控制Greenplum的数据库使用PostgreSQL的多版本并发控制（MVCC）模型来管理并发事务堆表。
bigpdb·2020-07-15 20:13

采用非常规方法（非gprecoverseg) 恢复greenplum数据库

greenplum数据库中mirror的作用就是作为primary的备份存在。
D示羊·2020-07-15 19:26

greenplum全量恢复gprecoverseg -F出现Unable to connect to database时的相关分析及解决方法

之前有两位朋友碰到过在对greenplum的系统构架更改后，出现全量恢复gprecoverseg-F也无法正常运行的情况。
D示羊·2020-07-15 19:26

greenplum 日志配置

基础配置文件：postgresql.conf如下一共三个配置方案，可根据业务需求进行配置日志：logging_collector是否打印loglog_line_prefix日志格式log_directory日志保存目录log_statement打印sql类型log_min_duration_statement记录超时sql，超时多少秒记录log日志方案（1）每天生成一个日志文件log_filena
渊丹·2020-07-15 19:31

GreenPlum锁表经历

目录一、问题发现二、Lock类型三、各种锁block关系四、实验4.1实验：Accessexclusive锁与Accessshare锁相互block。4.2Share锁与RowExclusive锁冲突4.3update和delete在同一张表上是否可以并发？4.4基于postgresql9.4模拟deadlock4.5什么时候会获取exclusivelock五、总结一、问题发现晚上接到报警信息，G
MyySophia·2020-07-15 18:58
上一页 10 11 12 13 14 15 16 17 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他