GP(GreenPlum

在greenplum中自定义数组去重函数（亲测可用）

在greenplum数据库中自定义数组函数背景：我的A表里面有一个字段叫taskidArraytext[]，是数组类型，这个字段里面存的是一个一个的taskid。
一刻轻狂·2020-07-16 01:05

（greenplum）自定义函数，从数组字段中删除某个元素（亲测可用）

参数解释：taskidArray：你想要从中删除元素的数组字段oneTaskid：你想要删除的那个元素CREATEORREPLACEfunctionmy_array_remove(taskidArraytext[],oneTaskidtext)returnstext[]as$BODY$declarextext;declarenew_arraytext[];beginiftaskidArrayisn
一刻轻狂·2020-07-16 01:05

Greenplum或DeepGreen数据库查看表倾斜的方法总结

上次有个朋友咨询我一个GP数据倾斜的问题，他说查看gp_toolkit.gp_skew_coefficients表时花费了20-30分钟左右才出来结果，后来指导他分析原因并给出其他方案来查看数据倾斜。
DataFlow范式·2020-07-16 01:25

Greenplum中Heap表膨胀查看和解决方案

在某些情况下，因为底层存储架构的原因，Greenplum的Heap表很容易出现膨胀(Bloat)。Bloat会影响表的扫描性能，从而影响查询性能。1.什么是表膨胀？
DataFlow范式·2020-07-16 01:25

GreenPlum安装性能监控工具GPCCC（Greenplum Command Center Console）

Greenplum安装完毕，将原有数据迁移过去，可以进行查询了，接下来就是GP的使用了，除了基本的语法外，我们比较关注的是性能监控和性能优化了，后面的两篇就是针对这两个方面的操作。
jameswangcnbj·2020-07-16 00:32

Greenplum数据库架构导出复制

目的：导出现场的GP数据库架构：包含表结构，函数，视图等，不包含具体表数据。在所内恢复一套同样架构的数据库出来，方便所内查询定位。
rickhuan08·2020-07-16 00:48

GreenPlum锁表以及解除锁定

--GP查看锁SELECTpid,rolname,rsqname,granted,current_query,datnameFROMpg_roles,gp_toolkit.gp_resqueue_status
housen1987·2020-07-16 00:36

GreenPlum分区表原理

Greenplum分区表的原理和PostgreSQL的原理相同，都是把一张大表按照适合的维度进行分割，通过表的继承，规则，约束实现。
hmxz1024·2020-07-16 00:11

GreenPlum数据加载方式总结

在GreenPlum中有以下几种方式来进行数据的加载，包括通过insert命令来实现少量数据的导入；通过copy命令来实现数据的导入导出；通过建立外部表及gpfdist实现数据的导入导出；通过gpload
hmxz1024·2020-07-16 00:11

GreenPlum角色与权限控制

Greenplum数据库使用角色(role)管理数据库访问权限。角色角色的概念把用户(user)和组(group)的概念包括在内。一个角色可能是一个数据库用户、一个组或者两者兼具。
hmxz1024·2020-07-16 00:39

GreenPlum数据库集群故障检测与恢复

Segment镜像概述当Greenplum数据库高可用性被启用时，有两种类型的Segment：主Segment和镜像Segment，每个主Segment都有一个对应的镜像Segment。
hmxz1024·2020-07-16 00:39

Greenplum实践总结

实际使用greenplum中的一些问题或知识点，做一个汇总，会不断进行更新。
hmxz1024·2020-07-16 00:39

Greenplum自定义递归函数

Greenplum自定义递归函数--删除自定义递归函数DROPFUNCTIONF_RECURSION_WAREHOUSE(IDTEXT[]);--创建自定义递归函数CREATEORREPLACEFUNCTIONF_RECURSION_WAREHOUSE
Gansuper7012·2020-07-15 23:03

「揭秘GP」Greenplum 数据库进军深度学习领域

深度学习（DeepLearning）开始成为企业计算的一个更重要的部分，这是因为人工神经网络在自然语言处理，图像识别，欺诈检测和推荐系统等领域非常有效。在过去的五到十年中，计算机的计算能力有了极大的增强，以及海量数据的出现，这一切促使人们对使用深度学习算法解决问题产生了兴趣。另一方面，企业的业务系统大多基于SQL的基础架构，在软件和员工培训方面进行了大量投资。然而，深度学习的主要创新发生在SQL世
Greenplum中文社区·2020-07-15 23:01

GreenPlum的Primary和Mirro切换恢复

gp节点出现了actingasprimarychangetracking错误，判断是节点primary和mirror发生了切换1.没有配置gp的日志，无法获取为什么切换了，待会儿看看默认日志在哪里目前只有
dimawei2225·2020-07-15 22:55

记一次GreenPlum性能调优

在部署了的GreenPlum集群中进行数据查询时，发现数据量一旦大了，查询一跑就中断，提示某个segment中断了连接。
dimawei2225·2020-07-15 22:55

Failed to complete obtain psql count Master gp_segment_configuration Script Exiti

ScripthasleftGreenplumDatabaseinanincompletestate解决方法：echo"RemoveIPC=no">>/etc/systemd/log
dechen6073·2020-07-15 22:21

Greenplum tablespace与filespace的关系

GP里面和PG不同的是，多了个filespace概念，在GP里面tablespace必须建立在filespace上面，所以建立表空间之前，先要有指定的filespacefilespace可以认为是多个文件目录的集合
dazuiba008·2020-07-15 22:05

Greenplum gpfdist使用

192.168.101.116gpfdist-d/data02/files/-p8081-l/data02/files/gpfdist.log-m102400000&需要读取的文件：cat/data02/files/test.txt1,apple2,banana3,pumk4,plantegg5,orange6,water192.168.101.115\chankhank确保以下两个参数是on，如
dazuiba008·2020-07-15 22:05

greenplum 开窗函数

greenplum分析函数开窗函数（每一行返回结果）区分于聚合函数，聚合函数统计的是汇总后的结果，没有明细数据，如果统既要计结果又要明细，开窗函数就比较简单tutorial=>select*fromtest002orderbyname
cuishaobo1694·2020-07-15 21:53

GROUP BY分组排序获取topN相关

表结构：表数据：法一(用户变量)：①首先我先得到每组排名的所有结果点击(此处)折叠或打开select@gp_row:=if(@name=name,@gp_row+1,1)asgp_row,@name:=
cuanjiaohuan3239·2020-07-15 21:44

greenplum 5.13 + ubuntu 16.04 + make

os:ubuntu16.04db:greenplum5.13ip规划如下192.168.0.99mas192.168.0.100sla192.168.0.101seg1192.168.0.102seg2OS
数据库人生·2020-07-15 21:11

[FATAL]:-Failed to complete obtain psql count Master gp_segment_configuration Script Exiting!

在使用gpinitsystem初始化系统时报如下错误20190110:09:44:27:018010gpinitsystem:mas:gpadmin-[INFO]:-StartFunctionERROR_CHK20190110:09:44:27:018010gpinitsystem:mas:gpadmin-[INFO]:-EndFunctionERROR_CHK20190110:09:44:27:
数据库人生·2020-07-15 21:11

greenplum 5.7 + gp_toolkit

gp_toolkit是greenplum的一个功能schema。包含了大量实用的函数。
数据库人生·2020-07-15 21:10

Greenplum函数编程心得

声明：文中观点为作者的个人观点、不代表官方、如需更多帮助，请联系Pivotal官方·转载必须注明出处1、Greenplum函数中的预编译SQL无法识别分区条件，遭遇该问题的用户极为普遍，而EMC通常给出的意见是采用
ctd33591·2020-07-15 21:37

Greenplum中内存设置不合理导致的报错

针对Greenplum中主要的内存设置参数做如下说明(不涉及OS级别参数)：statement_mem：ERROR:insufficientmemoryreservedforstatement(memqu
ctd33591·2020-07-15 21:37

Greenplum中查看数据分布情况

声明：文中观点为作者的个人观点、不代表官方、如需更多帮助，请联系Pivotal官方·转载必须注明出处用过GP的都清楚GP是一个并行数据仓库系统，数据是分散在不同的instance(磁盘|目录)的，这种架构很多时候我们必须小心注意数据的分布情况
ctd33591·2020-07-15 21:36

最新的Greenplum4.2.2管理员指南-20130412

声明：文中观点为作者的个人观点、不代表官方、如需更多帮助，请联系Pivotal官方·转载必须注明出处由于之前的链接失效了，现更新连接:链接:http://pan.baidu.com/s/1nt9eo1z提取密码:esli声明：文中观点为作者的个人观点、不代表官方、如需更多帮助，请联系Pivotal官方·转载必须注明出处来自“ITPUB博客”，链接：http://blog.itpub.net/110
ctd33591·2020-07-15 21:36

Greenplum使用index处理like条件是很有趣的

声明：文中观点为作者的个人观点、不代表官方、如需更多帮助，请联系Pivotal官方·转载必须注明出处早先也没注意过like在GP是如何使用index处理like条件的，因为在常见的场景中，OLAP的使用方式不太会使用这种查询方式
ctd33591·2020-07-15 21:36

Greenplum中like查询与index~补充完善之前讨论

声明：文中观点为作者的个人观点、不代表官方、如需更多帮助，请联系Pivotal官方·转载必须注明出处通常情况下，如果我们使用默认的初始化方式去gpinitsystem，在这种情况下，创建一个column的index后，like查询并不会使用索引来优化查询，因为查询计划不知道该如何使用索引来加速，索引通常可以处理的运算符是普通的数学比较符号：>=根据InstallGuide和PostgreSQL8.
ctd33591·2020-07-15 21:36

Greenplum中pg_hba.conf文件配置错误导致的无法启动

声明：文中观点为作者的个人观点、不代表官方、如需更多帮助，请联系Pivotal官方·转载必须注明出处以下是启动错误日志，在配置pg_hba.conf文件时需要小心，这样的错误属于低级错误20120405:10:43:14:001887gpstart:mdw:gpadmin-[CRITICAL]:-FailedtostartMasterinstanceinadminmode20120405:10:4
ctd33591·2020-07-15 21:36

几款开源的BI套件介绍

1、BizgreBizgree为GreenPlum公司主导的开源项目，和Sun公司达成合作关系。
csl39245·2020-07-15 21:29

Greenplum gp_vmem_protect_limit 出错

运行的Greenplum报这个错：'53400','[53400]ERROR:Outofmemory(seg30slice3bbsod:40002pid=26372)\nVMProtectfailedtoallocate8388608bytes
csdn666666666·2020-07-15 21:47

Greenplum工具GPCC和GP日志中时间不匹配的问题分析

问题的现象很明显：GPCC工具可以显示出GP的日志内容，但是和GP日志里的时间明显不符。GPCC的一个截图如下，简单来说就好比Oracle的OEM一样的工具。能够查看集群的状态，做一些基
congbao6525·2020-07-15 21:45

greenPlum Load实验

greenPlum数据库管理文档Load实验Mdw做为ETL抽取组件，抽取file文件所在的机器。
chizunzhou5985·2020-07-15 21:24

《编程狂人》第九十八期，程序员必看的技术周刊

业界新闻Delphi、C#之父AndersHejlsberg首次访华推广TypeScriptXcodeGhostS：变种带来的又一波影响Pivotal开源基于PostgreSQL的数据库GreenplumAngular2
推酷·2020-07-15 21:19

尴尬的面试

u=3523238907,333741730&fm=23&gp=0.jpg早上六点，我以迅雷不及眼耳之势吃过早餐，那速度，那吃相弄得我老妈都有些紧张啊。
羽筱筱·2020-07-15 21:41

夏普GP2Y1010AU0F灰尘传感器使用

夏普GP2Y1010AU0F灰尘传感器在STM32平台上的使用一、传感器的概述GP2Y1010AUOF是日本夏普公司开发的一款光学灰尘浓度检测传感器。
bzy090212·2020-07-15 21:00

第3章 关于 Greenplum 中的并发控制

第3章关于Greenplum中的并发控制Greenplum的数据库使用PostgreSQL的多版本并发控制（MVCC）模型来管理并发事务堆表。
bigpdb·2020-07-15 20:13

GP DBA基本操作

1、查看队列情况SELECT*FROMgp_toolkit.gp_resqueue_status;如果出现了资源占用大于1.1e+11SQL，则可能存在不合理执行计划的SQL，基本跑不出来，库也会很卡。
疍聃·2020-07-15 20:35

DISC行为模式学的启示

u=4047601749,1923050012&fm=27&gp=0.jpg从早期的占星学开始，一些理论家就在不断地寻找定义个人行为模式的方法。
Amanda的生命故事·2020-07-15 20:01

GP2Y1014AU粉尘传感器模块 PM2.5灰尘传感器代替GP2Y1010AU0F

目录资料：清单：概观规范检测原理测试代码:测试得到的数据和空气质量对照：排线位置：不接电容电阻接线示意图：添加一个150ohm的电阻和一个220uF的电容，接线如下图：资料：产品手册（资料）：http://pan.baidu.com/s/1eQjaACaGP2Y1014AU_设计参考指南及原理：http://pan.baidu.com/s/1o6kglNs打包下载地址：https://downlo
acktomas·2020-07-15 20:52

采用非常规方法（非gprecoverseg) 恢复greenplum数据库

greenplum数据库中mirror的作用就是作为primary的备份存在。
D示羊·2020-07-15 19:26

greenplum全量恢复gprecoverseg -F出现Unable to connect to database时的相关分析及解决方法

之前有两位朋友碰到过在对greenplum的系统构架更改后，出现全量恢复gprecoverseg-F也无法正常运行的情况。
D示羊·2020-07-15 19:26

greenplum 日志配置

基础配置文件：postgresql.conf如下一共三个配置方案，可根据业务需求进行配置日志：logging_collector是否打印loglog_line_prefix日志格式log_directory日志保存目录log_statement打印sql类型log_min_duration_statement记录超时sql，超时多少秒记录log日志方案（1）每天生成一个日志文件log_filena
渊丹·2020-07-15 19:31

基于树莓派的空气监测系统（3）PM2.5模块程序

基于树莓派的空气监测系统（3）PM2.5模块程序PM2.5模块（SHARP灰尘传感器GP2Y1051AU0F）灰尘传感器的主要参数光学原理，能够探测1微米以上的粉尘粒子；5VDC供电；串口通信（5V）;
vopo123·2020-07-15 19:25

GreenPlum锁表经历

目录一、问题发现二、Lock类型三、各种锁block关系四、实验4.1实验：Accessexclusive锁与Accessshare锁相互block。4.2Share锁与RowExclusive锁冲突4.3update和delete在同一张表上是否可以并发？4.4基于postgresql9.4模拟deadlock4.5什么时候会获取exclusivelock五、总结一、问题发现晚上接到报警信息，G
MyySophia·2020-07-15 18:58

GreenPlum安装指南

目录一、GreenPlum的机器选型三、GP安装与部署3.1系统准备之OS3.2最小硬件要求3.3存储3.4容量估算3.5操作系统内核调优3.6时钟设置3.7系统资源限制3.8磁盘I/O及其他参数3.9
MyySophia·2020-07-15 18:58

GreenPlum 数据倾斜排查

在MPP无共享环境中，查询的总响应时间取决于单个node执行最长的process。如果数据偏斜，则具有更多数据的node将花费更多时间来完成，因此每个node必须具有大约相等的行数并执行大约相同的处理量。如果一个node要处理的数据比其他node多得多，可能会导致性能差和内存不足的情况。将大表连接在一起时，最佳分配至关重要。要执行联接，匹配的行必须一起位于同一node上。如果数据未分配在同一DSK
MyySophia·2020-07-15 18:58

Greenplum膨胀表问题分析

目录一问题二解决2.1为何会膨胀2.2vauum可以解决表膨胀吗？2.2.1vacuum和vacuumfull有什么区别呢？2.3查看表膨胀2.4解决2.5优化一问题同事反馈一个sql执行长达1000s，通过分析问题，发现该表严重膨胀，70W的数据量表大小达到18GB。同时还发现该表的分布键设计不合理。此表有频繁的TP业务。selectpg_size_pretty(pg_relation_size
MyySophia·2020-07-15 18:58
上一页 46 47 48 49 50 51 52 53 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他