greenplum

如何用gpss实现Oracle到Greenplum的增量同步

了解更多Greenplum技术干货，欢迎访问Greenplum中文社区网站之前我们在《如何用gpss实现MySQL到Greenplum的增量同步》中详细介绍了MySQL到Greenplum增量同步的实现步骤
Greenplum中文社区·2020-09-12 02:19

GreenPlum 大数据平台--监控

数据库状态监控活动活动过程纠正措施列出当前状态为down的Segment。如果有任何行被返回，就会生成一个警告或者告警。推荐频率：每5到10分钟重要度：IMPORTANT在postgres数据库中运行下例查询：SELECT*FROMgp_segment_configurationWHEREstatusrole;当Segment没有运行在其首选角色中时，每台主机上可能不是都有均匀数据量的主Segme
Z14523299999·2020-09-12 02:31

Greenplum Kafka 集成

本文主要介绍如何配置和使用Greenplum-Kafka集成1.介绍Greenplum-Kafka集成使用GreenplumStreamServer来提供从ApacheKafka到Greenplum数据库的高速并行数据加载入库
奋斗, 拼·2020-09-12 02:16

Greenplum备份安全与高可用

Greenplum备份安全与高可用目录Greenplum备份安全与高可用目录1Greenplum高可用1.1管理节点1.2数据节点1.3交换机1.4服务器1.5Master高可用1.6Segment高可用
小徐xfg·2020-09-11 06:16

Greenplum快速上手

Greenplum快速上手目录快速上手Greenplum1目录11Greenplum的介绍21.1Greenplum产品发展历程22Greenplum市场地位33Greenplum架构设计43.1Scaleup
小徐xfg·2020-09-11 06:44

MPP 二、Greenplum数据加载

Loadingexternaldataintogreenplumdatabasetableusingdifferentways...Greenplum有常规的COPY加载方法，有基于分布式的并行的gpfdist
weixin_30598225·2020-09-11 04:27

gpstop failed. (Reason='int() argument must be a string or a number, not 'NoneType'') exiting...

OSVersion:CentOSLinuxrelease7.2.1511(Core)greenplumversion:4.3.8问题：在初始化过程中遇到如下错误，并且master上的postgres进行已经启动
wxc20062006·2020-09-10 21:10

Greenplum集群 申请内存失败 Out of memory

一、问题简介DETAIL:VMprotectfailedtoallocate65592bytesfromsystem,VMProtect8039MBavailable小白今天在往Greenplum集群导入数据的时候
碼小白·2020-09-08 08:46

Greenplum的数据分布与倾斜

Greenplum的分布与倾斜Greenplum数据库依赖于跨节点的均匀数据分布。在MPP无共享环境中，查询的总体响应时间由所有节点的完成时间来度量。系统只能与最慢的节点一样快。
贾斯汀玛尔斯·2020-09-02 14:14

Pivotal Greenplum Database 6.6.0安装1.准备阶段

一.资料准备阶段官网资源需要注册及登录下载所需要的安装资源：https://network.pivotal.io/products/pivotal-gpdb#/releases/495851/file_groups/2253官网说明文档https://gpdb.docs.pivotal.io/6-6/main/index.html6.6对应的模块版本微信截图_20200410091608.png安
李春田·2020-08-26 17:27

greenplum安装PostGis

1、下载Greenplum的postgis插件下载地址：https://network.pivotal.io/products/pivotal-gpdb/#/releases/449820/file_groups
冬天的一缕阳光·2020-08-26 14:03

Greenplum闰秒故障的分析解决

但是部分Linux（比如RHEL6.264bit）上的部分应用（比如Greenplum数据库，也包括java和mysql这些）需要读取硬件时钟和系统时钟，这二者不一致时，就跑不动，可
cloudguru·2020-08-25 16:13

Greenplum数据库扩容实务（下）-实施收尾

实施检查所有节点之间的网络和磁盘性能su-gpadmingpstop-Mimmediateexitsource/usr/local/greenplum-db/greenplum_path.shgpcheckperf-f
cloudguru·2020-08-25 14:26

Greenplum数据库扩容实务（上）-准备工作

任何分布式系统都要面对的事儿就包括扩容，不然分布式系统存在的意义就大打折扣了，这篇就介绍一下对GP进行扩容的准备过程，事实上，扩容的实施是个非常简单的过程，主要要做的就是准备。准备创建主机信息文件用GP管理员OS用户gpadmin创建6个主机信息文件：/home/gpadmin/20150523exp/currenthosts：当前已经存在的所有主机的主机名/home/gpadmin/201505
cloudguru·2020-08-25 14:26

第11期：压缩表

比如，基于PostgreSQL的列式数据库Greenplum；早期基于MySQL的列式数据库inforbright；或者Percona的产品tokudb等，都是有压缩能力非常
爱可生云数据库·2020-08-24 18:16

Greenplum&postgresql: Invalid column name:start_value

1、问题描述：采用springbootjpa整合postgresql或者greenplum时，采用jpa实体自动初始化数据表报错信息，为：Invalidcolumnname:start_value。
小周先森·2020-08-24 15:36

CentOS 6.9 下GreenPlum源码编译安装及部署教程

GreenPlum介绍PostgreSqlPostgreSQLisanadvancedobject-relationaldatabasemanagementsystemthatsupportsanextendedsubsetoftheSQLstandard
Gantamade·2020-08-24 01:45

greenplum6.0数据库安装文档

greenplum官方软件包下载地址：https://network.pivotal.io/products/pivotal-gpdb/#/releases/449820/file_groups/2047
隔壁寝室老吴·2020-08-23 18:09

异构数据库结构与数据同步工具dbswitch

一、背景开源MPP数据库Greenplum是一种基于PostgreSQL的分布式数据库，其采用shared-nothing架构，其架构专门用于管理大规模分析数据仓库，Greenplum主要定位在OLAP
inrgihc·2020-08-23 17:06

CentOS7.3系统自动安装部署PostgreSQL 10.7的Shell脚本

PostgreSQL是一款开源免费的数据库系统，著名的MPP数据库Greenplum就是基于此数据库进行的升级改造，去年写过自动安装PG的shell脚本，今天分享给大家。
无处不在的海贼·2020-08-23 10:09

Greenplum学习6--使用pgadminⅢ连接GP 出现的错误

1.修改pg_hba.conf文件在安装完成pgadmin后，运行pgadmin连接服务器主机数据库，会报错：master主机ip：192.168.xx.xx在/data/master/gpseg-1/pg_hba.conf找到pg_hba.conf文件，添加：hostallall192.168.xx.1/24md5最好不要改md5为trust，trust是不需要密码就可以进入，安全性低；/dat
Rorschach2016·2020-08-22 17:33

Greenplum学习7--postmaster.pid does not exist问题

1.启动GP报错：[gpadmin@master~]$gpstart-a......................................................Commandwas:'envGPSESSID=0000000000GPERA=None$GPHOME/bin/pg_ctl-D/data/master/gpseg-1-l/data/master/gpseg-1/pg_
Rorschach2016·2020-08-22 17:01

Greenplum学习3--修改初始化（gpinitsystem_config）文件

修改初始化（gpinitsystem_config）文件在安装greenplum的最后几步中，在运行初始化工具之前（-cgpinitsystem_config），先要修改（gpinitsystem_config
Rorschach2016·2020-08-22 17:01

Greenplum学习4--.bashrc文件的修改(如gp端口、初始数据库、GPCCC安装、master数据地址)

/etc/bashrcfisource/usr/local/greenplum-db/greenplum_path.sh①source/home/gpadmin/gpccc/gpcc_path.sh②exp
Rorschach2016·2020-08-22 17:01

关于大数据分析的8大工具

去年，IBM宣布以17亿美元收购数据分析公司Netezza；EMC继收购数据仓库软件厂商Greenplum后再次收购集群NAS厂商Isilon；Teradata收购了AsterData公司；随后，惠普收购实时分析平台
乔克素素·2020-08-22 17:27

greenplum数据库引擎探究

Greenplum做为新一代的数据库引擎，有着良好的发展与应用前景。强大的工作效率，低成本的硬件平台对数据仓库与商业智能建设有很大的吸引力。要清楚的了解其特点最好从架构着手。
大肚熊·2020-08-22 02:08

巨头迎来大数据时代 EMC整合数据库实力

7月6日，全球存储巨头EMC公司表示，将全部以现金方式收购私有数据存储公司Greenplum。双方公司没有透露具体的交易金额，不过，
原文链接·2020-08-22 02:45

greenplum 和 posgresq 通用合并表函数

为了方便，创建以下合并函数1、创建合并配置表和合并统计表--创建合并配置表droptablemerge_config_table;CREATETABLEmerge_config_table(tablenamevarchar,ispartitiontablevarchar,to_merge_temp_tablevarchar,to_merge_tablevarchar,merge_fieldvarc
小花粉的Sanctuary·2020-08-21 16:53

greenplum通过函数获取指定用户下的所有建表语句

函数实现--获取数据库大小CREATEORREPLACEFUNCTIONget_dbsize(dbnamevarchar)RETURNSVARCHARAS$FUNCTION$DECLAREisExistsvarchar;dbsizevarchar;databasenamevarchar;BEGINselectdatnameintodatabasenamefrompg_databasewherelo
小花粉的Sanctuary·2020-08-21 16:21

数据同步中间件datalink从oracle同步数据到greenplum

之前一段时间，需要搭建数据实时同步的一个平台，了解到datalink这个已经开源的中间件，自己使用了一段时间后，学习到蛮多的，特别是整个平台的架构设计。由于已经有一段时间不接触了，怕忘记，写写自己的心得体会。项目开源地址：https://github.com/ucarGroup/DataLink这里已经有源码，也包括了说明文档，这里就不一一介绍了。如果源端是mysql,这个中间已经非常友好的支持了
swj23333·2020-08-21 15:18

greenplum jdbc readme by pivotal

2019独角兽企业重金招聘Python工程师标准>>>READMEProgress(R)DataDirect(R)DataDirectConnect(R)forJDBCDataDirectConnectXE(ExtendedEdition)forJDBCRelease5.1.4December2015Copyright(c)1994-2015ProgressSoftwareCorporationa
weixin_34390105·2020-08-21 11:54

greenplum

greenplum简介GreenPlum是面向数据仓库应用的关系型数据库，基于PostgreSQL开发，跟PostgreSQL的兼容性非常好，大部分PostgreSQL客户端工具及PostgreSQL应用都能运行在
Meiko丶·2020-08-21 10:53

Mriya使用Flink构建实时Greenplum

mriya(运输机)✈️介绍使用Flink开发的实时ETL，数据从MySQL到Greenplum。
user_YF6SmBrq·2020-08-21 03:49

greenplum版本升级

一、准备工作当前数据库版本为greenplum5.12.0，
风行无极·2020-08-21 02:23

如何通过Zeppelin查询Greenplum数据

摘要：Zeppelin做为大数据分析查询工具由于简单易用被广泛使用，本文通过图文的方式说明如何通过Zeppelin查询Greenplum数据。
HashData·2020-08-20 20:20

如何通过Zeppelin查询Greenplum数据

摘要：Zeppelin做为大数据分析查询工具由于简单易用被广泛使用，本文通过图文的方式说明如何通过Zeppelin查询Greenplum数据。
HashData·2020-08-20 20:20

【HAWQ】【行列转换】插件tablefunc安装和使用

说明此功能只在测试环境论证过，没有在生产环境论证，如需使用，请自行评估风险HAWQ版本PostgreSQL8.2.15(GreenplumDatabase4.2.0build1)(HAWQ2.4.0.0builddev
晓_mini·2020-08-20 17:14

【HAWQ】【行列转换】插件tablefunc安装和使用

说明此功能只在测试环境论证过，没有在生产环境论证，如需使用，请自行评估风险HAWQ版本PostgreSQL8.2.15(GreenplumDatabase4.2.0build1)(HAWQ2.4.0.0builddev
晓_mini·2020-08-20 17:14

新鲜出炉的PGCon2020演讲回顾 ①——全局死锁检测器

来自Greenplum原厂的Greenplum内核工程师HubertZhang（张桓）与AsimPraveen合作发表了演讲《DistributedSnapshot
Greenplum中文社区·2020-08-20 06:37

GreenPlum安装的一些注意事项

1、千万要注意主机名不能是localhost，否则会安装失败，在/etc/hosts中添加的主机名称要和服务器的主机名称相同。就因为这个地方没有注意到，花费一个下午才解决。添加主机名称的对应关系[gpadmin@gp-node0gpconfigs]$more/etc/hosts11.0.1.200gp-node011.0.1.201gp-node111.0.1.202gp-node211.0.1.
nagioswork·2020-08-19 22:07

Greenplum 数据库备份，pg_dump:schema with OID 17660566 does not exist

背景：客户现场需要主备两套系统，备机定时同步主机的数据，同步时，先删掉备机上本来的数据，然后备份主机的数据后恢复，使用pg_dump,psql命令。（需同步的数据量很小）。在经过几次备份后，备机不能同步主机数据，后经排查，是允许pg_dump命令时出错。报错：pg_dump:schemawithOID17660566doesnotexist。对于一个刚入门gp的小白，真的很为难，然后开始网上查资料
雨季雪迁·2020-08-19 17:08

greenplum 单表磁盘空间持续高速增长，解决办法

场景描述：同样的系统部署在3个环境中，(问题表P)正常的增长范围应该是是每天1M，某一天线上问题说是系统宕机了，然后看了一下系统状态日志，磁盘空间满了。处理流程：日志本来是7天循环的，先手动删除了一下。有一张数据备份表，和业务流程日志表，这两个是可以删除的，然后进行了truncate。释放了10几个G的空间，然后启动服务，开始排查问题。selectpg_size_pretty(pg_relatio
渊丹·2020-08-19 08:34

Greenplum查询优化揭秘

Greenplum查询优化揭秘学习地址:https://space.bilibili.com/489184136Greenplum查询优化揭秘1目录11Greenplum查询优化器和查询计划介绍11.1Greenplum
小徐xfg·2020-08-18 23:10

Greenplum数据库服务器常见配置参数

官网介绍：https://gp-docs-cn.github.io/docs/ref_guide/config_params/guc-list.html#enable_bitmapscan参数名字默认值参数含义enable_bitmapscanon启用或禁用位图查询优化器。enable_groupaggon启用或禁用组聚集计划优化器。enable_hashaggon启用或禁用哈希优化器。enabl
小徐xfg·2020-08-18 23:10

数仓

技术选型，传统数仓一般以Oracle、greenplum、teradata等，互联网数仓一般以Hadoop生态圈为主，离线以Hive为核心，准实时以spark为核心，实时以flink为核心构建。
weixin_47209187·2020-08-18 12:52

分布式DB数据倾斜的原因和解法 - 阿里云HybridDB for PostgreSQL最佳实践

标签PostgreSQL,Greenplum,query倾斜,存储倾斜,OOM,diskfull,短板,数据分布背景对于分布式数据库来说，QUERY的运行效率取决于最慢的那个节点。
weixin_34389926·2020-08-18 12:36

Greenplum常用的gp_toolkit & pg_catalog监控语句

原文链接：https://mp.csdn.net/postedit目录gp_toolkit说明1、表膨胀相关查询2、表倾斜的相关信息3、锁查询相关的信息4、日志查询相关的信息5、资源队列相关查询信息6、查看磁盘上(database,schema,table,indexs,view)等的占用大小的相关信息7、用户使用的工作空间大小信息8、查看用户创建的信息(数据库,schema,表,索引,函数,视图
强子no2·2020-08-18 11:37

Greenplum 权限基本命令

创建权限问题：1.1）创建roleCREATEROLE"yfkj"CREATEDB;1.2)创建SchemaCREATESCHEMAIFNOTEXISTSfiproduct_v_${tenant};1.3)给schema赋权GRANTUSAGEONSCHEMAuorders_v_${tenant}TOyfkjWITHGRANTOPTION;1.4）function给表赋权：CREATEORREPL
强子no2·2020-08-18 11:37

Greenplum优化--数据库配置篇

GP数据库参数配置以下配置存于文件–postgresql.conf中，仅列出一些最常用的参数。shared_buffers：刚开始可以设置一个较小的值，比如总内存的15%，然后逐渐增加，过程中监控性能提升和swap的情况。effective_cache_size:这个参数告诉PostgreSQL的优化器有多少内存可以被用来缓存数据，以及帮助决定是否应该使用索引。这个数值越大，优化器使用索引的可能性
asin929·2020-08-16 15:27

Sqoop的导入导出案例

bash#if[x$1=x]#then#echo'请输入当前日期格式为%Y%m%d';#exit0;#fitoday=`date-d'1dayago'+"%Y%m%d"`echo$today#exportgreenplumdatatohdfsh
weixin_34237596·2020-08-14 21:03
上一页 7 8 9 10 11 12 13 14 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他