GreenPLum

Greenplum5.4.0分布式集群（4节点）安装与配置

Greenplum5.4.0分布式集群（4节点）安装与配置1、环境介绍Vmware虚拟机,4台操作系统：Centos7.4硬件资源配置：  CPU：1 内存：1Gb 磁盘空间：20Gb操作系统：centos7.4
sfrem·2023-07-19 11:55

关于greenplum(postgersql)日期为闰年闰月闰日的处理

近日有个报表端的特殊需求，遇到了闰年闰月闰日的处理，具体如下：新需求，生成一个新字段预警日期（warndate），要求在原表结束日期(enddate)基础上减一年原表（A）主要涉及三个字段:1、启始日期（startdate）2、年数(years)3、结束日期(enddate)其中：结束日期=启始日期+年数问题：启始日期含有2月29日的闰日，而年数(years)不固定，导致结束日期(enddate)
sfrem·2023-07-19 11:55

GreenPlum数据库日常维护

哈喽！大家好，我是【IT邦德】，江湖人称jeames007，10余年DBA工作经验一位上进心十足的【大数据领域博主】！中国DBA联盟(ACDU)成员，目前从事DBA及程序编程擅长主流数据Oracle、MySQL、PG运维开发，备份恢复，安装迁移，性能优化、故障应急处理等。✨如果有对【数据库】感兴趣的【小可爱】，欢迎关注【IT邦德】❤️❤️❤️感谢各位大可爱小可爱！❤️❤️❤️文章目录前言1.官方文
IT邦德·2023-07-18 13:51

一百二十九、Kettle——从MySQL增量导入到GreenPlum

一、目标用Kettle从MySQL增量导入数据到GreePlum二、前提准备（一）kettle已连上MySQL（二）kettle已连上GreenPlum三、实施步骤（一）打开kettle，新建转换任务。
天地风雷水火山泽·2023-07-18 07:11

使用DataX，从Greenplum将数据传输到Hive分区表中

我司使用Greenplum作为计算库，实时计算统计数据，但是数据量大了之后影响计算速度。
枫叶梨花·2023-07-17 12:11

Greenplum6.x新加节点

一.互信配置已经互信的集群exists_hostsdw1dw2dw3新增机器dw4,dw5new_hosts文件中配置dw4dw5配置1-n互信ssh-copy-iddw4ssh-copy-iddw5若使用ssh-copy-id失败则可以将master的公钥复制到其他新服务器的authorized_keys中#方式一：登录master操作cat~/.ssh/id_rsa.pub|sshdw4"ca
xcSpark·2023-07-14 20:05

Greenplum查询相关优化

Greenplum查询相关优化管理查询生成的溢出文件错误1.ERROR:numberofworkfilesperquerylimitexceeded可能导致文件溢出过多的原因包括:被查询的数据中倾斜太严重为该查询分配的内存量太小如果为
xcSpark·2023-07-14 20:05

Oracle单机版升级（11.2.0.3升级到11.2.0.4）

中国DBA联盟(ACDU)成员，目前服务于工业互联网擅长主流Oracle、MySQL、PG、高斯及Greenplum运维开发，备份恢复，安装迁移，性能优化、故障应急处理等。
IT邦德·2023-06-23 10:45

greenplum 中的事务回滚（rollback为例）

greenplum回滚不是真回滚greenplum中不支持undo日志回滚，所以只是标记了新的事务号的状态，又后期的vacuum或scan自己去判断元组的可见性，并更新元组状态（SetHint）。
mszjaas00·2023-06-23 03:48

一致性哈希及其在Greenplum中的应用

了解更多Greenplum相关内容，欢迎访问Greenplum中文社区网站一致性哈希(consistenthashing)是分布式系统中非常重要的算法，在平滑扩缩容、动态负载均衡等方向有大量应用。
Greenplum中文社区·2023-06-20 05:10

数仓架构“瘦身”，Hologres 5000CU时免费试用

Hologres基于创新的HSAP架构，可以将您原先数仓架构中的OLAP系统（Greenplum、Presto、Impala、ClickHouse）、KV数据库/Serving系统（HBase、Redis
·2023-06-19 17:38

拓数派云原生数据库 PieCloudDB 与 XSKY 产品完成兼容性互认证

拓数派的云原生eMPP数据库产品PieCloudDBDatabase原生支持PostgreSQL/Greenplum生态组件，兼容包括开源空间数据管理组件PostGIS，Apache开源机器学习库Madlib
·2023-06-16 17:55

断供，危机or契机？开源商业化or社区化？后疫情下的开源路这样走 | 大咖对话

在主题为【正在觉醒的开源时代】的圆桌论坛上，Kyligence技术合伙人兼产品负责人李栋、前Greenplum北京研发
·2023-06-16 17:45

数仓架构“瘦身”，Hologres 5000CU时免费试用

Hologres基于创新的HSAP架构，可以将您原先数仓架构中的OLAP系统（Greenplum、Presto、Impala、ClickHouse）、KV数据库/Serving系统（HBase、Redis
阿里云大数据AI技术·2023-06-15 19:41

数仓架构“瘦身”，Hologres 5000CU时免费试用

Hologres基于创新的HSAP架构，可以将您原先数仓架构中的OLAP系统（Greenplum、Presto、Impala、ClickHouse）、KV数据库/Serving系统（HBase、Redis
·2023-06-15 15:50

greenplum分布式集群（数据仓库）实战

1.准备环境1.1集群介绍系统环境：centos6.5数据库版本：greenplum-db-4.3.3.1-build-1-RHEL5-x86_64.zipgreenplum集群中，4台机器IP分别是[
weixin_33709364·2023-06-14 07:07

Greenplum Hadoop分布式平台大数据解决方案实战教程

基于GreenplumHadoop分布式平台的大数据解决方案及商业应用案例剖析【上集】百度网盘下载：链接：http://pan.baidu.com/s/1eQJFXZ0密码：kdx9【下集】百度网盘下载
weixin_33919941·2023-06-14 07:07

基于Greenplum Hadoop分布式平台的大数据解决方案及商业应用案例剖析

基于GreenplumHadoop分布式平台的大数据解决方案及商业应用案例剖析一、课程内容介绍：1、课程背景GREENPLUM适用场景：Greenplum的架构采用了MPP(大规模并行处理)。
北风网er·2023-06-14 07:35

【实战经验】Greenplum集群Master與Segment节点故障检测与恢复

了解更多Greenplum相关内容，欢迎访问Greenplum中文社区网站Greenplum集群主要包括Master节点和Segment节点，Master节点称之为主节点，Segment节点称之为数据节点
Greenplum中文社区·2023-06-14 07:33

GreenPlum分布式集群部署实战

中国DBA联盟(ACDU)成员，目前服务于工业互联网擅长主流Oracle、MySQL、PG、高斯及Greenplum运维开发，备份恢复，安装迁移，性能优化、故障应急处理等。
IT邦德·2023-06-14 07:02

ADBPG&Greenplum成本优化之磁盘水位管理

在核心技术自主可控的大环境下，政企行业客户都在纷纷尝试使用国产数据库或开源数据库，尤其在数据仓库OLAP领域的步伐更快，Greenplum的应用越来越广泛，阿里云ADBPG的市场机会也越来越多。
阿里云云栖号·2023-06-13 17:05

ADBPG&Greenplum 成本优化之磁盘水位管理

在核心技术自主可控的大环境下，政企行业客户都在纷纷尝试使用国产数据库或开源数据库，尤其在数据仓库OLAP领域的步伐更快，Greenplum的应用越来越广泛，阿里云ADBPG的市场机会也越来越多。
阿里云技术·2023-06-13 17:34

Greenplum数据加密功能前瞻（一）：堆表的存储管理

了解更多Greenplum技术干货，欢迎访问Greenplum中文社区网站系列简介为了满足客户对于数据安全的严苛要求，Greenplum开发团队正在为Greenplum数据库设计开发数据加密功能，保证磁盘上的数据是加密存储的
·2023-06-13 12:13

【经验分享】PT（persistent table）表异常导致gprecoverseg全量恢复失败的探索

了解更多Greenplum技术干货，欢迎访问Greenplum中文社区网站背景最近来自中兴通讯的系统架构师、敏捷教练王爱军在工作过程中，遇到gp5.20通过gprecoverseg-F做全量恢复失败的异常
·2023-06-13 12:11

GreenPlum监控工具GPCC部署

中国DBA联盟(ACDU)成员，目前服务于工业互联网擅长主流Oracle、MySQL、PG、高斯及Greenplum运维开发，备份恢复，安装迁移，性能优化、故障应急处理等。
IT邦德·2023-06-12 22:04

「开源技术圈」只聊技术的交流社群，属于你的技术圈子

目前拥有来自硅谷的新贵：Greenplum技术社群、来自Apache的顶级开源项目Kyligence技术社群，拥有数千数据从业者和学习者用户，数百名大数据技术专家。
bf2172e61203·2023-06-11 23:18

GreenPlum版本升级

中国DBA联盟(ACDU)成员，目前服务于工业互联网擅长主流Oracle、MySQL、PG、高斯及Greenplum运维开发，备份恢复，安装迁移，性能优化、故障应急处理等。
IT邦德·2023-06-10 22:17

Greenplum中数据分布策略

由于Greenplum为SharedNothing架构，每个节点都有自己的CPU/内存/硬盘等，不存在共享资源，所以数据的分布显得尤为重要。
清纯男孩·2023-06-10 20:22

greenplum性能测试工具-pgbench

查看服务器上是否安装pgbench[root@gsgp60~]#find/-namepgbench[root@gsgp60~]#pgbench--versionbash:postgres:未找到命令...[root@gsgp60~]#yuminstallpostgresql-contrib已加载插件：fastestmirror,langpacksDeterminingfastestmirrors*
清纯男孩·2023-06-10 20:52

GreenPlum运维监控工具-gpcc-web安装

GreenplumCommandCenter（GPCC）是由PivotalSoftware推出的一款监控和管理GreenplumDatabase的Web应用程序。
清纯男孩·2023-06-10 20:52

greenplum关闭某个segment host节点实验

实验背景：本greenplum集群有三台服务器，没有安装StandByMaster其中MasterHost为Hadoop106,SegmentHost为Hadoop107Hadoop108现在down掉
清纯男孩·2023-06-10 20:21

GreenPlum中性能调优之shared_buffers修改

问题背景：刚刚安装完的GreenPlum集群默认shared_buffers为128MB，为了提升系统性能需要修改。
清纯男孩·2023-06-10 20:21

GreenPlum中性能调优之segment实例个数

GreenPlum集群安装完成后，到底设置多少个segment实例才合适呢？
清纯男孩·2023-06-10 20:21

GreenPlum架构之MVCC

Greenplum数据库三大特性：Shared-nothing、Mpp、MVCC。本文介绍GrrenPlum的MVCC架构。
清纯男孩·2023-06-10 20:17

[转帖]Greenplum ：基于 PostgreSQL 的分布式数据库内核揭秘 (上篇)

Greenplum：基于PostgreSQL的分布式数据库内核揭秘(上篇)https://www.infoq.cn/article/3IJ7L8HVR2MXhqaqI2RA学长的文章..姚延栋阅读数：7142019
weixin_30265103·2023-06-10 06:42

Greenplum开发基础

Greenplum开发基础1.Greenplum介绍Greenplum数据库是一种基于PostgreSQL开源技术的大规模并行处理（MPP）数据库服务器，其架构特别针对管理大规模分析型数据仓库以及商业智能工作负载而设计
qq_38414854·2023-06-10 06:10

greenplum,teradata,presto,clickhouse四种分布式数据库的对比

1.四种数据库的比较2.Greenplum数据库2.1Greenplum架构2.1.1采用MMP架构2.2.2Hadoop与MPP的应用区别2.2greenplum的高可用性2.2.1master冗余2.2.2segment
jerry-89·2023-06-10 06:39

GreenPlum集群部署之抽丝剥茧

中国DBA联盟(ACDU)成员，目前服务于工业互联网擅长主流Oracle、MySQL、PG、高斯及Greenplum运维开发，备份恢复，安装迁移，性能优化、故障应急处理等。
IT邦德·2023-06-07 21:36

【greenplum 性能优化】greenplum 数据库集群 如何释放占用内存

人工智能教程在Greenplum数据库集群中，进程的状态（即state）可以被分为以下几种：active：进程正在执行任务，或者正在等待运行队列中的任务。
东华果汁哥·2023-06-07 18:26

postgresql之greenplum字符串去重拼接方式

目录postgresqlgreenplum字符串去重拼接postgresql字符串处理方式关于查找字符串字符串与数字的相互转换总结postgresqlgreenplum字符串去重拼接pg、gp实现collect_set
·2023-06-06 21:15

oracle数据落地到gp,使用ora2pg迁移oracle数据到greenplum

安装ora2pg条件1、perl版本5.10以上2、安装DBD::Oracle3、安装DBI4、安装DBD::Pg一、安装相关软件支持1、安装DBI#下载https://metacpan.org/release/DBI上传到服务器并解压出来DBI-1.637.tar.gz[root@bigdata01~]$lltotal592-rw-r--r--1gpadmingpadmin596423Dec41
一吻江山·2023-04-21 19:57

Python连接Greenplum及常用gp函数和方法（持续更新）

前言了解postgresqlPython连接gp记录postgresql一些函数和方法（持续更新）①：int类型时间转time类型时间②：合并两列值③：取最近N个月数据④：按指定字符串或者符号切割⑤：字符串切割⑥：寻找近N个月的数据⑦：找出表中含有小数的记录⑧：判断某字段是否在一张表中存在⑨：判断表是否存在⑩：模糊匹配多个项⑪：判断某张表中某个字段是否存在（2023-03-13更新）未完待续！！！
zkkkkkkkkkkkkk·2023-04-21 17:36

大数据OLAP查询引擎选型对比

1、常用OLAP查询引擎目前大数据比较常用的OLAP查询引擎包括：Presto、Impala、Druid、Kylin、Doris、Clickhouse、GreenPlum等。
shinelord明·2023-04-20 02:30

技术分享 | OceanBase 数据处理之控制文件

作者：杨文DBA，负责客户项目的需求与维护，会点数据库，不限于MySQL、Redis、Cassandra、GreenPlum、ClickHouse、Elastic、TDSQL等等。
ActionTech·2023-04-19 22:05

故障分析 | cassandra 集群数据故障转移

作者：杨文DBA，负责客户项目的需求与维护，会点数据库，不限于MySQL、Redis、Cassandra、GreenPlum、ClickHouse、Elastic、TDSQL等等。
ActionTech·2023-04-19 13:47

Greenplum数据库执行器——PartitionSelector执行节点

为了能够对分区表有优异的处理能力，对于查询优化系统来说一个最基本的能力就是做分区裁剪partitionpruning，将query中并不涉及的分区提前排除掉。如下执行计划所示，由于单表谓词在parititonkey上，在优化期间即可确定哪些可以分区可以避免访问，即静态pruning。explainselect*fromtestwherecollecttime>'2023-02-2200:00:00
肥叔菌·2023-04-18 04:58

greenplum配置高可用_GREENPLUM介绍之数据库管理（七）- 配置数据库高可用性之master镜像 | 学步园...

GREENPLUM介绍之数据库管理(七)-配置数据库高可用性之master镜像master镜像是通过把primarymaster对应的standbymaster放置到不同的物理主机实现的。
weixin_39818550·2023-04-16 10:41

某金融大数据平台数据同步方案

Greenplum数据导入方案Case2：tsale_staticshares表导数导数说明：存储格式：parquet压缩：snappy并行度：3Impala查询单表统计时间：4.28s空间开销：约1G
大勇若怯任卷舒·2023-04-12 04:57

Greenplum 扩容

Greenplum扩容节点步骤概述greenplum扩容segment可以分为2类：单机上的seg增加，我们称之为“纵向扩展”单机不变，通过增加机器，我们称之为“横向扩展”下面详细介绍下这两种扩容方式的具体步骤和方法
那一年天空很高风很清澈·2023-04-11 15:38

PostgreSQL / Greenplum

PostgreSQL是一个免费的对象-关系（Object-Relationship）数据库服务器(ORDBMS)数据库(Database)是按照数据结构来组织、存储和管理数据的仓库。每个数据库都有一个或多个不同的API用于创建，访问，管理，搜索和复制所保存的数据。我们也可以将数据存储在文件中，但是在文件中读写数据速度相对较慢。所以，现在我们使用关系型数据库管理系统（RDBMS）来存储和管理的大量数
LeoLongl·2023-04-09 18:16
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他