E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Greenplum
GreenPlum
运维监控工具-gpcc-web安装
Greenplum
CommandCenter(GPCC)是由PivotalSoftware推出的一款监控和管理
Greenplum
Database的Web应用程序。
清纯男孩
·
2023-06-10 20:52
数据库
postgresql
数据库架构
大数据
运维
greenplum
关闭某个segment host节点实验
实验背景:本
greenplum
集群有三台服务器,没有安装StandByMaster其中MasterHost为Hadoop106,SegmentHost为Hadoop107Hadoop108现在down掉
清纯男孩
·
2023-06-10 20:21
服务器
大数据
运维
数据库架构
数据库
GreenPlum
中性能调优之shared_buffers修改
问题背景:刚刚安装完的
GreenPlum
集群默认shared_buffers为128MB,为了提升系统性能需要修改。
清纯男孩
·
2023-06-10 20:21
大数据
数据库架构
postgresql
数据库
GreenPlum
中性能调优之segment实例个数
GreenPlum
集群安装完成后,到底设置多少个segment实例才合适呢?
清纯男孩
·
2023-06-10 20:21
数据库
大数据
数据库架构
postgresql
GreenPlum
架构之MVCC
Greenplum
数据库三大特性:Shared-nothing、Mpp、MVCC。本文介绍GrrenPlum的MVCC架构。
清纯男孩
·
2023-06-10 20:17
架构
数据库
数据库架构
postgresql
[转帖]
Greenplum
:基于 PostgreSQL 的分布式数据库内核揭秘 (上篇)
Greenplum
:基于PostgreSQL的分布式数据库内核揭秘(上篇)https://www.infoq.cn/article/3IJ7L8HVR2MXhqaqI2RA学长的文章..姚延栋阅读数:7142019
weixin_30265103
·
2023-06-10 06:42
数据库
运维
数据结构与算法
Greenplum
开发基础
Greenplum
开发基础1.
Greenplum
介绍
Greenplum
数据库是一种基于PostgreSQL开源技术的大规模并行处理(MPP)数据库服务器,其架构特别针对管理大规模分析型数据仓库以及商业智能工作负载而设计
qq_38414854
·
2023-06-10 06:10
postgresql
数据库
sql
greenplum
,teradata,presto,clickhouse四种分布式数据库的对比
1.四种数据库的比较2.
Greenplum
数据库2.1
Greenplum
架构2.1.1采用MMP架构2.2.2Hadoop与MPP的应用区别2.2
greenplum
的高可用性2.2.1master冗余2.2.2segment
jerry-89
·
2023-06-10 06:39
pg
数据库
big
data
postgresql
GreenPlum
集群部署之抽丝剥茧
中国DBA联盟(ACDU)成员,目前服务于工业互联网擅长主流Oracle、MySQL、PG、高斯及
Greenplum
运维开发,备份恢复,安装迁移,性能优化、故障应急处理等。
IT邦德
·
2023-06-07 21:36
Greenplum入门
数据库
GreenPlum
数据仓库
【
greenplum
性能优化】
greenplum
数据库集群 如何释放占用内存
人工智能教程在
Greenplum
数据库集群中,进程的状态(即state)可以被分为以下几种:active:进程正在执行任务,或者正在等待运行队列中的任务。
东华果汁哥
·
2023-06-07 18:26
数据库--greenplum
数据库
postgresql之
greenplum
字符串去重拼接方式
目录postgresql
greenplum
字符串去重拼接postgresql字符串处理方式关于查找字符串字符串与数字的相互转换总结postgresql
greenplum
字符串去重拼接pg、gp实现collect_set
·
2023-06-06 21:15
oracle数据落地到gp,使用ora2pg迁移oracle数据到
greenplum
安装ora2pg条件1、perl版本5.10以上2、安装DBD::Oracle3、安装DBI4、安装DBD::Pg一、安装相关软件支持1、安装DBI#下载https://metacpan.org/release/DBI上传到服务器并解压出来DBI-1.637.tar.gz[root@bigdata01~]$lltotal592-rw-r--r--1gpadmingpadmin596423Dec41
一吻江山
·
2023-04-21 19:57
oracle数据落地到gp
Python连接
Greenplum
及常用gp函数和方法(持续更新)
前言了解postgresqlPython连接gp记录postgresql一些函数和方法(持续更新)①:int类型时间转time类型时间②:合并两列值③:取最近N个月数据④:按指定字符串或者符号切割⑤:字符串切割⑥:寻找近N个月的数据⑦:找出表中含有小数的记录⑧:判断某字段是否在一张表中存在⑨:判断表是否存在⑩:模糊匹配多个项⑪:判断某张表中某个字段是否存在(2023-03-13更新)未完待续!!!
zkkkkkkkkkkkkk
·
2023-04-21 17:36
python
postgresql
postgresql
python
大数据OLAP查询引擎选型对比
1、常用OLAP查询引擎目前大数据比较常用的OLAP查询引擎包括:Presto、Impala、Druid、Kylin、Doris、Clickhouse、
GreenPlum
等。
shinelord明
·
2023-04-20 02:30
引擎
大数据
技术分享 | OceanBase 数据处理之控制文件
作者:杨文DBA,负责客户项目的需求与维护,会点数据库,不限于MySQL、Redis、Cassandra、
GreenPlum
、ClickHouse、Elastic、TDSQL等等。
ActionTech
·
2023-04-19 22:05
技术分享
OceanBase
oceanbase
导数
故障分析 | cassandra 集群数据故障转移
作者:杨文DBA,负责客户项目的需求与维护,会点数据库,不限于MySQL、Redis、Cassandra、
GreenPlum
、ClickHouse、Elastic、TDSQL等等。
ActionTech
·
2023-04-19 13:47
故障分析
Cassandra
NoSQL
数据故障转移
Greenplum
数据库执行器——PartitionSelector执行节点
为了能够对分区表有优异的处理能力,对于查询优化系统来说一个最基本的能力就是做分区裁剪partitionpruning,将query中并不涉及的分区提前排除掉。如下执行计划所示,由于单表谓词在parititonkey上,在优化期间即可确定哪些可以分区可以避免访问,即静态pruning。explainselect*fromtestwherecollecttime>'2023-02-2200:00:00
肥叔菌
·
2023-04-18 04:58
数据库
java
开发语言
greenplum
配置高可用_
GREENPLUM
介绍之数据库管理(七)- 配置数据库高可用性之master镜像 | 学步园...
GREENPLUM
介绍之数据库管理(七)-配置数据库高可用性之master镜像master镜像是通过把primarymaster对应的standbymaster放置到不同的物理主机实现的。
weixin_39818550
·
2023-04-16 10:41
greenplum配置高可用
某金融大数据平台数据同步方案
Greenplum
数据导入方案Case2:tsale_staticshares表导数导数说明:存储格式:parquet压缩:snappy并行度:3Impala查询单表统计时间:4.28s空间开销:约1G
大勇若怯任卷舒
·
2023-04-12 04:57
Greenplum
扩容
Greenplum
扩容节点步骤概述
greenplum
扩容segment可以分为2类:单机上的seg增加,我们称之为“纵向扩展”单机不变,通过增加机器,我们称之为“横向扩展”下面详细介绍下这两种扩容方式的具体步骤和方法
那一年天空很高风很清澈
·
2023-04-11 15:38
大数据
数据处理
数据库
database
PostgreSQL /
Greenplum
PostgreSQL是一个免费的对象-关系(Object-Relationship)数据库服务器(ORDBMS)数据库(Database)是按照数据结构来组织、存储和管理数据的仓库。每个数据库都有一个或多个不同的API用于创建,访问,管理,搜索和复制所保存的数据。我们也可以将数据存储在文件中,但是在文件中读写数据速度相对较慢。所以,现在我们使用关系型数据库管理系统(RDBMS)来存储和管理的大量数
LeoLongl
·
2023-04-09 18:16
Greenplum
常用sql语句
PostgreSQL常用sql语句一.时间与interval使用经常需要计算时间的差值,时间相加。SQL标准中interval‘1’dayPostgresSQL中interval‘1day’1.日期动态添加,拼接动态值写法1--add_months近似,动态添加selectto_date(col_1,'YYYYMMDD')+(col_2||'day')::intervalfromTABLE_NAM
xcSpark
·
2023-04-08 21:30
Greenplum
数据库
数据仓库
postgresql
大数据
从数据仓库到数据中台,终于有人说清楚了
作者简介:王春波,《高效使用
Greenplum
:入门、进阶和数据中台》作者,“数据中台研习社”号主,十年数据开发从业者,资深零售数仓项目实施专家。
weixin_44166276
·
2023-04-08 12:02
数据仓库
GREENPLUM
的数据加载方式
综述:
greenplum
数据加载主要包括insert、copy、外部表、gpload、webexternaltable等五种方式。
价值成长
·
2023-04-08 03:49
大数据
Greenplum
生态与工具
Greenplum
生态与工具目录第一节
Greenplum
生态介绍1、
Greenplum
发展历史2、商业版与开源版的差异3
Greenplum
生态软件第二节
Greenplum
运维工具1、商业监控--GPCC2
盒马coding
·
2023-04-08 03:49
GreenPlum
数据库
greenplum
管理工具参考
greenplum
管理工具参考命令概述资料地址analyzedb一个提供对表的递增和并发ANALYZE操作的工具。对追加优化表来说,analyzedb只在统计数据不是最新的时候才更新统计信息。
盒马coding
·
2023-04-08 03:49
GreenPlum
Greenplum
之生态与工具
Greenplum
生态介绍生态发展历程通过上图中左边的时间线,我们可以感受到开源的力量,开源裂变如此之快的经验可以总结为以下四点:基于PG丰富的语言接口,很多北向的应用厂家可以迅速的与GP进行兼容适配南向接口方面
肝帝三脚猫
·
2023-04-08 03:48
Greenplum
数据库
mysql导入
greenplum
_
greenPlum
中通过gpfdist导入文本数据到数据库表中
1.python版本要求2.4.4以上[root@testinstall]#pythonPython2.6.2(r262:71600,May142009,10:46:21)[GCC4.1.220080704(RedHat4.1.2-44)]onlinux2Type"help","copyright","credits"or"license"formoreinformation.>>>2.PyYAM
给我一杯声声乌龙
·
2023-04-08 03:46
greenplum
客户端工具_
GreenPlum
数据的装载与卸载之外部表以及gpfdist工具的使用
Greenplum
的外部表和ORACLE的外部表一样,都是数据存储在数据库之外的表。它的外部表除了可以加载本地的数据,还可以通过gpfdist工具并行加载数据。
我们的美学
·
2023-04-08 03:46
greenplum客户端工具
greenplum
客户端工具_
GreenPlum
数据加载工具gpload | 信春哥,系统稳,闭眼上线不回滚!...
GreenPlum
数据库除了可以使用copy和外部表的方式加载数据外,还可以使用gpload工具进行数据加载。
天使走自己的路
·
2023-04-08 03:45
greenplum客户端工具
Greenplum
外表gpfdist加载数据
使用gpfdist加载数据
Greenplum
通过外表,使得segment连接到gpfdist服务,获取数据。gpfdist随机分发数据到各个segment中。gpfdist线性处理,一次处理一个文本。
xcSpark
·
2023-04-08 03:14
Greenplum
数据库
postgresql
大数据
GreenPlum
导入导出数据(二)gpfdist
1.在linux下启动gpfdist服务gpfdist是
Greenplum
自带的工具,无需安装其他依赖或服务$gpfdist-d/u01-p5555-l/tmp/gpfdist.log&参数解释:-d数据文件所放的目录
赛克侠
·
2023-04-08 03:40
Greenplum
greenplum
使用gpfdist存入大量数据
greenplum
使用gpfdist存入大量数据参考文章操作步骤注意点参考文章
greenplum
使用gpfdist与外部表高效导入数据
GreenPlum
数据的装载与卸载之外部表以及gpfdist工具的使用操作步骤使用
qq_36851911
·
2023-04-08 03:40
postgresql
数据库
GreenPlum
使用gpload通过gpfdist文件实现数据高速加载
安装完后,可以启动gpfdist服务:nohup/data/
greenplum
/bin/gpfdist-d/data/
greenplum
/-p8090>/h
林震南
·
2023-04-08 03:08
greenplum
greenplum
gpfdist工具
简介gpfdist是
Greenplum
数据库并行文件分发程序。它可以被外部表和gpload用来并行地将外部表文件分发给
Greenplum
数据库Segment节点。
Serendipity_Shy
·
2023-04-08 03:35
greenplum
服务器
linux
数据库
greenplum
数据库架构
李元佳:漫谈
Greenplum
开源背后的动机
作者:李元佳这几天最大的消息莫过于
Greenplum
的开源,年初开始Pivotal就宣布了
greenplum
的开源,经过大半年的翘首等待,终于在十月底在欧洲的Postgres大会宣布开源,并兑现在Github
weixin_34361881
·
2023-04-08 02:23
大数据
运维
数据库
数仓实战|一文看懂数据中台接口数据采集
作者简介:王春波,《高效使用
Greenplum
:入门、进阶和数据中台》作者,“数据中台研习社”号主,十年数据开发从业者,资深零售数仓项目实施专家。
weixin_44166276
·
2023-04-07 01:35
数据仓库
数据库开发
大数据
Greenplum
取消所有正在执行的SQL
SELECTpg_terminate_backend(pid)FROMpg_stat_activityWHERE--don'tkillmyownconnection!pid<>pg_backend_pid()
bigfacewo
·
2023-04-07 01:48
百万数据sum太慢_MPP数据库简介
OLAP(On-LineAnalyticalProcessing,联机分析处理)系统例如
Greenplum
。不特别关心对数据进行输入
weixin_39746552
·
2023-04-06 23:45
百万数据sum太慢
MMP数据库
greenplum
,与hadoop的区别
1.什么是
greenplum
?一种MMP无共享架构的数据库,擅长olap联机分析。基于postgre内核,interconnect并行调度,分布式事务两段提交,还有分区表外部表行列存储高可用。
pasen_newer
·
2023-04-06 23:00
hadoop
数据库
big
data
(Presto、HAWQ、ClickHouse、
GreenPlum
)
这是易观Spark实战营出品的开源Olap引擎测评报告,团队选取了Hive、Sparksql、Presto、Impala、Hawq、Clickhouse、
Greenplum
大数据查询引擎,在原生推荐配置情况下
探路人
·
2023-04-06 16:06
笔记
hive
Presto
GreenPlum性能
性能出“粽”,久经熬煮,值得拥有——
Greenplum
本文分享自微信公众号-
Greenplum
中文社区(
Greenplum
Community)。如有侵权,请联系
[email protected]
删除。
Greenplum中文社区
·
2023-04-06 01:00
java
编程语言
python
js
大数据
Doris入门(概念理解)
定位Doris的定位是面向在线报表和分析的数据仓库系统,可以对标于商业的MPP数据仓库系统,比如
Greenplum
、Vertica、Teradata等。整体架构Doris的整体架构分为两层。
吉大大_吉大大
·
2023-04-05 08:00
大数据
数据仓库
数据库
Greenplum
6.0 安装 (二)
Introductionto
Greenplum
Greenplum
Database系统架构概述
Greenplum
Database通过将负载分布到数台server上来存储和处理大量数据。
偷油考拉
·
2023-04-05 06:52
DataHub - 为现代数据技术栈而生的元数据管理平台
1.引言当前属于大数据时代,数据爆炸式增长,当然管理数据的工具也是层出不穷,从传统的单机关系型数据库PostgreSQL、Oracle、MySQL、MSSQL到擅长分析的
Greenplum
、Clickhouse
阿福Chris
·
2023-04-05 00:09
大数据
数据库
big
data
mysql
万字长文,助你掌握数据库排序算法
了解更多
Greenplum
技术干货,欢迎访问
Greenplum
中文社区网站引言在《深入浅出
Greenplum
内核》系列直播的第六场中,
Greenplum
内核研发张桓为大家详细介绍了
Greenplum
排序算法
Greenplum中文社区
·
2023-04-02 10:47
Greenplum内核机制
数据库
大数据
排序算法
经验分享
GreenPlum
完全安装_GP5.11.3完整安装
1概述1.1背景1.2目标1.3使用对象2配置系统信息2.1配置系统信息,做安装
Greenplum
的准备工作
Greenplum
数据库版本5.11.32.1.1
Greenplum
集群介绍这里使用1个master
banguiqian3370
·
2023-04-01 03:30
数据库
运维
python
Greenplum
数据库整体架构
Greenplum
数据库基本由PostgreSQL核心增强数据库实例组合并衔接成的数据库管理系统,即
Greenplum
数据在PostgreSQL基础上扩展开发出来的。
渐渐遗忘
·
2023-03-31 21:54
GreenPlum
1
Greenplum
整体架构信息
1.1架构图示在以上的架构中可以看出
Greenplum
主要是由Master和Segment组成的,Master承担生成查询计划并派发汇总执行结果,Segment是执行查询计划及数据储存管理。
盒马coding
·
2023-03-31 21:53
GreenPlum
Greenplum
数据库架构及主要的功能和优势
Greenplum
数据库架构
Greenplum
数据库基本由PostgreSQL核心增强数据库实例组合并衔接成的数据库管理系统,即
Greenplum
数据在PostgreSQL基础上扩展开发,每个
Greenplum
乄康师傅乄
·
2023-03-31 20:05
greenplum
数据存储
数据库
架构
上一页
2
3
4
5
6
7
8
9
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他