E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
GreenPLum
「实战系列」
Greenplum
版本4到5升级“避坑”指南
了解更多
Greenplum
技术干货,欢迎访问
Greenplum
中文社区网站
Greenplum
大数据分析平台6版本已经于2019年9月4号在
Greenplum
用户大会上正式发布了,
Greenplum
5已经进入稳定期和维护期
Greenplum中文社区
·
2020-09-16 22:28
Greenplum
数据库
大数据
经验分享
Greenplum
安装 之 操作系统
声明:文中观点为作者的个人观点、不代表官方、如需更多帮助,请联系Pivotal官方·转载必须注明出处对于GP来说操作系统是有要求的,以RHEL5.5_x64来说明,其他系统不在本文叙说范围内,请参考自行研究。安装操作系统之前,设置好RAID是很重要的,通常建议使用RAID5来作为RAID方式,当然其他的RAID方式也是可以选择的,如果要求安全性优先可以考虑RAID10和RAID6之类的RAID方式
ctd33591
·
2020-09-16 22:14
操作系统
Greenplum
简介
Greenplum
:http://
greenplum
.org/原来是个商业产品,后来开源。
Lust-Ring
·
2020-09-16 22:18
数据库
greenplum
postgresql
Greenplum
高级使用
目录9.1常用查询语句9.1.1查看表的数据分布情况9.1.2查看默认的错误数据9.1.3查看表的大小9.1.4查看数据库的占用大小9.1.5获取一个表的schema的信息9.1.6查看每个schema的占用大小9.1.7查看当前正在执行的语句9.1.8释放表的膨胀空间9.1.9查看集群的配置信息9.1.10数据存放的路径9.1.11查看系统的日志9.1.12查看索引的占用大小9.1.13修改某个
MyySophia
·
2020-09-16 22:42
Postgresql
GP
Greenplum
segment级锁问题排查方法
目录背景锁查看方法灵异锁等待事件排查手段一-通过(gp_dist_random)在主节点发起请求,在所有segment节点单独执行灵异锁等待事件排查手段二-使用(gp_session_role=utility)直接连接SEGMENT参考背景
Greenplum
MyySophia
·
2020-09-16 22:10
GP
Postgresql
Greenplum
安全
目录
Greenplum
安全身份认证pg_hba.conf配置连接类型pg_hba.conf配置连接数据库pg_hba.conf配置连接用户pg_hba.conf配置连接网络地址pg_hba.conf配置用户的认证方法
MyySophia
·
2020-09-16 22:10
GP
Apache顶级开源项目——机器学习库MADlib简介与应用实例
内容来源:2017年11月4日,Pivotal
Greenplum
Madlib研发工程师梅靖怡在“
Greenplum
和机器学习客户研讨会”进行《MachineLearningon
Greenplum
—MADlib
weixin_34248258
·
2020-09-16 22:20
数据库
大数据
人工智能
MADlib---indatabase的可扩展数据库分析的开源库
它提供了Pivotal
Greenplum
™,PostgreSQL和Apache™HAWQ®(孵化)HadoopNativeSQL平台上的机器学习,数学和统计方法的数据并行实现。
jameswangcnbj
·
2020-09-16 22:44
MPP
madlib
「揭秘GP」
Greenplum
的人工智能应用场景:MADlib、GPText、GPU
了解更多
Greenplum
技术干货,欢迎访问
Greenplum
中文社区网站Pivotal
Greenplum
——全世界首个开源、多云数据平台,专为高级分析而打造。
Greenplum中文社区
·
2020-09-16 22:09
Greenplum
数据库
人工智能
Greenplum
MADlib
通过
Greenplum
的MADlib扩展,用户可以在
Greenplum
数据库中使用MADlib功能。MADlib为结构化数据以及非结构化数据提供了数学、统计学以及机器学习方法的数据并行的实现。
MyySophia
·
2020-09-16 21:46
大数据存储
HIVE到
Greenplum
数据导入技术
1.启动gpfdist服务:相关参数/usr/local/
greenplum
-db/bin/gpfdist-d/home/gpadmin/data-p8787-l/home/gpadmin/data/interdir
鲲鹏小飞猪
·
2020-09-16 20:44
Hadoop生态
Linux
Greenplum
数据库与PostgreSQL数据库使用以及性能调优
-开源中国二、
greenplum
简介
GreenPlum
是面向数据仓库应用的关系型数据库,基于PostgreSQL开发,跟PostgreSQL的兼容性非常好,大部分PostgreSQL客户端工具及Post
萧2K
·
2020-09-16 04:54
新技术体验
【gp数据库】十条实用数据库SQL优化建议
推荐工具书《
greenplum
企业应用实战》国内首本
Greenplum
方面的著作。
summer108
·
2020-09-15 23:56
Greenplum
GreenPlum
高效去除表重复数据
但是这些方法对
GreenPlum
来说都不管用。
dimawei2225
·
2020-09-15 22:33
数据库
大数据
转_
Greenplum
数据库安装部署(生产环境)
Greenplum
数据库安装部署(生产环境)硬件配置:16台IBMX3650,节点配置:CPU2*8core,内存128GB,硬盘16*900GB,万兆网卡。万兆交换机。
weixin_30772105
·
2020-09-15 18:31
数据库
运维
GreenPlum
与hadoop什么关系?(转)
GreenPlum
的组件分成三个部分MASTER/SEGMENT以及MASTER与S
weixin_30656145
·
2020-09-15 15:46
大数据
数据库
GreenPlum
与hadoop
gp可以处理大量数据,hadoop可以处理海量.gp只能处理湖量,或者河量.无法处理海量.
greenplum
采取的是PostgreSQL框架,是PostgreSQL系的重要应用。
tao_wei162
·
2020-09-15 15:15
greenplum
收集统计信息
VACUUMNameVACUUM--垃圾收集以及可选地分析一个数据库SynopsisVACUUM[FULL|FREEZE][VERBOSE][table]VACUUM[FULL|FREEZE][VERBOSE]ANALYZE[table[(column[,...])]]描述VACUUM回收已删除元组占据的存储空间。在一般的PostgreSQL操作里,那些已经DELETE的元组或者被UPDATE过后
rgb_rgb
·
2020-09-15 08:33
greenplum
Centos7安装
greenplum
6.1集群
本文介绍Centos7下安装
greenplum
6.1集群。安装文档以及安装包可从以下链接下载并获取。
篮球风云
·
2020-09-15 06:05
greenplum
【
greenplum
】
greenplum
如何删除临时schema(孤立schema)
参考:1.OrphanedTemporarySchemasin
Greenplum
Database2.howtocleanorphantempschemasin
greenplum
每个数据库会话都可以创建并使用临时模式来处理会话临时表
百事悠弦
·
2020-09-15 03:55
Greenplum
数据库
greenplum
SQL 的执行过程
A,各个节点上同时扫描各自的nation表数据,将各segment上的nation数据向其他节点广播(BroadcastMotion(N:N))B,各个节点上同时扫描各自customer数据,和收到的nation数据join生成RS-CNC,各个segment同时扫描自己orders表数据,过滤数据生成RS-OD,各个segment同时扫描自己lineitem表数据,过滤生成RS-LE,各个seg
shenghe_chen
·
2020-09-15 03:33
Greenplum
数据库日常运维
greenplum
给某个用户赋予整个schema下所有表的权限
greenplum
虽然是postgresql的衍生产品但是语法上略有不同类似grantallonalltablesinschemaschemanametosomeone就不行报错提示ERROR:syntaxerroratornear"all
anqun4942
·
2020-09-15 02:00
数据库
关于postgresql、
greenplum
在代码层面执行sql命令前自主指定schema的方法
目前,由于接触了postgresql、
greenplum
和sqlserver这三种有schema的数据库,对于这个schema,我觉得最大的区别就在于中间多了一层来区分的,想想mysql的数据库层次,再看下边的
星空之下丶
·
2020-09-15 02:15
数据库
COGNOS 通过ODBC方式连接
GreenPlum
Cognos8.4forlinux64连接
GreenPlum
数据使用ODBC驱动仅仅支持32位驱动程序使用DataDirect32位驱动连接需要配置IANA值为106(UTF-8)转码以解决中文乱码问题另外
softctwo
·
2020-09-15 01:00
ZooKeeper基本操作
安装Zookeeperhttps://blog.csdn.net/
greenplum
_xiaofan/article/details/99020516#31_Zookeeper_401、ZK的数据模型1
11号车厢
·
2020-09-14 22:24
ZooKeeper
ZooKeeper
GreenPlum
使用日志
1、登录应用程序可以使用Postgresqljdbc驱动包连接
GreenPlum
(GP)数据库,命令行登录GP:写道su-gpadmin//psql-h192.168.1.2-dtest-Uuserpsql-hip-ddbname-Uuser2
渐渐遗忘
·
2020-09-14 21:35
GreenPlum
gpexpand扩展集群节点过程及问题解决
用户修改相关参数主要是/etc/sysctl.conf和/etc/security/limits.conf和/etc/hostname2.创建gpadmin组和用户,并安装相关的依赖包;3.保持和之前集群的目录一致,安装
greenplum
wxc20062006
·
2020-09-14 21:55
greenplum
[原创]
Greenplum
数据库集群实践
GreenPlum
实践==============================================目录:一、安装环境准备二、GP数据库安装三、集群添加standby节点四、master和
weixin_30883271
·
2020-09-14 20:01
数据库
运维
shell
Greenplum
日常维护手册 (汇总、点评、备查)
1.数据库启动:gpstart常用可参数:-a:直接启动,不提示终端用户输入确认-m:只启动master实例,主要在故障处理时使用2.数据库停止:gpstop:常用可参数:-a:直接停止,不提示终端用户输入确认-m:只停止master实例,与gpstart–m对应使用-Mfast:停止数据库,中断所有数据库连接,回滚正在运行的事务-u:不停止数据库,只加载pg_hba.conf和postgresq
weixin_30764137
·
2020-09-14 20:54
greenplum
gp 常用命令
1、连接数据库,默认的用户和数据库是postgrespsql-Uuser-ddbname2、切换数据库,相当于MySQL的usedbname\cdbname3、列举数据库,相当于mysql的showdatabases\l4、列举表,相当于mysql的showtables\dt5、查看表结构,相当于desctblname,showcolumnsfromtbname\dtblname6、查看索引\di
相遇七月二
·
2020-09-14 20:37
greenplum
GP数据库(
GreenPlum
)的启动/关闭/更新
由于GP是分布式的,涉及到多台机器的,所以启动和停止与PostgreSQL有些不同。一般的PostgreSQL数据库系统,可以用pg_ctl来启动、停止或重启数据库服务(postgres).pg_ctl也负责一些任务,如重定向日志输出和适当的分离terminal和processgroup。GP提供工具gpstart和gpstop(目录在$GPHOME/bin),功能和gp_ctl类似。(注意:不要
我是康小小
·
2020-09-14 20:05
数据库
GreenPlum
常见参数查看及调优
–清理表垃圾vacuumtable_name;在表经过多次的delete之后会产生未清理的垃圾,导致该表存储空间占用过多、查询速度变慢等。通过vacuumtable_name;释放表的碎片空间–查看gp的segment分布情况selectgp_segment_id,count(*)fromtable_namegroupbygp_segment_idorderbygp_segment_id;–gp优
nero小云云
·
2020-09-14 20:21
数据库
greenplum
4.2安装配置文档-手把手…
1数据库操作1.1连接数据库[gpadmin@gpmaster~]$psql-dgpsunpsql(8.2.15)Type"help"forhelp.gpsun-#\lListofdatabasesName|Owner|Encoding|Accessprivileges-----------+---------+----------+---------------------gpsun|gpadm
DBApower
·
2020-09-14 20:00
greenplum
Greenplum
日常维护命令
文章目录1.数据库启动:gpstart2.数据库停止:gpstop3.查看实例配置和状态4.gpstate:显示数据库运行状态,详细配置等信息5.查看用户会话和提交的查询等信息6.查看数据库、表占用空间7.查看数据分布情况8.实例恢复:gprecoverseg9.数据库备份gpcrondump10.数据库恢复gpdbrestore11.参数查询12.创建数据库13.创建GP文件系统15.查看seg
云平_Stephen
·
2020-09-14 20:15
Greenplum
Greenplum
实战-gpstop gpstart集群命令
gpstartgpstart-a=>快速启动|gpstart-d=>指定数据目录(默认值:$MASTER_DATA_DIRECTORY)gpstart-q=>在安静模式下运行。命令输出不显示在屏幕,但仍然写入日志文件。gpstart-m=>以维护模式连接到Master进行目录维护。例如:$PGOPTIONS='-cgp_session_role=utility'psqlpostgresgpstar
Murkey学习之旅
·
2020-09-14 19:45
Greenplum
#
集群管理
postgresql
Greenplum
实战--检查集群状态gpstate
00:00:00/usr/local/
greenplum
-db-5.10.2/bin/postgres-D/
greenplum
/gpdata/master/gpseg-1-p543
Murkey学习之旅
·
2020-09-14 19:44
Greenplum
#
集群管理
postgresql
greenplum
数据库集群的安装实例
greenplum
数据库集群的安装实例安装前简介1、
Greenplum
Greenplum
数据引擎是为新一代数据仓库和大规模分析处理而建立的软件解决方案。
m2008m
·
2020-09-14 19:53
greenplum
数据库
集群
虚拟机
网络
linux
greenplum
管理,启动
pg_bitmapindex依赖pg_aoseg外部表,视图函数以及其他工具gp_toolkit只读表以及列表支持压缩使用压缩,应考虑的问题:1.CPU的使用率2.压缩比例,disk大小3.压缩速度4.解压缩扫描速度
greenplum
cuilan5646
·
2020-09-14 18:33
greenplum
5.7 + gpstart gpstop gpstate
db:
greenplum
5.7gpstart启动数据库$gpstart--help$gpstart直接启动,不提示终端用户输入确认$gpstart-a只启动master实例,主要在故障处理时使用$gpstart-mPGOPTIONS
数据库人生
·
2020-09-14 18:32
#
greenplum
command
GreenPlum
启动失败 Failed to start Master instance in admin mode
在测试外部表的时候,因为修改了参数,所以需要
greenplum
重启加载,但是
greenplum
启动失败,如下所示:[gpadmin@dwhm01_2_111etc]$tail-f/data/master
selectgo
·
2020-09-14 18:59
greenplum
Greenplum
集群挂掉后启动
环境:CentOS5.7,
Greenplum
database4.1昨天不知怎样原因
Greenplum
集群中某台segmentserver挂掉,造成整个集群数据无法查看,报错为“errorfailedtoacquireresourcesononeormoresegments
csdn666666666
·
2020-09-14 18:59
DTM initialization: failure during startup recovery, retry failed, check segment status (cdbtm.c:160...
安装
greenplum
集群出现以下错误:20160315:13:49:16:025696gpinitsystem:h95:jason-[INFO]:-Checkingconfigurationparameters
aozong0388
·
2020-09-14 18:36
GreenPlum
大数据平台--运维(三)
一,操作命令01,启动gpstart参数说明COMMANDNAME:gpstartStartsa
Greenplum
Databasesystem.
Z14523299999
·
2020-09-14 18:42
greenplum
一例子
[gpadmin@hadoop1hadoop100]$psql-dtemplate1psql:FATAL:DTMinitialization:failureduringstartuprecovery,retryfailed,checksegmentstatus(cdbtm.c:1548)解决:/etc/rc.d/init.d/iptablesstop
DBAdream
·
2020-09-14 18:48
psycopg2模块安装问题
我的平台是win10(x64)、python3.7,打算通过psycopg2模块来操作
Greenplum
数据库,我通过pipinstallpsycopg2安装了psycopg2模块,也提示安装成功了,可是我在
hgz_dm
·
2020-09-14 14:49
数据库
psycopg2
gp数据库
greenplum
6查找表的relfilenode
testdb=#selectoid,pg_relation_filenode(oid),relnamefrompg_classwhererelnamelike'pg_type%';oid|pg_relation_filenode|relname------+----------------------+------------------------------2703|10008|pg_type
scliu
·
2020-09-13 22:49
greenplum
数据库
PostgreSQL (PG) 高效分区表实现 - pg_pathman(1)
商业版本EDB,以及数据仓库
Greenplum
都有比较好的分区支持。去年GP开源后,阿里云RDSPostgreSQL的小伙伴将
Greenplum
的分区表功能port到PostgreSQ
架构师成长营
·
2020-09-13 22:05
数据库
全面解读PostgreSQL和
Greenplum
的Hash Join
了解更多
Greenplum
技术干货,欢迎访问
Greenplum
中文社区网站2019年10月15日,Pivotal中国研发中心副总经理兼
Greenplum
中文社区发起人姚延栋出席了于意大利举行的PostgreSQLConferenceEurope
Greenplum中文社区
·
2020-09-13 22:09
Greenplum
postgresql
大数据
数据库
GreenPlum
时间转换函数
从date、timestamp、time、interval类型中抽取子域值方法一:extractextract函数从日期、时间数值里抽取子域,例如年、小时等。格式:extract(fieldfromsource)source:date、timestamp、time、interval类型的值;field:是一个标识符或者字符串,指定所抽取的域,可以是表示时间的任意值,如century、day、hou
初阳Zz
·
2020-09-13 05:24
GreenPlum
Install
Greenplum
Hadoop on VirtualBox 4.2 + centos 6.2
0Referencehttp://visit.gopivotal.com/index.php/email/emailWebview?mkt_tok=3RkMMJWWfF9wsRonuqTMZKXonjHpfsX%2B7ugtXqag38431UFwdcjKPmjr1YIGRMR0aPyQAgobGp5I5FEOQrTYSrNpt6QEXw%3D%3Dhttp://visit.gopivotal.c
一人在人间
·
2020-09-12 08:50
diary
log
上一页
6
7
8
9
10
11
12
13
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他