greenplum分布式集群

Greenplum导入导出-COPY命令

注：本文翻译自https://docs.vmware.com/en/VMware-Greenplum/7/greenplum-database/ref_guide-sql_commands-COPY.htmlGreenplum
post_yuan·2023-09-09 11:13

Greenplum执行SQL卡住的问题

问题今天社区群里面一位同学反映他的SQL语句执行会hang住，执行截图如下。分析根据提示信息，判断可能是网络有问题，或者是跟GP使用UDP包有关系。此同学找了网络检查的人确定网络没有问题，于是猜测跟UDP包有关。参考文章https://blog.csdn.net/weixin_42788640/article/details/120226226的方案，打算检查gp_interconnect_typ
post_yuan·2023-09-09 11:42

分布式集群框架——zookeeper必考面试题②

15、数据同步整个集群完成Leader选举之后，Learner（Follower和Observer的统称）回向Leader服务器进行注册。当Learner服务器想Leader服务器完成注册后，进入数据同步环节。数据同步流程：（均以消息传递的方式进行）Learner向Learder注册数据同步同步确认Zookeeper的数据同步通常分为四类：直接差异化同步（DIFF同步）先回滚再差异化同步（TRUN
肉肉肉肉肉肉~丸子·2023-09-09 09:41

分布式集群框架——zookeeper必考面试题①

1、ZooKeeper是什么？ZooKeeper是一个开源的分布式协调服务。它是一个为分布式应用提供一致性服务的软件，分布式应用程序可以基于Zookeeper实现诸如数据发布/订阅、负载均衡、命名服务、分布式协调/通知、集群管理、Master选举、分布式锁和分布式队列等功能。ZooKeeper的目标就是封装好复杂易出错的关键服务，将简单易用的接口和性能高效、功能稳定的系统提供给用户。Zookeep
肉肉肉肉肉肉~丸子·2023-09-09 09:10

zookeeper搭建分布式集群启动失败(Error contacting service. It is probably not running.)

文章目录1.排查2.解决1.排查1.启动zookeeper后查看状态/bin/zkServer.shstatus发现报错Errorcontactingservice.Itisprobablynotrunning.[[email protected]]#./bin/zkServer.shstatus/usr/bin/javaZooKeeperJMXe
zero·2023-09-08 20:40

namenode-HA

Namenode在HDFS中是一个非常重要的组件，相当于hadoop集群系统的心脏，在显示分布式集群环境中，还是会有可能出现Namenode的崩溃或各种意外。所以，高可用模式就体现出作用了。
MOOJ·2023-09-08 00:29

YMatrix 5.0 故障自动转移功能新实现，运维更方便！

作者：数据库内核研发工程师杨旭东Greenplum故障自动
YMatrix 官方技术社区·2023-09-07 20:27

【业务功能100】补充代码【业务功能88】微服务-springcloud-分布式锁-redis-redisson-springcache

redisson做分布式锁，完成数据的查询接口功能getCatelog2JSONRedis原先从mysql数据库查询的效率较低，现在将部分固定数据展示比如页面的树形栏目信息等，存储到redis缓存，然后基于分布式集群
studyday1·2023-09-07 11:27

Greenplum启动卡住的问题

问题说明一下，此问题是社区一位同学遇到的，据他描述是说机器在断电后再启动数据库，就启不起来了，然后在启动的过程中一直卡住。卡在了以下截图这里。分析听到是因为断电后导致的，怀疑是不是机器启动后自动打开了防火墙，但这个同学确说他部署的是一个单节点。那肯定跟防火墙没啥关系了。于是让他去看一下启动的日志，日志截图如下。从日志截图中，看到一些异常的信息，重点内容为couldnotbindsocketfors
post_yuan·2023-09-07 03:10

Greenplum 实用工具-gpaddmirrors

注：本文翻译自https://docs.vmware.com/en/VMware-Greenplum/7/greenplum-database/utility_guide-ref-gpaddmirrors.htmlgpaddmirrors
post_yuan·2023-09-07 03:40

Greenplum 实用工具-gpinitstandby

注：本文翻译自https://docs.vmware.com/en/VMware-Greenplum/7/greenplum-database/utility_guide-ref-gpinitstandby.htmlgpinitstandby
post_yuan·2023-09-07 03:10

Greenplum 实用工具-gpinitsystem

注：本文翻译自https://docs.vmware.com/en/VMware-Greenplum/7/greenplum-database/utility_guide-ref-gpinitsystem.htmlgpinitsystem
post_yuan·2023-09-07 03:40

HDFS完全分布式集群搭建与配置

HDFS完全分布式集群搭建与配置介绍HDFS前言HDFS的概念和特性整体思路准备工作配置过程三台虚拟机都已经完成的步骤hadoop-env.shyarn-env.shcore-site.xmlhdfs-site.xmlmapred-site.xmlyarn-site.xmlslaves
stupid_gentleman·2023-09-07 00:53

炫“库”行动—人大金仓有奖征文——金仓分析型数据库系统安装教程

适用于数据仓库、决策支持、高级分析等分析类应用场景，类似Vertica、Greenplum、G
天宫空间站·2023-09-06 21:49

centos7 hadoop 单机模式安装配置

转载请务必注明原创地址为：https://dongkelun.com/2018/03/23/hadoopConf/前言由于现在要用spark,而学习spark会和hdfs和hive打交道，之前在公司服务器配的分布式集群
董可伦·2023-09-06 06:17

Apache Pulsar的集群模式部署

文章目录ApachePulsar分布式集群模式构建一、准备工作二、配置修改2.1bookkeeper配置2.2broker配置三、分布式集群模式启动3.1启动zookeeper集群3.2初始化元数据3.3
苍穹原野·2023-09-05 10:59

【德哥说库系列】-ASM管理Oracle 19C单实例部署

中国DBA联盟(ACDU)成员，目前服务于工业互联网擅长主流Oracle、MySQL、PG、高斯及Greenplum运维开发，备份恢复，安装迁移，性能优化、故障应急处理等。
IT邦德·2023-09-04 18:14

Greenplum-segment镜像分布策略

Greenplum作为一款基于PostgreSQL的OLAP分布式MPP架构，其内部的角色可以通过配置冗余来保证高可用性，无论是管理节点还是计算节点。
post_yuan·2023-09-04 07:45

Greenplum-最佳实践小结

注：本文翻译自https://docs.vmware.com/en/VMware-Greenplum/7/greenplum-database/best_practices-logfiles.html数据模型
post_yuan·2023-09-04 07:43

基于PHP 搭建高并发分布式集群系统思路

做了很多有关php项目，其中包括（P2P、电商、配送、CRM、OA等）。我想对自己的工作成果经验总结一下，同时也算是一次升华。项目中经常提到大流量和高并发的名词，听起来很让人害怕，无从下手，其实我们应该从实际的业务场景来规划应该如果去解决这些问题，正常情况下我们系统应该只是某个或者某几个服务压力非常大，其他业务负载不会太高，下面我从整体的架构来记录下思路，至于具体的实施方案，我在后续的文章会慢慢记
SteveGao2013·2023-09-03 21:57

Minio笔记

1.5存储方案2.环境搭建2.1单机部署介绍2.2单机部署（无纠删码模式）2.3通过URL地址对文件进行访问2.4使用Docker单机部署（无纠删码模式）2.5使用Docker单机部署（纠删码模式）2.6分布式集群部署介绍
贴地飞行lyh·2023-09-03 11:30

Python-PySpark案例实战：Spark介绍、库安装、编程模型、RDD对象、flat Map、reduce By Key、filter、distinct、sort By方法、分布式集群运行

版本说明当前版本号[20230825]。版本修改说明20230825初版目录文章目录版本说明目录知识总览图PySpark案例实战前言介绍Spark是什么PythonOnSparkPySparkWhyPySpark基础准备PySpark库的安装构建PySpark执行环境入口对象PySpark的编程模型数据输入RDD对象Python数据容器转RDD对象读取文件转RDD对象数据计算map方法flatMa
放下华子我只抽RuiKe5·2023-09-02 21:18

ELFK 7.17.6集群部署并收集java微服务日志；

文章目录环境准备一、Elasticsearch分布式集群部署1.设置主机名以及创建elasticsearch的目录2.下载elasticsearch-7.17.6并解压到指定目录3.部署OracleJDK
不知名运维:·2023-09-02 11:11

GreenPlum的gpfdist使用与原理流程分析

一、简介GreenPlum的数据导入功能作为对数据源的一种扩充，数据导入的方式有：1、insert该方式通过sql语句，把数据一条一条插入至表中。
偷偷学习被我发现·2023-09-02 07:43

高级DBA带你从0到1搭建Mysql NDB Cluster 分布式集群搭建实战全网最详细

MysqlNDBCluster集群搭建实战全网最详细https://dev.mysql.com/doc/refman/8.0/en/mysql-cluster-overview.html#官方的文档介绍地址一、NDB集群概述NDB集群是一种在无共享系统中实现内存数据库集群的技术。无共享体系结构使系统能够使用非常便宜的硬件，并且对硬件或软件的特定要求最低。  NDB集群设计为没有任何单点故障。在无共
技术很渣·2023-09-02 04:57

Java实现MQTT订阅发布

EMQX(Erlang/Enterprise/ElasticMQTTBroker)是基于Erlang/OTP平台开发的开源物联网MQTT消息服务器，支持百万级连接和分布式集群架构。
_不吃猫的鱼_·2023-09-01 18:47

企业架构LNMP学习笔记2

企业架构分布式集群最终解决方案集群：多台服务器在一起做同样的事情。分布式：多台服务器在一起做不同的事情。
CCH2023·2023-09-01 17:10

python实现数据仓库ETL

ETL,可以分为ETL和ELT两种实现方式.ELT是在加载到仓库后,再做数据转换.ETL是在加载之前完成转换,落地的数据就是转换后的样子了.ELT多使用在MPP架构的数据仓库平台上,比如Teradata,greenplum
dsqzhong·2023-09-01 15:24

聊聊 Pulsar： Pulsar 分布式集群搭建

一、集群搭建要求1.1搭建设计搭建Pulsar集群至少需要3个组件：ZooKeeper集群、Bookkeeper集群和Broker集群（Broker是Pulsar的自身实例）。这三个集群组件如下：ZooKeeper集群（3个ZooKeeper节点组成）Broker集群（3个Pulsar节点组成）Bookkeeper集群（也称为Bookie集群，3个BookKeeper节点组成）Pulsar的安装包
老周聊架构·2023-09-01 13:41

IBM Spectrum LSF 分布式集群管理系统的亮点与主要特性

IBMSpectrumLSF分布式集群管理系统的亮点与主要特性亮点：1、加速工作负载利用高级工作负载管理功能以及策略驱动的调度，包括GPU调度和动态混合云，从而能够按需添加容量。
小信瑞·2023-09-01 09:14

基于docker搭建redis高可用集群版

Redis支持的键值数据类型如下：•string（字符串）•hash（哈希）•list（列表）•set（集合）•zset（有序集合）Redis的应用场景•缓存（数据查询、短连接、新闻内容、商品内容等等）•分布式集群架构中的
& 游戈·2023-09-01 08:55

开源OLAP引擎测评报告(SparkSql、Presto、Impala、HAWQ、ClickHouse、GreenPlum)

开源OLAP引擎测评报告(SparkSql、Presto、Impala、HAWQ、ClickHouse、GreenPlum)易观CTO郭炜序现在大数据组件非常多，众说不一，在每个企业不同的使用场景里究竟应该使用哪个引擎呢
zxfBdd·2023-09-01 08:10

Hadoop完全分布式集群搭建

文章目录一、克隆二、网络配置三、SSH服务配置四、hadoop完全分布式配置一、克隆1.在虚拟机关机的状态下选择克隆2.开始克隆3.选择从当前状态创建4.创建一个完整的克隆5.选择新的虚拟机存储位置（选择内存充足的磁盘）6.开始克隆7.克隆完成8.同样的方法克隆第二台虚拟机9.在计算机中存在三台虚拟机将第一台虚拟机更名为hadoop01修改hadoop01的主机名为hadoop01修改hadoop
T³3·2023-09-01 07:28

大数据学习06-Spark分布式集群部署

Spark完全分布式部署前期准备，每台服务器都需要配置安装Scala下载Scala安装包配置环境变量安装spark解压配置环境修改配置前期准备，每台服务器都需要配置配置好IPvim/etc/sysconfig/network-scripts/ifcfg-ens33TYPE="Ethernet"PROXY_METHOD="none"BROWSER_ONLY="no"BOOTPROTO="static
小火柴012·2023-09-01 06:22

大数据实战项目（2）-数据采集、处理、分发流程所涉及到的框架及配置

对该实战项目的介绍及所使用的各种工具等可以查看这篇博客：大数据实战项目（1）-项目简介、开发技术、工具、架构等文章目录Linux环境准备常规设置项目配置ZooKeeper分布式集群部署HadoopHA架构与部署
xl132598798·2023-08-31 08:38

分布式集群——jdk配置与zookeeper环境搭建

系列文章目录分布式集群——jdk配置与zookeeper环境搭建分布式集群——搭建Hadoop环境以及相关的Hadoop介绍文章目录系列文章目录前言一zookeeper介绍与环境配置1.1zookeeper
张小鱼༒·2023-08-31 06:59

分布式集群——搭建Hadoop环境以及相关的Hadoop介绍

系列文章目录分布式集群——jdk配置与zookeeper环境搭建分布式集群——搭建Hadoop环境以及相关的Hadoop介绍文章目录前言一hadoop的相关概念1.1Hadoop概念补充：块的存储1.2HDFS
张小鱼༒·2023-08-31 06:54

【EMQX 5.0】2.1.4 EMQ X 有哪些产品

公司根据连接数量产品功能商业服务主要提供如下三个产品：EMQXBroker：EMQX开源版（免费），完整支持MQTTV3.1.1/V5.0协议规范，完整支持TCP、TLS、WebSocket连接，支持百万级连接和分布式集群架构
ladymorgana·2023-08-30 18:15

Greenplum修改字段类型

由varchar修改为date类型altertabletbnamealtercolumnfieldnametypedateusing(fieldname::date);示例：altertablefix.no_linealtercolumnreg_timetypedateusing(reg_time::date);
JohnLee6·2023-08-30 08:43

Chapter 19 Configuring IPsec for Greenplum Database

Chapter19ConfiguringIPsecforGreenplumDatabase本主题介绍如何为Greenplum的数据库集群配置Internet协议安全（IPsec）。
kygoal·2023-08-30 07:54

分布式集群框架——有关zookeeper的面试考点

3.掌握Zookeeper的概念当涉及到大规模分布式系统的协调和管理时，Zookeeper是一个非常重要的工具。1.分布式协调服务：Zookeeper是一个分布式协调服务，它提供了一个高可用和高性能的环境，用于协调和同步分布式系统中的各个节点。它通过提供共享的命名空间和一致性的数据模型来简化开发人员构建分布式应用程序的任务。2.数据模型：Zookeeper的数据模型是一个层次化的树形结构，类似于文
肉肉肉肉肉肉~丸子·2023-08-30 05:25

【德哥说库系列】-Oracle 19C RAC 应用RU19补丁

中国DBA联盟(ACDU)成员，目前服务于工业互联网擅长主流Oracle、MySQL、PG、高斯及Greenplum运维开发，备份恢复，安装迁移，性能优化、故障应急处理等。
IT邦德·2023-08-30 04:04

分布式调度问题及解决方案

调度—>定时任务，分布式调度—>在分布式集群环境下定时任务这件事Elastic-job(当当网开源的分布式调度框架)定时任务的场景定时任务形式:每隔一定时间/特定某一时刻执行例如:订单审核、出库订单超时自动取消
terwer·2023-08-30 02:38

分布式集群中网络分区问题

分布式集群中网络分区问题前言如何判断是否发生了网络分区？集中式架构的网络分区形态非集中式架构中的网络分区形态网络分区最微妙的地方在哪里？网络分区出现概率较高的场景是什么？网络分区有哪些常见的处理方法？
海陆云·2023-08-29 20:38

k8s网络通信

详解Kubernetes网络模型Kubernetes是为运行分布式集群而建立的，分布式系统的本质使得网络成为Kubernetes的核心和必要组成部分，了解Kubernetes网络模型可以使你能够正确运行
小哥(xpc)·2023-08-29 17:16

ClickHouse进阶（一）：ClickHouse 使用场景及分布式集群安装

进入正文前，感谢宝子们订阅专题、点赞、评论、收藏！关注IT贫道，获取高质量博客内容！个人主页：含各种IT体系技术，IT贫道_ApacheDoris,大数据OLAP体系技术栈,Kerberos安全认证-CSDN博客订阅：拥抱独家专题，你的订阅将点燃我的创作热情！点赞：赞同优秀创作，你的点赞是对我创作最大的认可！⭐️收藏：收藏原创博文，让我们一起打造IT界的荣耀与辉煌！✏️评论：留下心声墨迹，你的评论
IT贫道·2023-08-29 00:14

Centos虚拟机文件系统根目录扩容

  日常学习中，经常需要用多台虚拟机来模拟搭建各种分布式集群，搭的东西多了，某天Centos虚拟机一开机就提示文件系统根目录磁盘空间不足。
小胡_鸭·2023-08-28 00:02

Spark Local环境搭建及测试

【大数据学习记录篇】-持续更新中~篇一：Linux系统下配置java环境篇二：hadoop伪分布式搭建（超详细）篇三：hadoop完全分布式集群搭建（超详细）-大数据集群搭建文章目录1.SparkLocal
beixi@·2023-08-27 23:10

Spark Standalone环境搭建及测试

【大数据学习记录篇】-持续更新中~篇一：Linux系统下配置java环境篇二：hadoop伪分布式搭建（超详细）篇三：hadoop完全分布式集群搭建（超详细）-大数据集群搭建篇四：SparkLocal环境搭建及测试文章目录
beixi@·2023-08-27 23:08

redis-1

数据库模型：网状：第一代模型，实现太难，基本上没有成体数据库层次：第二代模型，可以实现，ibm关系：第三代模型，当前传统主流，oracle、ibmdb2、sqlserver、mysql、postgresql(greenplum
努力买大G·2023-08-27 22:33
上一页 8 9 10 11 12 13 14 15 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他