greenplum分布式集群第11页

[fastdfs] dockerfile搭建fastdfs分布式集群

[fastdfs]dockerfile搭建fastdfs分布式集群具体搭建过程参照官方wiki：https://github.com/happyfish100/fastdfs/wiki按照官方wiki,

饶一熊·2023-09-25 06:11

云计算与大数据——部署Hadoop集群并运行MapReduce集群(超级详细！)

Linux搭建Hadoop集群(CentOS7+hadoop3.2.0+JDK1.8+Mapreduce完全分布式集群)本文章所用到的版本号：CentOS7Hadoop3.2.0JDK1.8基本概念及重要性很多小伙伴部署集群用

星川皆无恙·2023-09-25 05:13

使用redis实现分布式锁-基本原理与使用

文章目录前言一、分布式锁演进1.1分布式锁特点1.2阶段一1.3阶段二1.4阶段三1.5阶段四前言随着业务发展的需要，原单体单机部署的系统被演化成分布式集群系统后，由于分布式系统多线程、多进程并且分布在不同机器上

南波塞文·2023-09-24 14:10

这就是编程·2023-09-24 13:23

Hive3远程模式安装

本文环境：Hadoop3.2.2JDK1.8.0_291MySQL5.7.35Hive3.1.2一、安装Hadoop集群Hadoop集群部署参考这篇文章：《Hadoop完全分布式集群搭建详细图文教程》二

Yunis尤尼斯·2023-09-24 13:17

XSRE那些事

SRE的主要工作是运维在分布式集群管理系统上运行的具体业务服务。从一切经历中不断学习

商未央·2023-09-24 07:35

linux 常用命令汇集(精华)

Linux系统快速入门1学习目标：对linux的基本认识常用linux命令的使用JAVAEE：后台应用都会涉及到linux系统，应用程序的部署，运维，分布式集群，大数据，云计算Linux基本概念：什么是

豆釘·2023-09-23 20:47

Greenplum报错could not fork new process for connection: Cannot allocate memory

问题Greenplum是一个进程模型的MPP数据库，对内存的要求相对较高。Greenplum中也有一些关于内存如何合理配置的要求，包括官方文档。

post_yuan·2023-09-22 17:25

Greenplum实用工具-gpcheckperf

注：本文翻译自https://docs.vmware.com/en/VMware-Greenplum/7/greenplum-database/utility_guide-ref-gpcheckperf.html

post_yuan·2023-09-22 17:25

Greenplum实用工具-gpfdist

注：本文翻译自https://docs.vmware.com/en/VMware-Greenplum/7/greenplum-database/utility_guide-ref-gpfdist.html

post_yuan·2023-09-22 17:22

golang基础之工程结构

在2007的某一天，公司的几个大牛，正在用c++开发一些比较繁琐但是核心的工作，主要包括庞大的分布式集群，大牛觉得很闹心，后来c++委员会来他们公司演讲，说c++将要添加大概35种新特性。

程序员同行者·2023-09-22 09:06

ClickHouse分布式集群部署

目录编辑一、环境说明二、安装部署2.1RPM方式安装2.1.1安装yum-utils2.1.2配置yumrepo源2.1.3yuminstall下载安装clickhouse2.2信息配置2.2.1配置外网可访问地址2.2.2修改存储路径2.2.2.1新建存储目录2.2.2.2授权2.2.2.3修改配置2.2.3修改服务端口2.2.4修改配置文件目录2.2.5配置metrika.xml文件2.2.5

夜夜流光相皎洁_小宁·2023-09-22 08:39

大数据入门--hadoop（一）--分布式集群搭建

大数据入门--hadoop（一）--分布式集群搭建准备工作ntp时间同步hadoop101配置修改/etc/ntp.conf修改/etc/sysconfig/ntpd文件重新启动ntpd服务其他服务器配置

许中宝·2023-09-22 02:45

mppdb 查看建表语句_MPP架构数据库优化总结——华为LibrA与GreenPlum

文章目录MPP架构数据库优化总结——华为LibrA与GreenPlum1.简介2.优化点2.1建表时选择合适的数据类型，可以提高效率、减小空间占用2.2选择合理的存储模型(行存和列存)2.3选择表的分布方式

weixin_39781186·2023-09-22 02:59

spring+springmvc+kafka分布式消息中间件集成方案

kafka消息平台使用spring+kafka的集成方案，详情如下：1.使用最高版本2.1.0.RELEASE集成jar包：spring-integration-kafka2.Zookeeper、Kafka分布式集群使用

黑骑士1203·2023-09-21 19:23

Hbase分布式集群部署

目录一、环境说明二、部署Hbase2.1解压Hbase2.2移动解压包2.3修改hbase-env.sh文件2.4修改环境变量2.5修改hbase-site.xml文件2.6修改regionservers文件2.7分发hbase2.7.1分发hbase包2.7.2分发环境配置2.8启动hbase服务2.8.1环境生效2.8.2master节点执行2.8.3node2节点执行2.8.4访问一、环境说

夜夜流光相皎洁_小宁·2023-09-21 12:37

Hadoop-3.3.6完全分布式集群安装

Step1：需要准备至少三台配置好的虚拟机（core-site、hdfs-site、mapred-site和yarn-site文件），可以选择克隆已完成配置的伪分布安装的虚拟机IP地址主机名192.168.10.101master192.128.10.102worker1192.168.10.103worker2Step2：在克隆的虚拟机内输入命令：vim/etc/sysconfig/networ

m0_63480823·2023-09-21 08:32

zookeeper集群启动时报错：Cannot open channel to x at election address

首先必须强调一下，zookeeper的分布式集群安装很简单，一般只需要修改两个地方zoo.cfgmyid因此当zookeeper启动失败时，建议立马查看这两个文件是否出现配置正确。

Dmam Hasol·2023-09-21 08:17

Zstack一面面经

传统的大数据处理架构通常采用分布式集群的方式部署，需要手

Miaodawang·2023-09-21 03:43

《GreenPlum/Postgres系列》表锁处理

GreenPlum/PostGreSQL表锁处理数据库中遇到表锁的情况，可以通过select*frompg_stat_activity;查看表锁的进程及进程ID，从而取消进程，解锁。

DATA数据猿·2023-09-21 01:11

Hdoop伪分布式集群搭建

文章目录Hadoop安装部署前言1.环境2.步骤3.效果图具体步骤（一）前期准备（1）ping外网（2）配置主机名（3）配置时钟同步（4）关闭防火墙（二）正文（1）配置hosts列表（2）SSH免密钥登录配置①master虚拟机上②slave01虚拟机上③slave02虚拟机上④验证免密登录（3）安装JDK（4）安装部署Hadoop集群（chenqi用户）1.解压缩包2.配置文件3.创建Hadoo

陈七.·2023-09-20 22:27

K8S集群安全之安全机制

1.安全机制说明：Kubernetes作为一个分布式集群的管理工具，保证集群的安全性是其一个重要的任务。APIServer是集群内部各个组件通信的中介，也是外部控制的入口。

小鱼儿&·2023-09-20 12:16

Greenplum错误排查——query plan with multiple segworker groups is not supported

queryplanwithmultiplesegworkergroupsisnotsupportedlikelycausedbyafunctionthatreadsormodifiesdatainadistributedtable使用Greenplum

airfan92·2023-09-20 06:49

重读GPDB 和 TiDB 论文引发的 HTAP 数据库再思考

大家好，我是阿福，之前我在社区PaperReading活动中分享了Greenplum团队在2021年SIGMOD上发表的论文：《Greenplum:AHybridDatabaseforTransactionalandAnalyticalWorkloads

阿福Chris·2023-09-20 06:05

TiDB 论文引发的 HTAP 数据库再思考

大家好，我是阿福，之前我在社区PaperReading活动中分享了Greenplum团队在2021年SIGMOD上发表的论文：《Greenplum:AHybridDatabaseforTransactionalandAnalyticalWorkloads

TiDB 社区干货传送门·2023-09-20 06:34

MatrixDB数据库学习——筑梦之路

MatrixDB是全球首款同时支持在线事务处理（OLTP）、在线分析处理（OLAP）和物联网时序应用的超融合型分布式数据库产品，具备严格分布式事务一致性、水平在线扩容、安全可靠、成熟稳定、兼容PostgreSQL/Greenplum

筑梦之路·2023-09-20 05:55

【重大更新】CloudCanal 社区版 1.0.2 正式发布，开放众多新数据源

发版时间:2021年8月20日版本号:1.0.2新特性新增Oracle源端新增PostgreSQL源端新增Greenplum源端新增PolarDbMySQL源端新增Oracl

Clougence·2023-09-19 09:14

【RocketMQ专题】快速实战及集群架构原理详解

特点2.3RocketMQ的运行架构三、RocketMQ快速实战3.1快速搭建RocketMQ服务3.2快速实现消息收发3.3搭建Maven客户端项目3.4搭建RocketMQ可视化管理服务3.5升级分布式集群四

验证码有毒·2023-09-19 06:19

06.从零开始在虚拟机中一步一步搭建一个4个节点的CentOS集群

ssh免密码互相通信从零开始，纯手工，一步一步搭建出一个4个节点的CentOS集群为我们后面的课程做准备，后面会讲解大型的分布式的redis集群架构，一步一步纯手工搭建redis集群，集群部署，主从架构，分布式集群架构我们后面的课程

未知的证明·2023-09-18 14:16

小麦苗GreenPlum学习大纲

腾讯文档课程文档内容如下：小麦苗GreenPlum课程公开课--数据库通用学习路线、答疑、培训、考证等：https://docs.qq.com/doc/p/b65bcd7647a9974a94b97fb06d04a089c25a7f0c

小麦苗DBA宝典·2023-09-18 14:49

docker 安装 redis

一主两从集群搭建1.复制三份redis.conf2.启动master和slave3.查看关系和数据测试redis高可用集群搭建1.复制三份sentinel.conf2.启动sentinel3.故障转移测试redis分布式集群搭建

N-1-萘乙基二胺盐酸盐·2023-09-17 23:26

Spark基本概念以及环境搭建

从功能上来说：HadoopHadoop是由java语言编写的，在分布式集群当中存储海量数据，并运行分布式应用的开源框架作为Hadoo

努力生活的黄先生·2023-09-17 10:39

PostgreSQL/Greenplum数据库的物化视图

一、物化视图（MATERIALIZEDVIEW）1、PG的版本PostgreSQL9.3版本之后开始支持物化视图。2、与普通视图的区别View视图：虚拟，不存在实际的数据，在查询视图的时候其实是对视图内的表进行查询操作。物化视图：实际存在，将数据存成一张表，查询的时候对这个表进行操作。物化视图内的数据需要和表的数据进行同步，这就是refresh。二、实际操作1、实验环境：数据库版本：Postgre

inrgihc·2023-09-17 00:20

银河麒麟安装Docker-国产化-九五小庞

级标准研制的提供内生安全、云原生支持、国产平台深入优化、高性能、易管理的新一代自主服务器操作系统；同源支持飞腾、龙芯、申威、兆芯、海光、鲲鹏等自主平台；可支撑构建大型数据中心服务器高可用集群、负载均衡集群、分布式集群文件系统

Up九五小庞·2023-09-16 23:50

Dapper——分布式跟踪系统

分布式跟踪系统背景当代的互联网的服务，通常都是用复杂的、大规模分布式集群来实现的。

Lor :)·2023-09-16 18:19

分布式集群redis数据还原

在发上一个线上版本之前，由于开发的同学把流程性的东西抛到一边，只想着省事，很多到测试这边的版本都没有打tag，也没有给转测试的脚本文件，为了这次版本的顺利发布，要做一次线上环境的模拟发布流程。所以需要把生产上的redis数据导到测试的redis上面来。我们的生产redis用的是阿里云的集群模式，在这里要说明一下，阿里云上面的redis的集群备份显示让我有点谜糊，因为他上面保存的显示的都是DB0开头

测试_飞鸟·2023-09-16 04:10

Postgresql事务和Greenplum中的两阶段提交

Greenplum是一种广泛使用的，基于PG进行开发的MPP架构的分布式数据库。GP不仅高度兼容PG生态，还保持了PG包含支持完整事务的优点。GP本地事务的实现

airfan92·2023-09-14 03:35

ChunJun编译记录

离线按照依赖：mvninstall:install-file-DgroupId=com.pivotal-DartifactId=greenplum-jdbc-Dversion=5.1.4-Dpackaging

临风赏月·2023-09-13 17:48

Greenplum的并发控制概述

注：本文翻译自https://docs.vmware.com/en/VMware-Greenplum/7/greenplum-database/admin_guide-intro-about_mvcc.htmlGreenplum

post_yuan·2023-09-13 12:50

Greenplum高可用-从失效协调者恢复

注：本文翻译自https://docs.vmware.com/en/VMware-Greenplum/7/greenplum-database/admin_guide-highavail-topics-g-recovering-a-failed-coordinator.html

post_yuan·2023-09-12 20:58

Greenplum高可用-如何检测失效Segment

注：本文翻译自https://docs.vmware.com/en/VMware-Greenplum/7/greenplum-database/admin_guide-highavail-topics-g-detecting-a-failed-segment.html

post_yuan·2023-09-12 20:27

Greenplum高可用-从失效segment恢复

本主题将指导您在一个或多个段或主机出现故障并希望恢复故障段时应采取的措施。你所遵循的恢复路径主要取决于以下三种情况中哪一种适合你的情况:希望就地恢复到当前主机希望恢复到集群内的其他主机希望恢复到集群外的新主机在这些场景中遵循的步骤可能有所不同，具体取决于:是进行增量恢复还是完全恢复您是想恢复所有段还是部分段注：增量恢复只有在将段恢复到当前主机(就地恢复)时才有可能。前提所有段都启用镜像。您已经确定

post_yuan·2023-09-12 20:27

gpcopy命令详解

注：本文部分翻译自https://docs.vmware.com/en/VMware-Greenplum-Data-Copy-Utility/2.6/greenplum-copy/gpcopy.htmlgpcopy

post_yuan·2023-09-12 20:26

mysqlclient 报错libstdc++.so.6: cannot allocate memory in static TLS block 修复

最近工作中要用到dask分布式集群,这要求每一个节点的环境和包的版本都是一致的,在linux上的一个节点就出现了如下错误Traceback(mostrecentcalllast):File"/home/

唐大帅·2023-09-12 15:24

Dapper，大规模分布式系统的跟踪系统[翻译]

概述当代的互联网的服务，通常都是用复杂的、大规模分布式集群来实现的。

董洪杉·2023-09-12 07:33

Nebula分布式集群

2022年9月15日18:47:38文章目录Nebula1.安装:2.数据模型3.NebulaGraph架构总览4.基本命令文档4.0数据类型4.1spaces图空间CREATESPACEDROPSPACECLEARSPACESHOWSPACESDESCSPACE4.2Tag4.3edge4.4点语句INSERTVERTEXDELETEVERTEXUPDATEVERTEXUPSERTVERTEX4

Crazy_August·2023-09-10 14:23

RocketMq 简介、基本架构及 Springboot快速集成RocketMq

2、RocketMQ基本架构：如图所示RocketMQ架构上主要分为四部分：Producer：充当消息发布的角色，支持分布式集群方式部署。

蒙奇D啊哈·2023-09-10 12:34

Hadoop分布式集群部署

在阿里云临时租了三台服务器，做hadoop部署使用.集群角色分工第1台：hadoop-master角色：NameNode;ResourceManagerAddr：172.26.73.102第2台：hadoop-slave1角色：DataNode;NodeManagerAddr：172.26.73.103第3台：hadoop-slave2角色：DataNode;NodeManagerAddr：172

陈超Terry的技术屋·2023-09-09 16:42

Greenplum UDP连接问题排查与解决

近日遇到Greenplum数据库执行部份SQL会卡住，最终报向某个节点发包失败的错误，此处记录一下排查过程和解决方法。

肝帝三脚猫·2023-09-09 11:13

关于Greenplum Platform Extension Framework(PXF)

本文翻译自https://docs.vmware.com/en/VMware-Greenplum-Platform-Extension-Framework/6.6/greenplum-platform-extension-framework

post_yuan·2023-09-09 11:43

推荐频道

greenplum分布式集群