greenplum分布式集群第9页

hadoop 集群

标签：Hadoop搭建分布式集群环境MapReduceYARNHDFS分布式环境搭建之环境介绍之前我们已经介绍了如何在单机上搭建伪分布式的Hadoop环境，而在实际情况中，肯定都是多机器多节点的分布式集群环境

大诗兄_zl·2023-10-19 21:12

Greenplum6.x-版本变化记录-常用手册

xcSpark·2023-10-19 11:04

虚拟机搭建伪分布式Hadoop集群

虚拟机搭建自己的仿分布式集群linux-hadoop文件配置搭建前提目录结构安装jdk，下载hadoop，我的版本为2.9.2（较稳定的版本）配置环境变量然后source/etc/profile刷新一下同步集群时间设置每个主机的主机名

xiao_feng098·2023-10-19 01:29

分布式集群架构场景化解决⽅案

一、一致性Hash算法简单介绍下Hash算法，⽐如说在安全加密领域MD5、SHA等加密算法，在数据存储和查找⽅⾯有Hash表等,以上都应⽤到了Hash算法。查找效率(时间&空间，时间优先)：顺序查找法（for遍历）。不过缺点明显，用户多浪费空间，需要维护，成本大。使用hash算法实现得以解决。分布式存储例子：集群中有redis1，redis2，redis3三台Redis服务器，查找时候使用hash

190coder·2023-10-18 21:38

第16章 Zookeeper

1、背景：随着架构演进，在分布式集群系统中，配置文件等如果依然放在本地的话会完犊子的，为啥呢？

Eclipse_2019·2023-10-18 09:02

docker-compose部署rabbitmq集群

RabbitMQ的集群以下分类：标准集群：是一种分布式集群，将队列分散到集群的各个节点，从而提高整个集群的并发能力。

p393975269·2023-10-18 03:45

PostgreSQL 技术内幕(二) Greenplum-AO表

序言Greenplum（以下简称GP）是一种基于开源PostgreSQL基础上采用MPP架构的关系型分布式数据库，具有强大的大规模数据分析处理能力。GP有两种存储格式：Heap表和AO表。

HashData酷克数据·2023-10-17 16:12

springCloud-day06

一：事务（经典事务+分布式事务）1.经典事务：是指传统的单机数据库事务，必须具备ACID原则2.分布式事务：现在主流的系统架构都是SOA的架构，以及现在日渐火热的微服务架构中，应用及数据库都会采用分布式集群部署

韩小志·2023-10-17 09:59

python 操作数据库-sqlite篇

为了对自己的工作做个记录，准备对接触到的数据库及相关工具做个通述，因为只是做个引导，所以不会深入去讲，供查阅使用~targetgoon…todosqlite√mysql√redis√mongodb√postgresql&greenplum

晓东邪·2023-10-17 06:33

dask入门（1）

简介：dask是一种分布式集群系统，由于pythonGIL(全局解释锁)的限制，运用多线程时，在同一时刻，只能有一个线程在执行，导致了运用多线程并不会使程序运行速度明显加快，反而由于线程之间的数据传输实现效果并不好

守云开见月明·2023-10-17 01:21

2019-08-07 程序与生活

关于分布式集群：分布式集群生活的应用案例很多，简单拿洗衣服举例；如果一个人的衣服脏了，那们我们自己放到洗衣机里，洗完后自己拿到阳台上，穿上衣架，挂上晾杆晾干；可是一家人的衣服洗完，一个人拿到阳台，穿上衣架

江江江123·2023-10-17 00:34

linux部署minio对象存储、docker部署minio象存储、k8s部署minio象存储

种拓扑结构linux部署minio对象存储linux单节点安装minio-单节点单磁盘minio客户端工具mclinux生产环境-单节点多磁盘部署miniolinux生产环境-多节点多磁盘部署minio集群（分布式集群

MssGuo·2023-10-16 19:45

greenplum定时清理日志任务

1、编写日志清理脚本，删除最后修改20天前的日志文件find/home/gpadmin/gpdata/*/*/pg_log-mtime+20-typef-name"gpdb-*.csv"-execrm{}\;sshfwq2'find/home/gpadmin/gpdata/*/*/pg_log-mtime+20-typef-name"gpdb-*.csv"-execrm{}\;'sshfwq3'f

武宇·2023-10-16 17:34

GreenPlum初窥

介绍greenplum4.3.8.0，基于PostgreSQL8.2.15。

远处的一只猫·2023-10-16 16:47

第二章 SQL参考命令-CLUSTER

Greenplum数据引擎不推荐此操作。

kygoal·2023-10-16 16:46

8 访问数据库

9访问数据库本章主要介绍可用于连接到Greenplum的数据库，以及如何建立一个数据库会话的各种客户端工具。

kygoal·2023-10-16 16:45

11 启用高可用特性

11启用高可用特性容错和Greenplum数据的高可用性功能可配置。有关用于启用高可用性的实用程序的信息，请参阅Greenplum的数据库实用程序指南。

kygoal·2023-10-16 16:45

【青梅资讯】Greenplum Database 7 Beta.4 版本已正式发布

GreenplumDatabaseGreenplumDatabase7Beta.4现已正式发布并提供[下载]。

Greenplum中文社区·2023-10-16 16:15

第 20章定义数据库对象

第20章定义数据库对象本节涵盖了Greenplum的数据库以及如何创建和管理数据库对象的数据定义语言（DDL）。

kygoal·2023-10-16 16:15

GPDB43 Administrator Guide--第五章高可用

第五章高可用一、高可用概述GREENPLUM可以通过一系列方案保证系统的高可用。

cuiyu3003·2023-10-16 16:45

GPDB43 Administrator Guide--第七章扩展greenplum系统

第七章扩展greenplum系统一、greenplum扩展概述系统扩展的几个阶段：1.增加并测试新硬件--安装OS系统、准备greenplum环境、安装greenplum软件；2.初始化新segment

cuiyu3003·2023-10-16 16:45

Minio分布式集群部署（不使用docker）

一、Minio分布式集群搭建（多机器多硬盘）1、环境说明：4台服务器节点数据目录（不能是/root下的）进程/脚本目录10.34.252.87/home/minio/{data1.data2}/home

晴朗711·2023-10-15 22:01

基于docker部署minio分布式集群，多机器多挂载，跟着敲就对了

背景：博客上搜了一遍，试了一圈，不是少符号就是机器、挂载情况不搭，配置完网络不通，最后发现了这篇博友的docker部署文章，终于有了头绪。。。一、准备1、硬件虚拟机硬件配置(内核版本>=4.0)挂载指定端口服务组件172.19.2.368核+16G运行内存、40G系统盘+100G*4磁盘磁盘vdb、vdc、vdd、vde挂载到宿主机/minio/data1到/minio/data49000，900

草莓不苦·2023-10-15 22:27

MinIO 分布式集群搭建

背景阿里云迁移IDC，选型MinIO来替代阿里云OSS，并为K8S提供对象存储服务。简介MinIO是一个基于ApacheLicensev2.0开源协议的对象存储服务。它兼容亚马逊S3云存储服务接口，非常适合于存储大容量非结构化的数据，例如图片、视频、日志文件、备份数据和容器/虚拟机镜像等，而一个对象文件可以是任意大小，从几kb到最大5T不等。MinIO是一个非常轻量的服务,可以很简单的和其他应用的

叨叨软件测试·2023-10-15 21:53

k8s使用minio分布式集群作为存储--基础配置篇

背景：minio分布式集群是单独的服务，并没有被k8s管理，k8s与minio集群在不同的服务器上部署，k8s需要使用minio分布式集群作为k8s集群的配置文件及其他文件的存储介质。

草莓不苦·2023-10-15 21:47

聊聊面试中关于并发问题的应对方案

主题又到面试季了，从群里，看到许多同学分享了自己的面试题目，我也抽空在网上搜索了一些许多公司使用的面试题，目前校招和社招的面试题基本都集中在几个大方向上，主要是：Java基础、并发、JVM、算法、数据库、一些框架、分布式集群等

技术宅不太宅·2023-10-15 18:48

scrapy-redis分布式集群redis配置

#----------------------------------------Redis单机模式-------------------------------------#Redis单机地址REDIS_HOST="172.25.2.25"REDIS_PORT=6379#REDIS单机模式配置参数REDIS_PARAMS={"password":"xxxx","db":0}#----------

沫明·2023-10-15 15:12

分析智能平台VMware Greenplum 7 正式发布！

中国DBA联盟(ACDU)成员，目前服务于工业互联网擅长主流Oracle、MySQL、PG、高斯及Greenplum运维开发，备份恢复，安装迁移，性能优化、故障应急处理等。

IT邦德·2023-10-14 22:04

炫“库”行动-人大金仓有奖征文-金仓分析型数据库KADB分区表的使用

KADB是北京人大金仓信息技术股份有限公司基于开源的greenplum数据库研发的一款分布式关系型数据库，全称是KingbaseAnalyticsDataBase。

liuzhiliang2010·2023-10-14 18:21

Elasticsearch（1）

es的特点1.可以作为一个大型分布式集群（数百台服务器）技术，处理PB级数据，服务大公司；也可以运行在单机上，服务小公司2.将全文检索、数据分析以及分布式技术，合并在了一起，并能对海量

长安十一少·2023-10-14 12:10

navicate连接greenplum数据库教程

准备条件1.已经安装了greenplum数据库。我是在自己电脑CentOS7上安装的单机版。

Elena _泡泡·2023-10-14 03:25

【minio学习笔记】

ErasureCode)5、存储方案二、环境搭建1、单机部署介绍1.1概念1.22单机部署（无纠删码模式）1.3使用Docker单机部署（无纠删码模式）1.4使用Docker单机部署（纠删码模式）2、分布式集群部署介绍

sxsl_lwp·2023-10-13 13:57

关于GP7 release版在麒麟V10信创操作系统编译不过的问题解决

背景大家期盼已久的Greenplum7最终版终于发布了！好消息！！很多同学已经忍不住想快速试用GP7新版本了，同时，为了满足信创要求，需要在国产的操作系统服务器上运行GP。

post_yuan·2023-10-13 13:18

zookeeper的设计原理及使用场景

zookeeper作为一个分布式的服务框架，主要用来解决分布式集群中应用系统的一致性问题，解决分布式环境下多个进程或者多个中间件之间的同步控制，使有序访问某类资源。

wangpf2011·2023-10-13 02:37

Zookeeper特性与节点数据类型详解

1.Zookeeper介绍ZooKeeper是一个开源的分布式协调框架，是ApacheHadoop的一个子项目，主要用来解决分布式集群中应用系统的一致性问题。

so1ucky·2023-10-12 09:44

Hadoop分布式集群搭建教程

目录前言环境准备一、创建虚拟机二、虚拟机网络配置三、克隆虚拟机四、Linux系统配置五、Hadoop的部署配置六、Hadoop集群的启动前言大数据课程需要搭建Hadoop分布式集群，在这里记录一下搭建过程环境准备搭建

韭菜盖饭·2023-10-12 05:12

RocketMQ快速实战以及集群架构详解

简介二、RocketMQ产品特点RocketMQ介绍RocketMQ特点三、RocketMQ快速实战快速实现消息收发命令行快速实现消息收发搭建Maven客户端项目搭建RocketMQ可视化管理服务四、升级分布式集群五

小超同学卷起来·2023-10-12 02:55

分布式锁1：5种方案解决商品超卖的方案的优缺点

在分布式集群、微服务、云原生横行的当下，如何保证不同进程、不同服务、不同机器的线程安全问题。jdk并没有给我们提供既有的解决方案。需要自己通过编写方案来解决，目前主流的实现有以下方式：基于mysq

健康平安的活着·2023-10-12 01:52

Zookeeper基本原理及集群环境搭建

5.2结点类型5.3结点属性6.Zookeeper的Watch机制6.1Watch机制特点6.2通知状态和事件类型1.Zookeeper简介Zookeeper是一个分布式协调服务的开源框架，主要用来解决分布式集群中应用系统的一致性

犀牛_2046·2023-10-11 23:41

1.Zookeeper特性与节点数据类型详解

1.Zookeeper介绍ZooKeeper是一个开源的分布式协调框架，是ApacheHadoop的一个子项目，主要用来解决分布式集群中应用系统的一致性问题。

会code的厨子·2023-10-11 23:30

Zookeeper学习笔记

主要用来解决分布式集群中应用系统的一致性问题，例如怎样避免同时操作同一数据造成

super_pcm·2023-10-11 22:50

springcloud----检索中间件 ElasticSearch 分布式场景的运用

如果对es的基础知识有不了解的可以看es看这个文章就会使用了1.分布式集群场景下的使用单机的elasticsearch做数据存储，必然面临两个问题：海量数据存储问题、单点故障问题。

蓝胖子不是胖子·2023-10-11 17:05

【德哥说库系列】-Oracle 19C容器数据库日常管理

中国DBA联盟(ACDU)成员，目前服务于工业互联网擅长主流Oracle、MySQL、PG、高斯及Greenplum运维开发，备份恢复，安装迁移，性能优化、故障应急处理等。

IT邦德·2023-10-11 16:37

linux中单节点安装greenplum数据库

目录一、安装包准备二、关闭防火墙三、安装greenplum依赖包四、添加配置五、新建greenplum用户六、安装greenplum安装包七、设置环境变量八、权限互通九、修改数据库配置文件十、初始化数据库十一

zkkkkkkkkkkkkk·2023-10-11 10:58

达梦数据库MPP搭建

澎湃溜达水·2023-10-11 10:12

Docker Swarm

Swarm默认内置有加密的分布式集群存储、加密网络、公用TLS、安全集群接入令牌以及一套简化数字证书管理的PKI，用户可以自如地添加或删除节点。

马宁宁118·2023-10-10 22:38

Greenplum——Master自动fail-over高可用方案

1keepalived+虚拟ip方案1master配置vim/etc/keepalived/keepalived.conf!ConfigurationFileforkeepalivedglobal_defs{router_idgpm01}vrrp_scriptchk_gp{script"/home/gpadmin/bin/check_gp.sh"masterinterval5}vrrp_insta

CarsonBigData·2023-10-10 18:51

rocketmq的安装及使用

概念模型：Producer：消息发布的角色，支持分布式集群方式部署。Producer通过MQ的负载均衡模块选择相应的Broker集群队列进行消息投递，投递的过程支持快速失败并且低延迟。

叫我11·2023-10-10 02:37

《黑马程序员》大数据集群（Hadoop生态）安装部署——图文讲解

HadoopHDFS提供分布式海量数据存储能力HadoopYARN提供分布式集群资源管理能力HadoopMapReduce提供分布式海量数据计算能力前置要求请确保完成了集群化环境前置准备章节的内容即：JDK

懒羊羊夸夸~·2023-10-10 02:41

测试mysql与greenplum实时同步

测试mysql与greenplum实时同步一.测试服务器环境准备1.集群服务器ip及主机名192.168.10.225artemis.hadoop.com192.168.10.226uranus.hadoop.com192.168.10.227ares.hadoop.com192.168.10.228bird.hadoop.com192.168.10.229lover.hadoop.com

李春田·2023-10-08 21:03

推荐频道

greenplum分布式集群