greenplum分布式集群第18页

大数据OLAP查询引擎选型对比

1、常用OLAP查询引擎目前大数据比较常用的OLAP查询引擎包括：Presto、Impala、Druid、Kylin、Doris、Clickhouse、GreenPlum等。

shinelord明·2023-04-20 02:30

Ubuntu18.04下配置hadoop完全分布式集群

集群配置信息：目录1准备工作1.1克隆三台虚拟机1.1.1更改主机名1.1.2配置静态ip1.1.3更改主机映射1.1.4配置ssh1.2安装jdk和hadoop并配置环境变量2配置集群信息2.1修改core-site.xml2.2HDFS的配置文件：2.3配置YARN文件2.4配置MapReduce文件2.5配置slaves文件3集群启动1准备工作1.1克隆三台虚拟机更改每台虚拟机的主机名，映射

023的小陈·2023-04-20 01:31

技术分享 | OceanBase 数据处理之控制文件

作者：杨文DBA，负责客户项目的需求与维护，会点数据库，不限于MySQL、Redis、Cassandra、GreenPlum、ClickHouse、Elastic、TDSQL等等。

ActionTech·2023-04-19 22:05

微服务 - Redis缓存 · 数据结构 · 持久化 · 分布式 · 高并发

一、分布式解决Session的问题在单站点中，可以将在线用户信息存储在Session中，随时变更获取信息；在多站点分布式集群如何做到Session共享呢？架设一个Session服务，供多服务使用。

海害嗨·2023-04-19 20:12

k8s学习(一)：k8s入门概念

https://zhuanlan.zhihu.com/p/43266412https://zhuanlan.zhihu.com/p/292081941k8s的作用和解决什么问题由于docker并不具备分布式集群部署

笔记本一号·2023-04-19 16:01

故障分析 | cassandra 集群数据故障转移

作者：杨文DBA，负责客户项目的需求与维护，会点数据库，不限于MySQL、Redis、Cassandra、GreenPlum、ClickHouse、Elastic、TDSQL等等。

ActionTech·2023-04-19 13:47

Redis入坟（六）分布式集群，概念、原理、实操

课程目标1、掌握Redis主从复制的配置和原理2、掌握Redis哨兵机制（Sentinel）原理和实战3、掌握Redis分布式的各种方案对比，包括客户端Sharding、代理Proxy和RedisCluster1为什么需要Redis集群性能Redis本身的QPS已经很高了，但是如果在一些并发量非常高的情况下，性能还是会受到影响。这个时候我们希望有更多的Redis服务来完成工作。扩展第二个是出于存储

源码之路·2023-04-19 12:21

Java架构师大型分布式高并发项目搭建

联系作者：技术交流，定期分享Java硬核技术干货Java架构师面试题汇总：10万字208道Java经典面试题总结(附答案)添加公众号：滴石编程1、大型高并发系统架构高并发的系统架构都会采用分布式集群部署

滴石编程·2023-04-19 11:35

国际化分布式WEB UI自动化测试平台搭建

国际化分布式WEBUI自动化平台一背景二特色功能三系统架构设计&框架选型自动化测试框架SeleniumWebDriverSeleniumGrid四功能介绍平台化国际化分布式并发执行分布式集群搭建并发跨环境分支的用例管理合并同步

易之清·2023-04-19 10:40

Hadoop_day01_Zookeeper概述及安装

Zookeeper1.Zookeeper的概述Zookeeper是一个开源的分布式协调服务框架，主要用来解决分布式集群中应用系统的一致性问题和数据管理问题2.Zookeeper的特点Zookeeper本质上是一个分布式文件系统

chipeize·2023-04-19 03:38

Zookeeper和Redis分布式锁对比

1、什么是分布式锁锁，解决的是多线程或多进程情况下的数据一致性问题；分布式锁，解决的是分布式集群下的数据一致性问题。

小石潭记丶·2023-04-19 01:36

【李老师云计算】实验一：Hadoop伪分布式集群部署与Eclipse访问Hadoop进行单词计数统计

索引前言实验内容1.安装虚拟机1.1安装与激活1.2★解决使用虚拟机蓝屏(绿屏)2.安装CentOS2.1下载CentOS2.2VMware新建虚拟机2.3安装CentOS(包括GUI、主机名)2.4★解决已经创建虚拟机改主机名3.VMWare网络配置3.0使用VI编辑器和VMware3.0.1使用VI编辑器3.0.2使用VMware3.1虚拟机IP设置3.2验证设置成功3.3★解决ens33没有

WtcSky·2023-04-18 07:04

(二) 配置开发环境 - Hadoop安装与伪分布式集群搭建

**Hadoop安装与伪分布式集群搭建一.安装JDKhttps://blog.csdn.net/weixin_45873289/article/details/104945583注：这链接里面还有jdk

detonator1045·2023-04-18 05:43

hadoop 2.0 hdfs 完全分布式安装(HA)

hadoop2.0hdfs完全分布式安装(HA)NN-1NN-2DNZKZKFCJNNnode08***node09*****node10***node11**【1】在Hadoop1.0hdfs完全分布式集群搭建基础上搭建

十指演绎悲伤·2023-04-18 05:43

Hadoop2.0分布式集群的平台搭建

一、Hadoop集群安装前的准备基础环境四台Centos6.5IP地址：192.168.174.128192.168.174.129192.168.174.130192.168.174.131四台主机新建hadoop用户并实现ssh免密登陆iptables关闭和selinux为disabled1.修改主机名和ip地址映射为了后面操作方便，修改主机名分别为hadoop01、hadoop02、hado

weixin_33972649·2023-04-18 05:42

Hadoop 2.0完全分布式集群搭建方法（CentOS7+Hadoop 2.7.7）

本文详细介绍搭建4个节点的完全分布式Hadoop集群的方法，Linux系统版本是CentOS7，Hadoop版本是2.7.7，JDK版本是1.8。一、准备环境1.在VMwareworkstations上创建4个Linux虚拟机，并配置其静态IP。有关【创建Linux虚拟机及配置网络】，请参考这里。2.配置DNS（每个节点）编辑配置文件，添加主节点和从节点的映射关系。#vim/etc/hosts19

about9314·2023-04-18 05:10

Hadoop2.0全分布式集群架构

Hadoop安装1.创建hadoop用户组;$sudoaddgrouphadoop记下这里为hadoop用户设置的密码，后面使用hadoop用户登录时需要用到。2.创建hadoop用户;$sudoadduser-ingrouphadoophadoop3.给hadoop用户添加权限，打开/etc/sudoers文件;$sudogedit/etc/sudoers给hadoop用户赋予root用户同样的

狮锅艺·2023-04-18 05:40

Greenplum数据库执行器——PartitionSelector执行节点

为了能够对分区表有优异的处理能力，对于查询优化系统来说一个最基本的能力就是做分区裁剪partitionpruning，将query中并不涉及的分区提前排除掉。如下执行计划所示，由于单表谓词在parititonkey上，在优化期间即可确定哪些可以分区可以避免访问，即静态pruning。explainselect*fromtestwherecollecttime>'2023-02-2200:00:00

肥叔菌·2023-04-18 04:58

在阿里云ECSCentos7下搭建Hadoop伪分布式集群并连接本地eclipse

前言：本文主要介绍如何在阿里云平台上搭建伪分布式集群并在本地使用eclipse对分布式集群（HDFS）进行连接。

可有瑞奥色提·2023-04-17 16:29

【Docker】Docker安装Hadoop分布式集群

Docker安装分布式Hadoop集群一、准备环境1.查看docker的hadoop镜像dockersearchhadoop2.拉取stars最多的镜像dockerpullsequenceiq/hadoop-docker3.拉取完成后查看镜像是否已到本地dockerimages4.运行第一个容器hadoop102dockerrun--namehadoop102-d-hhadoop102-p9870

牧码文·2023-04-17 02:18

Dubbo(超级无敌认真好用，万字收藏篇!!!!)

文章目录Dubbo前言大型互联网架构目标集群和分布式集群分布式架构演进1Dubbo概述1.1Dubbo概念1.2Dubbo架构图2Dubbo快速入门2.1Zookeeper的安装2.2springBoot

@活着笑·2023-04-16 21:59

集群规划——脑裂

脑裂问题，就是同一个集群中的不同节点对于集群的状态有了不一样的理解，脑裂问题是分布式集群环境中必然会遇到的问题。那么，来看一个有两个节点的Elasticsearch集群的简单情况。

刘小树树树树·2023-04-16 16:07

hadoop伪分布式集群搭建

一、群环境准备1.1三台虚拟机关闭防火墙三台机器执行以下命令（root用户来执行）serviceiptablesstopchkconfigiptablesoffimage.png1.2三台虚拟机关闭防火墙vim/etc/selinux/configimage.png1.3三台机器更改主机名vim/etc/sysconfig/networknode01node02node031.4三台机器做主机名与

染墨安然·2023-04-16 15:09

数据库架构之【MySQL8+MyCat2+Keepalived】RDBMS 读写分离和分库分表集群方案

MyCat是一款开源（遵循ApacheLicense2.0协议）的大数据库集群中间件，用于搭建MySQL数据库的分布式集群，实现分库分表功能，解决数据库中海量数据存储和查询性能的问题。

张毅SOHO·2023-04-16 15:42

greenplum配置高可用_GREENPLUM介绍之数据库管理（七）- 配置数据库高可用性之master镜像 | 学步园...

GREENPLUM介绍之数据库管理(七)-配置数据库高可用性之master镜像master镜像是通过把primarymaster对应的standbymaster放置到不同的物理主机实现的。

weixin_39818550·2023-04-16 10:41

基于docker部署minio分布式集群

首先准备三台服务器都下载docker进行拉取minio的镜像dockerpullminio/miniodockerimages查看所有镜像然后配置本地解析vim/etc/hosts注意看一下三台服务器时间是否同步date关闭防火墙和selinux接下来部署minio集群注意docker部署集群模式时必须指定-–net=host参数，使用主机网络，使用端口映射无法创建集群MINIO_ACCESS_K

争取不加班！·2023-04-16 06:25

离线数据计算3-hadoop安装

配置hadoop完全分布式集群部署规划集群部署规划首先配置第一台然后配置好了分发给其他台前提是配置好了jdk解压tar-zxvfhadoop-2.7.2.tar.gz-C/opt/module/配置profile

程式梦·2023-04-16 04:12

06-分布式和集群

1.Hash算法Hash算法在很多分布式集群产品中都有应⽤，⽐如分布式集群架构Redis、Hadoop、ElasticSearch，Mysql分库分表，Nginx负载均衡等普通Hash算法存在⼀个问题，

安然在路上·2023-04-16 01:30

Spring Cloud 阿里RocketMQ Binder

它基于高可用分布式集群技术，提供低延迟、高稳定性的消息发布和订阅服务。

吕布辕门·2023-04-15 02:47

Docker学习(14) 使用Docker Stack部署应用(下)

需要部署前置环境：swarm模式：应用将采用DockerStack部署，stack依赖swarm模式标签：某个swarmworker节点需要自定义标签密钥：应用所需要的密钥需要在部署之前完成搭建应用试验环境分布式集群存储

August________·2023-04-14 22:31

Zookeeper

主要用来解决分布式集群应用系统的一致性问题。下面简称zkzk服务底层实现是java，想要在服务器中使用zk，就需要安装jdk环境其次，zk单独使用是没有任何意义的。

白＆夜·2023-04-14 19:22

Zookeeper服务器搭建

Zookeeper服务器的搭建通常分为3种模式：单节点模式，伪集群模式和分布式集群模式。

Mary Ling·2023-04-14 19:20

Spark的安装及配置

1安装说明在安装spark之前，需要安装hadoop集群环境，如果没有可以查看：Hadoop分布式集群的搭建1.1用到的软件软件版本下载地址linuxUbuntuServer18.04.2LTShttps

foochane·2023-04-14 17:59

1.Spring Cloud (Hoxton.SR8) 学习笔记—微服务基础知识、Spring Cloud基础知识

什么是分布式集群?分布式的CAP原则？组件-什么是服务降级与服务熔断？微服务中如何实现远程调用？REST和RPC远程调用有什么区别？

页川叶川·2023-04-14 00:22

Redis基本知识

目录1、介绍Redis默认16个数据库2、限流的方法和思想2.1计数器2.2漏桶2.3令牌桶3、单点应用限流和分布式集群限流1、介绍Redis默认16个数据库安装完Redis界面化软件后，打开才发现原来

珂兮·2023-04-13 17:28

分布式数据库（Elasticsearch、Redis、MySQL分布式集群等）场景选型和应用难点

近年来，随着国际信息安全形式的日益严峻，国家信息安全策略逐步深入。因此，一行两会连续针对金融业数据库技术受制于人的严峻形势出台了相关政策，以满足构建安全可靠可控的信息技术体系的要求。纵观近年来普惠金融的发展，多用户、低额的客单价带来的主要挑战是数据量、交易额的大幅提高，并伴随着数十倍的交易高峰压力以及交易复杂度的增加。而传统数据库在处理此类应用场景的时，在扩展性、性能、吞吐量和可靠性等方面遇到了明

里奥ii·2023-04-12 13:54

某金融大数据平台数据同步方案

Greenplum数据导入方案Case2：tsale_staticshares表导数导数说明：存储格式：parquet压缩：snappy并行度：3Impala查询单表统计时间：4.28s空间开销：约1G

大勇若怯任卷舒·2023-04-12 04:57

分布式系统

因为分布式集群里的服务器是通过内部网络松散耦合，各节点之间的通讯有一定的网络开销，因此分布式系统在设计上尽可能减

马梦里·2023-04-12 01:24

2023腾讯云轻量应用服务器性能评测

相对于CVM云服务器轻量服务器更适合轻量级的应用，轻量服务适合中小企或个人开发者用于搭建We网站b应用、小程序、APP以及开发测试环境等，云服务器CVM适用于高并发网站、复杂分布式集群应用、大数据分析等架构复杂的使用场景

运维FUN·2023-04-11 17:09

Greenplum 扩容

Greenplum扩容节点步骤概述greenplum扩容segment可以分为2类：单机上的seg增加，我们称之为“纵向扩展”单机不变，通过增加机器，我们称之为“横向扩展”下面详细介绍下这两种扩容方式的具体步骤和方法

那一年天空很高风很清澈·2023-04-11 15:38

python环境安装H2O

H2O-3是开源的分布式机器学习平台，可以安装在用户的分布式集群系统中，特色是AutoML，自动建模，进行超参数调整，生成模型的排行榜。

rona1·2023-04-11 08:20

第二步：hadoop 完全分布式集群安装

1.下载hadoopzookeeper-3.4.7.tar上传到/home底下2.tar-zxvfzookeeper-3.4.7.tar3.配置hadoop环境变量vim/etc/profile因为hadoop依赖java环境必须先配置JAVA_HOME加入环境变量exportHADOOP_HOME=/home/hadoop-2.7.1/exportPATH=$PATH:$HADOOP_HOME/

微生命·2023-04-11 04:16

pyspark（1）介绍与安装概要

pyspark的模块6.pyspark的安装1.什么是pysparkPySpark是一个用Python编写的Spark库，用于使用ApacheSpark功能运行Python应用程序，使用PySpark，我们可以在分布式集群

coding_xian·2023-04-11 03:23

zab协议的zookeeper领导者选举与数据同步

在一个zookeeper分布式集群中，各个进程之间通过zab协议进行通信。

ImushroomT·2023-04-10 18:56

RocketMQ原理之高可用

RocketMQ中的高可用机制RocketMQ分布式集群是通过Master和Slave的配合达到高可用性的。

da-yang·2023-04-10 14:19

TDengine高可用分布式集群详解

本文正在参与“拥抱开源|涛思数据TDengine有奖征稿：投稿地址。文章目录一、前言二、举个栗子1、努力工作的小T2、可怜的小T3、小T的老婆小D登场4、小T创业了5、平衡分配任务6、公司越做越大三、分布式和集群概览1、单点1）单点概念2）单点故障2、主从机制3、集群1）集群概念2）节点的概念4、负载均衡5、分布式系统1）高可用2）高可靠3）高性能4）高并发四、TDEngine的分布式架构1、TD

英雄哪里出来·2023-04-10 14:43

Linux实战——Hadoop安装部署

三类组件HadoopHDFS：提供分布式海量数据存储能力HadoopYARN：提供分布式集群资源管理能力HadoopMapReduce：提供分布式海量数据计算能力前置要求请确保完成了集群化环境前置准备即

会不了一点·2023-04-10 04:37

大数据组件安装过程

zookeeper安装的三种模式-jxwch-博客园1、搭建HBase完全分布式集群-365upit-博客园Hadoop集群安装配置教程_Hadoop2.6.0_Ubuntu/CentOS_给力星Storm

Oran_5590·2023-04-09 23:45

在ubuntu环境下MPI分布式集群搭建（1）

一、准备条件：两台或者两台以上的ubuntu机器二、创建SSH信任连接1、在两台机子上建立相同的用户jeneo，主机名分别为lat和master，密码都要相同，这里为了方便可以设置为123456，两并且分别记录两台机器的IP。2、更改/etc/hosts文件（sudo）vim/etc/hosts如果不具备更改权限，则需要在前面加上sudo命令在打开的目录下编辑为下面内容：127.0.0.1loca

Li--AiTao·2023-04-09 22:48

在ubuntu环境下MPI分布式集群搭建-安装MPICH2（2）

在上一篇文章里，我们已经基本建立好了.ssh协议集群，接下来我们安装MPICH21、解压缩tar-zxvfmpich2-1.0.8.tar.gz2、进入mpich2解压到的目录里cdmpich2-1.0.83、创建安装目录mkdir/home/jeneo/mpich安装软件的三个基本步骤——检查配置、编译、安装，这次在./configure后设置了安装目录sudo./configure--pref