greenplum分布式集群

面试题大全1.5-微服务部分

微服务部分三.微服务部分相关概念什么是集群8-23什么是负载均衡8-23什么是分布式8-23分布式集群举例集群和分布式的区别，分别解决什么问题8-24说一下你理解的微服务8-24什么是CAP理论，哪些技术用到
LlRr·2023-11-25 08:52

AnalyticDB for PostgreSQL 实时数据仓库上手指南

版权本文涉及的产品云原生数据仓库ADBPostgreSQL，4核16G50GB1个月推荐场景：构建的企业专属Chatbot立即试用简介：AnalyticDBforPostgreSQL提供企业级数据仓库云服务，基于开源Greenplum
行走在云端z·2023-11-24 16:05

Hadoop原生态版安装

最近在学厦门大学的《大数据技术原理与应用》公开课，参考学习内容自己部署了一个Hadoop平台，整个分布式集群分一个Master服务器和两个Slave服务器，方便后面学习。
SMILE_NO_09·2023-11-24 09:27

Greenplum的数据库年龄检查处理

概述Greenplum是基于Postgresql数据库的分布式数据库，而PG数据库在事务及多版本并发控制的实现方式上很特别，采用的是递增事务id的方法，事务id大的事务，认为比较新，反之事务id小，认为比较旧
云平_Stephen·2023-11-24 02:02

伪分布式系列 - 第一篇 - hadoop-3.2.0环境搭建

目录Hadoop的三种运行模式单机模式伪分布式模式全分布式集群模式环境准备系统环境ssh免密码连接防火墙关闭jdk安装配置相关环境变量配置安装包下载Hadoop配置解压hadoop文件配置linux环境配置启动服务格式化
rolin-刘瑞·2023-11-23 15:21

hadoop搭建全分布式集群-虚拟机

hadoop搭建全分布式集群-虚拟机一、本次搭建环境说明VMwareFusionmaster：ubuntu16.0464位ip:172.16.29.11slave1：ubuntu16.0464位ip:172.16.29.12slave1
皓阳当空·2023-11-23 14:46

部署SeaTunnel分布式集群

部署SeaTunnel分布式集群一、部署SeaTunnel引擎二、配置环境变量三、配置SeaTunnelEngineJVM四、配置SeaTunnel1.备份2.Slots3.检查点五、配置SeaTunnel
最笨的羊羊·2023-11-23 14:19

Hadoop学习笔记：运行wordcount对文件字符串进行统计案例

文/朱季谦我最近使用四台Centos虚拟机搭建了一套分布式hadoop环境，简单模拟了线上上的hadoop真实分布式集群，主要用于业余学习大数据相关体系。
朱季谦·2023-11-23 13:38

怎么用feign远程调用别人的接口_Feign - HTTP接口调用- 单独使用 - 实战

在分布式集群的环境下，用户首先通过短连接登录Web服务器。Web服务器在
weixin_39582569·2023-11-22 19:05

将mysql表数据同步到pg库_MySQL准实时同步到PostgreSQL, Greenplum的方案之一 - rds_dbsync...

PostgreSQL,Greenplum,rds_dbsync,binlogrds_dbsync是阿里云数据库内核组开源的一个数据实时同步工具。
铁血中锋郭敬明·2023-11-22 13:05

Greenplum 元数据常用查询语句

1、获取集群中数据库信息1.1集群中的创建的数据库信息selectdatnamefrompg_databasewheredatnamenotin('template1','template0','postgres');1.2查看每个数据库的储存大小selectpg_size_pretty(pg_database_size('databases'))asdatabasesize,'databases
麻花2013·2023-11-22 11:37

获取Greenplum 的元数据信息，schema下面的表和列信息

查询指定schema下面的表select'|'||t.tablenameastab_name,coalesce(replace(obj_description((t.SCHEMANAME||'."'||t.TABLENAME||'"')::regclass),'|',''),'')||'|'AStab_descfrompg_tablestwheret.schemaname='dcf_user'an
麻花2013·2023-11-22 11:30

hadoop3.x系列完全分布式集群部署（集群各节点设置与端口号的设置）

（三台虚拟机必须在同一网段）详细配置信息请看hadoop3.x系列完全分布式集群部署（虚拟机网络连接、jdk安装、hadoop安装）_杂乱无章的我的博客-CSDN博客一：集群部署规划NameNode与SecondaryNameNode
杂乱无章的我·2023-11-22 09:10

Apache Airflow (十三) ：Airflow分布式集群搭建及使用-原因及

博主个人B栈地址：豹哥教你大数据的个人空间-豹哥教你大数据个人主页-哔哩哔哩视频目录1.Airflow分布式集群搭建原因2.Airflow分布式集群其他扩展2.1扩展Worker节点2.2扩展Master
IT贫道·2023-11-22 06:42

【生产级实践】Docker部署配置Hadoop3.x + HBase2.x实现真正分布式集群环境

网上找了很多资料，但能够实现Docker安装Hadoop3.X和Hbase2.X真正分布式集群的教程很零散，坑很多，把经验做了整理，避免趟坑。
麦神-mirson·2023-11-22 04:56

集群-ntp时间同步服务

本不想做运维的奈何现在项目缺人手，不仅需求多，而且还需要教学弟，这篇文章主要是记录在分布式集群中出现的hive或者hbase时间同步错误。
yunpiao·2023-11-21 19:46

基于Redis组件之分布式RateLimiter限流

上文我们介绍了RateLimiter文章路径针对IP来限流的方式，上文的限流方案，只针对单应用情况，分布式集群下就不能使用上文的方式，分布式下的限流方案有很多种,这边展示的是Redis的封装redission
BugRoot·2023-11-21 15:41

阿里云企业级互联网架构实践系列-RocketMQ的商业版本MQ

AliwareMQ(MessageQueue)是RocketMQ的商业版本，是阿里云商用的专业消息中间件，是企业级互联网架构的核心产品，基于高可用分布式集群技术，搭建了包括发布订阅、消息轨迹、资源统计、
技术与健康·2023-11-21 13:47

GreenPlum数据库调研及架构介绍

简介http://docs-cn.greenplum.org/v6/admin_guide/intro/arch_overview.htmlGreenplum数据库是一种大规模并行处理（MPP）数据库服务器
Aiky哇·2023-11-21 11:48

数据迁移教程 | 从 Postgre/Greenplum 到 DolphinDB

PostgreSQL是一种开源的关系型数据库管理系统（DBMS），是最广泛使用的开源数据库之一。它允许用户通过添加自定义函数、数据类型和索引等方式扩展其功能，支持ACID事务，并使用多版本并发控制(MVCC）来管理并发访问，具有优良的安全性和可扩展性。但是，由于存在并发问题和扩容问题等，PostgreSQL的发展仍面临着许多瓶颈。DolphinDB是一种高效、分布式的数据管理和分析平台，集成了功能
DolphinDB智臾科技·2023-11-21 10:00

Hadoop伪分布式集群搭建

一、切换到root用户su-root二、关闭selinux：vim/etc/selinux/configSELINUX=disabled三、切换到hadoop用户，配置免密登陆。cd进入hadoop用户的家目录ssh-keygen-trsa[输入完后连按4个回车]sshnode100[yes，输入hadoop用户的密码]ssh-copy-idnode100[输入hadoop用户的密码]四、解压安装
皮卡丘要进化·2023-11-21 02:13

redission的缺点

Redission锁可设置等待获取锁时间，redission具有看门狗机制Redisson基于redis实现了Lock接口的分布式集群锁，是可重入锁，功能强大，源码复杂，比redis单机模式分布式锁可靠
小甄笔记·2023-11-20 23:45

hive01--hive的安装及配置

如果hadoop没有安装的请参考：hadoop01--Hadoop伪分布式集群搭建_码到成龚的博客-CSDN博客hive不像hadoop，Kafka，zookeeper那样需要搭建集群，我们只需要在两个安装即可
码到成龚·2023-11-20 20:58

docker-compose一键实现本机minio分布式集群部署，并实现traekfix的代理

docker-compose快速实现本机minio分布式集群部署，并使用traefik代理暴露统一api端口条件安装Docker：在使用DockerCompose之前，需要先安装Docker。
Xian-dayandnight·2023-11-20 15:22

HDFS完全分布式集群搭建与配置及常见问题总结

思路：1.准备3台虚拟机（静态IP，IP映射，主机名称，防火墙关闭，普通用户创建等等）2.安装JDK，配置环境变量3.安装Hadoop，配置环境变量4.配置免密登录5.编写同步脚本，配置集群(前三步已完成)搭建集群步骤1.首先要关闭防火墙systemctlstopfirewalldsystemctldisablefirewalldsystemctlstatusfirewalld2.还要关闭SELi
HUNG4050·2023-11-20 12:03

*HDFS完全分布式集群搭建与配置及常见问题总结*

小组介绍：哈喽大家好！我们是---哈了个Doop小组，接下来为大家做一下小组介绍。一共有六个成员。主要特点是由一名男生和五名女生组成，又称为“一汉娘子组”，由无所不能且帅气的文组长带领。成员有：优秀的诺同学和芝同学、有创意的灵同学、两位颜值担当的杰同学和张同学。组员介绍已完毕。使用电脑时很多朋友会发现一台计算机虽然可以安装多个操作系统，但是对电脑的硬件有着极大的要求，而虚拟机的出现则完美的解决了这
哈了个Doop·2023-11-20 12:26

三十分钟学会zookeeper

zookeeper一、前提知识集群与分布式集群：将一个任务部署在多个服务器，每个服务器都能独立完成该任务。
地球魔·2023-11-20 07:59

zookeeper基础教程

一、关于zookeeperZookeeper作为一个分布式的服务框架，主要用来解决分布式集群中应用系统的一致性问题，它能提供基于类似于文件系统的目录节点树方式的数据存储，Zookeeper作用主要是用来维护和监控存储的数据的状态变化
weixin_30475039·2023-11-20 03:10

Python大数据之linux学习总结——day11_ZooKeeper

本质上是一个分布式的小文件存储系统ZooKeeper作用:主要用来解决分布式集群中应用系统的一致性问题。ZooKeeper结构:采用树形层次结构，ZooKeeper树中的每个节点被称为—Znode。
笨小孩124·2023-11-19 20:50

hgdw安装教程

Greenplumdocs:http://gpdb.docs.pivotal.io/580/utility_guide/admin_utilities/gpstate.html找三台centos7的虚拟机
格來羙、日出·2023-11-19 12:31

大数据基础设施Apache Hadoop简介

一、项目起源在数据量很大的情况下，单机的处理能力无法胜任，必须采用分布式集群的方式进行处理，而用分布式集群的方式处理数据，实现的复杂度呈级数增加。
chenhjia·2023-11-19 10:10

2023.11.18 - hadoop之zookeeper分布式协调服务

本质上是一个分布式的小文件存储系统ZooKeeper作用:主要用来解决分布式集群中应用系统的一致性问题。
白白的wj·2023-11-19 08:41

openGauss通过VIP实现的故障转移

中国DBA联盟(ACDU)成员，目前服务于工业互联网擅长主流Oracle、MySQL、PG、高斯及Greenplum运维开发，备份恢复，安装迁移，性能优化、故障应急处理等。
IT邦德·2023-11-19 08:36

Ora2Pg工具迁移Oracle到openGauss

中国DBA联盟(ACDU)成员，目前服务于工业互联网擅长主流Oracle、MySQL、PG、高斯及Greenplum运维开发，备份恢复，安装迁移，性能优化、故障应急处理等。
IT邦德·2023-11-19 04:58

服务搭建篇(六) 搭建基于Kafka + Zookeeper的集群

一.Zookeeper1.什么是ZookeeperZooKeeper是一个开源的分布式协调框架，是ApacheHadoop的一个子项目，主要用来解决分布式集群中应用系统的一致性问题。
lingering fear·2023-11-18 20:32

TPC-B测试：Greenplum 6版本比5版本到底好了多少？

了解更多Greenplum技术干货，欢迎访问Greenplum中文社区网站pgbench简介:pgbench是一种在PostgreSQL上运行基准测试的简单程序。
Greenplum中文社区·2023-11-18 19:39

springcloud netty-webSocket分布式集群方案

1.启动多个netty-websocket服务，端口不一样，通过gateway或nginx做负载均衡配置权重，经测试客户端连接一个节点后，会固定锁定在一个节点，后续操作不会再负载均衡到其他节点上2.消息通过MQ发布订阅模式发送到每个节点，然后推送给客户端3.每个节点的session不能通过redis共享，这个思路不可行4.要改大linux的最大文件打开数上限，默认是10245.因为是根据ip加端口
lqz1993·2023-11-17 14:31

Mysql到Greenplum数据迁移方案

使用开源组件mysql2pgsql进行mysql到GP的数据迁移：下载mysql2pgsql下载地址配置mysql和gp连接信息配置文件，参考配置文件以迁移表potluck为例此处测试版本为mysql5.7，mysql当前最新版本为8.0A.全局数据迁移mysql-uroot-p登录数据库进入test1数据库usetest1，并找到要迁移的表信息：MariaDB[test1]>DESCRIBEpo
windtalkerwy·2023-11-17 12:16

Ray 分布式简单教程（1）

Ray主要作用就是提供一个调度平台，能够将各个分布式集群以及远程云端的服务器资源调度管理，只需稍加改动，就能将单机运行的代码部署到大规模集群上。
求则得之，舍则失之·2023-11-17 06:06

大数据分布式集群搭建（5）

下面我们来操作大数据中的重头戏Hadoop1.HADOOP背景介绍1.1什么是HADOOP1.HADOOP是apache旗下的一套开源软件平台2.HADOOP提供的功能：利用服务器集群，根据用户的自定义业务逻辑，对海量数据进行分布式处理3.HADOOP的核心组件有A.HDFS（分布式文件系统）B.YARN（运算资源调度系统）C.MAPREDUCE（分布式运算编程框架）4.广义上来说，HADOOP通
KongX_B·2023-11-17 03:25

Linux学习_006_JavaEE 程序员常用 linux 命令整理

JavaEE：后台应用都会涉及到linux系统、应用程序的部署、运维、分布式集群、大数据、云计算、…虚拟机：虚拟出来的计算机（Linux、Windows、MacOS）虚拟机软件：用来产生虚拟机的一个软件
黑泽君·2023-11-16 21:25

Redis分布式锁实现及其Redis性能优化

在分布式集群环境下，我们就需要使用分布式锁来解决数据一致性问题。分布式锁可以用Redis或zookeeper。本节我们介绍的Redis的分布式锁实现。
秋忆侬sonny·2023-11-16 04:02

Zookeeper安装部署

主要用来解决分布式集群中应用系统的一致性问题。ZooKeeper本质上是一个分布式的小文件存储系统。提供基于类似于文件系统的目录树方式的数据存储，并且可以对树中的节点进行有效管理。
一个天蝎座 白勺 程序猿·2023-11-15 21:32

回顾丨2021数据库大咖讲坛（第6期）视频&PPT&互动问答

大会邀请来自中信建投证券股份有限公司、云和恩墨、PingCAP、Greenplum的技术专家，就Oracle中新增字段的点点滴滴、数据库性能提升之SQL优化、TiDB优化器原理介绍及调优实践案例分享、Greenplum
数据和云·2023-11-15 18:26

腾讯云部署docker-compose minio分布式集群部署

先看效果图腾讯云部署先开放端口：190001900190009001大概的目录是这样：先创建好目录docker-compose.yam:#指定的docker-compos的版本，这个需要和docker版本相适配,对应关系参考https://docs.docker.com/compose/compose-file/compose-file-v3/version:‘3.8’Settingsandcon
qq_32617639·2023-11-15 17:36

搭建Hadoop伪分布式集群

【实验内容】1.构建Linux系统环境，在Windows系统上安装Linux虚拟机，建议电脑比较新或者配置内存8G以上的电脑可以选择虚拟机安装。2.在Linux环境下完成伪分布式环境的搭建，并运行Hadoop自带的WordCount实例检测是否运行正常。【实验目的】1.掌握Linux虚拟机安装方法。Hadoop在Linux操作系统上运行可以发挥最佳性能，鉴于目前很多学生可能正在使用Windows操
m0_58540923·2023-11-15 05:13

大数据技术栈-Hadoop3.3.4-完全分布式集群搭建部署-centos7（完全超详细-小白注释版）虚拟机安装+平台部署

目录环境条件：1、安装虚拟机（已安装好虚拟机的可跳转至二、安装JDK与Hadoop）（1）直接新建一台虚拟机（2）首次启用虚拟机，进行安装一、集群前置环境搭建（三台机器分别设置hostname、网卡（ip）配置、ssh免密登录）1、查看一下本机与虚拟机的网卡和ip信息（1）首先，查看本机的网卡配置，使用cmd查看ipconfg，找到VMware的虚拟网卡，查看ip（2）查看虚拟机的网卡配置和网络信
Hao.715·2023-11-15 05:43

Hadoop完全分布式安装

Hadoop完全分布式安装前言之前有搭建过一次Hadoop完全分布式集群但是没有记录，最近开始着手自己搭个模拟数仓需要搭建集群，趁此机会记录一下搭建的过程。
薇安娜·2023-11-15 05:43

Centos7搭建hadoop3.3.4分布式集群

1、背景最近在学习hadoop，本文记录一下，怎样在Centos7系统上搭建一个3个节点的hadoop集群。2、集群规划hadoop集群是由2个集群构成的，分别是hdfs集群和yarn集群。2个集群都是主从结构。2.1hdfs集群规划ip地址主机名部署服务192.168.121.140hadoop01NameNode,DataNode,JobHistoryServer192.168.121.141
JAVA序码·2023-11-15 04:10

k8s实践

k8s作为分布式集群部署方案，是一个主流的部署方案。
shlhhy·2023-11-14 13:31
上一页 2 3 4 5 6 7 8 9 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他