greenplum分布式集群第27页

Hadoop生态圈技术栈---Zookeeper和HBase

主要用来解决分布式集群中应用系统的一致性问题，例如怎样避免同时操作同一数据造成脏读的问题。分布式系统中数据存在一致性的问题！！ZooKeeper本质上是一个分布式的小文件存储系统。

猿大山·2022-09-07 09:57

Hadoop环境搭建三（完全分布式）

Hadoop完全分布式模式.理论讲解一.集群配置二.集群分发三.分布式集群格式化四.集群单点启动五.ssh免密登录六.启动停止集群.理论讲解1.节点的作用（1）我们启动了4个节点：namenode、datanode

57486649·2022-09-06 19:12

超详细的Hadoop3.1.2架构单机、伪分布式、完全分布式安装和配置

（3）JDK安装配置（4）Hadoop单机安装及配置（5）Hadoop伪分布配置（6）启动HADOOP及伪分布式测试（7）Hadoop完全分布式集群

geejkse_seff·2022-09-06 19:34

CONNMIX 开发 WebSocket 用户消息中心

WebSocket用户消息中心使用websocket做消息中心，通常做法是采用kafka、redis等中间件搭配实现，使用CONNMIX则无需使用中间件，同时分布式集群能力也无需担忧用户量大增后带来的性能问题

·2022-09-06 16:20

搭建Hadoop完全分布式集群（三台虚拟机）

经常查阅资料搭建Hadoop集群进行hadoop生态组件的学习，于是打算自己做一套完整的资料，方便以后查阅。一、模板机准备1.安装虚拟机模板机安装前置工作。2.三处ip配置第一处：虚拟机ip[root@hadoop100~]#vim/etc/sysconfig/network-scripts/ifcfg-ens33改成DEVICE=ens33TYPE=EthernetONBOOT=yesBOOTP

第六序列·2022-09-06 15:46

06、NMAP高级使用技巧和漏洞扫描发现

本篇文章所讲内容：6.1NMAP高级使用技巧6.2实战：DNMAP分布式集群执行大量扫描任务6.3NESSUS漏洞检测6.1NMAP高级使用技巧6.1.1NMAP概述nmap是一个网络探测和安全扫描程序

山兔1·2022-09-06 06:56

RocketMQ 设计原理与最佳实践

介绍RocketMQ是一款开源的分布式消息系统，基于高可用分布式集群技术，提供低延时的、高可靠的消息发布与订阅服务。

Java识堂·2022-09-05 07:44

EMQX 集群节点数据转发

EMQX分布式集群设计emqx分布式集群解决的问题是将客户端连接分到不同的节点上，从而获得最大的连接数和并发量，但是也带来了新的问题：订阅者和发布者可能不在同一个节点上，发布者的消息需要进行中转才能到达订阅者

skystep·2022-09-01 12:42

redis深入浅出分布式锁实现上篇

目录问题描述解决方案编写代码优化之UUID防误删问题描述随着业务发展的需要，原单体单机部署的系统被演化成分布式集群系统后，由于分布式系统多线程、多进程并且分布在不同机器上，这将使原单机部署情况下的并发控制锁策略失效

·2022-08-30 19:05

Greenplum日期函数记录

工作中经常用到greenplum日期函数，特此记录，以便查阅！

·2022-08-25 21:54

第四章：分布式数据库HBase

4.1HBase简介Hadoop没有办法满足大数据实时处理的需求，主要解决大规模数据离线批量处理HadoopHBase它不是采用单台机器，它是完全借助整个分布式集群来存储海量数据，所以它的水平可扩展性非常好

饮马翰海·2022-08-24 18:36

Minio分布式集群部署——Swarm

最近研究minio分布式集群部署，发现网上大部分都是单服务器部署，而minio官方在github上现在也只提供了k8s和docker-compose的方式，网上有关与swarm启动minio集群的文章都不完整

不想只会CURD的猿某人·2022-08-24 17:00

Lamp架构——mysql集群及组复制（3）

2.节点2server6配置3.节点3server7配置二、测试一、介绍及环境搭建msql组复制，实施简单，但要求较高，同步采用的是分布式文件系统协议，比半同步更严谨更慢，是一种全同步方案，mysql分布式集群

多于少的区别·2022-08-22 22:10

探讨Redis分布式锁解决优惠券拼抢问题

但是对于分布式集群部署的系统架构，程序在不同的J

肥肥技术宅·2022-08-21 11:24

涅槃：时序数据库的终局与重生

《新程序员002》邀请到了北京四维纵横数据有限公司创始人、Greenplum中国开源社区创始人姚延栋为大家解读时序数据库的终局与重生。

《新程序员》编辑部·2022-08-16 10:33

6.Docker_Swarm集群

个核心组件：安全集群/编排引擎企业级安全集群编排引擎使用1.1/多个docker节点连接，用户以集群方式管理1.将应用定义在声明式配置文件中使用原生docker命令完成微服务应用部署等操作内置2.内置分布式集群存储

anfieldqi·2022-08-15 07:52

Java进阶-RocketMQ-基础

一、架构设计官方文档-技术架构RocketMQ源码解析(一)-架构原理技术架构.jpegProducer：消息发布的角色，支持分布式集群方式部署。

GIT提交不上·2022-08-12 19:20

Docker三剑客之Docker Swarm

Swarm默认内置有加密的分布式集群存储（encrypteddistributedclusterstore）、加密网络（EncryptedNetwork）、公用TLS（Mutual

initialmanager·2022-08-11 09:29

Hadoop分布式集群的安装(图解)

全局统筹前言安装前的检查开始安装虚拟机Linux的网络配置步骤虚拟机内部设置进入虚拟机安装其他东西克隆虚拟机开始搭建分布式集群集群配置启动集群jps查看进程常见问题前言这里的笔记仅供参考使用，你可以从买来一台新的电脑就可以开始照着安装

pier～呀·2022-08-09 14:19

分布式文件存储系统Minio从入门到实战教程，看这篇文章就够了

1.1Minio介绍Minio优点1.2MinIO的基础概念1.3纠删码EC（ErasureCode）1.4存储形式1.5存储方案2.Minio环境搭建2.1单机部署基于centos7基于docker2.2分布式集群部署

Java大厂面试君·2022-08-08 12:37

什么是 “分布式锁” ？

对于一个单机的系统，我们可以通过synchronized或者ReentrantLock等这些常规的加锁方式来实现，然而对于一个分布式集群的系统而言，单纯的本地锁已经无法解决问题，所以就需要用到分布式锁了

程序员小灰·2022-08-05 18:43

离线数仓-伪分布虚拟机 (所有组件部署完成，全流程运行成功）（数仓4.0-2.0，CDH）

（百度网盘，微云下载…）博主通过学习尚硅谷数仓项目，将部署好的数仓虚拟机打包成ovf文件，由于博主电脑内存较小，博主使用了伪分布式集群搭建，全流程运行成功。分享虚拟机镜像文件给予大家学习。

《@书山有径%》·2022-08-05 14:05

Hadoop集群搭建

ApacheHadoop分布式集群搭建基础环境准备三台linux节点，操作系统（Centos7）关闭防火墙systemctlstopfirewalld开机时禁用防火墙systemctldisablefirewalld

女友在高考·2022-08-02 20:00

kubernetes

kubernetes入门不论何种语言编写的服务，都可以被映射为kubernetes的service，通过标准的Tcp通信协议进行交互在kubernetes中，service是分布式集群架构的核心，一个service

漫漫行程路·2022-08-01 13:09

Spring Cloud 还没学明白，Istio 又是什么鬼？？

我们在搭建网站的时候，为了及时响应用户的请求，尤其是高并发请求的时候，我们需要搭建分布式集群来处理请求。我们一个服务器的处理能力是有限的。

·2022-07-28 14:52

架构设计之Spring-Session的分布式集群会话管理

特点介绍尽管使用特定的容器可以很好地实现会话管理，但是独立容器挂掉或者由于其他原因重启会导致用户信息丢失，并且无法支持分布式集群会话管理。

Ajax_晓风·2022-07-27 07:35

java 分布式会话_spring-session实现分布式集群session的共享

title:spring-session实现分布式集群session的共享tags:springboot,spring,session共享grammar_cjkRuby:true**本文使用springboot

五楼whearer·2022-07-27 07:32

Centos7.3 安装Greenplum 6.20.4 实操版

为所有主机创建gp用户4、修改系统内核/etc/sysctl.conf文件（所有节点）5、修改系统资源限制（所有节点）6、查看防火墙和selinux,关闭selinux防火墙如果无用也关闭(获取开发指定端口)二、Greenplum

笨笨聊运维·2022-07-26 16:43

墨天轮国产数据库沙龙 | 四维纵横姚延栋：MatrixDB，All-in-One高性能时序数据库

分享嘉宾：姚延栋北京四维纵横数据有限公司创始人、原Greenplum北京研发中心总经理、Greenplum中国开源社区创始人、PostgreSQL中文社区常委、壹零贰肆数字基金会（非营利组织）联合发起人整理

MoMoSQL666·2022-07-26 13:47

Kafka架构

consumer(消费者)consumergroup(消费者组)分区(partitions)分区副本机制（Replicas）偏移量（offset）SegmentKafka中的重要角色brokerKafka是一个分布式集群

大数据老人家i·2022-07-25 11:14

Linux Shell如何用ssh命令统计分布式集群信息详解

目录一、统计分布式集群信息的思路二、SSH加密原理三、SSH命令四、利用ssh-keygen和ssh-copy-id实现免密登录五、LinuxShell脚本实现六、ssh只循环一次问题总结一、统计分布式集群信息的思路用免密的远程登陆命令

·2022-07-24 15:33

基于redis+lua进行限流的方法

1，首先我们redis有很多限流的算法(比如：令牌桶，计数器，时间窗口)等，但是都有一定的缺点，令牌桶在单项目中相对来说比较稳定，但是在分布式集群里面缺显的不那么友好，这时候，在分布式里面进行限流的话，

·2022-07-23 13:47

基于redis+lua进行限流

1，首先我们redis有很多限流的算法(比如：令牌桶，计数器，时间窗口)等，但是都有一定的缺点，令牌桶在单项目中相对来说比较稳定，但是在分布式集群里面缺显的不那么友好，这时候，在分布式里面进行限流的话，

枯枫叶·2022-07-23 07:45

hadoop_hadoop-2.6.0-cdh5.7.0源码编译支持压缩以及伪分布式部署

并成功进行伪分布式集群部署验证压缩功能。|组件名称|组件版本|百度网盘链接2.环境需求以及部署规划2.1硬件环境一台centos6.X虚

whiteblacksheep·2022-07-21 07:30

12306 的架构到底有多⽜逼？

⼤型⾼并发系统架构⾼并发的系统架构都会采⽤分布式集群部署，服务上层有着层层负载均衡，并提供各种容灾⼿段（双⽕机房、节点容错、服务器灾备等）保证系统的⾼可⽤

小坏蛋至尊宝·2022-07-21 07:13

【Spark深入学习 -15】Spark Streaming前奏-Kafka初体验

1.2.2.架构和原理1.2.3.基本概念1.2.4.kafka特点2.Kafka初体验2.1环境准备2.2Kafka小试牛刀2.2.1单个broker初体验2.2.2多个broker初体验2.3Kafka分布式集群构建

weixin_33854644·2022-07-19 20:22

SpringCloud用Zookeeper搭建配置中心

Zookeeper完成配置中心使用场景项目配置更改不需要打包,重启提供配置文件的可视化界面和springcloud快速整合为什么使用zookeeperZookeeper作为一个分布式的服务框架，主要用来解决分布式集群中应用系统的一致性问题

gbcxy·2022-07-19 14:21

Linux虚拟机上spark集群（完全分布式）搭建

需要声明的是，此次安装的spark集群是在Hadoop完全分布式集群（1个master，2个slave）的基础之上搭建的，环境是3台64位的centos7虚拟机。

superdiao的果壳·2022-07-16 21:16

【有用的SQL】查Greenplum的数据字典

Greenplum查询哪个表的分布键:star2:(Greenplum)SELECTatt.nspnameAS模式名,att.relnameAS表名,table_commentAS表注释,string_agg

i杭仔·2022-07-15 08:00

hadoop-3.3.3完全分布式集群搭建

hadoop-3.3.3完全分布式集群搭建前言环境准备软件版本集群规划一、配置jdk环境变量1.解压jdk2.修改/etc/profile文件二、hadoop集群搭建1.关闭防火墙2.修改主机名3.添加

bloom__❀；·2022-07-13 13:27

数据分析引擎百花齐放，为什么要大力投入ClickHouse？

·2022-07-13 13:27

夺命六问Kubernetes 架构原理

K8S是一个基于容器技术的分布式集群管理系统，是谷歌几十年来大规模应用容器技术的经验积累和升华

Young丶·2022-07-13 08:36

分布式锁Redis

UUID防止误删锁引入：解决方案：介绍在单体应用中，上锁可以，但是当你是分布式集群中，你其他服务器就识别不到这把锁了（因为JVM不能跨服务器访问），所以我们需要一个叫分布式锁的东西——>让所有服务器都能共享这把锁

Fairy要carry·2022-07-11 14:46

Elasticsearch学习系列七（Es分布式集群）

核心概念集群（Cluster）一个Es集群由多个节点（Node）组成，每个集群都有一个共同的集群名称作为标识节点（Node）一个Es实例就是一个Node。Es的配置文件中可以通过node.master、node.data来设置节点类型。Es的节点有如下几个类型：主节点master节点在

女友在高考·2022-07-03 15:00

执行计划分析 · datalake · 可视化

一、背景本文介绍通过工具以可视化的方式分析postgres或greenplum的执行计划。

sinwaj·2022-07-02 19:15

pb update属性多个表_「揭秘GP」Greenplum 6——新一代 PB 级分布式 HTAP 数据库

导读：2019年Pivotal中国研发中心副总经理兼Greenplum中文社区发起人姚延栋受阿里云开发者社区邀请于钉钉进行技术直播演讲《基于PostgreSQL的PB级开源企业级分布式HTAP数据库》。

weixin_39621794·2022-06-30 14:20

Greenplum——新一代 PB 级分布式 HTAP 数据库（内含PPT、视频）

获得技术资料内容，请访问Greenplum中文社区网站2019年Pivotal中国研发中心副总兼Greenplum中文社区发起人姚延栋受阿里云开发者社区邀请于钉钉进行技术直播演讲《基于PostgreSQL

Greenplum中文社区·2022-06-30 14:48

新一代数据分析及实时数仓平台Greenplum，助力企业数字化转型

9月28日，《Greenplum走进深圳》大会顺利举行，会议提供了线上、线下双渠道的参与方式，精彩的演讲内容获得了与会人员的一致好评。

Greenplum中文社区·2022-06-30 14:18

【直播预告】Greenplum磁盘配额管理工具Diskquota内部实现

Greenplum生态拥有众多工具来帮助用户更便捷的使用Greenplum，其中就包括Greenplum磁盘配额管理工具Diskquota(https://github.com/greenplum-..

·2022-06-20 17:23

大数据-2：Hadoop生态以及HDFS部署

文章目录1.Haoop简介2.安装单机版Hadoop3.Hadoop运行3.1独立运行/Local(Standalone)Mode3.2伪分布式集群/Pseudo-DistributedMode3.3全分布式集群

LeeHoo0·2022-06-20 12:58

推荐频道

greenplum分布式集群