greenplum分布式集群

从哈希算法基本思想到其在分布式集群架构中的应用

文章目录概要一、哈希算法介绍1.1哈希思想1.2Hash函数1.2.1Hash函数的要求1.2.2常见Hash函数的设计方法1.3解决哈希冲突的办法1.3.1开放寻址法1.3.2链表法二、哈希算法在分布式集群架构中的应用
栗子叶·2023-02-20 07:25

Zookeeper分布式集群部署.md

##zookeeper分布式集群部署**主机分配**-192.168.214.143-192.168.214.152-192.168.214.153**各节点时间同步**```[root@Ansible
7c70ed645d0c·2023-02-19 02:14

K8s note2

2.在kubernetes中Service是分布式集群架构的核心有一下特征：拥有唯一指定的名字拥有一个虚拟IP和端口号能够远程提供某种服务被映射到提供这种服务能力的一组容器应用上3.pod运行在node
jaymz明·2023-02-18 10:49

Hadoop2.x分布式集群部署12

一、Hadoop2.x分布式集群部署-HDFS1.hadoop2.x版本下载及安装https://archive.apache.org/disthttp://archive.cloudera.com/cdh5
麻帅·2023-02-17 22:29

greenplum小知识点

1、gpCRUD修改列属性altertabledemo111altercolumnbcyc_idtypetimestamp;插入数据INSERTINTOdemo111(column)VaLUES(1,'a','a','a','a');删除一列ALTERTABLEdemo111dropCOLUMNopen_date;增加一列ALTERTABLEdemo111ADDCOLUMNaaatimestamp
早点起床晒太阳·2023-02-17 03:37

MPP架构、常见OLAP引擎分析

MPP架构三、MPP架构的OLAP引擎1）只负责计算，不负责存储的引擎1、Impala2、Presto2）既负责计算，又负责存储的引擎1、ClickHouse2、Doris3、Druid4、TiDB5、Greenplum3
jerry-89·2023-02-16 20:56

Greenplum 数据库 之 表空间、数据库、模式及用户 的 创建与授权

  由于刚接触Greenplum数据库，并且在网上相关的资料也不太多，都是这里找找那里找找，甚至跑官网去了英文文档了，然后慢慢拼接而成的，公司要用Greenplum做数据仓库，因此需要去搭建数仓的模型和用户的关联关系
小飞牛_666·2023-02-05 13:54

emqx学习笔记

文章目录一、emqx安装1.1emqx启动打开MQTT.fx进行emqx服务器的mqtt客户端测试：1.2基本命令二、分布式集群2.1Erlang/OTP分布式编程节点(Node)2.2EMQX分布集群设计主题树
某风吾起·2023-02-05 01:14

安装运行在完全分布式hadoop集群的hive

安装hive基于hadoop-2.5.2完全分布式集群，兼容hive-1.2.2版本https://www.jianshu.com/p/8a6a9a4fec4a下载地址：https://mirrors.tuna.tsinghua.edu.cn
臻霏·2023-02-04 20:38

从0开始学大数据【阿里巴巴的技术专家】

一般都会采用分布式集群来解决这个问题，用数千台（甚至
about云·2023-02-04 17:49

分布式中间件 Zookeeper

Zookeeper主要用来解决分布式集群中应用系统的一致性问题，它有着树状结构的节点，每个节点均可存储少量的数据。同时，用户可以修改和订阅节点中的内容。分布式系统中的节点通过监控这些数据状态的
天台上思考的唐吉诃德·2023-02-04 07:23

java商城源码spring+springmvc+kafka分布式消息中间件集成方案

kafka消息平台使用spring+kafka的集成方案，详情如下：1.使用最高版本2.1.0.RELEASE集成jar包：spring-integration-kafka2.Zookeeper、Kafka分布式集群使用
fumi106·2023-02-04 03:31

hadoop集群部署

1、Hadoop的介绍狭义上来说，hadoop就是单独指代hadoop这个软件，HDFS：分布式文件系统MapReduce:分布式计算系统Yarn：分布式集群资源管理广义上来说，hadoop指代大数据的一个生态圈
keeper&·2023-02-02 14:29

故障分析 | Greenplum Segment 故障处理

作者：杨文DBA，负责客户项目的需求与维护，会点数据库，不限于MySQL、Redis、Cassandra、GreenPlum、ClickHouse、Elastic、TDSQL等等。
·2023-02-02 14:03

银河麒麟V10安装ASP.NET Core教程

级标准研制的提供内生安全、云原生支持、国产平台深入优化、高性能、易管理的新一代自主服务器操作系统；同源支持飞腾、龙芯、申威、兆芯、海光、鲲鹏等自主CPU及x86平台；可支撑构建大型数据中心服务器高可用集群、负载均衡集群、分布式集群文件系
踏平扶桑·2023-02-02 12:36

2020-03-13

Node.js应用背景与GC基础知识解读V8GCLog（二）:堆内外内存的划分与GC算法1.node架构系列--基础架构的介绍2.10分钟理解Node.jskoa源码架构设计Node.js：浅析高并发与分布式集群
微城小觑·2023-02-01 09:14

列存储和Greenplum压缩表

这篇文章很好的介绍了行存储和列存储：https://blog.csdn.net/Xingxinxinxin/article/details/80939277一、Greenplum列存储的压缩表原理：createtabletestao
沧海月明_ee9b·2023-01-31 22:14

Spark技术内幕读书笔记：Spark核心——RDD实现详解

1.背景：在spark出现之前，hadoop的迅速发展，hadoop分布式集群，把编程简化为自动提供位置感知性调度，容错，以及负载均衡的一种模式，用
pub.ryan·2023-01-31 14:46

docker安装hadoop3分布式集群-勤快版

简介安装hadoop集群真的很麻烦,我在网上找各种资料看来看去,最后花了差不多4天时间才算搞好环境.如果你希望用5分钟装好hadoop,那么你可以看这篇懒人版:https://www.jianshu.com/p/6d294b515bda如果你希望按着我走的步骤重新走一次安装流程,加深对hadoop的印象,你可以继续往下看.在安装之前,你应该先装好docker,下载好jdk8,下载好hadoop3.
小肥爬爬·2023-01-31 05:07

Rocketmq源码分析01：搭建源码调试环境

https://mp.weixin.qq.com/s/waDzMr4rOaC_NlxSqF0YCg1.基本架构RocketMQ架构上主要分为四部分，如下图所示:图片Producer：消息发布的角色，支持分布式集群方式部署
kakukeme·2023-01-31 02:41

【Hadoop---03】Hadoop分布式环境搭建「安装虚拟机、安装CentOS操作系统 | 虚拟机的网络配置 | rsync | 集群配置 | 启动集群 | 集群测试」

文章目录1.Hadoop三种工作模式2.Hadoop分布式集群环境配置第一步：安装VMware与CentOS的虚拟机第二步：虚拟机网络配置第三步：主机远程登入虚拟机第四步：配置一台模板虚拟机第五步：克隆三台主机第六步
别闹'·2023-01-30 15:17

# Hadoop # ——伪分布式集群/环境搭建

一、在操作前，先明白几个概念，避免操作linux的时候混淆概念一：命名机器名对机器起的名字用户名username机器上登陆用户的名字主机名hostname为了方便通过网络访问对应机器，对IP地址取的别名在后面的环境搭建过程中有三台机器，为了方便，在命名上，配置如下机器列表机器名用户名主机名机器1（对集群做一些临时操作可能会用到）worker1root(最高权限用户)user(普通用户)worker
MrSaint王·2023-01-29 21:41

Amazon Aurora 的读写能力扩展之 ShardingSphere-Proxy 篇

文章来源于亚马逊AWS官方博客马丽丽亚马逊云科技数据库解决方案架构师，十余年数据库行业经验，先后涉猎NoSQL数据库Hadoop/Hive、企业级数据库DB2、分布式数仓Greenplum/ApacheHAWQ
ShardingSphere·2023-01-29 08:21

微服务架构-系统可靠性保障

1.可靠性可靠性（Reliability）是指微服务系统在面对异常情况时，如关键组件损坏、流量或数据量异常、延迟波动、级联故障传导、分布式集群雪崩、系统过载等等，能够持续保持稳定运行或快速恢复的能力。
天秤座的架构师·2023-01-28 07:01

redis伪分布式集群数据迁移

环境：老redis集群是伪分布式集群：192.168.0.151节点：7001、7002、7003、7004、7005、7006；新redis集群是伪分布式集群：192.168.0.153节点：7001
守优·2023-01-27 23:42

Hadoop高手之路--04--Zookeeper分布式协调服务

分布式协调服务一、初识zookeeper1、zookeeper简介2、特性一致性可靠性顺序性原子性实时性3、角色Leader：领导者一个Follower：追随者多个Observer：观察者二、zookeeper分布式集群部署
落空空。·2023-01-26 08:37

Spark2.2.0 + Scala2.13.0集群搭建

Hadoop集群参考：ubuntu16+Hadoop2.7.3环境搭建（伪分布式），改为分布式集群JDK版本：1.8.0Scala版本：scala-2.13.0-M1spark版本：2.
sinat_34022298·2023-01-21 16:58

Linux环境下hadoop 2.6.0 分布式集群搭建（实战演练）

应用场景之前介绍了单节点，部署伪分布式hadoop集群，可以作为自己使用，但是真正投入生产环境，伪分布式是不够的，仅仅作为个人研究测试使用，此时我们需要部署搭建hadoop完全分布式集群，此hadoop
kinzxv·2023-01-21 09:37

大数据之Greenplum介绍

一、Greenplum的发展历史Greenplum的发展可以分为下面6个阶段：图1Greenplum时间线Postgres关系型数据库。
海睿思·2023-01-20 08:29

PostgreSQL 技术内幕(五）Greenplum-Interconnect模块

Greenplum是在开源PostgreSQL的基础上，采用MPP架构的关系型分布式数据库。Greenplum被业界认为是最快最具性价比的数据库，具有强大的大规模数据分析任务处理能力。
·2023-01-19 13:29

greenplum 安装 -3- 互信配置

配置/etc/hosts172.28.128.6dw1-cn172.28.128.11dw1-seg1172.28.128.12dw1-seg2#dw1-seg1,dw1-seg2上删除127.0.1.1dw1-cndw1-cn配置互信，过程如下参考EnablingPasswordlessSSH设置环境变量master的gpadmin用户下source/usr/local/gpdb/greenpl
·2023-01-18 09:57

greenplum 常用链接

GPrelease列表GP6releasenotesGP6extension兼容性GP6对graph的支持-基于MADLABGP6对postgis的支持GP6postgisgppkgGP6postgisgithubGP6常用工具gpbackup/gprestore官方文档gpbackup/gprestoregppkggpbackup/gprestoregithubpivotalVMwareTanz
·2023-01-18 09:25

拓数派云原生数据库 PieCloudDB 与 XSKY 产品完成兼容性互认证

拓数派的云原生eMPP数据库产品PieCloudDBDatabase原生支持PostgreSQL/Greenplum生态组件，兼容包括开源空间数据管理组件PostGIS，Apache开源机器学习库Madlib
·2023-01-17 15:48

Chapter 14 Greenplum PL/R Language Extension

Chapter14GreenplumPL/RLanguageExtensionThischaptercontainsthefollowinginformation:•AboutGreenplumDatabasePL
kygoal·2023-01-16 16:13

Spark执行环境——RPC环境

Akka具有分布式集群下的消息发送、远端同步调用、远端异步调用、路由、持久化、监管、AtLeastOnceDelivery（至少投递一次）等能力，一旦Akka被替代，那就意味着RpcEnv必须也能支持这些机制
拾荒路上的开拓者·2023-01-12 19:57

Redis进阶教程

目录基础概念数据类型应用场景持久化过期键删除策略内存淘汰策略事务管道缓存异常分布式集群方案哨兵模式RedisCluster基于客户端分配基于代理服务器分片Redis主从架构部署示例分区分布式问题其他双写一致性性能优化
魏大东ooo·2023-01-10 16:25

故障分析 | cassandra 集群数据故障转移

作者：杨文DBA，负责客户项目的需求与维护，会点数据库，不限于MySQL、Redis、Cassandra、GreenPlum、ClickHouse、Elastic、TDSQL等等。
·2023-01-10 16:22

故障分析 | Cassandra 用户信息 list Error

作者：杨文DBA，负责客户项目的需求与维护，会点数据库，不限于MySQL、Redis、Cassandra、GreenPlum、ClickHouse、Elastic、TDSQL等等。
·2023-01-10 16:50

故障分析 | cassandra 集群数据故障转移

作者：杨文DBA，负责客户项目的需求与维护，会点数据库，不限于MySQL、Redis、Cassandra、GreenPlum、ClickHouse、Elastic、TDSQL等等。
·2023-01-10 16:46

全链路追踪之OpenTracing

链路追踪现在的大多数互联网服务，基本都是用复杂，大规模分布式集群来实现，微服务化，这些服务模块分布在不同的机器，不同的数据中心，由不同团队，语言开发而成。
一江溪水·2023-01-10 03:54

以“升舱”之名，谈谈云原生数据仓库 AnalyticDB 的核心技术

长期以来，企业级数据仓库构建主要以Teradata、Oracle、DB2、Vertica、Greenplum等为主，这些系统一方面功能完备，稳定可靠，另一方面成本高，部分有专用硬
阿里云云栖号·2023-01-08 10:50

以“升舱”之名，谈谈云原生数据仓库AnalyticDB的核心技术

长期以来，企业级数据仓库构建主要以Teradata、Oracle、DB2、Vertica、Greenplum等为主，这些系统一方面功能完备，稳定可靠，另一方面成本高，部分有专用硬
阿里云技术·2023-01-08 10:49

Spark 在 KaiwuDB 中的应用与实践

为此，KaiwuDB推出了此项解决方案：借助Spark平台，融合了KaiwuDB分布式集群及列存存储的性能优势，定制了Spark工具，为用户提供一个高性能的OLAP解决方案，并满足了大数据生态的客户需求
·2023-01-06 17:05

HBase分布式集群搭建（zookeeper+hadoop+hbase）超详细！

环境准备zookeeper：zookeeper-3.4.14hadoop：hadoop-2.8.5hbase：hbase-1.4.13master：namenode、resourcemanager，slave1：secondarynamenode、datanode，slave2：datanode一、Hadoop集群搭建1、hadoop安装包解压tarzxvfhadoop-2.8.5.tar.gz2
程序员进化者·2023-01-06 11:40

Hadoop 3.2.1 +Hive+Hbase伪分布式集群搭建

根据实战安装步骤，详细描述hadoop3.2.1、hive3.1.2（包括mysql5.7）、zookeeper3.6、hbase2.2.4、flume1.9.0、sqoop1.4.7各组件安装步骤,记录过程中的各种坑，方便各位同学快速安装部署hadoop伪分布集群。软件环境javaversion“1.8.0_212”ApacheHadoop3.2.1Hive3.1.2（mysql5.7）Zook
Ted丶·2023-01-06 11:09

手把手Hadoop伪分布集群搭建+hadoop完全分布式集群搭建

文章目录一.创建模板机二.魔板机调试配置2.1测试是否可上网2.2安装工具配置免密登录2.3关闭防火墙关闭防火墙开机自启动2.4创建atguigu用户，更改密码2.5切换到atguigu用户，创建文件夹2.7修改克隆机主机名2.8root用户修改静态ip2.8在魔板机安装jdk(atguigu用户)2.10在魔板机安装hadoop伪分布搭建三.完全分布式准备3.1克隆虚拟机3.2打开虚拟机3.3更
筝湘湘·2023-01-06 11:38

hadoop完全分布式集群+Win Eclipse+Hbase+Hive+Zookeeper+Sqoop+SPARK试验机平台

今天突发奇想，想配个更为真实的模拟环境——hadoop完全分布式集群，在VMware下用三个虚拟机实现模拟3个物理节点。本人
Bentley-2012·2023-01-06 11:06

Hadoop+HBase+ZooKeeper分布式集群环境搭建

一、环境说明集群环境至少需要3个节点（也就是3台服务器设备）：1个Master，2个Slave，节点之间局域网连接，可以相互ping通，下面举例说明，配置节点IP分配如下：HostnameIPUserPasswordmaster192.168.59.133hadoop123456slave1192.168.59.134hadoop123456slave2192.168.59.135hadoop12
神奕·2023-01-06 11:36

hadoop2.6.5+zookeeper3.4.10+hbase1.3.1分布式集群搭建

一、配置环境1.三台虚拟机ubuntu16.04相关软件包1.jdk1.8.0_1122.hadoop2.6.53.zookeper3.4.104.hbase1.3.1注：此处采用了三台虚拟机，为方便维护，此处采取了相同的用户名，用户密码，相同的目录结构二、安装Java环境1.下载jdk1.8.0_112压缩包,解压（作者采用的解压路径为:/usr/lib/jvm/）2.配置/etc/profil
Crazy_cjran·2023-01-06 11:05

3台机器配置hadoop集群_Hadoop+Hbase 分布式集群架构

安装搭建Hadoop1、配置说明本次集群搭建共三台机器，具体说明下：主机名IP说明nn01192.168.1.51DataNode、NodeManager、ResourceManager、NameNodedn01192.168.1.52DataNode、NodeManager、SecondaryNameNodedn02192.168.1.53DataNode、NodeManager2、安装前准备2
张狂年少·2023-01-06 11:04
上一页 19 20 21 22 23 24 25 26 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他