E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
greenplum分布式集群
Hadoop伪
分布式集群
搭建
安装JDK(1)准备软件准备jdk安装包:jdk-8u221-linux-x64.tar.gz(2)解压压缩包tar-zxvfjdk-8u221-linux-x64.tar.gz(3)在此处我们配置系统环境变量,使用命令:vim/etc/profile(4)在最后加入以下两行内容:exportJAVA_HOME=/root/software/jdk1.8.0_221#配置Java的安装目录,我的在
大陈子oc
·
2023-04-02 03:53
大数据
分布式
大数据
hadoop
linux
java
hadoop伪
分布式集群
搭建(一、虚拟机安装)
hadoop伪
分布式集群
搭建(一、虚拟机安装)#系列文章目录前期准备虚拟机安装#系列文章目录#系列文章目录hadoop伪
分布式集群
搭建(一、虚拟机安装)hadoop伪
分布式集群
搭建(二、jdk,hadoop
海之心殇
·
2023-04-02 03:23
hadoop
linux
大数据
java
Hadoop伪
分布式集群
的搭建
一、准备虚拟机1.从网上将VMware下载下来https://www.vmware.com/content/dam/digitalmarketing/vmware/en/images/gallery/banners/content/hero-generic-1400x350.jpg2.下载centoshttps://mirrors.tuna.tsinghua.edu.cn/centos/7.9.2
长安安在
·
2023-04-02 03:12
Hadoop
linux
centos
hadoop伪
分布式集群
搭建
基于hadoop3.1.4一、准备好需要的文件1、hadoop-3.1.4编译完成的包链接:https://pan.baidu.com/s/1tKLDTRcwSnAptjhKZiwAKg提取码:ekvc2、需要jdk环境链接:https://pan.baidu.com/s/18JtAWbVcamd2J_oIeSVzKw提取码:bmny3、vmware安装包链接:https://pan.baidu.
迪迪迦
·
2023-04-02 03:21
大数据学习之路
hadoop
读完 RocketMQ 源码,我学会了如何优雅的创建线程
RocketMQ是一款开源的分布式消息系统,基于高可用
分布式集群
技术,提供低延时、高可靠的消息发布与订阅服务。
七包辣条
·
2023-04-02 01:58
编程
计算机
程序员
java-rocketmq
rocketmq
jvm
zookeeper应用场景-消息的订阅和发布
Zookeeper作为一个分布式的服务框架,主要用来解决
分布式集群
中应用系统的一致性问题,它能提供基于类似于文件系统的目录节点树方式的数据存储,Zookeeper作用主要是用来维护和监控存储的数据的状态变化
Future阿东
·
2023-04-01 20:53
互联网技术
zookeeper
分布式
配置中心
消息的订阅和发布
玩转k8s:安全认证
9第九章安全认证9.1访问控制概述Kubernetes作为一个
分布式集群
的管理工具,保证集群的安全性是其一个重要的任务。所谓的安全性其实就是保证对Kubernetes的各种客户端进行认证和鉴权操作。
duansamve
·
2023-04-01 16:34
Kubernetes
kubernetes
快速且通用的集群计算系统——Spark
RDD的创建方式RDD的操作RDD的执行过程Spark作业运行机制运行在YARN上的Spark在YARN上运行SparkSpark在YARN上的两种部署模式Spark集群安装Scala安装和配置Spark
分布式集群
配置快速且通用的集群计算系统
渣渣苏
·
2023-04-01 13:15
学习笔记
spark
大数据
分布式
分布式集群
架构场景化解决方案:一致性Hash算法
分布式集群
架构场景化解决方案:一致性Hash算法分布式和集群分布式和集群是不一样的,分布式一定是集群,但是集群不一定是分布式(因为集群就是多个实例一起⼯作,分布式将一个系统拆分之后那就是多个实例;集群并不一定是分布式
丿涛哥哥
·
2023-04-01 13:25
分布式集群问题解决方案
分布式
java
算法
ElasticSearch 5学习(8)——分布式文档存储(wait_for_active_shards新参数分析)
学完ES
分布式集群
的工作原理以及一些基本的将数据放入索引然后检索它们的所有方法,我们可以继续学习在分布式系统中,每个分片的文档是被如何索引和查询的。
weixin_30768175
·
2023-04-01 11:43
大数据
json
redis架构
一.redis竞品对比存储数据结构持久化集群可用性网络模型线程模型redis支持value是string,list,hash,set,zset是主从,rediscluster无中心
分布式集群
非阻塞IO单线程无锁
剑八-
·
2023-04-01 08:29
redis
并发
java
redis
架构
GreenPlum
完全安装_GP5.11.3完整安装
1概述1.1背景1.2目标1.3使用对象2配置系统信息2.1配置系统信息,做安装
Greenplum
的准备工作
Greenplum
数据库版本5.11.32.1.1
Greenplum
集群介绍这里使用1个master
banguiqian3370
·
2023-04-01 03:30
数据库
运维
python
云栖干货回顾 | 更强大的实时数仓构建能力!分析型数据库PostgreSQL 6.0新特性解读
阿里云AnalyticDBforPostgreSQL为采用MPP架构的
分布式集群
数据库,完备支持SQL2003,部分兼容Oracle语法,支持PL/SQL存储过程,触发器,支持标准数据库事务ACID。
Ta oo
·
2023-03-31 22:34
更强大的实时数仓构建能力!分析型数据库PostgreSQL 6.0新特性解读
阿里云AnalyticDBforPostgreSQL为采用MPP架构的
分布式集群
数据库,完备支持SQL2003,部分兼容Oracle语法,支持PL/SQL存储过程,触发器,支持标准数据库事务ACID。
阿里云技术
·
2023-03-31 21:28
阿里云数据库
24 k8s安全认证
一、安全认证1、访问控制概述Kubernetes作为一个
分布式集群
的管理工具,保证集群的安全性是其一个重要的任务。所谓的安全性其实就是保证对Kubernetes的各种客户端进行认证和鉴权操作。
FikL-09-19
·
2023-03-31 21:27
K8s
kubernetes
安全
docker
Greenplum
数据库整体架构
Greenplum
数据库基本由PostgreSQL核心增强数据库实例组合并衔接成的数据库管理系统,即
Greenplum
数据在PostgreSQL基础上扩展开发出来的。
渐渐遗忘
·
2023-03-31 21:54
GreenPlum
1
Greenplum
整体架构信息
1.1架构图示在以上的架构中可以看出
Greenplum
主要是由Master和Segment组成的,Master承担生成查询计划并派发汇总执行结果,Segment是执行查询计划及数据储存管理。
盒马coding
·
2023-03-31 21:53
GreenPlum
Greenplum
数据库架构及主要的功能和优势
Greenplum
数据库架构
Greenplum
数据库基本由PostgreSQL核心增强数据库实例组合并衔接成的数据库管理系统,即
Greenplum
数据在PostgreSQL基础上扩展开发,每个
Greenplum
乄康师傅乄
·
2023-03-31 20:05
greenplum
数据存储
数据库
架构
关于
Greenplum
的架构
Greenplum
数据库是一种大规模并行处理(MPP)数据库服务器,其架构特别针对管理大规模分析型数据仓库以及商业智能工作负载而设计。
贾斯汀玛尔斯
·
2023-03-31 20:33
大数据Greenplum
greenplum
架构介绍
1
Greenplum
简介
GreenPlum
是一款基于分布式架构的开源数据库;采用无共享(noshareing)的MPP架构(每个数据节点拥有独立的CPU、IO和内存等资源);其具有良好的线性扩展能力
Serendipity_Shy
·
2023-03-31 20:01
greenplum
数据库
架构
1
Greenplum
架构学习讲解
Greenplum
架构学习讲解
Greenplum
架构学习讲解1、什么是
Greenplum
2、
Greenplum
体系架构2.1
Greenplum
Master2.2
Greenplum
Segment2.3网络配置示例
Murkey学习之旅
·
2023-03-31 20:24
Greenplum
#
架构学习
postgresql
Greenplum
架构
Greenplum
可进行海量并行处理(MassivelyParallelProcessing)一、
Greenplum
体系架构
Greenplum
由三部分组成:MasterHost、Segment、Interconnect
Murkey学习之旅
·
2023-03-31 20:54
postgresql
Greenplum
数据库(GPDB)总体架构
Greenplum
数据库(GPDB)初识1、特性
Greenplum
数据库(GPDB),分布式数据库,数据仓库快速查询工具,特性:1)GPDB完全支持ANSISQL2008标准和SQLOLAP2003扩展
edelweiss2
·
2023-03-31 20:10
大数据
分布式
数据库
Greenplum
架构
架构概述基于PostgreSQL的分布式数据库,采用shared-nothing架构、主机、操作系统、内存、存储都是自我控制的,不存在共享采用了MPP,每个SMP节点运行自己的操作系统、数据库等,每个节点内的CPU不能访问另一个节点的内存,节点之间的信息交互是通过节点互联网络实现的(数据重分配)由masterhost、segmenthost、interconnect三大部分组成各个节点均可配置镜像
angeling2009
·
2023-03-31 20:05
数据库扫盲
架构
分布式锁实现原理与最佳实践
而在
分布式集群
工作的开发场景中,就需要一种更加高级的锁机制来处理跨机器的进程之间的数据同步问题,这种跨机器的锁就是分布式锁。接下来本文将为大家分享分布式锁的最佳实践。
阿里技术
·
2023-03-31 18:39
java
数据库
jvm
分布式锁
heartbeat如何监控程序_GitHub - kevinnn/HeartBeatMonitor: HeartBeat心跳协议实现分布式监控...
项目概述分布式监控管理系统,方便用户随时了解
分布式集群
的情况(机器的状态)以及及时进行各种机器的操作。
h8liu
·
2023-03-31 13:22
heartbeat如何监控程序
spark整理笔记
/bin/spark-shell--masterlocal[2]该--master选项可以指定为针对
分布式集群
的masterURL,或者以local模式使用1个线程在本地运行,local[N]会使用N个线程在本地运行
时光如水_fe87
·
2023-03-31 13:15
Zookeeper:ZAB协议-角色分配-存储结构-监听机制
Zookeeper基于该协议,实现了一种主备模式的系统架构,保证了
分布式集群
中各副本之间的数据一致性。
weixin_49334432
·
2023-03-31 11:02
Zookeeper
zookeeper
Springboot整合Redis实现增删查改
(最多使用)
分布式集群
架构中的session分离。聊天室的在线好友列表。任务队列。(秒杀、抢购、12306等等)应用排行榜。网站访问统计。
@Jerry-
·
2023-03-30 23:13
redis
spring
boot
java
SpringCloud 微服务架构详解
SpringCloud微服务学习(一)SpringCloudAlibaba1.1、单体
分布式集群
1.2、系统架构的演变1.2.1、单体应用架构1.2.2、垂直应用架构1.2.3、分层架构1.2.4、SOA
应庆
·
2023-03-30 22:21
java
分布式
Centos6.4下搭建redis缓存
(最多使用)
分布式集群
架构中的session分离。聊天室的
Holy_小银
·
2023-03-30 21:17
Linux
linux
redis
缓存
minio 完全操作手册与实践(全面简述)
本文研究重点归纳:前言minio概念:安装部署指南(单机+docker)
分布式集群
测试异地(多中心)同步与备份EC码的存储方式|数据损坏与恢复SDK与API(官方提供)FUSE+S31、前言minio概念
98bd2c3f5a70
·
2023-03-30 21:04
技术分享 | 在GreatDB分布式部署模式中使用Chaos Mesh做混沌测试
需求背景与万里安全数据库软件GreatDB分布式部署模式介绍1.1需求背景混沌测试是检测分布式系统不确定性、建立系统弹性信心的一种非常好的方式,因此我们采用开源工具ChaosMesh来做GreatDB
分布式集群
的混沌测试
GreatSQL社区
·
2023-03-30 18:39
mysql
greatsql
greatdb
混沌测试
技术分享
大数据开源框架之基于Hive的数据分析
Hive配置请看:(30条消息)大数据开源框架环境搭建(六)——Hive完全
分布式集群
的安装部署_木子一个Lee的博客-CSDN博客目录实验要求:实验过程:实验要求:在HiveShell模式下,创建数据库
木子一个Lee
·
2023-03-30 17:16
大数据开源
大数据
hive
hadoop
java
eclipse
java基础巩固-宇宙第一AiYWM:为了维持生计,架构知识+分布式微服务+高并发高可用高性能知识序幕就此拉开(六:Hystrix之熔断、降级、限流)~整起
并将不可用逐渐放大的过程】中文文档:https://www.apiref.com/spring-cloud-zh/dalston/#_circuit_breaker_hystrix_clients服务雪崩:咱们搞
分布式集群
时
AIminminHu
·
2023-03-30 03:19
分布式
架构
Hystrix
熔断
降级
java基础巩固-宇宙第一AiYWM:为了维持生计,架构知识+分布式微服务+高并发高可用高性能知识序幕就此拉开(三:注册中心、补充CAP定理、BASE 理论)~整起
得叫下面的帮手们来帮忙:比如咱们作为客户端进行购物时,那么多服务提供者【服务提供者有很多实例,可能人家已经搞了拆分模块后的
分布式集群
,那实例就不少啦】,如果用非技术的眼
AIminminHu
·
2023-03-30 03:49
微服务
架构
注册中心
eureka
eureka-server
java基础巩固-宇宙第一AiYWM:为了维持生计,架构知识+分布式微服务+高并发高可用高性能知识序幕就此拉开(二:网关组件:Zuul、Spring Cloud Gateway、Kong...)~整起
其实上一个开篇文章主要的说白了就是,为了解决请求量大,搞了横向扩展
分布式集群
,并用负
AIminminHu
·
2023-03-30 03:48
java
微服务
架构
网关
分布式调度框架 elastic-job 实践详解(超详细)
之所以产生这样的结果,是因为Quartz在
分布式集群
环境下是通过数据库锁方式来实现有且只有一个有效的服务节点来运行服务,从而保证服务在集群环境下定时任务不会被重复调用!
码农老K
·
2023-03-30 03:17
分布式
数据库
python
java
mysql
RocketMQ基础-核心架构剖析
RocketMQ基础-核心架构剖析RocketMQ的核心架构RocketMQ主要分为四个部分:Producer:负责生产消息;消息发布的角色,支持
分布式集群
方式部署,Producer通过MQ的负载均衡模块选择相应的
.诗书
·
2023-03-30 01:50
java
消息队列
将MongoDB部署到
分布式集群
(实操)
本教程前面的内容基本涵盖了MongoDB的基本知识,现在在单机环境下操作MongoDB已经不存在问题,但是单机环境只适合学习和开发测试,在实际的生产环境中,MongoDB基本是以集群的方式工作的。集群的工作方式能够保证在生产遇到故障时及时恢复,保障应用程序正常地运行和数据的安全。接下来我们重点介绍MongoDB的集群工作方式,以及在集群工作方式下,MongoDB是如何使用分片和复制的机制来完成对数
YHJ
·
2023-03-30 01:54
mongodb
k8s
分布式集群
docker容器管理
我这里准备了三台虚拟机:master(192.168.33.52)、node1(192.168.33.35)和node2(192.168.33.50)kubernetes集群部署有两种方式:第一种方式:较难,配置的信息较多(不建议)第二种方式:使用kubeadm来简化部署kubeadm安装步骤:1.master,nodes:安装kubelet、kubeadm、docker、kunbectl(命令行
猪大肠的世界
·
2023-03-30 00:57
Linux系统
Redis应用详解(三)
分布式集群
3种架构方案
1.集群方案主从高可用(该方案就是单实例形式,只是为了保证数据的安全,对于用户数据少,业务的前期可以采用,目前我司缓存架构就是采用该方案)客户端分片(典型代表:Jedis。自主写分片算法,代码掌握在自己手中,可控性强,但是需要专业的开发运维人员维护,技术要求和维护成本高)代理分片(典型代表:Twemproxy,redis集群没有正式推出之前官网推荐的方案,也是目前使用最多的)Rediscluste
fedorafrog
·
2023-03-29 17:11
#
NoSQL
PostgreSQL和
GreenPlum
对比
PostgreSQL主要优势:1.PostgreSQL完全免费,而且是BSD协议,如果你把PostgreSQL改一改,然后再拿去卖钱,也没有人管你,这一点很重要,这表明了PostgreSQL数据库不会被其它公司控制。oracle数据库不用说了,是商业数据库,不开放。而MySQL数据库虽然是开源的,但现在随着SUN被oracle公司收购,现在基本上被oracle公司控制,其实在SUN被收购之前,My
黄杏波
·
2023-03-29 04:32
数据库
postgresql
greenplumn
greenplum
(postgresql) 中文字符排序问题
在PG中存储中文,现在大家的典型解决方法是用UTF8做数据库编码,但是用UTF8作数据库编码有一个问题,就是中文排序的问题。在PG中,缺省的时候是按照编码排序的,也就是按照UTF8的编码对字段排序,但是,UTF8本身的编码顺序和人们习惯的中文的发音的拼音顺序完全不同,因而排序完全不是期望的拼音排序。那么如何解决呢?众所周知,GBK编码是按照拼音发音顺序排序的,因此,解决方法之一就是把UTF8编码转
滴水穿石
·
2023-03-29 04:31
greenplum
postgresql
greenplum
immutable
数据库
table
os
GreenPlum
或PostgreSQL的建表操作
1、PostgreSQL序列操作创建ID序列CREATESEQUENCEdwd_test_id_seqSTART1;重置ID序列ALTERSEQUENCEdwd_test_id_seqRESTARTWITH1;查看ID当前值SELECTlast_valueFROMdwd_test_id_seq;2、PostgreSQL触发器函数createorreplacefunctioncs_timestamp
是晨星啊
·
2023-03-29 04:54
数据库
postgresql
数据库
直播|PostgreSQL 技术内幕(五)
Greenplum
-Interconnect模块
本次直播将继续我们的PostgreSQL技术内幕系列,由Oracle跟朋友们讨论交流
Greenplum
-Interconnect模块的话题。
HashData酷克数据
·
2023-03-29 04:59
产品动态
postgresql
数据库
oracle
Greenplum
中文社区邀您共聚第11届PostgreSQL中国技术大会
VMware
Greenplum
作为赞助商之一,积极参加了此次活动。三位原厂技术专家将在大会中带来《
Greenplum
Greenplum中文社区
·
2023-03-29 04:18
编程语言
大数据
人工智能
区块链
github
Greenplum
数据库与PostgreSQL数据库使用以及性能调优
Greenplum
数据库与PostgreSQL数据库使用以及性能调优https://blog.csdn.net/u014534643/article/details/105075919/一、PostgreSQL
jerry-89
·
2023-03-29 04:46
pg
Greenplum
与PostgreSQL关系
PG支持函数/存储过程-内置plpgsql,支持C,C++,JAVA编译语言索引-B-tree,哈希,Gist索引触发器-SQL查询时触发的事件并发管理MVCC-规则-与触发器类似,但可以转化原SQL语义数据类型-任意精度的数值类型,无限长度的文本类型,几何类型,IPV4\IPV6,CIDR块/MAC地址,数组,用户自定义类型用户自定义对象-内部对象都支持自定义,如索引、操作符、类型转换等继承-表
angeling2009
·
2023-03-29 04:12
数据库扫盲
postgresql
数据库
database
PostgreSQL 技术内幕(六)
Greenplum
排序算子
Sort节点概览排序的朴素含义是将一个数据集按照某种特定的排序方式进行排列的算法,最常见的排列方式是数值顺序和字典序。排序算法的应用非常广泛,主要分为了两类:内排序:在内存中完成的排序,常见的有插入排序、快速排序、堆排序、基数排序等。外排序:数据集过大,内存中无法全部存放,需要借助外存的排序,常见的有归并排序的各种变形。gpdb的排序节点会根据查询计划中的排序键对指定的元组进行排序,根据排序的数据
HashData酷克数据
·
2023-03-29 03:58
postgresql
排序算法
算法
上一页
17
18
19
20
21
22
23
24
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他