E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
greenplum分布式集群
「开源技术圈」只聊技术的交流社群,属于你的技术圈子
目前拥有来自硅谷的新贵:
Greenplum
技术社群、来自Apache的顶级开源项目Kyligence技术社群,拥有数千数据从业者和学习者用户,数百名大数据技术专家。
bf2172e61203
·
2023-06-11 23:18
【云原生进阶之PaaS中间件】第一章Redis-2.3.2哨兵模式
是社区版本推出的原生高可用解决方案,RedisSentinel部署架构主要包括两部分:RedisSentinel集群和Redis数据集群,其中RedisSentinel集群是由若干Sentinel节点组成的
分布式集群
江中散人
·
2023-06-11 14:48
云原生进阶-PaaS专栏
后台开发专栏
redis
java
云原生
中间件
paas
分布式一致Hash&分布式ID
文章目录
分布式集群
一致Hash算法Hash算法常见的Hash算法冲突解决的策略Hash算法应用场景普通Hash算法存在的问题一致Hash算法Nginx配置一致性Hash负载均衡策略分布式ID解决方案UUID
超人@不会飞
·
2023-06-11 13:23
分布式
分布式
【大数据工具】Zookeeper
分布式集群
和伪分布式安装
Zookeeper安装zookeeper安装包下载地址:https://archive.apache.org/dist/zookeeper/1.伪分布式部署说明:伪分布即在一台服务器上通过不同端口模拟出
分布式集群
的效果
程序员胖五
·
2023-06-11 08:46
大数据工具安装
java-zookeeper
zookeeper
分布式
GreenPlum
版本升级
中国DBA联盟(ACDU)成员,目前服务于工业互联网擅长主流Oracle、MySQL、PG、高斯及
Greenplum
运维开发,备份恢复,安装迁移,性能优化、故障应急处理等。
IT邦德
·
2023-06-10 22:17
Greenplum入门
数据库
Greenplum
中数据分布策略
由于
Greenplum
为SharedNothing架构,每个节点都有自己的CPU/内存/硬盘等,不存在共享资源,所以数据的分布显得尤为重要。
清纯男孩
·
2023-06-10 20:22
数据库
数据库架构
大数据
postgresql
数据仓库
greenplum
性能测试工具-pgbench
查看服务器上是否安装pgbench[root@gsgp60~]#find/-namepgbench[root@gsgp60~]#pgbench--versionbash:postgres:未找到命令...[root@gsgp60~]#yuminstallpostgresql-contrib已加载插件:fastestmirror,langpacksDeterminingfastestmirrors*
清纯男孩
·
2023-06-10 20:52
postgresql
运维
数据库架构
测试工具
数据库
GreenPlum
运维监控工具-gpcc-web安装
Greenplum
CommandCenter(GPCC)是由PivotalSoftware推出的一款监控和管理
Greenplum
Database的Web应用程序。
清纯男孩
·
2023-06-10 20:52
数据库
postgresql
数据库架构
大数据
运维
greenplum
关闭某个segment host节点实验
实验背景:本
greenplum
集群有三台服务器,没有安装StandByMaster其中MasterHost为Hadoop106,SegmentHost为Hadoop107Hadoop108现在down掉
清纯男孩
·
2023-06-10 20:21
服务器
大数据
运维
数据库架构
数据库
GreenPlum
中性能调优之shared_buffers修改
问题背景:刚刚安装完的
GreenPlum
集群默认shared_buffers为128MB,为了提升系统性能需要修改。
清纯男孩
·
2023-06-10 20:21
大数据
数据库架构
postgresql
数据库
GreenPlum
中性能调优之segment实例个数
GreenPlum
集群安装完成后,到底设置多少个segment实例才合适呢?
清纯男孩
·
2023-06-10 20:21
数据库
大数据
数据库架构
postgresql
GreenPlum
架构之MVCC
Greenplum
数据库三大特性:Shared-nothing、Mpp、MVCC。本文介绍GrrenPlum的MVCC架构。
清纯男孩
·
2023-06-10 20:17
架构
数据库
数据库架构
postgresql
2.3 YARN伪
分布式集群
搭建
任务目的重点掌握YARN集群的相关配置学会启动和关闭YARN集群的两种方式能够使用jps命令查看进程的启动情况能够通过UI查看YARN集群的运行状态任务清单任务1:YARN集群主要配置文件讲解任务2:YARN集群测试任务步骤任务1:YARN集群主要配置文件讲解1.1配置环境变量yarn-env.sh该文件是YARN框架运行环境的配置,同样需要修改JDK所在位置。我们可以使用如下命令打开“yarn-
哈都婆
·
2023-06-10 09:33
hadoop搭建管理教程
hadoop
java
大数据
@Elasticsearch之企业级高可用
分布式集群
(es分布式架构,集群规划,
分布式集群
调优策略)
title:ElasticSearch之企业级高可用
分布式集群
author:Xonitags:搜索引擎Elasticsearchcategories:搜索引擎Elasticsearchabbrlink:
左岸anoi
·
2023-06-10 07:35
Elasticsearch
java
elasticsearch
分布式
架构
面试
搜索引擎
[转帖]
Greenplum
:基于 PostgreSQL 的分布式数据库内核揭秘 (上篇)
Greenplum
:基于PostgreSQL的分布式数据库内核揭秘(上篇)https://www.infoq.cn/article/3IJ7L8HVR2MXhqaqI2RA学长的文章..姚延栋阅读数:7142019
weixin_30265103
·
2023-06-10 06:42
数据库
运维
数据结构与算法
Greenplum
开发基础
Greenplum
开发基础1.
Greenplum
介绍
Greenplum
数据库是一种基于PostgreSQL开源技术的大规模并行处理(MPP)数据库服务器,其架构特别针对管理大规模分析型数据仓库以及商业智能工作负载而设计
qq_38414854
·
2023-06-10 06:10
postgresql
数据库
sql
greenplum
,teradata,presto,clickhouse四种分布式数据库的对比
1.四种数据库的比较2.
Greenplum
数据库2.1
Greenplum
架构2.1.1采用MMP架构2.2.2Hadoop与MPP的应用区别2.2
greenplum
的高可用性2.2.1master冗余2.2.2segment
jerry-89
·
2023-06-10 06:39
pg
数据库
big
data
postgresql
云原生之深入解析Kubernetes的网络模型
一、前言Kubernetes是为运行
分布式集群
而建立的,分布式系统的本质使得网络成为Kubernetes的核心和必要组成部分,了解Kubernetes网络模型可以使你能够正确运行、监控和排查应用程序故障
╰つ栺尖篴夢ゞ
·
2023-06-10 02:16
人工智能与云原生
Kubernetes网络模型
容器和容器之间网络通信
Pod和Pod之间网络通信
Pod和Service网络通信
Internet和服务网络通信
(五)ZK集群搭建
分布式集群
安装部署1.集群规划在hadoop002、hadoop003和hadoop004三个节点上部署Zookeeper。
JayWolf
·
2023-06-10 02:13
Zookeeper节点操作
ZooKeeper的节点操作ZooKeeper的节点类型ZooKeeper其实也是一个
分布式集群
,其中维护了一个目录树结构,在这个目录树中,组成的部分是一个个的节点。
千锋IT教育
·
2023-06-09 23:41
大数据从0到1的完美落地
java-zookeeper
zookeeper
java
Zookeeper概述
主要用于解决
分布式集群
中应用系统的一致性问题。提供了基于类似Unix系统的目录节点树方式的数据存储。可用于维护和监控存储的数据的状态的变化,通过监控这些数据状态的变化,从而达到基于数据的集群管理提供
千锋IT教育
·
2023-06-09 23:10
大数据从0到1的完美落地
zookeeper
分布式
云原生
与
分布式集群
有何区别?
简单来说,多路服务器是为了增强服务器的性能,CPU主要承担的就是计算的功能,多一个CPU自然在性能上肯定会更强。我们将CPU比作一个运输卡车,货物就是我们要计算的信息,CPU运算就类似于卡车运输货物。同一时间运送的货物越多,说明CPU运算能力越强。单CPU系统就相当于一辆卡车在一条车道上跑。由于车少,所以运输能力有限。以往CPU生产厂商都是在不断的提高卡车的载重即主频来提高他的运输能力。双CPU系
了不起的云计算V
·
2023-06-09 13:05
云计算
深度学习
01 云原生生态系统解读
云计算的技术革命互联网时代的历程云计算到底是什么云计算历程云平台的优缺点优势稳定性:云平台大量资源,
分布式集群
部署,保障服务永不宕机,几个9弹性扩展:按需索取,一键秒级开通需要的资源安全性:云上平台生产机可用的完善的权限系统成本
阳宝宝的向日葵
·
2023-06-09 08:17
云原生
云原生
云计算
运维
总结:redis和Zookeeper中分布式锁的对比
集群中分布式锁什么是分布式锁单机集群RedisZookeeper非公平锁加锁的原理公平锁共享锁什么是分布式锁锁,解决的是多线程或多进程情况下的数据一致性问题;分布式锁,解决的是
分布式集群
下的数据一致性问题
lee_curry
·
2023-06-09 06:56
Zookeeper
redis
分布式
java
分布式
zookeeper
redis
第一章_从减库存聊起
在
分布式集群
、微服务、云原生横行的当下,如何保证不同进程、不同服务、不同机器的线程安全问题,jdk并没有给我们提供既有的解决方案。此时,我们就必须借助于相关技术手动实现了。
烟雨忆南唐
·
2023-06-09 05:47
#
分布式锁
jvm
java
开发语言
分布式
2.2 HDFS伪
分布式集群
搭建(智警杯比赛总结)
1.基础配置systemctlstopfirewalldsystemctldisablefirewalldhostnamectlset-hostnamemasterecho172.18.38.88master>>/etc/hostsecho172.18.32.117slave1>>/etc/hostsecho172.18.32.143slave2>>/etc/hoststimedatectlset
哈都婆
·
2023-06-09 05:40
hadoop本憨豆婆
hadoop
hdfs
大数据
Spark-2.WordCount的4种写法
要
分布式集群
上用file读取文件的话,Wor
悠扬前奏
·
2023-06-08 21:33
Minio
分布式集群
搭建部署
Minio分布式模式可以帮助你搭建一个高可用的对象存储服务,你可以使用这些存储设备,而不用考虑其真实物理位置Minio
分布式集群
搭建1、首先我们准备4台服务器:节点目录192.168.1.1/opt/minio
虎神大帝
·
2023-06-08 21:50
java
Spark Standalone 模式的安装和部署 第1关: Standalone
分布式集群
搭建
我们已经掌握了Spark单机版安装,那么
分布式集群
怎么搭建呢?接下来我们学习Standalone
分布式集群
搭建。课程视频如果你需要在本地配置Spark完全分布式环境,可以通过查看课程视频来学习。
是草莓熊吖
·
2023-06-08 11:27
Educoder
hadoop
分布式
spark
大数据
分布式锁--(mysql-redis方式)
在
分布式集群
、微服务、云原生横行的当下,如何保证不同进程、不同服务、不同机器的线程安全问题,jdk并没有给我们提供既有的解决方案。此时,我们就必须借助于相关技术手动实现了。
new DFP
·
2023-06-08 03:44
分布式
java
开发语言
分布式锁原理与实战一:分布式锁简介
但在
分布式集群
工作的开发场景中,在JVM之间,那么就需要
那本来就是我的光
·
2023-06-08 01:20
分布式锁
分布式
java
分布式锁
分布式锁原理与实战二:公平锁和可重入锁的原理
但在
分布式集群
工作的开发场景中,那么就需要一种更加高级的锁机制,来处理种跨JVM进程之间的数据同步问题,这就是分布式锁。公平锁和可重入锁的原理最经典的分布式锁是可重入的公平锁。什么是可重入的公平锁呢?
那本来就是我的光
·
2023-06-08 01:50
分布式锁
分布式
分布式锁
可重入锁
公平锁
【大数据工具】Spark 伪分布式、
分布式集群
搭建
Spark集群搭建Spark安装包下载地址:https://archive.apache.org/dist/spark/1.Spark伪分布式安装安装前提:安装Spark前需要先安装好JDK1.上传并解压Spark安装包使用fileZilla或其他文件传输工具上传Spark安装包:spark-2.1.0-bin-hadoop2.7.tgz解压安装包[root@bigdatasoftware]#ta
程序员胖五
·
2023-06-08 00:49
大数据工具安装
spark
大数据
分布式
CEPH分布式存储部署
ceph支持块存储、对象存储、cephfs文件共享系统,概念性的东西这里不过多介绍,请自行查阅ceph分布式存储相关资料,本文主要介绍ceph
分布式集群
部署操作系统:centos7.9最小安装节点配置:
旅途丶
·
2023-06-07 22:08
linux
分布式
服务器
linux
ceph
GreenPlum
集群部署之抽丝剥茧
中国DBA联盟(ACDU)成员,目前服务于工业互联网擅长主流Oracle、MySQL、PG、高斯及
Greenplum
运维开发,备份恢复,安装迁移,性能优化、故障应急处理等。
IT邦德
·
2023-06-07 21:36
Greenplum入门
数据库
GreenPlum
数据仓库
【
greenplum
性能优化】
greenplum
数据库集群 如何释放占用内存
人工智能教程在
Greenplum
数据库集群中,进程的状态(即state)可以被分为以下几种:active:进程正在执行任务,或者正在等待运行队列中的任务。
东华果汁哥
·
2023-06-07 18:26
数据库--greenplum
数据库
mysql raft 架构_一个分布式 MySQL Binlog 存储系统的架构设计
它能够充当一个MySQLSlave从真正的Master上同步binglog,并存储在
分布式集群
中。同时又充当一个MySQLMaster将集群中的binlog同步给其他Slave。
weixin_39976153
·
2023-06-07 11:40
mysql
raft
架构
Redis进阶:分布式锁问题
1.1问题介绍1.2解决方案1.2.1分布式锁主流的实现方案1.2.2使用Redis实现分布式锁1.2.3分布式锁需要满足的四个条件1.3实现分布式锁1.分布式锁问题1.1问题介绍单机单体中的锁机制在
分布式集群
系统中失效
NorthSmile
·
2023-06-07 09:37
Redis
Java开发
redis
分布式
java
缓存
数据库
定时任务的幂等性
分布式集群
下如何保证定时任务的幂等性(只有一个执行)1.采用分布式锁2.将业务代码与定时任务分开在不同的jar3.通过启动参数设置定时任务开关:-DRunOrderExpire=true控制当前Jar任务是否执行如果配置了你就执行定时任务
Crowno17
·
2023-06-07 05:37
分布式专题
ZooKeeper知识回顾(分布式协调框架,本质是分布式小文件存储系统,以
分布式集群
部署)
ApacheZooKeeperhttps://zookeeper.apache.org/官网为:名字.apache.org1.zookeep概念一个团队里面,需要一个leader,leader是干嘛用的?(分布式协调框架)1.管理什么的咱不说。2.外面的人,想问关于这个团队的一切事情,首先就会去找这个leader,因为他知道的最多,而且他的回答最靠谱。2.zookeep作用2.1配置中心(已经被取
我爱charming你
·
2023-06-06 22:14
java-zookeeper
zookeeper
postgresql之
greenplum
字符串去重拼接方式
目录postgresql
greenplum
字符串去重拼接postgresql字符串处理方式关于查找字符串字符串与数字的相互转换总结postgresql
greenplum
字符串去重拼接pg、gp实现collect_set
·
2023-06-06 21:15
oracle数据落地到gp,使用ora2pg迁移oracle数据到
greenplum
安装ora2pg条件1、perl版本5.10以上2、安装DBD::Oracle3、安装DBI4、安装DBD::Pg一、安装相关软件支持1、安装DBI#下载https://metacpan.org/release/DBI上传到服务器并解压出来DBI-1.637.tar.gz[root@bigdata01~]$lltotal592-rw-r--r--1gpadmingpadmin596423Dec41
一吻江山
·
2023-04-21 19:57
oracle数据落地到gp
Python连接
Greenplum
及常用gp函数和方法(持续更新)
前言了解postgresqlPython连接gp记录postgresql一些函数和方法(持续更新)①:int类型时间转time类型时间②:合并两列值③:取最近N个月数据④:按指定字符串或者符号切割⑤:字符串切割⑥:寻找近N个月的数据⑦:找出表中含有小数的记录⑧:判断某字段是否在一张表中存在⑨:判断表是否存在⑩:模糊匹配多个项⑪:判断某张表中某个字段是否存在(2023-03-13更新)未完待续!!!
zkkkkkkkkkkkkk
·
2023-04-21 17:36
python
postgresql
postgresql
python
IM通讯技术
技术架构选型方面暂未达到
分布式集群
的模式,仅将内存扩充到16G以及100M带宽就可以解决一家大型企业的通讯问题,因为该功能系统并不是主要的业务线,但是所有的处理流程都离不开互通互讯。好吧,下面
DemoImpl
·
2023-04-21 16:18
业务与技术栈综合
java
开发语言
IM
部署方式再谈—集群和分布式
redis-
分布式集群
,主负责读写,从只负责读。nginx负载均衡实现-集群,实际都是主节点。ip负载均衡实现-集群比如redis,master提供读写,slave仅提供读。
开森开心
·
2023-04-21 05:05
日常运维-随笔
腾讯云轻量应用服务器性能如何?测评来了
相对于CVM云服务器轻量服务器更适合轻量级的应用,轻量服务适合中小企或个人开发者用于搭建We网站b应用、小程序、APP以及开发测试环境等,云服务器CVM适用于高并发网站、复杂
分布式集群
应用、大数据分析等架构复杂的使用场景
运维FUN
·
2023-04-21 03:53
腾讯云服务器
腾讯云
云计算
Zookeeper学习笔记
从名字来看zookeeper就是动物园管理员,他是用来管hadoop(大象)、Hive(蜜蜂)、pig(小猪)的管理员,ApacheHbase和ApacheSolr的
分布式集群
都用到了zookeeper
皮多堡
·
2023-04-20 20:45
mongodb linux下集群搭建
mongodb的集群结构如上图网上有个mongo3.0的集群例子:mongodb
分布式集群
搭建手记-美码师-博客园一、架构简介目标单机搭建mongodb
分布式集群
(副本集+分片集群),演示mongodb
飞天大蟾蜍
·
2023-04-20 11:08
mongodb
数据库
nosql
mongodb集群
linux
应该没人比我更细了吧:带你深入剖析Redis分布式锁!
锁我们都知道,在程序中的作用就是同步工具,保证共享资源在同一时刻只能被一个线程访问,Java中的锁我们都很熟悉了,像synchronized、Lock都是我们经常使用的,但是Java的锁只能保证单机的时候有效,
分布式集群
环境就无能为力了
风平浪静如码
·
2023-04-20 10:12
9.23 Day58---NTM架构
服务器的三种架构形式:准备一台新的虚拟机并准备好初始化环境虚拟机没有IP地址准备实验需要的5台机器NTM架构:N指的是NginxT指的是TomcatM指的是MySQL服务器的三种架构形式:单体架构分布式架构
分布式集群
架构准备一台新的机器
您算哪块小饼干?
·
2023-04-20 07:33
架构
分布式
上一页
13
14
15
16
17
18
19
20
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他