greenplum分布式集群

Quartz实现分布式集群schedule调度(定时任务执行)

项目需求：需要执行一些定时任务，比如每间隔几小时同步其他系统中信息，或者定期监控一些服务是否正常。如果定时任务程序有多个实例在运行，就是运行多次，因此需要集群分布式的schedule。保证定时任务有且只有一个执行。调研各种schedule框架后，选择quartz，原因如下：1，项目已经在使用quartz，大家比较熟悉，2，quartz提供的clustering功能完备，满足项目的需求。说明，本文主
不1见2不3散4·2023-08-13 08:01

Hazelcast 在springboot下的使用集成

一、Hazelcast简介Hazelcast是一款由Hazelcast公司开发的基于jvm环境的为各种应用提供分布式集群服务的分布式缓存解决方案。
inrgihc·2023-08-12 23:25

greenplum数据导入导出

greenplum导入导出简介使用copy导出1、使用navicat工具2、使用PGSQL客户端简介一、数据导入greenplum数据导入有五种方式：1、insert：通过sql直接插入数据2.
Mavey__Loo·2023-08-12 13:05

Centos7.9编写分布式集群大数据系统_自启动脚本---Linux工作笔记058

由于为了方便,系统在启动的时候,设置成系统所有的,集群软件都自动启动,这样,可以减少,运维成本,要不然,这么多,工具,有的还不知道放到什么位置了,一个个去启动,非常麻烦.首先编辑:编辑这个文件:然后编辑这个文件,写上自己,自启动脚本的位置,然后保存:wq然后再给这个文件赋值上,执行权限,然后,重启以后,这脚本,我们设置在rc.local中的,就会自动执行了.然后后面是构建:启动脚本,的内容了:
脑瓜凉·2023-08-12 04:23

Zookeeper完全分布式集群的搭建一、集群模式

1、单机模式在zoo.cfg中只配置一个server.id就是单机模式了。这种模式下，如果当前主机宕机，那么所有依赖于当前zookeeper服务工作的其他服务器都不能在进行正常工作，这种事件称为单节点故障。所以这种模式一般用在测试环境。2、伪分布式在zoo.cfg中配置多个server.id，其中ip都是当前机器，而端口各不相同，启动时就是伪集群模式了。这种模式和单机模式产生的问题是一样的。这种模
路远网·2023-08-12 00:33

Chapter 13 Greenplum PostGIS Extension

Chapter13GreenplumPostGISExtensionThischaptercontainsthefollowinginformation:•AboutPostGIS•GreenplumPostGISExtension
kygoal·2023-08-11 22:13

Docker安装Hadoop分布式集群

一、准备环境dockersearchhadoopdockerpullsequenceiq/hadoop-dockerdockerimages二、Hadoop集群搭建1.运行hadoop102容器dockerrun--namehadoop102-d-hhadoop102-p9870:9870-p19888:19888-v/opt/data/hadoop:/opt/data/hadoopsequenc
qq_14910065·2023-08-11 11:00

6个问题深入解读K8s技术架构

K8S是一个基于容器技术的分布式集群管理系统，是谷歌几十年来大规模应用容器技术的经验积累和升华
独行侠梦·2023-08-11 09:48

性能测评：腾讯云轻量应用服务器_CPU内存带宽流量

公网带宽和系统盘存储多维对比，相对于CVM云服务器轻量服务器更适合轻量级的应用，轻量服务适合中小企或个人开发者用于搭建We网站b应用、小程序、APP以及开发测试环境等，云服务器CVM适用于高并发网站、复杂分布式集群应用
aliyunbaike·2023-08-11 03:55

Hadoop 基础【原理 + 实践】

Hadoop概述1.Hadoop介绍2.Hadoop组成3.HDFS概述4.YARN概述5.MapReduce概述二、Hadoop安装1.Hadoop运行模式1.1本地单例模式(standalone)1.2伪分布式集群
喵王叭·2023-08-10 09:49

真正的inotify+rsync实时同步 彻底告别同步慢

rsync实时同步彻底告别同步慢|运维生存时间http://www.ttlsa.com/web/let-infotify-rsync-fast/背景我们公司在用inotify+rsync做实时同步，来解决分布式集群文件一致性的问题
linux凯·2023-08-10 00:38

用inotify+rsync实现快速的实时同步

转载:http://www.ttlsa.com/web/let-infotify-rsync-fast/背景我们公司在用inotify+rsync做实时同步，来解决分布式集群文件一致性的问题。
周雄伟·2023-08-10 00:38

详解域名解析服务

件域名系统简介DNS全称DomainNameSystem，即域名系统，主要作用是实现域名和IP地址之间的相互解析，提供这种解析服务的就是DNS服务器，这些服务器本质上是和IP映射关系的数据库，宏观上组成了域名解析分布式集群
lyh24k·2023-08-09 22:19

ElasticSearch入门篇（1）：windows环境搭建ES集群

近期在学习ElasticSearch，便在windows下搭建了一个分布式集群，练习一些常用的DSL（类似于SQL）和JavaAPI。
m0_67391518·2023-08-09 21:13

Java多线程面试21题

如hadoop分布式集群。所以并发编程的目标是充分的利用处理器的每一个核，以达到最高的处理性能。线程和进程的区别？简而言之，进程是程序运行和资源分配的基本单位，一个程
JavaGPT·2023-08-09 11:06

Hadoop RPC远程过程调用框架

HadoopRPC（远程过程调用）是Hadoop分布式文件系统（HDFS）和其他Hadoop生态系统组件之间通信的机制，使得分布式集群中的不同节点能够无缝地相互交流和交换数据。
贾斯汀玛尔斯·2023-08-08 05:56

容器集群k8s从入门到精通之安全认证（第九章）

访问控制概述Kubernetes作为一个分布式集群的管理工具，保证集群的安全性是其一个重要的任务。所谓的安全性其实就是保证对Kubernetes的各种客户端进行认证和鉴权操作。
背着行囊去远方·2023-08-07 10:06

clickhouse集群部署方案分析

常见的三种集群架构方案注：本文摘自网上内容，原文地址：https://zhuanlan.zhihu.com/p/161242274ClickHouse分布式集群常见方案一：MergeTree+Distributed
liguoxi666·2023-08-07 04:14

产品图鉴：Greenplum

Greenplum是老牌的MPP数据仓库，查询稳定性很强，SQL支持非常全面（支持ANSISQL2008和SQLOLAP2003扩展；支持ODBC和JDBC应用编程接口。
桥路丶·2023-08-07 02:59

自学Hadoop的血泪史

在“疼熏云”上搭建Hadoop分布式集群。
coderFamer·2023-08-07 01:43

Greenplum原理及其简介

Greenplum介绍组织架构Greenplum数据库是一种大规模并行处理（MPP）数据库服务器，其架构特别针对管理大规模分析型数据仓库以及商业智能工作负载而设计。
贾斯汀玛尔斯·2023-08-06 21:50

greenplum web界面不显示监控数据

如下所示在master的postgresql.conf文件（如/opt/greenplum/data/master/gpseg-1）中添加如下信息gpcc.enable_send_query_info=
贾斯汀玛尔斯·2023-08-06 21:19

Greenplum内存问题处理

错误java.sql.SQLException:[Pivotal][GreenplumJDBCDriver][Greenplum]Outofmemory(seg1slice3*.*.3.245
贾斯汀玛尔斯·2023-08-06 21:19

Greenplum调研报告

独立组件个数Greenplum主要由Master节点、Segment节点、interconnect三大部分组成。
贾斯汀玛尔斯·2023-08-06 21:19

Greenplum及其web安装

一，安装说明1.1环境说明*名称**版本*操作系统CentOS7.664bitgreenplumgreenplum-db-6.10.1-rhel7-x86_64.rpm1.2集群介绍IPhostname
贾斯汀玛尔斯·2023-08-06 21:49

简单说说ClickHouse的概述以及优势

由于它有几倍于GreenPlum等引擎的性能优势，所以不少人都选择将其安装云服务器中使用。ClickHouse是一个列导向数据库，是原生的向量化执行引擎。它在大数据领域没有走Hadoop
睿江云计算·2023-08-06 08:12

RabbitMQ分布式集群架构

RabbitMQ分布式集群架构和高可用性（HA）(一）功能和原理设计集群的目的允许消费者和生产者在RabbitMQ节点崩溃的情况下继续运行通过增加更多的节点来扩展消息通信的吞吐量1集群配置方式RabbitMQ
weifubin·2023-08-06 06:33

九十六、kettle版本8.2连接数据库的中文乱码问题

关于中文乱码目前找到了两种也可以叫三种方法，因为版本不同而方法可能不同，目前我使用第一种防范解决了中文乱码问题，而第二种方法对MySQL数据库没作用，但是对Greenplum有用第一种方法是在连接数据库时
天地风雷水火山泽·2023-08-05 23:15

HBase几种安装方式

全分布式和HA模式需要）环境对应关系如下：hbase环境对应hadoop环境对应外部zookeeper环境本地模式不需要不需要伪分布式伪分布式单机安装（也可用hbase内置zookeeper）全分布式全分布式集群模式
若兰幽竹·2023-08-05 08:05

基于EMQ的企信说明文档(包含EMQ安装步骤、JAVA后端、VUE前端)

客户端)整体数据流图：VUE简单demo:什么是EMQEMQXR3.1(Erlang/Enterprise/ElasticMQTTBroker)是基于Erlang/OTP语言平台开发，支持大规模连接和分布式集群
云台095·2023-08-04 23:47

四、Yarn

随着大数据的发展，Hadoop2将MapReduce中关于资源调度的内容分离了出来，并做成了一个独立的分布式集群的资源调度框架，也就是Yarn。
阿文灬·2023-08-04 19:21

Redis学习笔记

企业缓存产品介绍Memcached优点：高性能读写、单一数据类型、支持客户端式分布式集群、一致性hash、多核结构、多线程读写性能高缺点：无持久化、节点故障可能出现缓存穿透、分布式需要客户端实现、跨机房数据同步困难
花酒石·2023-08-03 20:55

Greenplum查询调研

文章目录Greenplum调研查询记录文档Datatypes数据类型Functions-operators函数和操作符函数和操作符PostgreSql支持的聚合函数窗口表达式窗口函数高级聚集函数文本搜索函数和操作符搜索表
贾斯汀玛尔斯·2023-08-03 17:25

Greenplum集群部署

一，安装说明1.1环境说明*名称**版本*操作系统CentOS7.664bitgreenplumgreenplum-db-6.10.1-rhel7-x86_64.rpm1.2集群介绍IPhostname
贾斯汀玛尔斯·2023-08-03 17:25

Greenplum功能调研

Greenplum介绍文章目录Greenplum介绍1.背景介绍2.特点3.架构4.MPP结构5.MVCC6.语法结构7.GreenPlum集群常用命令7.维护8.参考1.背景介绍Greenplum。
贾斯汀玛尔斯·2023-08-03 17:53

Centos 7 环境 Storm 2.0.0 完全分布式集群的搭建过程

系列博客地址Centos7环境hadoop3.2.0完全分布式集群搭建Centos7环境hive3.1.1搭建Centos7环境Spark2.4.3完全分布式集群的搭建过程Centos7环境HBase2.1.5
小不强·2023-08-03 09:51

分布式集群架构场景化解决方案

一致性hash算法hash算法应用场景普通hash算法存在的问题一致性hash算法手写一致性hash算法nginx配置一致性hash负载均衡策略集群时钟同步问题时钟不同步导致的问题集群时钟同步配置分布式id解决方案分布式调度问题定时任务的场景什么是分布式调度定时任务与消息队列的区别定时任务的实现方式分布式调度框架elastic-jobElastic-Job介绍Elastic-Job-Lite应用E
哈哈海·2023-08-02 19:40

ClickHouse部署系列1: ZooKeeper集群部署

ZooKeeper集群部署ClickHouse分布式集群方案建立标准的ZK的目录使用规范副本的设置的建议机器选择的建议ClickHouse的分布式高可用的架构方案在k8s集群上部署ZooKeeperZooKeeper
godleft90·2023-08-02 13:56

使用 Docker Compose 部署 Redis Cluster 集群，轻松搭建高可用分布式缓存

RedisCluster能够将多个Redis节点组合成一个分布式集群，实现数据分片和负载均衡，从而确保在大规模应用场景下的稳定性和可靠性。
修己xj·2023-08-02 09:54

集群和分布式相关概念

1.集群和分布式集群:很多“人”一起，干一样的事。一个业务模块，部署在多台服务器上分布式:很多“人”一起，干不一样的事。这些不一样的事，合起来是一件大事。
阿岳316·2023-08-02 08:20

Kafka系列之：详细介绍部署Kafka Connect分布式集群

Kafka系列之：详细介绍部署KafkaConnect分布式集群一、部署分布式Kafka集群详细步骤二、KafkaWorker节点安装部署Kafka三、修改connect-distributed.properties
最笨的羊羊·2023-08-02 08:49

kafka总结

消息队列应用场景缓存/削峰:处理突然激增的大量数据，先放入消息队列，再按照速度去处理，解耦：在不同模块，不同服务间传递数据和消息异步通信：发送消息让别的模块去异步处理一些功能kafka高效读写原因kafka是分布式集群
鹤望兰丶·2023-08-02 06:08

在CSDN学Golang场景化解决方案（EFK分布式日志系统方案）

一，ElasticSearch分布式集群部署在GolangEFK分布式日志系统方案中，ElasticSearch是一个分布式搜索引擎和数据存储库，它可以用于存储和搜索大量的日志数据。
YKM_2580·2023-08-02 04:07

ONOS系统架构之高可用实现方案的演进

>>>上篇文章《ONOS高可用性和可扩展性实现初探》讲到了ONOS系统架构在高可用、可扩展方面技术概况，提到了系统在分布式集群中如何保证数据的一致性。
weixin_33965305·2023-08-01 21:55

java初级面试题框架，面试

开头消息队列RocketMQ是阿里巴巴集团基于高可用分布式集群技术，自主研发的云正式商用的专业消息中间件，既可为分布式应用系统提供异步解耦和削峰填谷的能力，同时也具备互联网应用所需的海量消息堆积、高吞吐
A程序员导师·2023-08-01 19:55

python集成chaosblade工具用于混沌测试

背景阿里开源的chaosblade混沌测试工具：从cpu、磁盘、内存、网络等硬因素，jvm、process、servlet等软因素，从物理机、docker容器、k8s集群等维度统一规范地维护了一套命令用于单节点、分布式集群的应用
佛系小懒·2023-08-01 18:29

Zookeeper

Zookeeper1.简介最初了解它是在研究生期间，搭建过Hadoop集群，它用于为分布式集群提供一致性服务。它的核心是：类似树形文件系统、通知机制。下面先介绍几个小概念。
粪逗er·2023-08-01 15:12

如何处理Spark数据倾斜

一、什么是数据倾斜在分布式集群计算中，数据计算时候数据在各个节点分布不均衡，某一个或几个节点集中80%数据，而其它节点集中20%甚至更少数据，出现了数据计算负载不均衡的现象。
Relian哈哈·2023-07-31 15:42

kafka配置文件 中文乱码_Kafka实战及常见问题解决方法-Go语言中文社区

上一篇技术博客讲解了kafka基本原理以及kafka分布式集群搭建方法，需要这些知识的小伙伴可以查看小厨的《Kafka原理介绍及其分布式安装使用》。
Yrgo·2023-07-31 08:19

《GreenPlum系列-部署维护》GreenPlum数据库Standby故障处理

检查监控中心数据库状态2.查看master节点数据库状态su-gpadmingpstate-f二、重启数据库1.快速关闭数据库[gpadmin@mdwpg_log]$gpstop-Mfast...ContinuewithGreenpluminstanceshutdownYy
DATA数据猿·2023-07-31 04:08
上一页 10 11 12 13 14 15 16 17 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他