CDH集群搭建第5页

mysql分库负载均衡_使用Mycat实现Mysql数据库的主从复制、读写分离、分表分库、负载均衡和高可用...

ITManager这是一个开源的项目管理工具，具备组织架构管理，权限管理，任务管理，测试管理，日报，周报，绩效考核，还包括配套的代码生成器：http://www.itproject-manager.com/Mysql集群搭建使用

im陈璐·2024-01-24 11:30

kafka集群的错误处理

今天由于kafka集群搭建时的配置不当，由于一台主消费者挂掉(服务器崩了，需要维修)，导致了所有新版消费者(新版的offset存储在kafka)都无法拉取消息。

Stalary·2024-01-24 10:16

RKE快速搭建离线k8s集群并用rancher管理界面

关联文章：1.k8s集群搭建前的服务器初始化，见文章《附1：k8s服务器初始化》2.rke搭建的k8s集群新增节点，见文章《附2：rke安装的k8

SRE成长记·2024-01-24 10:23

HBase详细概述

不过在此之前，你可以先了解Hadoop生态系统，若想运行HBase，则需要先搭建好Hadoop集群环境，可以参考此文搭建5个节点的hadoop集群环境（CDH5）。好了，让我们来学习HBase吧！

a867901084·2024-01-24 08:49

Druid集群搭建手册

1.Java环境安装和配置建议使用JDK1.8。可以参考《Linux安装JDK完整步骤》。2.创建用户创建druid用户，用来管理druid相关的服务。执行命令：useradddruid#创建用户passwddruid#设置druid用户密码3.Zookeeper安装和配置Druid的服务套件imply自带zookeeper，方便单机部署。如果是集群部署，最好使用自己部署的zookeeper集群。

萧十一郎君·2024-01-24 06:13

hadoop 集群搭建笔记

修改主机名字：hostnamectlset-hostname主机名称修改hosts文件进行解析：xxxx.xxxx.xxxx.xxxx主机名字ssh免密登录：ssh-keygen-trsa生成密钥ssh-copy-idslave1ssh-copy-idslave2每个节点都拷贝公钥ssh-copy-idmaster集群部署2、配置集群1、核心配置文件配置core-site.xmlfs.defaul

阿强的学习笔记·2024-01-24 03:42

Elasticsearch8 集群搭建（二）配置篇：（3）安全配置

此篇记录Elasticsearch8.x传输层的安全配置。传输层节点间：如果集群有多个节点，必须在节点间配置TLS。生产模式下，如果不启用TLS，集群将无法启动。图片来源：SetupbasicsecurityfortheElasticStack|ElasticsearchGuide[8.10]|Elastic传输层依赖于TLS进行节点间的加密和认证。在节点之间配置TLS可以防止未授权的节点访问集群

要薪贫气和哦·2024-01-23 21:11

Kafka集群与可靠性

Kafka集群与可靠性1.Kafka集群搭建实战使用两台Linux服务器：一台192.168.182.137一台192.168.182.138安装kafka首先，我们需要配置java环境变量（这里就略过了

llp1110·2024-01-23 13:39

Postgresql的集群搭建与监控方案

转载说明：如果您喜欢这篇文章并打算转载它，请私信作者取得授权。感谢您喜爱本文，请文明转载，谢谢。相关文章：PostgreSQL学习之部署与简单使用PostgreSQL的常见错误和解决方法如果PostgreSQL有两层nginx代理，会发生什么事？前言之前在《PostgreSQL学习之部署与简单使用》记录了PostgreSQL的搭建和简单使用，本文记录PostgreSQL集群的搭建，接入Promet

SRE成长记·2024-01-23 10:30

cdh6.3.2的hive配udf

背景大数据平台的租户要使用udf，他们用beeline连接，意味着要通过hs2，但如果有多个hs2，各个hs2之间不能共享，需要先把文件传到hdfs，然后手动在各hs2上createfunction。之后就可以永久使用了，重启hs2也可以调研先查的hive官网https://cwiki.apache.org/confluence/display/Hive/LanguageManual+UDF#La

zdkdchao·2024-01-23 07:02

redis哨兵架构

lua脚本redis分布式锁redis分布式锁redissonredis缓存优化redis的过期淘汰策略redis连接池参数文章目录系列文章目录redis的哨兵高可用架构(中小型公司大部分在使用)哨兵集群搭建

敖小军·2024-01-22 23:46

CDH6.2 集群离线部署

文章目录CDH6.2集群离线部署服务器集群节点角色规划系统环境准备cm-server配置ssh免密码登录认证在cm-server服务器上下载CDH6.2相关的安装包安装nginx做cm本地yumrepo

那些、快乐。·2024-01-22 21:44

【大数据处理技术实践】期末考查题目：集群搭建、合并文件与数据统计可视化

集群搭建、合并文件与数据统计可视化实验目的任务一：任务二：实验平台实验内容及步骤任务一：搭建具有3个DataNode节点的HDFS集群集群环境配置克隆的方式创建Slave节点修改主机名编辑hosts文件生成密钥免认证登录修改

汐ya~·2024-01-22 09:35

二进制部署高可用k8s集群V1.20.11版本

将桥接的IPv4流量传递到iptables的链7、时间同步二、部署Etcd集群1、准备cfssl证书生成工具2、生成Etcd证书2.1、自签etcd证书颁发机构（根CA）2.2、使用自签的CA来签发EtcdHTTPS

不知名运维:·2024-01-22 07:57

RocketMQ集群搭建

系列文章目录提示：这里可以添加系列文章的所有文章的目录，目录需要自己手动添加RocketMQ集群搭建提示：写完文章后，目录可以自动生成，如何生成可参考右边的帮助文档文章目录系列文章目录前言一、多master

键盘敲烂~~~·2024-01-21 14:16

【Spark分布式内存计算框架——Spark SQL】14. 分布式SQL引擎

语句方式二：启动服务HiveServer2（HiveThriftServer2)将Hive当做一个服务启动(类似MySQL数据库，启动一个服务)，端口为100001)、交互式命令行，bin/beeline，CDH

csdnGuoYuying·2024-01-21 06:38

es-kibana集群搭建（7.3版本带x-pack）

一、前言es因为版本迭代太快，网上的资料大多停留在6.x及之前的版本，但是6.x版本之前的es安全插件x-pack是收费的，如果不付费那es就是裸奔的状态。而从6.8.0和7.1.0版本开始，x-pack安全功能免费提供，但是网上关于x-pack的安装与使用确极少，本人最近恰好有用到所以记录一下（我这里使用的是7.3版本，我这里搭的是伪集群，搭建正式环境修改对应ip和端口就行）。二、安装elast

石用软件·2024-01-20 12:26

CDH禁用Kerberos

禁用Kerberos，由于没有按钮可以直接操作，需要我们手动一个个修改开启了Kerberos的组件的配置。修改步骤按以下来：1.先关闭集群（如果yarn上有任务则等待停止，或手动停止）。2.修改zookeeper的配置enableSecurity取消勾选，EnableKerberosAuthentication取消勾选，在zoo.cfg的Server高级配置代码段（安全阀）写入skipACL:ye

sf_www·2024-01-20 11:23

Spring Cloud详细入门使用

文章目录SpringCloud服务注册与发现EurekaServer启动服务注册服务发现NacosServer启动(nacos2.2.0)服务注册服务发现服务集群命名空间配置中心集群搭建负载均衡RPC远程过程调用

怡人蝶梦·2024-01-20 08:59

Kafka系列（二）、架构原理及存储机制

kafkaeagle安装使用滴滴开源的kafka-manager编译及部署使用kafka管理监控系统CMAK(yahoo的kafka-manager)部署及使用Kafka系列（一）、2.6.0版本kafka集群搭建架构原理架构

王义凯_Rick·2024-01-20 08:56

cdh 安装 elsticsearch

前言记录了我使用CDH安装ES过程第一步：cdh集成es参考文章我使用的是7.13.4的版本，并非全部按照文章的来，问题解决第二步：安装kibana参考文章注意：版本要一致我使用的docker安装kibana

万事万物·2024-01-19 20:18

Elasticsearch8 集群搭建（二）配置篇：（2）系统配置

此篇记录Elasticsearch8的一些系统配置。1、更改文件描述符的限制Elasticsearch使用了大量的文件描述符，它用于表示系统打开的文件的标识符。文件描述符是非负整数，它在操作系统层面被用来唯一标识一个打开的文件、套接字或其他I/O资源。每个进程都有一组文件描述符，这些描述符用于跟踪它当前打开的文件和网络连接。操作系统为每个进程分配一定数量的文件描述符。这个数量是由操作系统的配置和限

要薪贫气和哦·2024-01-19 13:55

详解SpringCloud微服务技术栈：Nacos配置管理

Nacos的集群搭建，感觉太复杂了，就一台电脑要弄很久去模拟，所以不

布布要成为最负责的男人·2024-01-19 12:49

kafka可视化客户端工具（Kafka Tool）的使用

一、下载下载地址：http://www.kafkatool.com/download.html我们的kafka版本是2.11（kafka_2.11-2.0.0-cdh6.1.1），下载kafkatool2.0.6

勤奋的超跑·2024-01-19 12:54

Eureka整合seata分布式事务

修改conf目录中flie.conf文件1.3、修改conf目录中registry.conf文件1.4、初始化seata数据库二、微服务整合Seata2.1、父工程项目创建引入依赖2.2、Eureka集群搭建

人生就像一场戏!·2024-01-19 07:52

CDH6.3.2，不互通的cdh平台互导hive数据

1、先导出所有建表语句，在源CDH服务器命令行输入下面命令，该库下所有建表语句保存至hive目录中的tables.sql文件中，不知道具体路径可以全局搜索一下，拿到源库hive的建表语句后，稍微处理一下

李小晨同学·2024-01-19 01:12

HBase第一章：集群搭建

系列文章目录HBase第一章：集群搭建文章目录系列文章目录前言一、环境准备二、上传HBase三、上传HBase四、配置参数五、分发测试六、高可用总结前言Hive的内容基本算是学完了，太深入的东西，现在没有必要死磕

超哥--·2024-01-19 00:57

HBase集群部署

前提条件安装hbse的前提条件是jdk已经搭建完成，虚拟机具有Hadoop伪分布式或完全分布式的集群搭建，以及zookeeper环境搭建完成。

Golden life·2024-01-19 00:21

【大数据】HBase集群安装部署

并启动安装好对应版本的zookeeper集群，并启动1.HBase集群安装部署1.1准备安装包下载安装包并上传到node01服务器安装包下载地址：http://archive.cloudera.com/cdh5

橙子园·2024-01-19 00:51

HBase学习三：集群部署

启动HBase—>关闭HBase—>关闭Hadoop1环境准备1.0环境前期准备参考基础环境配置1.1机器准备hostnameipvm1ip1vm2ip2vm3ip31.2机器分配hdfs的集群搭建可以参考

Studying！！！·2024-01-19 00:50

Redis集群搭建

为什么要有集群之前我们已经讲了主从的概念，一主可以多从，如果同时的访问量过大(1000w),主服务肯定就会挂掉，数据服务就挂掉了或者发生自然灾难大公司都会有很多的服务器(华东地区、华南地区、华中地区、华北地区、西北地区、西南地区、东北地区、台港澳地区机房)集群的概念集群是一组相互独立的、通过高速网络互联的计算机，它们构成了一个组，并以单一系统的模式加以管理。一个客户与集群相互作用时，集群像是一个独

仲夏那片海·2024-01-18 22:14

k8s 集群搭建的一些坑

k8s集群部署的时候会遇到很多的坑，即使看网上的文档也可能遇到各种的坑。安装准备1、虚拟机两台（ip按自己的网络环境相应配置）(master/node)192.168.100.215k8s-master192.168.100.216k8s-node12、关闭防火墙(master/node)systemctlstopfirewalldsystemctldisablefirewalld3、关闭seli

ByteX·2024-01-18 15:29

helm安装

下载安装包，并解压wgethttps://get.helm.sh/helm-v2.15.2-linux-amd64.tar.gztar-xfhelm-v2.15.2-linux-amd64.tar.gzcdhelm-v2.15.2

无处安放的躁动·2024-01-18 09:27

ElasticSearch学习之一：基础知识+单节点/集群搭建

HackQ_sxj·2024-01-18 08:39

Elasticsearch8 集群搭建（一）基础篇

记录下工作中搭建Elasticsearch8集群的过程，此篇为第一部分，后续会陆续更新其他部分。前提：安全组配置：确保集群内所有服务器在同一安全组内。（或在不同安全组但互相可以通信）以下步骤需要在每台要安装Elasticsearch的服务器上执行。1、创建Elasticsearch专属用户Elasticsearch禁止以root身份启动，必须创建一个专属用户来运行：图片来源：Elasticsear

要薪贫气和哦·2024-01-18 08:38

Elasticsearch8 集群搭建（二）配置篇：（1）节点和集群配置

安装完Elasticsearch后，需要对其进行配置，包括以下几部分：节点和集群配置、系统配置、安全配置。此篇记录节点和集群配置的内容，后续将更新系统配置和安全配置。节点和集群配置：通过编辑/usr/local/elasticsearch-8.10.2/config/elasticsearch.yml文件进行配置，在集群内每个节点上都要进行配置。1、Cluster部分：cluster.name:设

要薪贫气和哦·2024-01-18 08:38

【centos7系统】Redis-6.2.2版本集群搭建

SRE成长记·2024-01-18 05:16

RabbitMQ常见问题之高可用

文章目录一、集群分类二、普通集群搭建1.准备2.配置3.运行三、镜像集群1.介绍2.启用方式3.测试四、仲裁队列1.介绍2.创建五、Java连接RabbitMQ集群方式一、集群分类RabbitMQ的是基于

木子dn·2024-01-18 01:31

Ceph分布式文件系统集群搭建详解

1、Ceph分布式文件系统简介Ceph是一种为优秀的性能、可靠性和可扩展性而设计的统一的、分布式文件系统。Ceph独一无二地在一个统一的系统中同时提供了对象、块、和文件存储功能。基开发目标是：可轻松扩展到数PB容量支持多种工作负载的高性能（每秒输入/输出操作[IOPS]和带宽）高可靠性Ceph不仅仅是一个文件系统，还是一个有企业级功能的对象存储生态环境。中文学习网址：CEPH中文学习网2.Ceph

蔚蓝色天空sky·2024-01-18 00:11

Ceph分布式文件系统集群搭建

目录一、规划设计二、环境准备三、部署ceph集群四、开启Dashboard一、规划设计准备四台虚拟机（部署三台服务器和一台计算机更好）,分别安装centos-7-x86_64操作系统，使用的ceph的版本minic版，网络地址及规划随机。节点名称IP地址系统版本部署进程数据盘Ceph1192.168.239.150Centos-7-x86_64MON+mgr+OSD/dev/sdbCeph2192

疯狂运维的树懒·2024-01-18 00:10

[CDH5] Oozie web console is disabled 问题解决

CDH5安装完成以后OozieWebUI点开显示Ooziewebconsoleisdisabled.问题解决：下载ExtJS2.2:下载地址：http://archive.cloudera.com/gplextras

尼小摩·2024-01-17 19:12

Linux平台建立GB28181设备模拟器

下载模拟器到网站下载Linux平台版本:https://www.happytimesoft.com/download.htmltar-zxvfhappytime-gb28181-device.tar.gzcdhappytime-gb28181

ketaotech·2024-01-17 12:53

【Flink-1.17-教程】-【二】Flink 集群搭建、Flink 部署、Flink 运行模式

【Flink-1.17-教程】-【二】Flink集群搭建、Flink部署、Flink运行模式1）集群角色2）Flink集群搭建2.1.集群启动2.2.向集群提交作业3）部署模式3.1.会话模式（SessionMode

bmyyyyyy·2024-01-17 12:16

Zookeeper集群搭建

目录1、下载并解压zookeeper2、修改配置文件zoo.cfg3、创建myid文件4、启动zookeeper服务5、可能存在的问题1、下载并解压zookeeperhttps://www.apache.org/dyn/closer.lua/zookeeper/zookeeper-3.7.0/apache-zookeeper-3.7.0-bin.tar.gz2、修改配置文件zoo.cfg上面红色框

程序员张同学·2024-01-17 11:16

ActiveMq由浅入深讲解+面试题50道讲解-张立坤-专题视频课程

基于队列的生产者和消费者，基于发布-订阅的生产者和消费者，消息的同步消费和异步消费，消息的数据类型，身份认证，持久化配置与实现，事务，死信队列，ACK策略，消息的丢失，重复重复消费，消息重发，springmvc集成，集群搭建

zlkwork·2024-01-17 11:12

【教程】集群搭建准备工作全流程

基于VMware创建虚拟机进行集群搭建，适用于hadoop/GreenPlum等集群之前已经创建了三台虚拟机hadoop102，hadoop103，hadoop104来搭建hadoop集群，因为目前学习到了

THE WHY·2024-01-17 04:12

Hudi0.14.0最新编译（修订版）

Java1.8maven3.9.3hadoop3.3.4hive3.1.3spark3.2.1flink1.16.0hudi0.14.02hudi准备2.1源码$gitclonehttps://github.com/apache/hudi.git$cdhudi

跟着大数据和AI去旅行·2024-01-16 20:40

Linux搭建 Kubernetes（K8S)集群详情教程

当搭建Kubernetes集群时，涉及的详细步骤可能较多，以下是详细的Kubernetes单节点集群搭建步骤：步骤1:准备工作确保满足以下基本要求：一台运行Ubuntu18.04或更高版本的机器。

二当家的素材网·2024-01-16 17:17

zookeeper集群搭建

软件下载官网首页：ApacheZooKeeper集群搭建准备三台服务器服务器1192.168.206.135服务器2192.168.206.136服务器3192.168.206.137软件安装解压压缩包

喝水的鱼.·2024-01-16 14:58

在线SM2密钥生成工具

是中国国家密码管理局颁布的中国商用公钥密码标准算法(一种非对称加密算法)，SM2采用的是ECC256位的一种椭圆曲线的加密算法,其密钥长度256bit，包含数字签名、密钥交换和公钥加密，用于替换RSA/DH/ECDSA/ECDH

yunmoon01·2024-01-16 09:46

推荐频道

CDH集群搭建