CDH集群搭建

K8S集群搭建

K8S集群搭建1.基础环境IP节点名称域名规格10.1.2.111k8s-master-1master01.k8s.io4核8G，50G10.1.2.112k8s-master-2master02.k8s.io4
奋斗的昌老师·2023-12-21 10:42

Hadoop集群的搭建（全网最详细，看了就会）

在搭建之前请一定要确保Hadoop集群搭建的前置准备已经完成，详细内容可以参考我的这篇文章。
叶落长街·2023-12-21 08:49

Hadoop集群搭建详细教程

Hadoop环境搭建1.环境准备1.首先创建一台模板机所谓的模板机是进行了一些最基础的配置，比如说进行主机名修改、网络配置、下载一些插件等准备工作。不会创建虚拟机的可以通过Centos7.5安装配置及虚拟机搭建详细教程进行虚拟机创建。1.1网络测试[root@hadoop101~]#pingwww.baiu.com如果ping不通百度，可能是网络配置没有配置好，可以通过配置文件等修改。1.2修改I
百万攻程狮·2023-12-21 08:49

Comparison and Differences beteen Powershell and Linux

thesame1.1)functionsonPowershellandLinuxII）differencepoints2.1)CD:changedirectory2.1.1)Powershell：commandcdhasnoeffect
DADIAN_GONG·2023-12-21 07:11

Redis集群搭建与使用 - 整合Spring Boot在实际开发中的应用

Redis集群搭建1.下载和安装Redis首先，从Redis官方网站下载稳定版本的
程序员王也·2023-12-21 07:02

Zookeeper-快速入门、服务搭建、集群搭建教程

官网：https://zookeeper.apache.org/zookeeper常用用途：集群管理，zookeeper作为注册中心，管理服务提供方的ip地址端口号url信息，并在服务消费方请求需要时发送给服务消费方。配置中心（不过一般用阿波罗apollo或者阿里的Nacos来做）多个app中的配置是从zookeeper中拉取配置，而不是一个个去手动修改。消费端从服务端中关注某个ZNode，一旦节
绝恋96·2023-12-21 06:22

Flink高可用集群搭建

部署flink的准备工作flink版本的选择需要考虑hadoop的版本，本集群hadoop的版本为2.7.4,flink的版本为flink-1.7.2-bin-hadoop27-scala_2.11.tgzflink高可用集群需要依赖zookeeper开始安装1.编辑flink的配置文件flink-conf.yaml#这里选择配置主节点jobmanager.rpc.address:node1#Th
NikolasNull·2023-12-20 23:44

spark课程大纲

Spark环境搭建CentosSpark单机版伪分布式模式Spark单机版intelij开发(maven)Spark完全分布式集群搭建Sparkhistoryserver配置使用二种方法实现Spark计算
数据萌新·2023-12-20 22:26

阿里云k8s集群搭建

文章目录一、安装前准备1.环境2.k8s集群规划二、k8s安装1.centos基础设置2.docker安装3.k8s安装3.1添加阿里云yum源3.2安装kubeadm、kubelet、kubectl3.3部署KubernetesMaster3.4加入KubernetesNode3.5部署CNI网络插件3.6测试kubernetes集群一、安装前准备1.环境os：centos7.6docker：v
seeyoutlb·2023-12-20 19:01

ROS笔记Day02----使用vscode开发&launch文件

1.新建工作空间并编译mkdir-phelloworld_ws2/srccdhelloworld_ws2catkin_make2.进入工作空间目录下打开vscodecdhelloworld_wc2code
w沉默味道w·2023-12-20 10:21

RabbitMQ集群搭建

主备模式：单活，容量对等，可以实现故障转移。使用独立存储时需要借助复制、镜像同步等技术，数据会有延迟、不一致等问题（CAP定律），使用共享存储时就不会有状态同步这个问题。主从模式：一定程度的双活，容量对等，最常见的是读写分离。通常也需要借助复制技术，或者要求上游实现双写来保证节点数据一致。主主模式：两边都可以读写，互为主备。如果两边同时写入很容易冲突，所以通常实现的都是“伪主主模式”，或者说就是主
david161·2023-12-20 08:41

springCould中的Eureka-从小白开始【2】

4.服务8001服务入住eureka❤️❤️❤️5.消费端80入住到eureka❤️❤️❤️6.集群Eureka配置❤️❤️❤️7.将Client发布到eureka集群上❤️❤️❤️8.服务端8002集群搭建
会敲代码的小张·2023-12-20 06:00

hadoop集群搭建之HA模式

1.Hadoop环境变量相关配置1.在node01上创建hadoop安装路径：mkdir/opt/bigdata2.解压hadoop软件包tarxfhadoop-2.6.5.tar.gzmvhadoop-2.6.5/opt/bigdata/3.配置hadoop环境便令vi/etc/profileexportJAVA_HOME=/usr/java/defaultexportHADOOP_HOME=/
新鲜氧气·2023-12-20 05:27

Hbase2.1 集群搭建

>Hbase在大数据的体系中扮演着DB角色，不得不说是重要的一员，在上一篇，大猪已经给大家演示了[Hadoop3.2集群搭建](https://www.jianshu.com/p/3182aaff918d
kikiki5·2023-12-19 20:39

Hadoop相关安装包上传到目录并完成安装

1.指定一个安装的目录/usr/local/自己的名字(mkdircdhong、rm-rf*)[root@cdhong01~]#cd/usr/local/[root@cdhong01local]#rm-rf
余生跟他走·2023-12-19 00:59

Hadoop集群搭建 - 解压tar.gz包 - 基于CentOS7 -【连载中】

续上一篇文章：7.Hadoop集群搭建-上传应用/软件-基于CentOS7-【连载中】目录扩展解压文件解压jdk到指定文件夹解压Hadoop到指定文件夹进入到解压后的目录查看是否解压成功扩展说明：以下表格中红色标
AdminLog·2023-12-19 00:58

redis-cluster集群搭建（3主3从），并使用springboot整合

一、集群搭建1.准备3台服务器这里我采用了3台云服务器。
头鼎3根毛·2023-12-18 16:09

Redis集群搭建--cluster三主三从

本文章上接：（Redis主从复制实现--一主二从保姆级搭建https://blog.csdn.net/m0_47136030/article/details/129409955?spm=1001.2014.3001.5502）（Redis哨兵模式搭建https://blog.csdn.net/m0_47136030/article/details/129411742?spm=1001.2014.3
千千CHAN千千·2023-12-18 16:37

Redis5.0集群搭建

Redis集群教程此文重在介绍Redis5.0三主三从集群安装，无复杂难懂的概念，若想深入了解集群原理请参考Redis集群规范。Redis集群介绍RedisCluster提供一种Redis安装方式：数据自动在多个Redis节点间分片。RedisCluster提供一定程度的高可用，在实际的环境中当某些节点失败或者不能通讯的情况下能够继续提供服务。大量节点失败的情况下集群也会停止服务(例如大多数主节点
时间会告诉你答案，但不能重来·2023-12-18 16:37

Redis Cluster集群搭建 三主三从

Redis包下载Linux：http://download.redis.io/releases/MacorWindows:https://redis.io/download/2.下载后解压进入文件夹（本次我的Redis版本是6.2.14版本）/redis/redis-6.2.14开始安装makeinstarll修改配置文件复制redis.conf6份小提示：MacorLinux快捷全局修改将700
Dkodak·2023-12-18 16:36

【NSQ部署】

NSQ部署介绍NSQ组件介绍安装集群搭建实际操作检测脚本：nsq_check.sh官网：https://nsq.io/介绍NSQ是一个基于Go语言的分布式实时消息平台，其设计目标是为在分布式环境下运行的去中心化服务提供一个强大的基础架构
无忧杂货铺·2023-12-18 16:50

Redis集群搭建与简单使用

用两台虚拟机模拟6个节点，一台机器3个节点，创建出3master、3salve环境。redis采用redis-3.2.4版本。两台虚拟机都是CentOS，一台CentOS6.5（IP:192.168.31.200），一台CentOS7（IP:192.168.31.201）。安装过程下载并解压1cd/root/softwarewgethttp://download.redis.io/releases
海棠Flower未眠·2023-12-18 16:09

Redis集群搭建

一、修改配置文件bind127.0.0.1注释protected-mode设置成nodaemonize改为yes表明需要在后台运行requirepass123456设置密码123456timeout0以上配置可单机运行masterauth123456redis-主节点设置密码丛节点要设置访问密码，否则会出现不同步appendonlyno持久化-本次部署未开启cluster-enabledyes开启
SDJN_ONE·2023-12-18 11:07

RabbitMQ学习笔记(原理、多方式安装和配置修改、整合Springboot、死信队列、延迟队列、备份交换机、动态监听、集群搭建)

前言文章内容有点多，可以根据需要进行跳转，一文看懂rabbitmq最近公司用到rabbitmq做消息转发服务，将学到的一些内容记录在这，内容会有些繁杂有些内容也不全面，后面根据实际使用会进行一定的补充，文章引用了不少网上的内容这里就不一一列举感谢大佬们的知识分享，由于刚刚开始学习消息队列，错误之处感谢指正。2022-6-24更新非root用户安装方式和systemctl配置文章目录1.概念2.AM
小刘爱搬砖·2023-12-17 22:20

真•Redis集群搭建之哨兵模式（详细）

概述：主从切换技术的方法是︰当主服务后，需要手动把一台从服务器切换为主服务器，这就需要人工干预，费事费力，还会造成一段时间内服务不可用。这不是一种推荐的方式，更多时候，我们优先考虑哨兵模式，Redis从2.8开始正式提供了Sentinel(哨兵）架构来解决这个问题。哨兵模式是一种特殊的模式，首先Redis提供了哨兵的命令，哨兵是一个独立的进程，作为进程，它会独立运行。其原理是哨兵通过发送命令，等待
Ken_1115·2023-12-17 21:10

Spark课程大纲

Spark环境搭建CentosSpark单机版伪分布式模式Spark单机版intelij开发(maven)Spark完全分布式集群搭建Sparkhistoryserver配置使用二种方法实现Spark计算
小猪Harry·2023-12-17 19:11

Laravel Homestead笔记

Homestead安装文档：https://xlswriter-docs.viest.me/zh-cn/an-zhuang/pecl-tui-jia让我们开始启动Homestead：cdHomestead
不二周助Rex·2023-12-17 18:17

SecureCRT远提示Key exchange failed，No compatible key exchange method. The server supports these methods

Keyexchangefailed.Nocompatiblekeyexchangemethod.Theserversupportsthesemethods:curve25519-sha256,[email protected],ecdh-sha2
二当家的素材网·2023-12-17 15:46

Centos7安装Nginx+Keepalived高可用集群搭建

一、准备工作1、两台Centos7服务器虚拟机即可，分别为：192.168.32.131192.168.32.1292、下载Nginx压缩包并解压安装下载地址选择版本下载压缩包：https://nginx.org/download/wget命令下载：wgethttps://nginx.org/download/nginx-1.22.1.tar.gz安装后解压压缩包并进入解压目录tar-xvfngi
18岁程序员想打职业·2023-12-17 07:01

Hive学习笔记

修改配置文件/etc/profile（添加exportHIVE_HOME=/usr/local/hive-0.9.0-binexportHADOOP_HOME=/usr/local/hadoop-0.20.2-cdh3u5
weixin_30470857·2023-12-17 05:32

java操作cdh得hadoop出现java.io.IOException: Failed on local exception: com.google.protobuf.InvalidProt...

这个问题是，java得操作Hadoop得api得版本跟haodoop得不一致导致得在hadoop中运行/bin/hadoopversion查看hadoop得版本之后将java得api中得jar包版本对应更换
PunkP·2023-12-17 03:21

使用Docker快速搭建一套三主三从Redis集群用于开发、测试

文章目录一基本概念二部署流程2.1准备配置文件2.2启动6个Docker容器2.3集群搭建三总结四参考资料一基本概念Redis集群是一种通过将多个Redis节点连接在一起以实现高可用性、数据分片和负载均衡的技术
晨曦蜗牛·2023-12-17 03:12

Flink 本地单机/Standalone集群/YARN模式集群搭建

准备工作本文简述Flink在Linux中安装步骤，和示例程序的运行。需要安装JDK1.8及以上版本。下载地址：下载Flink的二进制包点进去后，选择如下链接：解压flink-1.10.1-bin-scala_2.12.tgz，我这里解压到soft目录[root@hadoop1softpackage]#tar-zxvfflink-1.10.1-bin-scala_2.12.tgz-C../soft/
程序猿进阶·2023-12-16 20:26

Hbase2.1 集群搭建

>Hbase在大数据的体系中扮演着DB角色，不得不说是重要的一员，在上一篇，大猪已经给大家演示了[Hadoop3.2集群搭建](https://www.jianshu.com/p/3182aaff918d
kikiki4·2023-12-16 19:41

RabbitMQ集群搭建

介绍RabbitMQ是一个开源的消息代理软件，实现了高级消息队列协议（AMQP，AdvancedMessageQueuingProtocol）。它充当了消息的中间件，用于在分布式系统中传递消息，提供了可靠的、异步的、跨应用程序的消息传递机制。RabbitMQ的主要特点和用途：消息队列：RabbitMQ作为消息队列（MessageQueue）的一种实现，允许应用程序之间通过消息进行通信。消息队列可以
云计算1028·2023-12-16 16:29

Zookeeper 集群搭建

文章目录Zookeeper集群搭建一.简介二.环境准备三.安装zookeeper3.1下载zookeeper3.2安装jdk解压zookeeper四.配置集群4.1配置zookeeper服务器文件4.2
Direct_·2023-12-16 14:37

nacos linux 集群搭建 1.2.1

第一步下载nacoshttps://github.com/alibaba/nacos/releases手动下载再传到服务器，或者linux直接wget都可以解压修改application.properties内容如下server.contextPath=/nacosserver.servlet.contextPath=/nacosserver.port=8484db.num=1db.url.0=j
昵称违规·2023-12-16 11:13

ERROR sqoop.Sqoop: Got exception running Sqoop: java.lang.RuntimeException: Could not load db driver

Couldnotloaddbdriver问题产生原因缺少oracle驱动解决方案#需要在安装sqoopserver的节点上放oracle的驱动包cpojdbc6.jar/opt/cloudera/parcels/CDH
即墨澈·2023-12-16 05:19

Docker-compose部署zookeeper+storm集群【保成，秒回】

docker-hub官网教程dockerstorm官网docker-compose安装请参考【Docker安装部署Zookeeper+Kafka集群详细教程、部署过程中遇到问题&解决方案】zookeeper集群搭建请参考
小小小秃头·2023-12-16 05:24

Nacos配置管理-nacos集群搭建

二、计划实现--计划架构--3个Nacos节点；3个mysql库；--计划节点地址--三、集群搭建3.1基本步骤（1）搭建数据库，初始化数据库表结构（2）下载nacos安装包（3）配置nacos（4）启动
Crhy、Y·2023-12-16 04:50

Redis-分片集群大纲

1.Redis集群方案比较哨兵分片2.Redis分片集群搭建3.Java操作redis分片集群jedislettuce4.Redis集群原理分析槽位定位算法HASH_SLOT=CRC16(key)mod16384
JackHuan_code·2023-12-16 04:23

pyspark on yarn

如果是搭建的CDH或者CDP可以直接从管理界面下载配置文件。直接下载hive组件的客户端配置就可以，它里面包含了hdfs和yarn的配置。
骑着蜗牛向前跑·2023-12-16 03:34

大数据各组件安装笔记汇总

/bin/bashecho"-----------------cdh01-------------------------"/opt/apps/jdk1.8.0_45/bin/jpsecho""for(
ZGFAgf·2023-12-16 00:11

kafka 常用命令【学习笔记】

Kafka环境变量配置exportKAFKA_HOME=/opt/cloudera/parcels/CDH-6.3.2-1.cdh6.3.2.p0.1605554/lib/kafkaexportPATH
专注代码七年·2023-12-15 21:24

利用 docker 掌握 kafka 总集篇

文章目录第一节Kafka集群承前Kafka集群搭建**概述****操作流程**Kafka集群快速搭建安装Docker**zookeeper**集群**新建docker网络****yml脚本****验证*
lluxury·2023-12-15 21:59

Spark 随机森林算法原理、源码分析及案例实战

大家可以根据自己的喜好使用自己擅长的Linux发行版Java与Scala版本：Scala2.10.4，Java1.7Spark集群环境（3台）：Hadoop2.4.1+Spark1.4.0，Spark集群搭建方式参见本人博客
黑谷子·2023-12-15 19:51

ElasticSearch高可用集群搭建

1.环境准备本文已三个节点（服务器）为例，准备三台服务器2.搭建过程1).三台服务器分别搭建es（ES8+JDK17）上传安装包和解压tar-zxvfelasticsearch-8.4.1-linux-x86_64.tar.gz新建一个用户，安全考虑，elasticsearch默认不允许以root账号运行创建用户：useraddes_user设置密码：passwdes_user修改目录权限#chm
01宇宙·2023-12-15 19:20

K8s 入门指南（一）：单节点集群环境搭建

系统配置CentOS7.9（2核2G）本文为k8s入门指南专栏，将会使用kubeadm搭建单节点k8s集群，详细讲解环境搭建部署的细节，专栏后面章节会以实战代码介绍相关概念，带您快速入门k8s搭建方式k8s集群搭建有三种方式
ReturnTmp·2023-12-15 17:48

万字详解RocketMq集群搭建步骤

1.配置三台主机的IP与主机名的映射三台机器都使用vim/etc/hosts将上边的ip与主机名称放到hosts文件里边。cat/etc/hosts可以显示hosts文件里边的内容192.168.150.139mq1192.168.150.137mq2192.168.150.138mq32.安装JDK1.8和RocketMQ在三台机器/usr/local/目录下mkdir/jdk创建放置压缩包的目
努力的布布·2023-12-15 15:25

Flink集群搭建

1安装包下载根据自己的环境下载相应的flink安装包：https://flink.apache.org/downloads.html下载的版本要与自己的scala版本一致，我安装的scala版本为2.11，所以要下载对应scala2.11版本的flink我使用的环境linux-CentOS7.9、Scala-2.11.6、jdk-1.8、flink-1.7.2-bin-hadoop27-scala
NemoonFish·2023-12-15 12:20
上一页 6 7 8 9 10 11 12 13 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他