E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Cassandra集群安装
Hadoop YARN HA
集群安装
部署详细图文教程
目录一、YARN集群角色、部署规划1.1集群角色--概述1.2集群角色--ResourceManager(RM)1.3集群角色--NodeManager(NM)1.4HA集群部署规划二、YARNRM重启机制2.1概述2.2演示2.2.1不开启RM重启机制现象2.3两种实现方案与区别2.3.1Non-work-preservingRMrestart2.3.2Work-preservingRMrest
Stars.Sky
·
2023-09-05 17:37
Hadoop
hadoop
java
数据库
Pulsar
集群安装
0x1摘要本文记录Pulsar2.2.0版本安装步骤,单机模式(standalone)比较简单,直接参考官网:http://pulsar.apache.org/docs/en/standalone/按步骤执行就行,主要讲解集群模式安装,以及过程中遇到问题的解决。0x2环境要求LinuxJava8及以上3台ZooKeeper集群0x3安装顺序安装ZooKeeper集群初始化集群元数据信息安装Book
weixin_34376986
·
2023-09-05 10:30
java
大数据
shell
Pulsar集群模式安装
Pulsar集群模式安装官网
集群安装
集群模式安装有如下几种部署方式:三台节点部署zookeeper,三台节点部署bookie,三台节点部署broker,共需要9台节点。
codefreestyle
·
2023-09-05 10:30
配置
Pulsar
集群
部署
RHCA之路---EX280(10)
Onmaster.lab.example.cominstalltheOpenShiftMerticscomponentwiththefollowingrequirements:Usethestorage/exports/metricsfor
cassandra
storage.Youcanusethefilesonhttp
上海运维Q先生
·
2023-09-05 09:07
rhca
Linux
linux
RHCA
NoSQL:非关系型数据库分类
列存储数据库:其代表有
Cassandra
、HBase和Riak等。文档型数据库:其代表有CouchDB和MongoDB等。图形数
rubyw
·
2023-09-05 07:56
数据库
爬虫
nosql
数据库
golang rabbitmq实现的延时队列
目录前提生产者消费者交换机截图队列截图前提采用RabbitMQ官方延迟插件,实现延时队列交换机类型必须采用x-delayed-message必须安装官方延长队列插件(x-delayed-message)
集群安装
插件若
集群安装
插件节点类型必须采用
流年诠释一切
·
2023-09-04 20:53
go
golang
rabbitmq
K8S集群基础-etcd
集群安装
(amd64与arm64混搭)
通常来说,初始化k8s集群,默认自带一个etcd实例。需要自行改造才能实现多个etcd实例。单部署于k8s集群内部,不利于日后etcd集群迁移与扩容。因此常采用的方法是外部独立部署etcd,供k8s使用。以下是搭建k8s集群一些笔记。本次实践以三节点为例。主要基调:1.利用ntpd或ntpd同步集群时间2.三节点使用证书认证进行通信注意点:1.3.3.18以下etcd使用API2,3.4.3以上e
crazysele
·
2023-09-04 08:10
etcd
NiFi 单机和
集群安装
与使用
文章目录1.简介2.安装2.1单机2.1.1压缩包安装2.1.2Docker安装2.1.3测试2.2伪集群3.Registry1.简介NiFi就是为了解决不同系统间数据自动流通问题而建立的工具。架构核心概念NiFi术语描述FlowFile表示在系统中移动的每个对象,对于每个FlowFile,NIFI都会记录它一个属性键值对和0个或多个字节内容(有attribute和content)。FlowFil
shpunishment
·
2023-09-04 07:43
大数据
NiFi
GetFile
PutFile
手写RPC框架--2.介绍Zookeeper
Zookeeper,所以会在前两章介绍使用方法介绍ZookeeperZookeepera.概述1)数据模型2)Watcher机制b.安装和基本操作1)Java操作zookeeper2)watcher机制c.
集群安装
中二Espresso
·
2023-09-02 22:15
手写RPC框架
rpc
zookeeper
网络协议
微服务
java
spring
01_es安装和入门体验
01_es安装和入门体验概述Elasticsearch是什么全文搜索引擎1.安装环境介绍单机&集群集群Cluster节点Node1.1linux单机安装1.2
集群安装
1.3window下安装2.postMan
吴法刚
·
2023-09-02 12:45
#
ES
elasticsearch
大数据
搜索引擎
介绍 Apache Spark 的基本概念和在大数据分析中的应用
Spark支持多种语言,如Scala、Java、Python和R等,也支持多种数据源,包括HDFS、
Cassandra
、HBase等。
代码之路无极限
·
2023-09-02 08:08
Python入门
apache
spark
数据分析
Hadoop 3.2.4 集群搭建详细图文教程
目录一、集群简介二、Hadoop集群部署方式三、
集群安装
3.1集群角色规划3.2服务器基础环境准备3.2.1环境初始化3.2.2ssh免密登录(在hadoop01上执行)3.2.3各个节点上安装JDK1.8
Stars.Sky
·
2023-09-02 07:01
Hadoop
hadoop
大数据
分布式
Kind创建本地环境安装Ingress
目录1.K8s什么要使用Ingress2.在本地K8s
集群安装
NginxIngresscontroller2.1.使用Kind创建本地集群2.1.1.创建kind配置文件2.1.2.执行创建命令2.2.
cn_lyg
·
2023-09-02 05:15
kubernetes
kind
kubernetes
ingress
Cassandra
简介Apache
Cassandra
是一个大规模可扩展的分布式开源NoSQL数据库,完美适用于跨数据中心/云端的结构化数据、半结构化数据和非结构化数据,同时,
Cassandra
高可用、线性可扩展、高性能、
星星之火在心中
·
2023-09-02 02:05
OSCHINA 社区-Spring Boot 2.1.7 发布
spring-boot2.1.7SpringBoot2.1.7的新特性1、Bug修复修复日志信息#17774Reactive
Cassandra
HealthIndicator条件上错误的bean名称#17763
IT实战联盟Lin
·
2023-09-01 18:11
Zookeeper下载、本地模式安装、集群操作
目录1、Zookeeper下载地址2、本地模式安装2.1安装前准备2.2配置修改2.3操作Zookeeper2.4配置参数解读3、集群操作3.1
集群安装
3.2ZK集群启动停止脚本4、客户端命令行操作4.1
W_yhhh
·
2023-09-01 13:53
java-zookeeper
zookeeper
linux
clickhouse
集群安装
环境介绍准备四台服务器搭建clickhouse集群,(创建两个分片,每个分片一个副本)在任意三台服务器上安装zookeeper服务,clickhouse集群依赖zookeeper进行服务器之间的数据同步。192.168.1.1ch1.test.comch1192.168.1.2ch2.test.comch2192.168.1.3ch3.test.comch3192.168.1.4ch4.test.
行走在云端z
·
2023-09-01 08:08
clickhouse
服务器
linux
运维
Kubernetes-3:使用kubeadm部署k8s环境及常见报错解决方法
k8s
集群安装
环境说明:k8s-Master-Centos8ip:192.168.152.53k8s-Node1-Centos7ip:192.168.152.253k8s-Node2-Centos8ip
吕若雨
·
2023-08-31 20:40
kubernets
kubernetes
【zookeeper】zookeeper
集群安装
环境规划实际的生产使用中,我们一般推荐搭建奇数多节点的zookeeper集群,如3/5/7。在本次测试中,我使用了centos7三台服务器搭建,复用了我搭建k8s集群的环境,如下表。IPhostname192.168.2.140k8s-m1192.168.2.141k8s-m2192.168.2.142k8s-m3此次部署的zookeeper版本为3.7.1java安装java版本要求由于zook
margu_168
·
2023-08-31 17:06
zookeeper
zookeeper
【运维】hadoop3.0.3
集群安装
(一)多节点安装
文章目录一.Purpose二.Prerequisites三.Installation1.节点规划2.ConfiguringHadoopinNon-SecureMode3.准备工作4.配置core-site.xmlhdfs-site.xmlyarn-site.xmlmapred-site.xmlworkers4.分发配置、创建文件夹5.格式化6.操作进程6.1.hdfs启动停止6.2.yarn启动停
roman_日积跬步-终至千里
·
2023-08-31 05:22
#
hadoop运维
运维
hadoop
大数据
【运维】hadoop
集群安装
(三)hdfs、yarn集群配置、nodemanager健康管理讲解
文章目录一.配置说明1.hadoop各进程环境配置2.hadoop各进程配置2.1.etc/hadoop/core-site.xml2.2.etc/hadoop/hdfs-site.xml2.2.1.NameNode2.2.2.datanode2.3.etc/hadoop/yarn-site.xml2.3.1.ResourceManagerandNodeManager2.3.2.ResourceM
roman_日积跬步-终至千里
·
2023-08-31 05:52
#
hadoop运维
hadoop
运维
hdfs
【运维】hadoop3.0.3
集群安装
(二) 横向新增节点和删除节点
文章目录一.新增节点1.配置、安装1.1.所有节点配置新节点主机映射1.2.上传安装包1.3.配置环境变量1.4.配置workers1.5.清理之前集群的数据目录(如有)2.新增节点启动3.平衡DataNode节点二.删除节点1.namenode节点操作1.1.添加excludes文件1.2.刷新节点2.关闭datanode节点(非必须)三.重新加入删除的节点一.新增节点1.配置、安装1.1.所有
roman_日积跬步-终至千里
·
2023-08-31 05:15
#
hadoop运维
hadoop
HBase高可用
集群安装
部署
HBase高可用
集群安装
部署欢迎学习HBase环境准备资源下载HBase安装部署测试欢迎学习HBase在大数据的采集、转换、存储、运算过程中,当数据量极大时关系型数据库的效率就显得略微的不足,因此,非关系型数据库的学习就从今天开始
似懂非dong
·
2023-08-30 18:43
HBase
hbase
hadoop
大数据
Zookeeper
集群安装
部署
Zookeeper
集群安装
部署文章目录资源下载安装部署测试文章目录同学,你好!
似懂非dong
·
2023-08-30 18:13
zookeeper
java-zookeeper
zookeeper
分布式
Kafka3.2.0 + kraft
集群安装
部署说明
1、安装环境说明麒麟操作系统10Kafka版本:3.2.0采用4节点部署JDK版本:建议安装JDK11或JDK17。本次部署采用:jdk-11.0.16.1服务器角色如下表:主机名称主机IP角色node.idKAFKA00110.999.888.54broker,controller1KAFKA00210.999.888.233broker,controller2KAFKA00310.999.88
Xiaobai on data 开发
·
2023-08-29 05:10
kafka
java
分布式
大数据
apache-kafka-3.2.0k之kRaft模式
集群安装
apache-kafka-3.2.0k之kRaft模式
集群安装
本文将展示如何以kRaft模式安装apache-kafka-3.2.0集群1前言zookeeper是一个天然的分布式协调组件,在大数据领域里有着广泛的运用
武舞悦
·
2023-08-29 05:39
jdk8
kafka
apache
java
ClickHouse进阶(一):ClickHouse 使用场景及分布式
集群安装
进入正文前,感谢宝子们订阅专题、点赞、评论、收藏!关注IT贫道,获取高质量博客内容!个人主页:含各种IT体系技术,IT贫道_ApacheDoris,大数据OLAP体系技术栈,Kerberos安全认证-CSDN博客订阅:拥抱独家专题,你的订阅将点燃我的创作热情!点赞:赞同优秀创作,你的点赞是对我创作最大的认可!⭐️收藏:收藏原创博文,让我们一起打造IT界的荣耀与辉煌!✏️评论:留下心声墨迹,你的评论
IT贫道
·
2023-08-29 00:14
大数据OLAP体系技术栈
clickhouse
sql
数据库
分布式数据库
数据仓库
1.还不会部署高可用的kubernetes集群?看我手把手教你使用二进制部署v1.23.6的K8S集群实践(下)
目录0x02安装部署6.Kubernetes
集群安装
部署二进制软件包下载安装(手动-此处以该实践为例)部署配置kube-apiserver部署配置kubectl部署配置kube-controller-manager
WeiyiGeek
·
2023-08-28 23:06
geomesa-
cassandra
地理大数据库安装测试
环境:centos7、java8、
cassandra
3.0.29、geomesa-
cassandra
_2.12-3.5.2配置Java环境:安装配置
cassandra
:下载
cassandra
:wgethttps
alvinTaoR
·
2023-08-28 14:06
大数据
gis
cassandra
geomesa
Spark Standalone
集群安装
及测试案例
SparkStandalone
集群安装
及测试案例一、实验环境二、总体步骤三、详细步骤一、实验环境二、总体步骤准备至少3台主机修改主机名称及IP与主机名的映射关系(3台主机都需要操作)做免密登录操作(3台主机都需操作
卢元东
·
2023-08-27 23:12
spark
大数据
分布式
Kubeadm搭建高可用集群03-
集群安装
集群初始化官方初始化文档注意:1.如果不是高可用集群,192.168.2.236:16443改为master01的地址,16443改为apiserver的端口,默认是64432.注意更改kubernetesVersion的值和自己服务器kubeadm的版本一致kubectlversionkubeadmversionMaster01节点创建配置文件:vimkubeadm-config.yamlapi
·
2023-08-27 22:32
minio文件系统
集群安装
以及注意事项和常见问题
准备工作名称ip时间同步服务器10.119.123.163minio110.119.123.156minio210.119.123.157minio310.119.123.158minio410.119.123.1591.关闭防火墙systemctlstopfirewalld.service2.安装必要软件(不必须)yuminstall-ynet-toolsyuminstall-yvimvim/e
相濡逸墨
·
2023-08-27 03:33
linux
minio安装
minio集群部署
Ubuntu安装Hive,并使用Mysql作为元数据库
版本信息:Ubuntu:16.04JDK:1.8.0_144Hadoop:2.7.4Hive:2.1.1MySQL:5.7.22今天捣鼓了一下午关于Hadoop
集群安装
Hive,遇到了一些问题,在此记录下来
Hiwes
·
2023-08-26 17:12
达梦数据库守护
集群安装
目录数据库守护
集群安装
...1主备集群原理介绍...1搭建DM数据守护环境...2环境检查...2主备集群搭建思路...3安装前工作...3数据库安装...6主机配置数据库...6备机配置数据库...8
乐翁·
·
2023-08-26 13:12
达梦数据库
数据库
database
janusgraph 默认server使用手记
启动server(with
Cassandra
/ES)janusgraph-0.3.0-hadoop2bin/janusgraph.shstartForking
Cassandra
...Running`nodetoolstatusthrift
水他
·
2023-08-26 12:13
Kafka:
集群安装
(3台kafka,1台独立的zookeeper)
一、准备zookeeper1.下载Zookeeper3.6.22.解压缩3.进到zookeeper目录4.执行bin/zkServer.shstart二、安装Kafka2.6集群1.下载Kafka2.6.22.解压缩.3.进入config目录,编辑server.properties主要需要改3个参数:broker.id=0(第二、三台分别为1,2)log.dirs=/root/kafka-logs
amadeus_liu2
·
2023-08-26 12:03
kafka
java
开发语言
后端
创建K8s pod Webhook
目录1.前提条件2.开始创建核心组件Pod的Webhook2.1.什么是Webhook2.2.在本地k8s
集群安装
cert-manager2.3.创建一个空的文件夹2.4.生成工程框架2.5.生成核心组件
cn_lyg
·
2023-08-26 11:31
kubernetes
kubernetes
docker
容器
基于 Ubuntu 玩转 Hudi Docker Demo (3)—— Spark写入和查询
基于Ubuntu玩转HudiDockerDemo系列文章:《基于Ubuntu玩转HudiDockerDemo(1)——
集群安装
》《基于Ubuntu玩转HudiDockerDemo(2)——测试数据写入Kafka
修破立生
·
2023-08-24 21:40
湖仓
Spark
Hudi
spark
ubuntu
docker
大数据
big
data
Ubuntu安装hadoop(3.2.4),hbase(2.4.0),hive(3.1.0),phoenix(5.1.2)集群
集群安装
1.环境准备1.1服务器的准备192.168.12.253ds1192.168.12.38ds2192.168.12.39ds31.2修改hostname(所有节点)在192.168.12.253
fan_bigdata
·
2023-08-24 21:38
hadoop
hive
hbase
k8s
集群安装
Istio过程记录及问题总结
目录一、介绍二、部署Helm三、部署Istio部署官方示例Bookinfo四、部署KaliBug记录部署Bookinfodemo失败一、介绍这篇文章记录一下k8s
集群安装
Helm、Istio和Kiali
Liu_Shihao
·
2023-08-24 14:06
DevOps
云原生
kubernetes
istio
容器
商城-学习整理-集群-K8S(二十三)
集群部署1、k8s快速入门1)、简介2)、架构1、整体主从方式2、Master节点架构3、Node节点架构3)、概念4)、快速体验1、安装minikube2、体验nginx部署升级5)、流程叙述2、k8s
集群安装
有语忆语
·
2023-08-24 05:35
项目
学习
kubernetes
容器
ELK+Kafka+Beats实现海量日志收集平台(三)
启动ElasticSearch集群,之前提供的ES
集群安装
链接是7.6.2版本
竹影入风华
·
2023-08-23 21:52
ELK
elk
java
Zipkin开源的分布式链路追踪系统
2.存储跟踪数据-存储层默认采用Zipkin自带的基于内存的快速存储,也支持整合MySQL、
Cassandra
等外部存储。3.查询接口-提供RESTfulAPI进行跟踪数据查询。
diannao720
·
2023-08-23 08:01
模式
开源
分布式
hadoop2.7.5分布式
集群安装
三台虚拟机192.168.79.132master192.168.79.133slave1192.168.79.134slave21.修改主机名hostnamectlset-hostname(name)2.配置主机的映射(每台都要设置)vi/etc/hosts3.设置免密码登陆ssh-keygen输入上面的命令后,按三次回车即可将密钥复制到其他机器(包括本机)ssh-copy-idmasterss
小宇0926
·
2023-08-22 04:51
分布式
大数据
数据库
大数据hadoop 新手快速入门经典视频教程
视频下载地址:http://demo.liuy88.cn/jp1185.html第一天hadoop的基本概念伪分布式hadoop
集群安装
hdfsmapreduce演示01-hadoop职位需求状况.avi02
艾希MR
·
2023-08-22 03:20
cassandra
端口和配置文件3.基本概念3.1数据模型3.2数据类型4.命令5.CQL6.普通索引7.新增数据8.查询数据9.更新10.java客户端10.1datastax的java-driver11.springdata
cassandra
12
highly2009
·
2023-08-21 04:24
数据库
nosql
数据库
database
Spark RDD算子大全(Java、Scala双版本)
一.SparkRDD概念概述RDD是将数据项拆分为多个分区的集合,存储在集群的工作节点上的内存中,并执行指定操作RDD是用于数据转换的接口RDD指向了存储在HDFS、
Cassandra
、HBase等、或缓存
菜鸟也学大数据
·
2023-08-19 23:15
Spark
菜鸟也学大数据
spark
大数据
scala
南大通用数据库(gbase 8s) 在Centos7环境
集群安装
国产数据库-达梦一、环境详情二、Centos7参数优化(所有节点)三、创建gbase用户(所有节点)四、安装部署,只在node1安装即可同步五、数据库卸载六、数据库连接与使用当前安装在指定版本环境下测试,仅供参考一、环境详情软件版本软件版本下载地址Centos7CentOSLinuxrelease7.9.2009(Core)x86清华镜像站:link南大通用GBase8a_MPP_Cluster-
freedom_Mr
·
2023-08-19 09:30
#
南大通用数据库
gbase
数据库
数据库
南大通用
Gbase
8s
postgresql
一起来学k8s 27.二进制k8s
集群安装
helm
二进制k8s
集群安装
helm环境准备##/etc/hosts192.168.48.101master01192.168.48.102master02192.168.48.103master03192.168.48.201node01192.168.48.202node02192.168.48.54nfs
隔壁小翔
·
2023-08-18 17:54
kubernetes
kubernets
使用 JMX-Exporter 监控 Kafka 和 Zookeeper
JVM默认会通过JMX的方式暴露基础指标,很多中间件也会通过JMX的方式暴露业务指标,比如Kafka、Zookeeper、ActiveMQ、
Cassandra
、Spark、Tomcat、Flink等等。
·
2023-08-17 12:24
prometheusjmx
上一页
6
7
8
9
10
11
12
13
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他