E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
hadoop2.7.3集群搭建
ClickHouse
集群搭建
及ODBC配置
1搭建环境192.168.122.100BCEuler01192.168.122.101BCEuler02192.168.122.102BCEuler031.1关闭防火墙#systemctldisablefirewalld#systemctlstopfirewalld1.2关闭selinux#/etc/selinux/configSELINUX=disabled1.3设置时间同步(chrony)将
shif_l
·
2023-09-01 08:02
数据库
clickhouse
运维
ODBC
zookeeper
Hadoop完全分布式
集群搭建
文章目录一、克隆二、网络配置三、SSH服务配置四、hadoop完全分布式配置一、克隆1.在虚拟机关机的状态下选择克隆2.开始克隆3.选择从当前状态创建4.创建一个完整的克隆5.选择新的虚拟机存储位置(选择内存充足的磁盘)6.开始克隆7.克隆完成8.同样的方法克隆第二台虚拟机9.在计算机中存在三台虚拟机将第一台虚拟机更名为hadoop01修改hadoop01的主机名为hadoop01修改hadoop
T³3
·
2023-09-01 07:28
Linux
hadoop
分布式
大数据
centos
linux
Spark自带的集群模式(Standalone),Spark/Spark-ha
集群搭建
1、Spark自带的集群模式对于Spark自带的集群模式,Spark要先启动一个老大(Master),然后老大Master和各个小弟(Worker)进行通信,其中真正干活的是Worker下的Executor。关于提交任务的,需要有一个客户端,这个客户端叫做Driver.这个Driver首先和Master建立通信,然后Master负责资源分配,然后让Worker启动Executor,然后Execut
涂作权的博客
·
2023-09-01 06:32
#
Spark(大数据分析引擎)
spark
集群
Kubernetes最新版v1.27.4安装和
集群搭建
保姆级教程
1.Kubernetes1.27.4发布一:k8s1.27.x的概述太平洋时间2023年4月11日,Kubernetes1.27正式发布。此版本距离上版本发布时隔4个月,是2023年的第一个版本。新版本中release团队跟踪了60个enhancements,比之前版本都要多得多。其中13个功能升级为稳定版,29个已有功能进行优化升级为Beta,另有18个Alpha级别的功能,大多数为全新功能。1
huainian
·
2023-09-01 04:51
K8S
kubernetes
容器
云原生
Elasticsearch集群
1.3分片1.4新增节点1.5水平扩容-启动第三个节点1.6应对故障二、集群概念2.1主节点2.2候选主节点2.3数据节点2.4客户端节点2.5脑裂现象2.5.1脑裂现象成因2.5.2脑裂现象解决方案三、
集群搭建
ww_kobe
·
2023-08-31 11:49
elasticsearch
大数据
第四章 Kubernetes入门及
集群搭建
学习目标:了解Kubernetes的起源和发展掌握如何使用kubeadm搭建Kubernetes集群查看Kubernetes集群部署状态4-1Kubernetes的起源和发展Kubernetes的起源Kubernetes最初源于谷歌内部的Borg,Kubernetes的最初目标是为应用的容器化编排部署提供一个最小化的平台,包含几个基本功能:将应用水平扩容到多个集群为扩容的实例提供负载均衡的策略提供
InsaneLoafer
·
2023-08-31 02:32
分布式锁系列之Redis分布式锁
目录介绍模拟订单超卖场景代码版不加锁情况synchronized加锁编辑lock加锁整合Mysql版不加锁版synchronized加锁lock加锁版jvm加锁失效情况多例模式事务
集群搭建
书写sql解决集群超卖使用悲观锁
暗武逢天
·
2023-08-31 00:38
java
分布式锁
分布式
分布式锁
redis
redisson
悲观锁
乐观锁
elasticsearch8.9.1
集群搭建
目录1.官网文档2.安装步骤2.1环境准备2.2添加用户2.3修改文件profile文件2.4修改elasticsearch.yml2.5修改sysctl.conf3.启动3.1切换到kibana3.2启动elasticsearch3.3启动kibana3.4验证节点情况1.官网文档elasticsearch文档:https://www.elastic.co/guide/en/elasticsea
haohaounique
·
2023-08-30 23:09
java
jenkins
开发语言
Fastdfs
集群搭建
一、简单介绍:FastDFS是一个开源的高性能分布式文件系统(DFS)。它的主要功能包括:文件存储,文件同步和文件访问,以及高容量和负载平衡。主要解决了海量数据存储问题,特别适合以中小文件(建议范围:4KBnginx-->ngx_fastdfs_module(同步集群storage数据+访问tracker获取storage存储信息)-->tracker(mod_fastdfs.conf配置文件)-
LuMaman
·
2023-08-30 15:05
运维
k8s
集群搭建
流量传递到iptables链1.4开启ipvs二、容器化环境和组件安装2.1docker安装2.2设置docker加速镜像器2.4设置yum镜像源2.5安装kubeadm、kubelet和kubectl三、
集群搭建
落叶的悲哀
·
2023-08-30 13:58
k8s
kubernetes
容器
云原生
kafka---- zookeeper
集群搭建
1.准备工作:##准备3个节点,要求配置好主机名称,服务器之间系统时间保持一致##注意/etc/hostname和/etc/hosts配置主机名称(在这个里我准备Prac-zk-133,Prac-zk-134,Prac-zk-135二节点)vim/etc/hosts#保证可以通过主机名互通添加格式为IP主机名称##比如172.16.144.133Prac-zk-133172.16.144.134P
Jeroro_franklin
·
2023-08-30 07:45
kafka
zookeeper
debian
阿里腾讯云 hadoop+spark
集群搭建
(2)
阿里腾讯云hadoop+spark
集群搭建
(2)linux版本:centos7hadoop版本:3.1.1spark版本:2.3.2在1中已经搭建好了hadoop,接下来就是spark。
karwik
·
2023-08-30 04:11
大数据
Hbase2.1
集群搭建
Hbase在大数据的体系中扮演着DB角色,不得不说是重要的一员,在上一篇,大猪已经给大家演示了Hadoop3.2
集群搭建
了,本次我们将继续紧接着搭建Hbase集群。
kikiki2
·
2023-08-30 00:58
Nacos
集群搭建
集群结构三个nacos节点的地址:节点ipportnacos1127.0.0.18845nacos2127.0.0.18846nacos3127.0.0.18847集群步骤搭建集群的基本步骤:搭建数据库,初始化数据库表结构下载nacos安装包配置nacos启动nacos集群nginx反向代理初始化数据库新建一个数据库,命名为nacos,而后导入下面的SQL:CREATETABLE`config_i
无语堵上西楼
·
2023-08-29 20:02
微服务
java
大数据
开发语言
Hadoop高可用
集群搭建
(超详细)
节点布置IP主机名描述部署软件192.168.200.201hadoop-01主节点jdk,hadoop,zookeeper192.168.200.202hadoop-02备用主节点jdk,hadoop,zookeeper192.168.200.203hadoop-03数据服务节点jdk,hadoop,zookeeper配置静态IP#有的可能为ifcfg-ens33vi/etc/sysconfig
程序员 Harry
·
2023-08-29 17:58
笔记
Hadoop
hadoop
大数据
Swarm
集群搭建
( docker安装、docker-compose安装、portainer可视化安装、基本使用命令总结、项目集群部署案例)
docker安装、docker-compose安装、Swarm
集群搭建
、portainer可视化安装、和项目部署案例四台服务器,我这里选用四台虚拟机1核2G,系统centos7,ip:192.168.10.104
李潘杜若
·
2023-08-29 11:28
运维
docker
docker-compose
Swarm集群
Anolis 8.6 下 Redis 7.2.0
集群搭建
和配置
Redis7.2.0搭建和集群配置一.Redis下载与单机部署1.Redis下载2.虚拟机配置3.Redis单机源码安装和测试4.Java单机连接测试1.Pom依赖2.配置文件3.启动类4.配置类5.单元测试6.测试结果二.Redis集群部署1.主从1.从节点配置2.Java测试2.哨兵1.哨兵节点配置2.复制一个哨兵节点(双哨兵)3.Java测试访问哨兵3.集群1.集群配置文件修改2.Java访
猪悟道
·
2023-08-29 09:38
JavaWeb
服务框架
redis
cluster
sentinel
springboot
anolis
RabbitMQ
集群搭建
和测试总结_亲测
RabbiMQ简介RabbitMQ是用Erlang开发的,集群非常方便,因为Erlang天生就是一门分布式语言,但其本身并不支持负载均衡。RabbitMQ模式RabbitMQ模式大概分为以下三种:(1)单一模式。(2)普通模式(默认的集群模式)。(3)镜像模式(把需要的队列做成镜像队列,存在于多个节点,属于RabbitMQ的HA方案,在对业务可靠性要求较高的场合中比较适用)。要实现镜像模式,需要先
阿亮说技术
·
2023-08-29 08:32
mq
rabbitmq
mqtt
linux
redis知识点整理(4)持久化和
集群搭建
redis是个内存数据库,如果不将内存中的数据库状态保存到磁盘,那么一旦服务器进程退出,服务器中的数据库状态也会消失,所以redis提供了持久化功能!Redis的持久化分两种,AOF和RDBRDBredis的默认持久化就是rdb。一般不需要修改这些配置。rdb工作原理:指定时间间隔将内存中的数据集快照写入磁盘中,恢复时是直接将快照文件读到内存中。Redis会单独创建一个子进程来进行持久化。会先将数
唯有努力不欺人丶
·
2023-08-29 05:17
Redis 高可用之
集群搭建
和数据分片
Redis高可用之
集群搭建
和数据分片一、简介1.Redis集群:2.
集群搭建
:二、Redis
集群搭建
1.单机Redis升级为RedisClustera.搭建方法b.搭建方式说明2.环境准备3.配置修改4
格林希尔
·
2023-08-28 22:42
Redis
redis
全文检索
数据结构
架构
大数据
配置Flink
配置flink_1.17.01.Flink
集群搭建
1.1解压安装包1.2修改集群配置1.3分发安装目录1.4启动集群、访问WebUI2.Standalone运行模式3.YARN运行模式4.K8S运行模式
program chef
·
2023-08-28 06:18
#
数据仓库
flink
大数据
Kafka
集群搭建
与实操笔记(伪分布式)
Kafka
集群搭建
与实操声明文档链接规划(伪分布式)实操环节声明本笔记旨在学习针对kafka基操进行学习备忘及记录非详细说明与介绍,主线详情主要参照以下大牛整理的文档链接中的第一个文档文档链接kafka
Leosongyi
·
2023-08-28 02:10
kafka
分布式
java
Spark Local环境搭建及测试
【大数据学习记录篇】-持续更新中~篇一:Linux系统下配置java环境篇二:hadoop伪分布式搭建(超详细)篇三:hadoop完全分布式
集群搭建
(超详细)-大数据
集群搭建
文章目录1.SparkLocal
beixi@
·
2023-08-27 23:10
大数据技术学习
spark
大数据
hadoop
运维
分布式
Spark Standalone环境搭建及测试
【大数据学习记录篇】-持续更新中~篇一:Linux系统下配置java环境篇二:hadoop伪分布式搭建(超详细)篇三:hadoop完全分布式
集群搭建
(超详细)-大数据
集群搭建
篇四:SparkLocal环境搭建及测试文章目录
beixi@
·
2023-08-27 23:08
大数据技术学习
spark
大数据
分布式
运维
服务器
linux
Hadoop
集群搭建
(伪分布式)
集群搭建
hadoop伪分布式软件准备:VMwareWorkstationProcentos7xshell5jdk-8u141-linux-x64.tar.gzhadoop-2.10.1.tar.gz一.
......786
·
2023-08-27 15:11
笔记
hadoop
大数据
centos
(二)大数据实战——hadoop的模板虚拟机搭建
前言在实际的开发过程中,我们的hadoop都是以集群的方式存在,该系列内容我们使用vmware工具构建我们的虚拟机,从而实现hadoop
集群搭建
。
北溟溟
·
2023-08-27 15:11
#
hadoop
大数据
大数据
hadoop
大数据项目实战(Hadoop
集群搭建
)
一,搭建大数据集群环境1.2Hadoop
集群搭建
1.2.1jdk安装1.下载jdk(1)在根目录下创建三个子目录以备后用。
瑾寰
·
2023-08-27 15:10
大数据
hadoop
java
mysql
sql
big
data
rocketmq多主多从异步复制模式
集群搭建
多“master-slave”同步复制模式(同步双写)方案4:DLedger(多副本)模式(唯一的推荐使用方案)”多主多从异步复制“集群模式部署规划1.搭建nameserver集群2.搭建broker
集群搭建
zpsimon
·
2023-08-27 12:33
运维开发
Linux
运维大桶
运维
大数据时代之java操作hdsf
前面已经讲过hadoop伪分布式和分布式环境搭建,参考大数据时代之Hadoop
集群搭建
本来想直接搞java代码操作hdfs的,想了想还是先简单的复习下命令行操作hdfs吧。
小小的人儿居然已存在
·
2023-08-27 11:49
大数据
大数据
hadoop
hdfs
elasticsearch
集群搭建
记录
两年前写过一篇elasticsearch介绍入门及常用用法整理,是单机版的,这次补下集群的搭建记录。以ubuntu为例,三台机器搭建集群,ip分别为172.20.10.3,172.20.10.6,172.20.10.8下载elasticsearch官网下载地址:https://www.elastic.co/cn/downloads/elasticsearch截止发文最新版本是8.3.2,下载链接为
haiyong6
·
2023-08-27 11:54
206.Flink(一):flink概述,flink
集群搭建
,flink中执行任务,单节点、yarn运行模式,三种部署模式的具体实现
一、Flink概述1.基本描述Flink官网地址:ApacheFlink®—StatefulComputationsoverDataStreams|ApacheFlinkFlink是一个框架和分布式处理引擎,用于对无界和有界数据流进行有状态计算。2.有界流和无界流无界流(流):有定义流的开始,没有定义结束。会无休止产生数据无界流数据必须持续处理有界流(批):有定义流的开始,也有定义流的结束可以拿到
鹏哥哥啊Aaaa
·
2023-08-27 09:03
flink
大数据
实战:大数据Spark简介与docker-compose搭建独立集群
文章目录前言技术积累Spark简介Spark核心功能及优势Spark运行架构Spark独立
集群搭建
安装docker和docker-composedocker-compose编排docker-compose
小沈同学呀
·
2023-08-27 09:28
spark
大数据
docker
大数据
spark
docker
kafka+zookeeper搭建步骤
vmware安装centOS7克隆虚拟为:三台本地你的IP10.118.62.9810.118.62.12910.118.62.132zookeeper+kafka
集群搭建
步骤zookeeper安装步骤
帅气的名称被占用
·
2023-08-26 15:31
达梦数据库守护集群安装
目录数据库守护集群安装...1主备集群原理介绍...1搭建DM数据守护环境...2环境检查...2主备
集群搭建
思路...3安装前工作...3数据库安装...6主机配置数据库...6备机配置数据库...8
乐翁·
·
2023-08-26 13:12
达梦数据库
数据库
database
达梦数据库安装及维护
1.3linux客户端工具使用1.4windows环境单机部署1.5windows客户端工具使用第二节创建和配置数据库2.1使用数据库配置工具创建数据库2.2使用dminit创建数据库第三节数据库主备集群3.1主备
集群搭建
lyywml
·
2023-08-26 13:42
达梦数据库
Hadoop
集群搭建
(hadoop-3.3.5)
一、修改服务器配置文件1、配置环境变量vim/etc/profile#java环境变量exportJAVA_HOME=/usr/local/jdk/jdk8exportJRE_HOME=$JAVA_HOME/jreexportCLASSPATH=$JAVA_HOME/lib:$JRE_HOME/lib:$CLASSPATHexportPATH=$JAVA_HOME/bin:$JRE_HOME/bi
如我般骄傲
·
2023-08-26 11:37
hadoop
大数据
分布式
【腾讯云 Cloud Studio 实战训练营】- 云IDE Cloud Studio如何在项目中增效的实践之路
无服务器计算由云平台统一管理后端服务及资源,避免了开发过程中繁琐的
集群搭建
及系统运维工作。在提高整体资源利用率的同时,借助云IDE还能够帮助开发者聚焦业务逻辑,简化应用开发难度,提升软件研发效率。
小崽崽1
·
2023-08-26 10:36
ide
云计算
腾讯云
云原生
大数据项目实战-招聘网站职位分析
目录第一章:项目概述1.1项目需求和目标1.2预备知识1.3项目架构设计及技术选取1.4开发环境和开发工具1.5项目开发流程第二章:搭建大数据集群环境2.1安装准备2.2Hadoop
集群搭建
2.3Hive
L卡夫卡
·
2023-08-25 09:43
项目实战
大数据
hadoop
hive
mapreduce
hdfs
centos7 zookeeper
集群搭建
zookeeper
集群搭建
1Zookeeper集群部署至少需要三台机器,这里采用三台节点10.0.11.5410.0.11.5610.0.11.57,ZK集群有自动选主机制,只需要集群部署过程将单实例组装起来就可以完成
祈心无尘
·
2023-08-25 08:16
技术
zookeeper
centos7 rabbitmq
集群搭建
rabbitmq
集群搭建
1分别在3台节点安装rabbitmq-server在3台虚拟机(10.0.11.5410.0.11.5610.0.11.57)分别安装相同版本的rabbitmq-server及erlang
祈心无尘
·
2023-08-25 08:45
笔记
技术
rabbitmq
集群学习:LVS集群
命令三、LVS-DR集群1.LVS-DR集群介绍2.LVS-DR模式工作原理3.LVS–DR模式集群构建四、LVS–NAT集群1.LVS–NAT集群介绍2.LVS–NAT工作原理3.LVS–NAT模式
集群搭建
集群概述
彩虹战士11
·
2023-08-25 07:18
学习
lvs
网络
从零开始搭建Kafka集群遇到的问题
-3.1.0.tgz使用Xshell将文件传入虚拟机解压启动kafka使用kakfa自带的zookeeper修改kafka配置启动kafka使用kafka创建主题查看主题生产消息消费消息搭建kafka
集群搭建
lolxxs
·
2023-08-25 06:42
kafka
部署实战
linux
分布式
kafka
基于Docker的MongoDB
集群搭建
singleDoc#《基于Docker的MongoDB
集群搭建
》实验环境虚拟主机在Window10上使用VMware开启四个Ubuntu18的虚拟主机。
微风至夏
·
2023-08-24 12:26
《高级
Java
工程师体系课》训练营学习笔记
mongodb
docker
集群
复制集
读写分离
高可用K8S
集群搭建
部署
1环境准备1.1集群规划图1.2系统配置一台或多台机器,操作系统CentOS7.x-x86_64硬件配置:2G或更多ARM,2个CPU或更多CPU,硬盘20G及以上集群中所有机器网络互通可以访问外网,需要拉取镜像禁止swap分区1.3环境规划主机名系统配置IP服务master1centos2C4G172.16.0.6kubelet,kubeadm,kubectl,etcmaster2centos2
忤曼陀罗
·
2023-08-24 10:38
安装部署
docker
容器
网络
运维
kubernetes
Kafka 学习笔记
创作不易,各位看官点赞收藏.文章目录Kafka学习笔记1、消息队列MQ2、Kafka下载安装2.1、Zookeeper方式启动2.2、KRaft协议启动2.3、Kafka
集群搭建
3、Kafka之生产者3.1
吉星J_x
·
2023-08-24 09:39
kafka
学习
笔记
Eureka+Config
集群搭建
配置中心
Eureka+Config
集群搭建
配置中心根据前面搭建Eureka和Config集群的经验,下面讲Eureka+Config
集群搭建
的配置中心。
兔斯基_大大
·
2023-08-23 09:19
Spark
集群搭建
(多种方式)
Spark
集群搭建
(多种方式)一、local模式1.解压文件2.使用3.local模式提交二、Standalone模式1.解压文件2.配置文件3.分发文件4.启动5.standalone模式提交三、YARN
月亮给我抄代码
·
2023-08-23 05:13
spark
大数据
hadoop
hive
yarn
Mongodb的三种集群方式的搭建
这里只说明最简单的
集群搭建
方式(生产环境),如果有多
lonelyhiker
·
2023-08-23 00:45
数据库知识
mongodb
数据库
nosql
有道云笔记bug整理hadoop集群启动但不能访问50070
防火墙命令要注意分centos版本伪
集群搭建
采用的是CentOS7.0,而CentOS7.0默认使用的是firewall作为防火墙,可以改为iptables。Firewall:syste
纯野生程序员
·
2023-08-23 00:10
Hbase2.1
集群搭建
>Hbase在大数据的体系中扮演着DB角色,不得不说是重要的一员,在上一篇,大猪已经给大家演示了[Hadoop3.2
集群搭建
](https://www.jianshu.com/p/3182aaff918d
kikiki5
·
2023-08-22 21:07
上一页
16
17
18
19
20
21
22
23
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他