E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
trino集群安装
【填坑之旅-hadoop】centos7安装hadoop2.10.1 hive 1.2.2 / hdfs 文件上传写入流程 / MapReduce Yarn 流程/zookeeper/hive
第一天hadoop的基本概念伪分布式hadoop
集群安装
hdfsmapreduce演示第二天hdfs的原理和使用操作、编程第三天mapreduce的原理和编程第四天常见mr算法实现和shuffle的机制第五天
alwarse
·
2021-10-22 11:24
大数据hadoop-填坑
hadoop
hdfs
mapreduce
Nginx+Tomcat负载均衡
集群安装
配置案例详解
目录前言一、Nginx+Tomcat二、配置Nginx服务器三、部署Tomcat应用服务器总结前言介绍Tomcat及Nginx+Tomcat负载均衡集群,Tomcat的应用场景,然后重点介绍Tomcat的安装配置。Nginx+Tomcat负载均衡集案列是应用于生产环境的一套可靠的Web站点解决方案。一、Nginx+Tomcat通常情况下,一个Tomcat站点由于可能出现单点故障及无法应付过多客户复
·
2021-10-20 13:03
cassandra
集群安装
cassandra安装部署1.安装cassandra本文采用tar包的方式安装#确保本地安装java8以上版本java-version#下载tar包curl-OLhttp://archive.apache.org/dist/cassandra/3.11.9/apache-cassandra-3.11.9-bin.tar.gztarxzvfapache-cassandra-3.11.9-bin.ta
·
2021-10-19 09:36
cassandra集群
最新 Java 后端干货,建议收藏!
后端技术一分钟开启TomcatHTTPS支持玩大发了,Tomcat8.5升级有坑…TomcatGet请求的巨坑Tomcatsession复制与Oracle的坑Dubbo服务调试管理实用命令Zookeeper
集群安装
配置
·
2021-10-07 15:19
java
【Kafka】Kafka
集群安装
一、参考资料【尚硅谷】2021新版电商数仓V4.0丨大数据数据仓库项目实战_哔哩哔哩_bilibili
后台研发Marion
·
2021-10-05 23:17
大数据
kafka
【Zookeeper】Zookeeper
集群安装
实战
一、参考资料【尚硅谷】2021新版电商数仓V4.0丨大数据数据仓库项目实战_哔哩哔哩_bilibili
后台研发Marion
·
2021-10-05 23:38
大数据
zookeeper
2021SC@SDUSC HBase项目分析:安装、配置与分工
2021SC@SDUSC目录HBase概述HBase
集群安装
Hadoop安装与配置ZooKeeper安装与配置Hbase安装与配置Hbase源码下载组内分工2021SC@SDUSCHBase概述HBase
Yy2002sdu
·
2021-09-28 21:59
hadoop
hbase
zookeeper
Spark系列
Spark-分布式高可用
集群安装
Spark-SparkShell使用Spark-SparkSubmit使用Spark-RDD使用Spark-各个组件的RPC是怎么通信的Spark-Master和WorkerSpark-Application
·
2021-08-30 10:08
spark
Kubernetes测试环境
集群安装
一.服务器前期准备使用vmware创建出三台虚拟机,系统使用CentOS7.6192.168.11.138master192.168.11.145node1192.168.11.146node21.主机名解析[root@localhost~]#vi/etc/hosts2.系统初始化准备由于k8s要求每个节点的时间必须精确一致,所以需要先进行每个节点的时间同步#安装时间同步软件[root@local
Anson_1f2a
·
2021-08-16 15:03
Docker
集群安装
时的服务和进程分配
根据官方的文档,我们整理出了下面的这张进程的图。在集群的部署环境下,你可以按照每个服务器来部署,换句话说就是有3台服务器,但是每台服务器上有2个进程。你也可以每个进程部署一台服务器,那么这里将会需要有6台服务器。主服务器(MasterServer)简单来说,主服务器的功能主要是对元数据进行维护和在不同进程之间进行数据的协调。在这个服务器上,通常定义有下面2个进程:Coordinator和Overl
·
2021-08-05 12:32
docker
Spark - 持久化引擎
分布式高可用
集群安装
是Standalone集群,这里会有两个master,一个是ALIVE,一个是STANDBY。
·
2021-08-05 00:02
spark
Spark - Master和Worker
之前在分布式高可用
集群安装
中,可以看到这个集群是主从架构,在Spark集群方式中,叫做Standalone集群。
·
2021-08-02 00:24
spark
Kubernetes
集群安装
kube-prometheus后无法执行kubectl top node
背景:Kubernetes1.20.5安装Prometheus-Oprator嗯,我的集群是1.21.3了虽然是......执行kubectltopnodes如下:解决问题过程:网上一堆各种说法的,但是没有一个是适用于我的。把monitoring下所有的pod的日志看了一个遍,然后在prometheus-adapter中发现日志如下:嗯想起来了我的集群都不是默认的cluster.local!如果有
·
2021-07-31 11:40
Spark - 分布式高可用
集群安装
准备工作下载地址官网下载页面有个Sparkreleasearchives,点击可以查看历史版本我这里选择的是spark-2.4.5,由于我Hadoop选择的是2.7.7版本,所以下载的是spark-2.4.5-bin-hadoop2.7.tgz。环境依赖Spark-2.4.5依赖的java和scala版本分布为Java8和Scala2.12。安装过程略。我本机的版本:集群规划角色节点Masterb
·
2021-07-27 19:01
spark
Hadoop系列
HadoopHadoop-
集群安装
Hadoop-
集群安装
(高可用)HDFSHDFS-文件越来越多怎么办HDFS-HDFS的四个角色HDFS-NameNode的高可用HDFS-安全模式是什么HDFS-NameNode
·
2021-07-27 19:09
hadoophdfs
HDFS - NameNode的高可用
Hadoop的高可用是通过zookeeper来实现的,Hadoop-
集群安装
(高可用),这篇文章也提到了zookeeper的作用,实际上对于大数据的各个组件来说,很多高可用都是通过zookeeper来做的
·
2021-07-27 19:38
hadoophdfs
zookeeper
集群安装
和配置解读 - 雨中散步撒哈拉
一、
集群安装
0、环境准备1、下载好的zk进行解压2、创建数据和日志目录3、修改配置4、分发到集群节点5、分别添加id6、添加环境变量二、集群常用命令2.2.1启动客户端2.2.2退出客户端1、启动zkserver
·
2021-07-27 19:29
zookeeper
基于K8S 1.21.2
集群安装
Ingress-Nginx 0.48.1
K8S
集群安装
Ingress-NginxIngress-Nginx的github网址:Ingress-nginx的github网址版本支持可参考官方说明:Ingress-nginxversionk8ssupportedversionAlpineVersionNginxVersionv0.48.11.21,1.20,1.193.13.51.20.1v0.47.01.21,1.20,1.193.13
逝唁
·
2021-07-22 15:21
kubernetes
安装配置
Linux
kubernetes
ingress-nginx
k8s部署微服务应用一路的总结
目录安装k8s
集群安装
JFrogContainerRegistryk8s中使用token完成私有容器镜像仓库的鉴权程序部署参见安装k8s集群首先学习k8s,我们手里面得有集群,关于集群的搭建,其实一直卡了我很久
奋斗的小面包
·
2021-07-10 13:29
spring
cloud
备忘录
k8s
云部署
java
k8s部署
使用flink-sql-gateway提交sql查询
确保
集群安装
Flink使用版本1.12.1作为例子。
__destory__
·
2021-07-08 16:59
k8s
集群安装
(1.21)
系统配置:cpu和内存:master推荐4c16g,最低2c4g;node推荐4c16g甚至更高,根据实际运行的容器数量调整。linux操作系统:推荐RedHatLinux7或者CentOS7etcd:3.0版本以上。推荐3.3版本。docker:18.03版本以上。docker安装防火墙:如果是阿里云,同一内网可以直接互相访问,不考虑配置。如果是私有部署,需要手动关闭防火墙。systemctld
瓢鳍小虾虎
·
2021-07-04 20:24
【CDH安装】2、CDH
集群安装
配置
7180admin/admin2、选择免费版或者试用版3、继续下一步4、选择当前管理主机cloudera-scm-agent正常启动后,可发现相应的节点,指定集群服务的安装节点5、选择CDH版本及安装
集群安装
粮忆雨
·
2021-06-27 21:28
kafka搭建
Kafka实践提前准备:安装Java安装zookeeper一、kafka
集群安装
分别在h1、h2、h3三台机器上下载解压kafka安装包,然后修改配置文件1.h1上,vi/home/vagrant/kafka
狼牙战士
·
2021-06-25 12:33
K8S
集群安装
借助ntp服务设定各节点主机时间精确同步通过dns完成各节点主机名称解析,测试环境主机数量较少时也可以使用hosts文件进行关闭各节点iptables,firewalld,并确保它们被禁止随系统引导过程启动各节点禁用selinux各节点禁用swap若要使用ipvs模型的proxy,各节点还需要载入ipvs相关的各模块设定时间同步yuminstall-yntpdatentpdatentp1.aliy
可可西里呦
·
2021-06-25 08:26
CentOS7-Cloudera Manager5.14.1-大数据
集群安装
CentOS7-ClouderaManager5.14.1-大数据
集群安装
前言本文主要记录ClouderaManager5.14.1的安装步骤需要具有一定基础,一些简单的步骤简略带过1服务配置编号服务器主机名
弓昭
·
2021-06-25 07:38
Redis 三种启动方式
redis自启动_2019-02-01_09-59-14.png前面我们针对Redis的单机与高可用
集群安装
已经实践完成了,此篇文章是对其补充与完善。
zoluo
·
2021-06-24 08:27
Spring Cloud Alibaba使用Nacos做注册中心,Feign负载均衡远程调用
集群安装
的
Forward_233
·
2021-06-21 00:10
elasticsearch
集群安装
部署
一、安装部署1.前期准备安装JDK版本服务器执行:yuminstall-yjava-1.8.0-openjdk-develecho$JAVA_HOME#检测默认jdk环境是不是1.8版本,如果不是自行百度。增加服务器参数vim/etc/sysctl.confvm.max_map_count=655360sysctl-p2.从官网下载包官网下载页传送门:http://www.elastic.co/d
Big_dimple
·
2021-06-20 21:45
Flink
集群安装
1)下载安装包2)上传安装包到/root下3)解压cd/roottar-zxvfflink-1.6.2-bin-hadoop28-scala_2.11.tgz-Chd4)修改配置文件viflink-conf.yaml第33行修改为:jobmanager.rpc.address:hd1105)修改slavesvislaveshd111hd1126)分发flink到其他机器cd/root/hdscp-
一个人一匹马
·
2021-06-19 09:54
HDFS - NameNode的高可用
Hadoop的高可用是通过zookeeper来实现的,Hadoop-
集群安装
(高可用),这篇文章也提到了zookeeper的作用,实际上对于大数据的各个组件来说,很多高可用都是通过zookeeper来做的
·
2021-06-18 22:15
hadoophdfs
zookeeper
集群安装
和配置解读 - 雨中散步撒哈拉
一、
集群安装
0、环境准备1、下载好的zk进行解压2、创建数据和日志目录3、修改配置4、分发到集群节点5、分别添加id6、添加环境变量二、集群常用命令2.2.1启动客户端2.2.2退出客户端1、启动zkserver
·
2021-06-18 21:34
zookeeper
Kafka单节点伪分布式集群搭建实现过程详解
Kafka集群搭建分为单节点的伪分布式集群和多节点的分布式集群两种,首先来看一下单节点伪分布式
集群安装
。
·
2021-06-16 10:32
Ganlia
集群安装
参考:https://blog.csdn.net/agent_x/article/details/78660128主节点安装epel包的安装:yuminstall-yepel-release(解决不能yum安装某些安装包的问题)gmetad的安装:yuminstall-yganglia-gmetadganglia-develgmond的安装:yuminstall-yganglia-gmondrrd
大大大大大大大熊
·
2021-06-15 10:50
flink 1.9 docker swarm
集群安装
1.我打包好Flinkdocker镜像文件flink配置文件如下:#################################################################################LicensedtotheApacheSoftwareFoundation(ASF)underone#ormorecontributorlicenseagreements.
负二贷
·
2021-06-14 14:33
大数据(Hadoop)完全分布式
集群安装
(全)
一、大数据概述大数据概念大数据(BigData):指的是传统数据处理应用软件不足以处理(存储和计算)它们的大而复杂的数据集。主要解决,海量数据的存储和海量数据的运算问题。大数据特征1、容量(Volume):数据的大小决定所考虑的数据的价值和潜在的信息新浪微博,3亿用户,每天上亿条微博朋友圈,8亿用户,每天亿级别朋友圈2、种类(Variety):数据类型的多样性,包括文本,图片,视频,音频结构化数据
顾子豪
·
2021-06-14 10:37
ELK技术栈(ElasticSearch,Logstash,Kibana,垂直搜索引擎)
基础部分工作原理es增删改内部原理ELK
集群安装
部署文档管理索引管理搜索聚合分析分词数据建模Javaapi零停机indexsegmentmerge乐观锁并发控制索引别名相关度评分算法与定制近似聚合算法docvalues
我只是一个小白木木
·
2021-06-11 08:07
hadoop视频教程培训 hadoop最新实战教程 Hadoop新手速成培训全套完整视频教程
:http://demo.liuy88.cn/jp0706.html-------------------课程目录-------------------第一天hadoop的基本概念伪分布式hadoop
集群安装
单独行走的猪
·
2021-06-08 19:07
redis6.09
集群安装
(docker-compose)
1.docker-Compose构成1.1docker-redis-cluster文件夹准备明细序号目录或文件作用1./docker-redis-cluster总配置目录2./docker-redis-cluster/docker-compose.yaml部署文件3./docker-redis-cluster/redis/Dockerfile镜像配置文件4./docker-redis-cluste
雪中悍刀跑
·
2021-06-07 20:33
Cloudera Manager(简称CM)+CDH构建大数据平台
一、ClouderaManager介绍 ClouderaManager(简称CM)是Cloudera公司开发的一款大数据
集群安装
部署利器,这款利器具有集群自动化安装、中心化管理、集群监控、报警等功能
mantch
·
2021-06-07 16:24
Storm
集群安装
配置
安装Storm的步骤:安装ZooKeeper集群;在各个机器上安装运行集群所需要的依赖组件;下载Storm安装程序并解压缩到集群的各个机器上;在storm.yaml中添加集群配置信息;使用“storm”脚本启动各机器后台进程。安装ZooKeeper集群https://www.jianshu.com/p/c4e07c76c633安装必要的依赖组件Java6(推荐使用JDK7以上版本)Python2.
壹点零
·
2021-06-07 09:19
hadoop
集群安装
环境:Centos7.0,JDK1.8设置主机名hostnamehadoop1hadoop2hadoop3hosts/etc/hosts192.168.31.17hadoop1192.168.31.210hadoop2192.168.31.65hadoop3免密钥登陆ssh-keygen-trsassh-copy-id-ihadoop1ssh-copy-id-ihadoop2ssh-copy-id
madfrog_hc
·
2021-06-05 06:11
zookeeper
集群安装
主机列表:192.168.1.16cache01192.168.1.17cache02192.168.1.18cache03所需软件:zookeeper-3.4.6.tar.gzjdk-7u75-linux-x64.gz下载:wgethttp://mirrors.cnnic.cn/apache/zookeeper/zookeeper-3.4.6/zookeeper-3.4.6.tar.gz安装ja
可可西里呦
·
2021-06-05 04:16
Hive环境搭建
基于三节点的Hadoop集群搭建Hive安装中前的准备先要搭建好hadoop
集群安装
中用到的软件:hive-1.1.0-cdh5.14.2.tar.gz,下载地址MySQL5.7安装MySQLhive的元数据
HideOnStream
·
2021-06-04 18:46
K8S系列一——集群环境搭建上
kubectl、kubeadm、kubelet3.1配置kubernetes镜像源3.2kubectl、kubeadm、kubelet安装3.3启动kubelet服务3.4docker安装配置四、获取k8s
集群安装
镜像五
Integer_Double
·
2021-05-25 14:21
kubernetes
Hbase
集群安装
与常见问题解决
首先说明,要使用hbase是需要先安装hadoop和zookeeper的(也可以使用自带的但是不建议),参考[zookeeper
集群安装
][hadoop
集群安装
]我用的是三台机器,mini1,mini2
数据萌新
·
2021-05-18 20:52
Redis 4.0.2
集群安装
Redis4.0.2
集群安装
01安装单机版单机版详见02创建集群的配置文件创建一个安装配置文件的目录mkdir-p/usr/local/redis/conf创建第一个配置文件redis_6380.confbind192.168.140.129protected-modeyesport6380tcp-backlog511timeout0tcp-keepalive300daemonizeyessupe
葡小萄家的猫
·
2021-05-18 06:25
基于zookeeper的高可用Hadoop HA
集群安装
(转载)
转自:http://blog.csdn.net/zilong_zilong/article/details/51703399
晴天哥_374
·
2021-05-15 18:55
Spark
集群安装
-基于hadoop集群
文章目录hadoop集群下载环境配置集群配置测试hadoop集群参考使用docker部署hadoop集群-手把手复现下载首先查看hadoop版本hadoopversion下载sparkcd/usr/local#yum-yinstallwgetwgethttps://mirrors.bfsu.edu.cn/apache/spark/spark-3.1.1/spark-3.1.1-bin-hadoop
唔仄lo咚锵
·
2021-05-13 16:55
大数据
安装配置教程
spark
hadoop
docker
大数据
zookeeper
storm
集群安装
一、环境准备1.1基础环境主机名称IP地址storm-nimbus192.168.200.110storm-supervisor1192.168.200.111storm-supervisor2192.168.200.112[root@storm-supervisor1~]#uname-aLinuxstorm-supervisor12.6.32-358.el6.x86_64#1SMPFriFeb2
57山本无忧
·
2021-05-12 19:18
【大数据安全】Kerberos
集群安装
配置
1.概述Kerberos是一种计算机网络认证协议,它允许某实体在非安全网络环境下通信,向另一个实体以一种安全的方式证明自己的身份。它也指由麻省理工实现此协议,并发布的一套免费软件。它的设计主要针对客户-服务器模型,并提供了一系列交互认证——用户和服务器都能验证对方的身份。Kerberos协议可以保护网络实体免受窃听和重复攻击。Kerberos协议基于对称密码学,并需要一个值得信赖的第三方。Kerb
mantou叔叔
·
2021-05-11 10:48
上一页
15
16
17
18
19
20
21
22
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他