E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
伪分布式
如何进行 Apache Doris 集群 Docker 快速部署
本教程可指导有快速部署测试和Docker学习需求的同学,快速进行部署单节点ApacheDoris集群或
伪分布式
ApacheDoris集群。
·
2022-09-20 11:33
Hive的安装和配置-安装步骤:(配图片和文字,超详细)
.安装MySQL数据库3.配置MySQL相关4.上传hive安装包,解压,重命名5.设置环境变量6.修改hive配置文件7.上传MySQL连接驱动8.初始化元数据9.启动Hive下面开始:我们可以是在
伪分布式
下安装
Deng872347348
·
2022-09-15 11:45
Hive
hive
Hadoop大数据综合案例5-SSM可视化基础搭建
Hadoop大数据招聘网数据分析综合案例Hadoop大数据综合案例1-Hadoop2.7.3
伪分布式
环境搭建Hadoop大数据综合案例2-HttpClient与Python招聘网数据采集Hadoop大数据综合案例
CDHong.it
·
2022-09-09 07:48
Hadoop大数据
可视化
ssm
数据库
什么是MapReduce?MapReduce整体架构搭建使用介绍
文章目录前言MapReduce入门MapReduce的核心思想MapReduceyarnYarn
伪分布式
搭建MapReduce编码需求MapReduce2.0工作机制MapReduce数据流转机制MR编码准备
IT行业小趴菜
·
2022-09-08 12:40
#
MapReduce
mapreduce
大数据
big
data
hdfs
大数据——hadoop之hbase安装和配置
hadoop之hbase安装和配置安装HBase前,需要的准备条件安装HBase配置HBase单机模式
伪分布式
模式完全分布式模式(集群)安装HBase前,需要的准备条件HBASE运行需要JDKJDK安装和配置
蜂蜜柚子加苦茶
·
2022-09-08 07:43
大数据
hbase
hadoop
Hadoop(二)hadoop
伪分布式
、全分布式、高可用、联邦模式的区别
2、
伪分布式
模式(搭建在了只有一个节点的集群中)表示集群中的所有角色都分配给了一个节点。表示整个集群被安装在了只有一个节点的集群中的。主要用于做快速使用,去模拟分布式的效果。
嘿~叔
·
2022-09-06 19:38
hadoop
超详细的Hadoop3.1.2架构单机、
伪分布式
、完全分布式安装和配置
动手安装是最基础的实践,下面介绍一下单机、
伪分布式
和完全分布式安装与配置、测试过程,供有需要的参考。目录(1)软件准备(2)Centos安装及网络配置?
geejkse_seff
·
2022-09-06 19:34
java
java
后端
Hadoop环境快速搭建(
伪分布式
和完全分布式步骤版)
目录一、初始准备:二、环境搭建:1.修改第二台和第三台主机的IP和主机名2.用Xftp传入JDK和hadoop安装包,并安装Ⅰ、先删除centos7上自带的openJDK:Ⅱ、安装JDK并配置JAVA环境Ⅲ、安装Hadoop并配置环境Ⅳ、host文件配置,免密登入Ⅴ、文件传输以及剩余两台机子的环境配置Ⅵ、hadoop集群启动和HDFS,YARN集群的UI信息状态查询三、完全分布式Hadoop框架一
我的思路很明确
·
2022-09-06 19:02
大数据
hadoop
java
大数据
Centos8安装 Hadoop3 详细操作(含图文)
Centos中Hadoop安装详细过程(含图文)Hadoop介绍:一、创建hadoop用户二、安装SSH、配置SSH无密码登录三、安装jdk环境四、安装Hadoop3五、配置hadoop环境变量六、Hadoop
伪分布式
配置
何为xl
·
2022-09-06 15:45
Linux
大数据
hadoop
centos
分布式
linux
HDFS
伪分布式
环境搭建
HDFS
伪分布式
环境搭建作者:Grey原文地址:博客园:HDFS
伪分布式
环境搭建CSDN:HDFS
伪分布式
环境搭建相关软件版本Hadoop2.6.5CentOS7OracleJDK1.8安装步骤在CentOS
Grey Zeng
·
2022-09-05 21:00
电信客服项目笔记
笔记目录电信客服案例笔记1.0Hadoop准备1.1克隆虚拟机102,103,1041.2
伪分布式
的测试1.3完全分布式搭建1.4对配置文件进行配置2.0zookeeper准备2.1解压安装2.2文件配置
Fang GL
·
2022-09-05 07:28
#
大数据项目
hadoop
大数据
大数据集群环境配置从JDK /Hadoop /zookeeper /Hive /Flume / KafKa /Mysql /Tomcat
文章目录大数据集群配置1.0Hadoop安装1.1克隆虚拟机102,103,1041.2
伪分布式
的测试1.3完全分布式搭建1.4对配置文件进行配置2.0zookeeper安装2.1解压安装2.2文件配置
Fang GL
·
2022-09-05 07:58
#
大数据技术
hadoop
大数据
hbase
Hadoop大数据处理架构学习——Linux系统上安装Hadoop(Ubuntu22.04)
1.概述2.Hadoop的安装和使用(1)创建Hadoop用户(2)更新apt和安装vim编辑器(3)安装SSH和配置SSH无密码登录(4)安装java环境(5)安装单机Hadoop(6)Hadoop
伪分布式
安装
长弓同学
·
2022-09-01 07:55
hadoop
架构
学习
Hadoop
伪分布式
安装教程——踩坑经验以及顺利安装的方法
1.前言在上上篇安装Hadoop的教程里,到了
伪分布式
这一步,总是卡在启动这一步,数据节点不知道为什么就是权限不够开不了,要么就是进程占用,在杀死进程之后,整个Hadoop出现瘫痪。
长弓同学
·
2022-09-01 07:25
hadoop
分布式
大数据
6.2.3 Spark《RDD高阶》序列化,依赖,持久,容错,分区,广播,累加,TopN《原理初》独立作业提交,洗牌原理,RDD优化《SQL概述》数据抽象,类型《SQL编程》SpkSes,DF&DS
目录第4节RDD编程高阶Spark原理4.1序列化4.2RDD依赖关系4.3RDD持久化/缓存4.4RDD容错机制Checkpoint4.5RDD的分区1、本地模式(取决于核数)2、
伪分布式
(x为本机上启动的
CH_ENN
·
2022-08-17 07:29
大数据技术栈
Centos6下安装
伪分布式
hadoop
安装环境:Centos6Hadoop版本:2.7.2用户名:huweiHadoop2.7.2下载链接:https://pan.baidu.com/s/1AK4CXh2jBKOSa-bN4NA8nQ提取码:bemy下载好的hadoop压缩包如下图所示:提示:全文中所有cd命令,均可在图形化界面点击进入指定文件夹后,右击打开终端而省略。1.为Hadoop创建安装的文件夹cd命令进入/usr/local
胡微_
·
2022-08-10 16:45
大数据
centos
linux
hadoop
ssh
离线数仓-伪分布虚拟机 (所有组件部署完成,全流程运行成功)(数仓4.0-2.0,CDH)
(百度网盘,微云下载…)博主通过学习尚硅谷数仓项目,将部署好的数仓虚拟机打包成ovf文件,由于博主电脑内存较小,博主使用了
伪分布式
集群搭建,全流程运行成功。分享虚拟机镜像文件给予大家学习。
《@书山有径%》
·
2022-08-05 14:05
大数据
数据仓库
linux
大数据
单机节点Kafka配置SASL用户名密码认证
转载请注明出处:http://blog.csdn.net/u012842205/article/details/73188534
伪分布式
Kafka,只用一个节点,zookeeper也用集成在Kafka里的
_nMaple_
·
2022-07-26 16:56
信息安全
开源
运维
大数据
zookeeper
分布式
kafka
安全
hadoop_hadoop-2.6.0-cdh5.7.0源码编译支持压缩以及
伪分布式
部署
并成功进行
伪分布式
集群部署验证压缩功能。|组件名称|组件版本|百度网盘链接2.环境需求以及部署规划2.1硬件环境一台centos6.X虚
whiteblacksheep
·
2022-07-21 07:30
hadoop
Centos hadoop-2.7.7安装
安装过程参考了林子雨教程Hadoop安装教程_
伪分布式
配置_CentOS6.4/Hadoop2.6.0_厦大数据库实验室博客(xmu.edu.cn)http://dblab.xmu.edu.cn/blog
嘻水流年
·
2022-07-13 13:28
虚拟机
hadoop
centos
大数据
hadoop集群搭建——单节点(
伪分布式
)
1.准备工作:前提:需要电脑安装VM,且VM上安装一个Linux系统注意:本人是在学习完尚学堂视频后,结合自己的理解,在这里做的总结。学习的视频是:大数据。为了区分是在哪一台机器做的操作,eg:---Linux表示在Linux上做的操作。2.以下是教程,首先是准备工作:2.1
落月_YU
·
2022-06-24 20:00
大数据-2:Hadoop生态以及HDFS部署
文章目录1.Haoop简介2.安装单机版Hadoop3.Hadoop运行3.1独立运行/Local(Standalone)Mode3.2
伪分布式
集群/Pseudo-DistributedMode3.3全分布式集群
LeeHoo0
·
2022-06-20 12:58
hadoop
big
data
CentOS 7 下 Hadoop全分布式集群搭建
CentOS7下Hadoop全分布式集群搭建Hadoop集群搭建CentOS7下Hadoop全分布式集群搭建一、概念1.单机模式(独立模式)(Local或StandaloneMode)2.
伪分布式
模式(
shu天
·
2022-05-27 08:16
环境配置
数据处理
大数据
Hadoop
集群
Centos上Hadoop集群安装及配置详细教程
Hadoop集群的安装与配置安装环境系统基本配置
伪分布式
安装分布式安装配置安装环境 Centos版本:6.7 VMware版本:15.5.1 JDK版本:jdk-7u67系统基本配置 1.主机名修改
疯狂奔跑的少年
·
2022-05-27 08:42
大数据
Java操作HDFS开发环境搭建以及HDFS的读写流程
Java操作HDFS开发环境搭建在之前我们已经介绍了如何在Linux上进行HDFS
伪分布式
环境的搭建,也介绍了hdfs中一些常用的命令。但是要如何在代码层面进行操作呢?
weixin_33828101
·
2022-05-26 10:37
java
大数据
操作系统
【云计算】Hadoop3.1
伪分布式
环境搭建
1.环境准备Hadoop3.1.1下载:Indexof/dist/hadoop/common/hadoop-3.1.1[这里是图片001]https://archive.apache.org/dist/hadoop/common/hadoop-3.1.1/创建Centos7虚拟机之后,建立三个新文件夹用于存放文件把我们的环境文件放入对应的文件夹2.安装jdk1.8进入java文件夹,解压安装jdk
drhrht
·
2022-05-20 10:11
java
java
后端
HBase的安装和编程实践
的安装和编程实践1.HBase2.4.2安装1.1解压安装包1.2将解压的文件名hbase-2.4.2改为hbase1.3配置环境变量1.4查看HBase版本,确定hbase安装成功2.HBase配置2.1
伪分布式
配置
MirkoLin596
·
2022-05-17 14:07
hadoop
linux
大数据
数据库
hbase
HBase环境搭建与编程实践
2.HBase的运行有三种模式:单机模式、
伪分布式
模式、分
跑得贼鸡儿快
·
2022-05-17 14:07
小白教程
大数据
数据库
nosql
HBase编程实践
文章目录编程环境实验内容安装Hbase单机模式配置
伪分布式
配置HBaseshell命令说明简单命令实践参考资料:编程环境Ubuntu18.04实验内容安装Hbasewgethttps://mirrors.tuna.tsinghua.edu.cn
wr456wr
·
2022-05-17 14:33
大数据
hbase
hadoop
zookeeper
【大数据实验】01:Hadoop3伪分布部署
安装Hadoop3(3)在Hadoop3上执行MR程序Hadoop3环境搭建(伪分布模式)1.实验原理:2.实验步骤(1)安装JDK8(2)配置SSH免密登录(3)安装Hadoop3(4)Hadoop
伪分布式
配置
hello world 999
·
2022-05-06 11:00
数据挖掘
hadoop
【大数据实验】03:HBase
伪分布式
部署
HBase
伪分布式
部署OVERVIEWHBase
伪分布式
部署实验环境1.HBase单机模式安装配置2.HBase
伪分布式
安装部署3.HBaseShell操作4.HBaseWebUI管理(1)Master
hello world 999
·
2022-05-06 11:00
数据挖掘
hadoop
hbase
Docker搭建Hadoop实录
docker搭建hadoop实录鉴于用虚拟机跑hadoop太卡的原因,想在docker上跑hadoop又因为hadoop搭建
伪分布式
环境,需要用到ssh免密登录本机笔者的环境是Mac+DockerDesktop
leaf_shane
·
2022-04-29 16:46
HDFS基础-安装
伪分布式
Hadoop
使用工具①centos6.5②jdk1.8③Hadoop2.7.1【*】虚拟机使用Linux作为操作系统,这也是在生产情况下运行Hadoop的唯一指定操作系统。由于HDFS依赖于Hadoop,Hadoop依赖于Java。所以需要进行Hadoop的安装和jdk的安装。Hadoop的安装非常简单,大家可以去官网上下载到最新的几个版本。在安装Hadoop程序之前,需要安装两个程序,JDK和SSH(安全外
AGi_
·
2022-04-21 09:43
分布式存储
hadoop
hdfs
(大数据方向)分布式实验四:配置eclipse编程环境
目录一.hdfs常用操作指令二.配置eclipse编程环境1.所需工具:①centos②
伪分布式
搭建③eclipse④hadoop⑤hadoop-lib包⑥bin文件⑦可视化插件⑧xftp传输工具2.Eclipse
Java从跨平台到跨行业
·
2022-04-14 21:00
(大数据方向)分布式实验
eclipse
java
hadoop
分布式
(大数据方向)分布式实验六:mapreduce编程实践
注意:此次编程实践,在
伪分布式
上实践,所以首先需要启动
伪分布式
的节点进阶任务代码已上传资源中start-dfs.sh目录一.新建项目二.编写代码(包:com.jxxy.mr.test)(1)WordCount
Java从跨平台到跨行业
·
2022-04-14 21:00
(大数据方向)分布式实验
java
hadoop
eclipse
分布式
mapreduce
(大数据方向)分布式实验一:基于CentOS的
伪分布式
搭建
目录什么是
伪分布式
:一.实验工具二.基本设置1.配置网络如何查看自己的IP地址,子网掩码,网关IP2.关闭防火墙3.关闭selinux4.配置主机名5.配置映射三.Hadoop
伪分布式
搭建1)xshellxftp
Java从跨平台到跨行业
·
2022-04-14 21:29
(大数据方向)分布式实验
hadoop
Hadoop安装部署
Hadoop
伪分布式
搭建1.准备Linux环境①开启网络,ifconfig指令查看ip②修改主机名为自己名字(hadoop)vim/etc/sysconfig/networkNETWORKING=yesHOSTNAME
N暖阳_李维宁
·
2022-04-11 21:00
Linux_hadoop2.2.0
伪分布式
搭建安装
一:准备Linux环境1.1开启网络,ifconfig指令查看ip1.2修改主机名为自己名字(hadoop)centos7连接:https://zhuanlan.zhihu.com/p/375497418vim/etc/sysconfig/networkNETWORKING=ye
and脱发周大侠
·
2022-04-10 20:00
Linux 下Spark on Yarn 部署
若没有看过Spark本地部署与Sparkstandalone部署,可以参考之前的文章Linux下Spark的Local部署(本地Sparkshell和本地
伪分布式
集群)Linux下SparkStandalone
Code_HS
·
2022-03-25 07:19
大数据
分布式
spark
大数据
linux上部署最新版本zookeeper
伪分布式
集群
1、环境准备centos7系统,VM安装centos可参考还不会使用linux?快来通过VMware安装centos系统吧~zookeeper安装包SecureCRT2、zookeeper简介zookeeper也被人打趣为动物管理员,是分布式应用程序的高性能协调服务。它在一个简单的界面中公开了常用服务,例如命名、配置管理、同步和分组服务。您可以现成地使用它来实现数据一致性、集群管理和master选
·
2022-03-22 20:02
javazookeeper
linux上部署最新版本zookeeper
伪分布式
集群
1、环境准备centos7系统,VM安装centos可参考还不会使用linux?快来通过VMware安装centos系统吧~zookeeper安装包SecureCRT2、zookeeper简介zookeeper也被人打趣为动物管理员,是分布式应用程序的高性能协调服务。它在一个简单的界面中公开了常用服务,例如命名、配置管理、同步和分组服务。您可以现成地使用它来实现数据一致性、集群管理和master选
隐 风
·
2022-03-22 07:39
运维部署笔记
linux
zookeeper
分布式
Jbd2:Hadoop
Java4.2.1安装jdk4.2.2修改环境变量4.2.3SSH登录权限设置4.3单机版Hadoop4.3.1安装Hadoop4.3.2修改系统环境变量4.3.3修改hadoop-env.sh文件配置4.4
伪分布式
JxWang05
·
2022-03-18 07:45
Juicy_Big_Data
hadoop
big
data
hdfs
CentOS6.5搭建hadoop完全分布式集群
搭建完全分布式集群-------------------------------前提条件:已经按照之前的步骤搭建完
伪分布式
。
长安一片月
·
2022-02-28 11:06
hadoop学习
hadoop
hadoop完全分布式
克隆
基于CentOS 7安装hadoop
伪分布式
伪分布式
模式也是在一台单机上运行,集群中的结点由一个NameNode和若干个DataNode组,另有一个SecondaryNameNode作为NameNode的备份。
Coder_yy
·
2022-02-28 10:25
BigData
1024程序员节
分布式
hadoop
2020-11-3 centos搭建hadoop完全分布式集群
完全分布式Hadoop集群在虚拟机CentOS7上搭建https://blog.csdn.net/weixin_41627032/article/details/1033289222.搭建Hadoop的
伪分布式
集群
CK_杨小仙
·
2022-02-28 10:37
hadoop
linux
centos
分布式
hadoop之hdfs shell操作
哈哈...安装部署,翻下我以前的帖子,
伪分布式
和分布式环境搭建,以及虚拟机的构建都已经写过了,在此就不多bb了。
MrZhangBaby
·
2022-02-28 10:24
谈笑间学会大数据
大数据
Hadoop
hadoop
hdfs
shell
HDFS的常见Shell操作
一、前提部署好hadoop,
伪分布式
部署还是分布式集群部署都可以,部署参见如下:1、伪分布部署参见:https://blog.csdn.net/weixin_40612128/article/details
大自然的农民工
·
2022-02-28 10:50
hadoop
big
data
hdfs
9、大数据框架HBase搭建
zookeeper```搭建hbase```1、上传解压配置环境变量2、修改hbase-env.sh文件3、修改hbase-site.xml文件4、修改regionservers文件5、同步到所有节点(如果是
伪分布式
不需要同步
liangzai2048
·
2022-02-28 10:46
大数据平台搭建
hbase
big
data
hadoop
好程序员大数据笔记之:Hadoop集群搭建
ps:以下不涉及完全分布式,只说明单机版和
伪分布式
。一、hadoop本地模式和
伪分布式
模式之间的区别1.单机(非分布式)模式。这种模式在一台单机上运行,没有分
好程序员IT
·
2022-02-27 09:10
好程序员
大数据培训
Hadoop
Hadoop
大数据
好程序员
ZooKeeper 集群配置详解
伪分布式
单机配置说明:服务器名称与地址:集群信息(服务器编号,服务器地址,LF通信端口,选举端口)这个配置项的书写格式比较特殊,规则如下:server.N=YYY:A:B其中,N表示服务器编号,YYY表示服务器的
·
2022-02-23 11:36
zookeeper
上一页
7
8
9
10
11
12
13
14
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他