habase伪分布式

hadoop 分布式文件系统的部署

hadoop分布式文件系统的部署1.hadoop文件系统的简介2.虚拟集群的搭建2.1单机模式2.2伪分布式2.3完全分布式文件系统1.hadoop文件系统的简介Hadoop是一个由Apache基金会所开发的分布式系统基础架构
123坤·2021-04-30 17:47

Hadoop开发环境准备及错误问题解决方法

Hadoop开发环境准备及错误问题解决方法一、开发环境准备二、错误问题及其产生原因三、错误问题解决方法一、开发环境准备Hadoop环境已经搭建好（伪分布式搭建好即可）eclipse或者idea已经下载安装好修改下
若兰幽竹·2021-04-28 22:46

Hadoop大数据平台

文章目录1.HDFS单机版2.伪分布式3.全分布式热添加节点（在线添加server4节点）4.分布式存储5.Zookeeper高可用集群(hadoop自带的nn高可用)1.集群搭建2.hadoop配置3
qiao_qing·2021-04-28 17:55

hadoop开发环境&&集群搭建

hadoop版本,所以选择Hadoop-2.7.5image.png下载地址为http://hadoop.apache.org/releases.html搭建Pseudo-Distributed本地开发使用伪分布式集群修改配置
TTTing听·2021-04-26 03:41

Zookeeper和HA的了解

一、Zookeeper的概述1.1Zookeeper是什么zookeeper是⼀个伪分布式应⽤程序提供的⼀个分布式开源协调服务框架。
仙女的崽儿·2021-04-25 21:10

Docker相关文章索引（3）

环境部署docker镜像制作之dockercompose.yml文件---hadoop伪分布式CentOS7.2安装Docker1.12.3版生成dockeryum源tee/etc/yum.repos.d
司小幽·2021-04-25 05:57

hadoop分布式部署(Hadoop-3.3)

1、单机模式、伪分布式、分布式的区别。单机模式：只在一台机器上运行，储存采用本地文件系统，没有采用HDFS。伪分布式：储存采用HDFS，但是HDFS的名称节点和数据节点都在同一台机器上。
＿贪多必失·2021-04-24 17:04

头歌平台下的Hbase伪分布式安装

1、创建文件夹mkdir/appcd/optulimit-f1000000tar-zxvfhbase-2.1.1-bin.tar.gz-C/app2、查看jdk目录并复制echo$JAVA_HOME/usr/lib/jvm/jdk1.8.0_1113、编辑配置vim/app/hbase-2.1.1/conf/hbase-env.sh在最后面添加：exportJAVA_HOME=/usr/lib/j
Fdecad·2021-04-23 23:15

大数据入门(三) - HDFS 伪分布式环境搭建

1HDFS概述及设计目标1.1什么是HDFS：Hadoop实现的一个分布式文件系统（HadoopDistributedFileSystem），简称HDFS源自于Google的GFS论文论文发表于2003年，HDFS是GFS的克隆版1.2HDFS的设计目标：非常巨大的分布式文件系统运行在普通廉价的硬件上易扩展、为用户提供性能不错的文件存储服务HDFS官方文档地址2HDFS架构HDFS是主/从式的架构
JavaEdge·2021-04-22 02:23

HBase 伪分布式

在伪分布式模式pseudo-distributed下，HBase仍旧运行在一台主机上，但是各个守护进程(HMaster,HRegionServer,andZooKeeper)单独运行。
金刚_30bf·2021-04-21 09:12

伪分布式-spark

解压安装包tar-zxvfspark-2.4.3-bin-hadoop2.7.tgz配置全局环境变量exportSPARK_HOME=/usr/local/src/sparkexportPATH=$PATH:$JAVA_HOME/bin:/usr/local/src/hadoop/bin:$HBASE_HOME/bin:$SPARK_HOME/bin:$SPARK_HOME/sbin在spark-
蕴重Liu·2021-04-19 12:25

Hadoop安装教程_单机/伪分布式配置---------常见的问题

Hadoop伪分布式时的问题按照安装教程进行伪分布式配置的修改配置文件时，要注意这个标签只有一个，而原文件中以有这个标签，只需将教程中的其他内容复制到里面就行了，否则将会
HHHH756·2021-04-18 19:20

Hadoop搭建

SSH-u012941811的专栏-博客频道-CSDN.NET；ApacheHadoop3.0.0-alpha1–Hadoop:SettingupaSingleNodeCluster.Hadoop安装教程_伪分布式配置
内心戏很多的慵懒猫·2021-04-13 22:35

2021年 全网最细大数据学习笔记（四）：Hadoop 之 HDFS的基本使用

文件内容6、对比hdfsdfs三、Java操作HDFS1、前置工作2、示例代码一、学前必备知识2021年全网最细大数据学习笔记（一）：初识Hadoop2021年全网最细大数据学习笔记（二）：Hadoop伪分布式安装
Amo Xiang·2021-04-10 16:11

hadoop大数据平台的简介及搭建

hadoop的优点3.hadoop核心架构4.hadoop应用场景5.hadoop工作模式5.1单机模式（Local(Standalone)Mode）5.2Pseudo-DistributedMode伪分布式
樱桃Maruko小丸子cxj·2021-04-03 19:15

hadoop2.x伪分布式搭建

【前言】之前搭建了hadoop1.x的伪分布式与全分布式，由于hadoop2.x与hadoop1.x在安装和配置上有较大的区别，所以对hadoop2.x的安装也做一个笔记以便日后学习。
先生_吕·2021-03-10 17:26

Hadoop2.7.3环境搭建之伪分布式

Hadoop伪分布式环境搭建一、前置条件二、准备工作三、Hadoop安装四、伪分布式配置说明：熟悉Hadoop伪分布式环境搭建基本思路与流程，理解主从式结构体系思想一、前置条件前置条件请自行参考如下资料进行操作
若兰幽竹·2021-03-08 21:04

我的Hadoop之旅---启程

Hadoop集群式搭建的旅途在这里，我将进行我的Hadoop搭建路程搭建前期的准备工作我们要进行Hadoop伪分布式搭建需要做的一些小小的准备工作：下载VMware任意版本，并创建三台虚拟机，我这里选择的是使用带
浅苏鎏沐·2021-03-02 15:55

【项目杂记】安全问题--核心数据加密、签名

鉴于优惠券的实现逻辑并不复杂，所以最后决定采用伪分布式架构；即现有数据库不做改变，为优惠券模块单独创建一个用户优惠券服务，单独拥有一个数据库；目的是为以后项目服务拆分，整体向分布式改造打前站。
A minor·2021-02-18 04:01

第七阶段 第一模块

https://www.cnblogs.com/LOVE0612/p/9579751.htmldelete是删除子结点的权限伪分布式集群一个结点挂掉其他的都会挂掉Curator连接结点都是在工作空间下创建注意版本
·2021-02-15 18:32

Hadoop安装

Hadoop安装SSH免密登录SSH概念SSH组成实现步骤安装JDK软件下载解压安装包配置环境变量HDFS伪分布式集群搭建软件下载解压安装包配置文件配置环境变量Hadoop集群测试启动和关闭HDFS集群单节点逐个启动和关闭脚本一键启动和关闭查看进程启动情况通过
Ka-Xin·2021-02-10 23:21

Hadoop 学习笔记·三 —— Hadoop 运行模式

Hadoop运行模式包括：本地模式伪分布式模式完全分布式模式Hadoop官方网站：http://hadoop.apache.org/本地运行模式官方Grep案例创建在hadoop-2.7.2文件下面创建一个
timedecdec·2021-02-06 11:45

2021-01-29 大数据课程笔记 day9

计算两天案例两天第一天内容安排1T文件操作（训练）hadoop起源（了解）HDFS架构（重点）数据块副本放置策略（重点）HDFS的权限（了解）hadoop的安全模式（理解）HDFS写文件流程（重点）HDFS读文件流程（重点）伪分布式搭建
Rich Dad·2021-01-29 21:25

contos8伪分布式部署hadoop-3.2.1

知识了解伪分布式部署模式介绍：Hadoop守护进程运行在本地机器上，模拟一个小规模的的集群。该模式在单机模式之上增加了代码调试功能，允许你检查内存使用情况，HDFS输入/输出，以及其他的守护进程交互。
东鹏特饮·2021-01-27 03:50

搭建伪分布式集群笔记（3）

搭建Hadoop分布式集群步骤:1.配置时间同步服务2.设置环境变量3.格式化NameNode4.启动关闭集群5.关闭防火墙，做映射6.脚本，启动集群7.hadoop配置文件一些解释1.配置时间同步服务（1）检查是否安装ntp，yum源rpm-qa|grepntpntpstatmount/dev/dvd/mediayumrepolist（2）安装NTP服务。在各节点：yum-yinstallntp
_52394320·2021-01-20 17:41

搭建伪分布式集群笔记（2）

搭建Hadoop分布式集群一条件hadoop-2.6.0.tar.gz结构图步骤：1.Hadoop文件上传，解压缩上传hadoop-2.6.0.tar.gz到/opt目录下解压到/usr/local目录下tar-zxfhadoop-2.6.0.tar.gz-C/usr/local一些常用的目录解读2.修改配置文件cd/usr/local/hadoop-2.6.0/etc/hadoopcore-si
_52394320·2021-01-20 17:11

搭建伪分布式集群笔记（1）

搭建Hadoop分布式集群前期配置条件CentOS-6.9-x86_64-bin-DVD1.isojdk-8u221-linux-x64.rpm步骤：1.虚拟机设置固定IP2.用xshell远程连接3.虚拟机在线安装软件4.安装java1.虚拟机设置固定IP创建图形化版master节点初始化界面：（1）采用nat方式连接网络查看本地网络主机网段与vm8的网段不一致例如下图主机：vm8:即虚拟机的i
_52394320·2021-01-20 17:56

【快速入门大数据】hadoop和它的hdfs、yarn、mapreduce

优势发展史生态系统发行版本选择企业应用案例第3章分布式文件系统HDFS设计分布式文件系统架构副本机制环境搭建Mac上的仿xshellCDH版-hadoopjdkssh免密登录解决ifconfig命令失效解决ssh报错hadoophdfs配置伪分布式
瑞 新·2021-01-15 13:43

大数据技术与应用-D1

没有所谓的在多台机器上进行真正的分布式计算，故称为"伪分布式"。全分
?? YJ???????·2021-01-15 04:44

hadoop 完全分布式部署

一.实验环境准备需要准备四台Linux操作系统的服务器，配置参数最好一样，由于我的虚拟机是之前伪分布式部署而来的，因此我的环境都一致，并且每天虚拟机默认都是Hadoop伪分布式哟！
cnmeimei·2020-12-30 15:15

Windows下使用IDEA搭建Hadoop开发环境的详细方法

笔者鼓弄了两个星期，终于把所有有关hadoop的环境配置好了，一是虚拟机上的完全分布式集群，但是为了平时写代码的方便，则在windows上也配置了hadoop的伪分布式集群，同时在IDEA上就可以编写代码
·2020-12-30 11:39

(第一篇)记一次python分布式web开发（利用docker）

所以打算在虚拟机上利用docker来部署伪分布式的系统，方便环境搭建、开发和二次部署。do
落阳·2020-12-23 16:00

(第一篇)记一次python分布式web开发（利用docker）

所以打算在虚拟机上利用docker来部署伪分布式的系统，方便环境搭建、开发和二次部署。do
落阳·2020-12-23 16:21

Hadoop伪分布式集群部署

Hadoop单节点集群部署注：新手菜鸟一枚，参照过程中如发现错误，请谅解，如有疑问请留言。【包含内容】HDFS部署YARN部署SparkonYARNHbaseHive一、HDFS部署Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力进行高速运算和存储。Hadoop实现了一个分布式文件系统（HadoopDist
Tyf--·2020-12-22 16:04

jpsnamenode和不显示_伪分布式hadoop启动后jps查不到namenode的解决办法

hadoop启动后jps查不到namenode的解决办法最近由于项目需要开始接触hadoop,在配置伪分布式启动后,jps查询进程发现少了namenode,而DataNode却存在.下面是我的core-site.xml
weixin_39663258·2020-12-20 16:54

调用MapReduce对文件中各个单词出现的次数进行统计

调用MapReduce对文件中各个单词出现的次数进行统计Hadoop安装环境创建hadoop用户更新apt安装SSH、配置SSH无密码登陆安装Java环境安装Hadoop2运行Hadoop伪分布式实例使用
duxial·2020-12-18 00:15

Mapreduce程序 统计文件中每个单词出现次数

创建Hadoop账户2.更新apt3.安装vim4.配置SSH、配置SSH无密码登陆三.安装Java环境1.安装JDK2.验证JDK安装情况3.设置JAVA坏境变量四.安装Hadoop五.Hadoop伪分布式配置
niels kiki·2020-12-17 15:40

在hadoop调用mapreduce对文件中各个单词出现次数进行统计

用户增加管理员权限4.更新apt5.安装vim6.安装SSH、配置SSH无密码登陆三、安装java环境1.安装JDK2.验证JDK安装情况四、安装hadoop五、Hadoop单机配置(非分布式)六、Hadoop伪分布式配置
ゝ 擱淺 ぃ·2020-12-16 22:02

调用MapReduce对文件中单词出现次数进行统计

调用MapReduce对文件中各个单词出现次数进行统计一、Ubuntu安装二、准备工作1.创建hadoop用户2.安装Hadoop3.1.33.Hadoop伪分布式配置三、调用MapReduce执行WordCount
WangmZec·2020-12-16 02:21

Hadoop集群的部署（一）

Hadoop集群的部署分为分布式集群和伪分布式集群的部署。这篇文章中，我会对伪分布集群的安装和部署做说明。
喵先生的进阶之路·2020-12-15 01:08

调用MapReduce对文件中各个单词出现次数进行统计

.准备工作1.创建hadoop账户2.更新apt3.安装SSH、配置SSH无密码登陆三.安装Java环境1.安装JDK2.验证JDK安装情况3.设置JAVA坏境变量四.安装Hadoop五.Hadoop伪分布式配置
HPF_99·2020-12-14 23:56

Hadoop集群的部署（一）

Hadoop集群的部署分为分布式集群和伪分布式集群的部署。这篇文章中，我会对伪分布集群的安装和部署做说明。
喵先生的进阶之路·2020-12-14 20:53

图文并茂！用云服务器和 Docker 一键部署开源评测系统 SDUOJ 的教程

在此教程中，你将了解如何选购一个公有云云服务产品，使用临时使用的按量付费模式购买一台ECS，随后在上面搭建一个伪分布式（pseudo-distributed）的SDUOJ。
zhangt2333·2020-12-14 13:21

大数据学习之路~Spark

Spark初识Spark学习之路（二）Spark2.3HA集群的分布式安装Spark学习之路（三）Spark之RDDSpark学习之路（四）Spark的广播变量和累加器Spark学习之路（五）Spark伪分布式安装
素颜vv风之殇·2020-12-01 19:11

大数据环境搭建hadoop，hive，spark，Python，anaconda

如何在自己的电脑搭建一个虚拟的集群环境：1、安装虚拟机（包括linux系统：笔者使用ubantu16.04）http://dblab.xmu.edu.cn/blog/2760-2/#more-27602、安装hadoop2.X（伪分布式
君_临_天_下·2020-11-21 19:56

Kafka多节点分布式集群搭建实现过程详解

上一篇分享了单节点伪分布式集群搭建方法，本篇来分享一下多节点分布式集群搭建方法。多节点分布式集群结构如下图所示：为了方便查阅，本篇将和上一篇一样从零开始一步一步进行集群搭建。
·2020-11-17 19:10

在虚拟机或Docker中搭建大数据伪分布式集群（一）：hadoop基础功能——hdfs 与 yarn

在虚拟机或Docker中搭建大数据伪分布式集群（一）：hadoop基础功能——hdfs与yarn参考官网教程：https://hadoop.apache.org/docs/stable/hadoop-project-dist
一叶知秋叶若秋·2020-11-13 23:03

第七阶段 第一模块

https://www.cnblogs.com/LOVE0612/p/9579751.htmldelete是删除子结点的权限伪分布式集群一个结点挂掉其他的都会挂掉Curator连接结点都是在工作空间下创建注意版本删除也是递归删除这就是
小白·2020-11-13 11:03

Hadoop2.7.1伪分布安装及配置

基于Ubuntu14.04.6单机伪分布式安装Hadoop2.7.1前言一、创建用户二、安装配置SSH三、安装Java环境四、安装hadoop五、hadoop伪分布式配置运行实例前言上一篇blog介绍了多节点
hhhSir'blog·2020-11-08 11:51

大数据文章汇总-Hadoop、MapReduce、Storm、Spark、Flink

大数据、Hadoop核心框架和MapReduce原理CentOS7单机安装最新版Hadoopv3.1.2以及配置和简单测试Hadoopv3.1.2伪分布式安装（Pseudo-DistributedOperation
380884531·2020-11-06 10:27
上一页 9 10 11 12 13 14 15 16 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他