E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
habase伪分布式
kafka集群(
伪分布式
)的搭建及集成springboot
kafka集群(
伪分布式
)的搭建及集成springboot前言一、配置jdk1、官网下载2、上传解压3、配置环境变量二、搭建zookeeper集群1、下载zookeeper2、创建data、logs文件夹
身为风帆,要顺其自然
·
2020-06-25 06:56
kafka
kafka
hadoop+kylin安装及官方cube/steam cube案例文档
对于hadoop+kylin的安装过程在上一篇文章已经详细的写了,这里只给出链接:Hadoop+Mysql+Hive+zookeeper+kafka+Hbase+Sqoop+Kylin单机
伪分布式
安装及官方案例详细文档请读者先看完上一篇文章再看本本篇文章
赵延东的一亩三分地
·
2020-06-25 03:39
Hadoop
GoldenGate
hadoop搭建(一)——远程执行脚本缺少环境变量
文章目录hadoop搭建——远程执行脚本缺少环境变量问题追踪解决(一)解决(二)分析hadoop搭建——远程执行脚本缺少环境变量本次安装的是3.1.5版本hadoop的
伪分布式
,按照官方的指导手册quicklystart
SiriusQiu
·
2020-06-25 01:01
移动群体感知
java学习
hadoop集群
Hadoop
伪分布式
搭建及wordcount实验详细步骤
目录一、准备二、安装jdk三、安装Hadoop四、文件配置五、wordcount文件下载hadoop-2.7.3.tar,vm15p,ubuntu-16.04.6-server-amd64,jdk-8u171-linux-x64.tar,Xftp-6.0.0169p,Xshell-6.0.0175p等为安装软件,请提前安装,下载地址链接:下载地址提取码:s33d。一、准备1.1创建Hadoop用户
Sunning_001
·
2020-06-25 00:28
机器学习
大数据
java连接Hbase操作数据库的全过程---搭建hbase数据库
前面已经搭建好了一个
伪分布式
的hadoop环境,传送门:https://blog.csdn.net/qq1049545450/article/details/90019159现在开始搭建hbase数据库
小小的人儿居然已存在
·
2020-06-24 22:34
大数据
使用Docker在本地搭建Hadoop分布式集群
不妨拿来在本地做虚拟化,搭建Hadoop的
伪分布式
集群环境。虽然有点大材小用,但是学习学习,练练手也是
qingfengxiaosong
·
2020-06-24 22:42
大数据
hadoop视频教程培训 hadoop最新实战教程 Hadoop7天培训全套完整视频教程
-------------------课程目录-------------------视频下载地址:http://demo.liuy88.cn/jp0524.html第一天hadoop的基本概念
伪分布式
hadoop
燕燕展翅东南飞
·
2020-06-24 15:27
大数据之Hadoop学习(环境配置)——Hadoop
伪分布式
集群搭建
title:Hadoop
伪分布式
集群搭建date:2018-11-1415:17:20tags:Hadoopcategories:大数据点击查看我的博客:Josonlee’sBlog文章目录前言准备
伪分布式
特点
lzw2016
·
2020-06-24 11:02
Hadoop及Spark学习
大数据学习进阶
hadoop环境搭建
伪分布式搭建
hadoop下的Pipes(用C++进行hadoop程序开发)
经过一上午的努力,终于以
伪分布式
模式运行了C++版的MapReduce.下面逐一介绍这一过程一、先决条件1.在Linux系统上已安装好hadoop1.0.X版本(本人系统为CentOS5.5(64位系统
shane_smile
·
2020-06-24 10:34
hadoop学习笔记
hadoop
程序开发
c++
centos
string
ssh
Docker之Hadoop普通集群搭建
docker搭建下hadoop集群,分布式的搭建与
伪分布式
的并无多大区别,在
伪分布式
下,各种配置文件中对于ip或者主机名全都是一致的,而在分布式下只要需要把相应namenode、resourcemanager
小林子405
·
2020-06-24 09:47
ElasticSearch7集群搭建(Windows单机版)
这里我们只在一台电脑上搭建三个ElasticSearch客户端来建立
伪分布式
就可以开始我们的学习之旅了。
龍的天空
·
2020-06-24 08:25
ElasticSearch
分享阿里 高级架构师总结的 《Java 核心知识体系.pdf》
级高级架构师吐血总结的一份Java核心知识.pdf,内容覆盖很广,Java核心基础、Java多线程、高并发、Spring、微服务、Netty与RPC、Zookeeper、Kafka、RabbitMQ、
Habase
程序员马小兮
·
2020-06-24 01:32
架构师
程序员
java
java
后端
面试
程序人生
hadoop
hadoop的安装与配置方法详解
1、概述Hadoop安装分为三种方式,分别为单机、
伪分布式
、完全分布式,安装过程不难,在此主要详细叙述完全分布式的安装配置过程,毕竟生产环境都使用的完全分布式,前两者作为学习和研究使用。
kingice1014
·
2020-06-24 01:17
CentOS7-64bit 编译 Hadoop-2.7.4,并
伪分布式
安装
1.安装环境说明本机操作系统macOSSierra10.12.6采用的虚拟机VirtualBox5.1.28虚拟机镜像CentOS764bit2.为什么要编译因为我们从官方下载的Hadoop安装压缩包(hadoop-2.7.4.tar.gz)是32位系统下的,如果我们将它部署在64位的系统上运行就会报错,所以我们最好在自己的64位系统上自己重新编译Hadoop源码(hadoop-2.7.4-src
Micheal_Yan
·
2020-06-23 23:45
hadoop
伪分布式
安装
因为hadoop
伪分布式
我已在本地搭建并且运行成功。为了加快学习不足同时分享搭建。直接将不足贴出来,如有不同意见还忘评价共同提升。
jiang_hadoop
·
2020-06-23 21:43
Hadoop从入门到精通
hadoop伪分布式安装
马哥Linux系列七:实战大数据技术专题(Hadoop、NoSQL、Zookeeper、MapReduce)课程分享...
以下是介绍:1、MapReduce基础概念、运行框架、调度模型等;2、HDFS基础概念、命令行接口、数据序列化、数据流等;3、Hadoop
伪分布式
及完全分布式模型的构建、测试及应用;4、生产环境中Hadoop
iteye_4639
·
2020-06-23 19:45
hadoop 单机
伪分布式
搭建 hadoop-2.5.1
下载hadoop-2.5.1http://archive.apache.org/dist/hadoop/core/hadoop-2.5.1/hadoop-2.5.1.tar.gz创建安装目录:mkdir-p/home/hadoop解压tarxzvfhadoop-2.5.1.tar.gz第一步:切换到hadoop-2.5.1/etc/hadoop以下三个文件配置JAVA_HOME根据自己安装目录来设
大写的A
·
2020-06-23 16:20
Hadoop
Hadoop集群搭建模式和各模式问题
文章目录分布式集群的通用问题集群的搭建的集中通用模式1、单机模式2、
伪分布式
模式(搭建在了只有一个节点的集群中)3、分布式模式4、高可用模式5、联邦模式分布式集群的通用问题当前的HDFS和YARN都是一主多从的分布式架构
不迷信_只迷人
·
2020-06-23 16:46
大数据
大数据
hadoop
mac安装hbase
伪分布式
集群
1.安装jdk略2.hadoop
伪分布式
2.1下载解压hadoop2.7.7https://archive.apache.org/di...2.2修改etc/hadoop下文件core-site.xmlhadoop.tmp.dir
ch123
·
2020-06-23 13:51
hbase
hadoop
Python 朴素贝叶斯 垃圾短信分类
0.前言没写完.有时间会更新这是接着我的第一篇博客,搭建好Hadoop
伪分布式
后,完成的整个毕设.毕设的主要内容是完成对100W短信进行垃圾短信分类.其中80W是含有标签0/1的数据,还有20W是无标签数据
国美学弟
·
2020-06-23 11:29
Anaconda
Python
朴素贝叶斯
文本分类
虚拟机上的Hadoop
伪分布式
和完全分布式的搭建
目录一、Hadoop1.Hadoop的组成1.1HDFS架构概述1.2YARN架构概述1.3MapReduce架构概述二、Hadoop的搭建1.运行环境1.1安装JDK1.2安装Hadoop2.
伪分布式
运行模式
fseast
·
2020-06-23 09:00
Hadoop
阿里云服务器上的Hadoop
伪分布式
和完全分布式的搭建
目录搭建接上篇:虚拟机上的Hadoop
伪分布式
和完全分布式的搭建搭建搞来了三台阿里云服务器:镜像:都是CentOS7JDK版本是1.8,Hadoop版本是2.7.2,与上一篇虚拟机搭建用的软件包一致。
fseast
·
2020-06-23 09:00
Hadoop
mac安装hadoop3.2.1
安装hadoopHadoop的搭建有三种方式,本文章安装的是单机版单机版,适合开发调试;
伪分布式
版,适合模拟集群学习;完全分布式,生产使用的模式安装步骤:修改主机名(base)localhost:~XXX
这么多圆圈圈
·
2020-06-23 06:11
HBase
伪分布式
安装
开发环境Ubuntu18.04+Hadoop2.7.7+HBase1.3.3安装下载hbase安装包,下载地址将安装包复制到/usr/local中,执行sudocphbase-0.94.6.tar.gz/usr/localcd/usr/local//进入/usr/localtar-zxvfhbase-1.3.3-bin.tar.gz//解压sudomvhbase-1.3.3hbase//重命名目录
eioway
·
2020-06-23 06:46
大数据
hadoop
大数据
hbase
使用Docker在本地搭建Hadoop分布式集群
不妨拿来在本地做虚拟化,搭建Hadoop的
伪分布式
集群环境。虽然有点大材小用,但是学习学习,练练手也是极好的。
dgsdaga3026010
·
2020-06-23 04:59
Hadoop安装教程_单机/
伪分布式
配置_Hadoop2.6.0/Ubuntu14.04
如果用的是CentOS/RedHat系统,请查看相应的CentOS安装Hadoop教程_单机
伪分布式
配置。
汪酱0110
·
2020-06-23 02:34
分布式缓存原理----Hash环/一致性Hash原理/Hash槽
我们知道Memcached的分布式其实是一种“
伪分布式
”,也就是它的服务器结点之间其实是相互无关联的,之间没有网络拓
clz1314521
·
2020-06-22 23:59
分布式缓存
亿级数据从 MySQL 到 Hbase 的三种同步方案与实践
亿级数据从MySQL到Hbase的三种同步方案与实践1.导语2.工欲善其事,必先利其器2.1环境需知2.2
伪分布式
环境部署2.2.1.准备工作2.2.2
伪分布式
3.亿级MySQL数据插入3.1loaddatainfile3.2Python
会飞的火轮
·
2020-06-22 22:29
ZooKeeper系列(三)
前面虽然配置了集群模式的Zookeeper,但是为了方面学建议在
伪分布式
模式的Zookeeper学习Zookeeper的shell命令。
caixingyun
·
2020-06-22 19:46
Big
Data
Hadoop小兵笔记【四】hadoop2.2.0
伪分布式
环境搭建问题-ssh登录失败
本文记录了基于Hadoop2.2.0搭建
伪分布式
环境过程中遇见的疑难问题,并给出解决方案,详记于此,以为后观。
网埠头
·
2020-06-22 19:50
Hadoop
Hadoop
伪分布式
运行模式
1启动HDFS并运行MapReduce程序1.分析(1)配置集群(2)启动、测试集群增、删、查(3)执行WordCount案例2.执行步骤(1)配置集群(a)配置:hadoop-env.shLinux系统中获取JDK的安装路径:[atguigu@hadoop101~]#echo$JAVA_HOME/opt/module/jdk1.8.0_144修改JAVA_HOME路径:exportJAVA_HO
Lu_kuan@
·
2020-06-22 16:34
Hadoop
大数据技术之_03_Hadoop学习_02_入门_Hadoop运行模式+【本地运行模式+
伪分布式
运行模式+完全分布式运行模式(开发重点)】+Hadoop编译源码(面试重点)+常见错误及解决方案...
第4章Hadoop运行模式4.1本地运行模式4.1.1官方Grep案例4.1.2官方WordCount案例4.2
伪分布式
运行模式4.2.1启动HDFS并运行MapReduce程序4.2.2启动YARN并运行
aodawu2891
·
2020-06-22 14:36
Spark-安装配置:
伪分布式
安装和全分布式安装
0.准备工作:安装JDK,配置主机名,免密登陆一.伪分布模式搭建:1.解压tar-zxvfspark-2.1.0-bin-hadoop2.7.tgz-C/opt/module2.修改配置文件:(1)修改spark-env.sh重命名(拷贝):cd/opt/module/spark-2.1.0-bin-hadoop2.7/confcpspark-env.sh.templatespark-env.sh
Movle
·
2020-06-22 12:09
Spark
基于VMware12虚拟机的Hadoop3.1.2
伪分布式
安装(含各软件百度云下载地址、安装过程中各类问题的解决方案)
一、软件环境配置1.物理机版本:Win102.虚拟机版本:VMware12链接:https://pan.baidu.com/s/1j6dGmDL_jPJhWl4opVPMMQ提取码:v3153.Linux系统:CentOS7.6(64)参考文献:CentOS与Ubuntu的区别CentOS安装4.javaJDK:jdk-8u221-linux-x64.tar链接:https://pan.baidu
一起的远方
·
2020-06-22 10:53
Hadoop
【Hadoop-2.7.2 入门 CentOS7】Hadoop
伪分布式
集群部署_2019.5.10
Hadoop
伪分布式
配置【理念】
伪分布式
与单节点,完全分布式区别
伪分布式
与完全分布式
伪分布式
与单节点【干货】
伪分布式
部署
伪分布式
所需修改的配置文件目录提示配置步骤及缘由启动Hadoop集群之HDFS系统
今心木目
·
2020-06-22 10:58
Hadoop
Windows10安装搭建hadoop
伪分布式
-总结(亲测可行)
hadoop有三种安装模式,即单机模式,
伪分布式
,分布式。
伪分布式
是在一台电脑上模拟多台电脑进行分布式MapReduce操作,符合课程要求,相对难度低,因此为之。
如果曾经拥有
·
2020-06-22 10:42
办公软件
Spark安装及其sbt和maven 打包工具安装
一.安装准备需要先安装hadoop,JavaJDK,采用Hadoop(
伪分布式
)+Spark(Local模式)的组合.spark和sbt,maven的版本:spark-2.4.5-bin-without-hadoop.tgz
TxyITxs
·
2020-06-22 07:35
大数据技术原理与应用
kafka
伪分布式
环境部署
启动时需要加载一个用于KafkaServer初始化相关配置的server.properties文件,当然文件名可以任意,一个server.properties对应一个KafkaServer实例,Kafka
伪分布式
就是在一台机器上启动多个
请收下章鱼君的膝盖
·
2020-06-22 06:33
Hadoop安装教4程_单机/
伪分布式
配置_Hadoop2.6.0/Ubuntu14.0
Hadoop安装教4程_单机/
伪分布式
配置_Hadoop2.6.0/Ubuntu14.0当开始着手实践Hadoop时,安装Hadoop往往会成为新手的一道门槛。
LLy_Alex
·
2020-06-21 23:08
hadoop2.6.5 scala2.11.12 spark2.3.0安装配置及出现的问题(单机版
伪分布式
)
hadoop2.6.5scala2.11.12spark2.3.0安装配置及出现的问题(单机版
伪分布式
)操作系统是deepinlinux1.安装配置Hadoop、JDK、SSH服务可参考以下链接超详细单机版搭建
Can96
·
2020-06-21 18:28
大数据环境配置
Redis集群搭建,
伪分布式
集群,即一台服务器6个redis节点
Redis集群搭建,
伪分布式
集群,即一台服务器6个redis节点一、RedisCluster(Redis集群)简介集群搭建需要的环境二、搭建集群2.1Redis的安装2.2搭建6台redis服务2.2.1
爱是与世界平行
·
2020-06-21 16:25
▷项目总结
▷框架
▷Redis
大数据运维之hadoop的概念单机搭建HDFS集群搭建1
目录数据运维的概念以及hadoop概念Hadoop模式:单机,
伪分布式
,完全分布式和搭建数据运维的概念以及hadoop概念运维需要做的工作:收集数据,搭建平台,数据分析,反馈结果大数据能做什么企业组织利用相关数据分析帮助他们降低成本
zhy-dream
·
2020-06-21 15:12
ELK分布式日志平台搭建及其简单应用
文章目录一、ELK简介1、认识ELK2、ELK架构图3、ELFK架构ELFK架构图二、ELK
伪分布式
日志平台搭建搭建流程1、在相应容器下载所需要软件2、安装Elasticsearch3、解决Elasticsearch
凤求凰的博客
·
2020-06-21 13:25
Linux运维
浅谈大数据原理 (Designing Data-Intensive Applications 书评)
我们会知道hadoop的不足之处,为了支持CRUD,我们会去看看cassandra、
habase
、kudu如何存取、更新数据;为了提高计算效率,我们会去了解tez、spark如何基于DAG
群演_
·
2020-06-21 08:49
Spark-利用SparkLauncher 类以JAVA API 编程的方式提交spark job
hadoop-version:hadoop-2.9.0.tar.gzspark-version:spark-2.2.0-bin-hadoop2.7.tgzjava-version:jdk1.8.0_151集群环境:单机
伪分布式
环境
sj206327327206
·
2020-06-21 08:39
spark
hadoop
12. apache hadoop
伪分布式
搭建-part2-HDFS简单命令
HDFS简单用法从官网查看dfs的基本用法HDFS用法操作HDFS一共有三个命令:hadoopfs:使用面最广,可以操作任何文件系统。hadoopdfs:只能操作HDFS文件系统相关(已Deprecated废弃)hdfsdfs:只能操作HDFS文件系统相关引用官网:hadoopfsFSrelatestoagenericfilesystemwhichcanpointtoanyfilesystemsl
经纶先生
·
2020-06-21 05:35
mac安装Hadoop 2.9.1
系统版本:macOSSierra(10.12.6)1.ssh免密匙登陆这一步是因为Hadoop集群(本地测试的话用
伪分布式
集群)需要互相通过ssh访问,配置免秘钥登录就不需要人工反复输入密码了cat~/
picco
·
2020-06-21 05:13
大数据学习02之基于vbox 6.0搭建ubuntu 18.04
伪分布式
Hadoop 2.9.2集群
目录概要说明下载hadoop安装hadoop启动hadoop集群参考资料概要说明先看下效果HDFS管理界面Yarn管理界面在上一篇博客大数据学习01之基于vbox6.0搭建ubuntu18.04伪集群的基础上安装
伪分布式
moble_xie
·
2020-06-21 03:04
大数据
hbase--jdbc编程
要点如下:(使用idea+maven)增、删、改数据查询:过滤器,比较器协处理器:模拟'RMDB的触发器'第一步:准备好环境搭建好hdfs,hbase
伪分布式
或完全分布式使用idea创建maven项目,
根哥的博客
·
2020-06-21 01:31
大数据hadoop-hbase
Apache kylin 安装配置
Ubuntu18.04Hadoop2.7.7Hbase1.3.3Hive1.2.2MySQL5.7.26Spark2.4.0Kylin2.6.1安装准备1.安装hadoop2.安装hbase见博客HBase
伪分布式
安装
eioway
·
2020-06-21 01:44
大数据
上一页
27
28
29
30
31
32
33
34
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他