E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
2.6.5
基于hadoop
2.6.5
搭建5个节点的分布式集群—(二)配置SSH免密码通信
六、配置SSH免密码通讯1、对hadoop001节点上的root用户配置ssh输入“ssh-keygen-trsa”,生成秘钥2、使用“cp~/.ssh/id_rsa.pub~/.ssh/authorized_keys”命令,把公钥复制到认证文件(authorized_keys)中,如下图所示:3、确保.ssh目录的权限是700(使用chmod700.ssh命令修改),确保.ssh目录下所有文件(
billyuncle
·
2018-06-16 10:33
hadoop生态环境搭建
基于hadoop
2.6.5
搭建5个节点的分布式集群—(一)基础环境配置
使用hadoop
2.6.5
版本配置Hadoop集群,配置NameNode+HA、ResourceManager+HA,并使用zookeeper来管理Hadoop集群。
billyuncle
·
2018-06-15 21:41
hadoop生态环境搭建
JanusGraph-hbase-solr环境搭建
JanusGraph单节点环境搭建涉及服务:HBase、Solr、Janusgraph服务版本:软件版本号JanusGraph0.2.0Hadoop
2.6.5
HBase1.2.6Solr6.6.2示例服务器地址
AlferWei
·
2018-06-14 17:41
JanusGraph
hadoop 完全分布式HA高可用集群(自动切换)搭建
192.168.103.15datanode2:192.168.103.5datanode3:192.168.103.3操作系统:ubuntu-16.04-x64hadoop版本:apache-hadoop-
2.6.5
jdk
苍老流年
·
2018-06-02 11:53
hadoop
hadoop 完全分布式HA高可用集群(手工切换)搭建
192.168.103.15datanode2:192.168.103.5datanode3:192.168.103.3操作系统:ubuntu-16.04-x64hadoop版本:apache-hadoop-
2.6.5
jdk
苍老流年
·
2018-06-01 13:11
hadoop
HDFS 回收站
实验环境hadoop版本:apache-hadoop-
2.6.5
HDFS回收站hadoop的HDFS中也提供了回收站(trash)的概念,使得数据被误删以后,还可以通过回收站找回来。
苍老流年
·
2018-05-31 10:50
hadoop
MongoDB副本集权限重置
环境:MongoDBv
2.6.5
副本集、
shuaixiong1215
·
2018-05-30 21:13
MongoDB
重置
用户密
MongoDB
安装使用mongodb
二进制安装下载安装包curl-Ohttps://fastdl.mongodb.org/linux/mongodb-linux-x86_64-
2.6.5
.tgz解压taraxfmongodb-linux-x86
yr_linux运维
·
2018-05-28 17:10
mongodb
安装
简单使用
数据库
hive 2.3.3(HA) on spark 2.2.0 on yarn
2.6.5
踩坑记
环境一览hive2.3.3配置HAspark2.2.0hadoop
2.6.5
zookeeper3.6.5hbase1.2.6碰到的所有坑1、jdbc连接zk时方法找不到异常org.apache.curator.utils.ZKPaths.fixForNamespace
烫烫烫口
·
2018-05-25 19:58
j2ee
bigdata
kettle6.1读写hive on hbase记录
版本kettle6.1hbase1.2.6hive2.2.0hadoop
2.6.5
数据架构业务数据通过kafka流向业务数据处理引擎,过滤后的数据写入hbase,kettlejob定期执行作业,读取hive
烫烫烫口
·
2018-05-21 14:15
bigdata
hadoop02
hadoop-env.shmapred-env.shyarn-env.sh在这三个文件中均配置exportJAVA_HOME=/opt/modules/jdk1.7.0_67参考:http://hadoop.apache.org/docs/r
2.6.5
阿南的生活记录
·
2018-05-20 19:10
springMvc集成Swagger2(springfox)
需要依赖jackson相关包)io.springfoxspringfox-swagger22.4.0引入jackson相关包,由于springfox使用的是2.4.0的版本,所以jackson版本最高支持到
2.6.5
E_Ivan
·
2018-05-10 15:16
springMvc集成Swagger2(springfox)
需要依赖jackson相关包)io.springfoxspringfox-swagger22.4.0引入jackson相关包,由于springfox使用的是2.4.0的版本,所以jackson版本最高支持到
2.6.5
E_Ivan
·
2018-05-10 15:16
Hadoop集群搭建
2、认识Hadoop集群,完成Hadoop集群配置3、Hadoop集群使用实验软件1、hadoop-
2.6.5
.tar.gz——[下载地址]2、jdk-8u121-linux-x64.tar.gz——[
莫色gyq
·
2018-05-08 13:04
云计算
最详细的Hadoop集群搭建
1:hadoop版本:采用hadoop-
2.6.5
版本,下载地址:下载地址下载190M的tar包即可,该包是编译直接可用的。
土豆钊
·
2018-05-07 13:58
大数据
hadoop hdfs dfs 基本操作
本文主要参考:http://hadoop.apache.org/docs/r
2.6.5
/hadoop-project-dist/hadoop-common/FileSystemShell.html根据上面官方文档的提示我们能够知道可以通过
被虐哭也要努力
·
2018-05-05 17:49
完全分布式Hadoop集群搭建(Ubuntu16.04+hadoop
2.6.5
)
准备工作:三台虚拟机,其中一台主机,两台节点;需要提前下载好的文件:ubuntu-16.04.4-desktop-amd64.iso.jdk-8u92-linux-x64.tar.gz.hadoop-
2.6.5
数据科学爱好者
·
2018-05-02 20:37
hadoop
运行Hadoop自带的wordcount单词统计程序
]#pwd/usr/local/hadoop/share/hadoop/mapreduce[root@linuxidcmapreduce]#lshadoop-mapreduce-client-app-
2.6.5
lby0307
·
2018-04-27 20:24
Hadoop
CentOS7使用HBase-1.2.6单机版+hadoop-
2.6.5
单机版
一、hadoop下载,使用
2.6.5
版本http://hadoop.apache.org/releases.htmltar-zxvfhadoop-
2.6.5
.tar.gz笔者的路径是/root/Downloads
libaineu2004
·
2018-04-27 15:17
HBase
eclipse添加hadoop插件
下载hadoop-eclipse-plugin-
2.6.5
.jar,并将其添加到eclipse的plugins目录下重启eclipse关闭hdfs服务器的防火墙,修改相应配置文件使之能够通过IP加端口访问在
BigData_Hadoop
·
2018-04-24 18:33
大数据学习
Err1 hive安装之后启动报错解决的方法
blog.csdn.net/xiesai588/article/details/51317478以上链接主要解决ERR2给出的报错信息的解决方法软件版本信息如下:jdk-1.8.0_161hadoop-
2.6.5
hbase
CARYFLASH
·
2018-04-04 12:41
集群应用
在CentOS中搭建Hadoop的详细步骤
虚拟机:VMwarePro14Linux:CentOS-6.4(下载地址,下载DVD版本即可)JDK:OpenJDK1.8.0(强力建议不要使用Oracle公司的Linux版本的JDK)Hadoop:
2.6.5
德维恩魏
·
2018-03-27 09:01
利用spring-boot构建spark job作业提交服务
版本依赖spark.version:2.1.0hadoop.version:
2.6.5
springboot-mybatis.version:1.1.1springboot:1.5.10实现功能通过HTTP
烫烫烫口
·
2018-03-26 14:30
j2ee
Hadoop部署流程
Hadoop部署流程一、版本号
2.6.5
二、安装目录/mnt/Hadoop/Hadoop-
2.6.5
三、先决条件Java环境正常运行四、部署步骤4.1.编辑/mnt/hadoop/hadoop-
2.6.5
great_smile
·
2018-03-24 15:44
大数据
sqoop(4)—— Mysql数据导入Hive
官方文档http://sqoop.apache.org/docs/1.4.7/SqoopUserGuide.html#_importing_data_into_hive_2示例集群和版本规划hadoop-
2.6.5
sqoop
holdbelief
·
2018-03-22 18:26
Sqoop
---Sqoop教程
---Sqoop教程---原创
Centos下部署Hadoop
2.6.5
Centos下部署Hadoop
2.6.5
一、Hadoop简介说到Hadoop,就必须先说说大数据,我们知道,大数据包括了以Hadoop和Spark为代表的基础大数据框架,其中又包括了实时数据处理、离线数据处理
gan_ke
·
2018-03-21 00:14
运维
互联网
centos7系统单机安装部署hadoop
2.6.5
今天单机安装部署Hadoop,就顺便记录一下安装过程1首先需要下载jdk和hadoop的安装包我安装的版本是Hadoop-
2.6.5
.tar.gz(注意不要下载成hadoop-
2.6.5
-src.tar.gz
wangmumu_123
·
2018-03-17 23:12
hadoop
Hadoop MapReduce的分布式缓存发布
翻译地址:http://hadoop.apache.org/docs/r
2.6.5
/hadoop-mapreduce-client/hadoop-mapreduce-client-core/DistributedCacheDeploy.htmlHadoopMapReduce
我爱吻篮板
·
2018-02-02 17:24
翻译
【HDFS篇】完全分布式基于HA搭建HDFS集群(ZK+ZKFC+JN)
vi/etc/profileexportJAVA_HOME=/usr/java/jdk1.7.0_67exportHADOOP_PREFIX=/opt/jw/hadoop-
2.6.5
exportZOOKEEPER_P
塵世星空
·
2018-02-02 16:50
大数据平台Hadoop 和 Spark的安装-单节点
desktop-amd64.iso下载地址:http://old-releases.ubuntu.com/releases/15.10/ubuntu-15.10-desktop-amd64.iso(二)Hadoop
2.6.5
笨蝈蝈
·
2018-01-26 17:23
大数据
hadoop-
2.6.5
-centos-6.7集群的安装
一下都是在hadoop用户下操作的1.下载hadoop-
2.6.5
-centos-6.7.tar上传到Hadoop01软件安装包放在soft下安装在Apps下2.修改Hadoop的配置文件2.1修改vihadoop-env.sh
freefish_yzx
·
2018-01-22 10:02
hadoop
基于centos7搭建hadoop+zookeeper+hbase大数据集群
最近在给公司项目搭集群,顺手整理了一个文档,特别详细,相信新手看了也能一次搭好hadoop集群1.环境准备jdk1.8.0_121hadoop-
2.6.5
zookeeper-3.4.10hbase-1.2.4
loopeng1
·
2018-01-09 13:34
前端
大数据
MyBatis框架——二级缓存-整合ehcache 缓存框架
1.加入ehcache包ehcache-core-
2.6.5
.jar和mybatis-ehcache-1.0.2.jar一个是ehcache自己的,一个是和mybatis的整合包2.整合ehcache配置
望崖
·
2018-01-05 14:06
Hive单用户模式安装
)集群搭建集群中有一台服务器中安装了MySQL参考:Linux中安装MySQLhive安装包下载地址https://mirrors.aliyun.com/apache/hive/我的hadoop版本为
2.6.5
CoderJed
·
2018-01-04 20:33
编译Hadoop以支持snappy
1.下载所需要的源码包snappy-1.1.4.tar.gzprotobuf-2.5.0.tar.gzhadoop-
2.6.5
-src.tar.gzapache-maven-3.5.2-bin.tar.gz2
永胜永胜
·
2018-01-04 15:42
hadoop
hadoop学习第二天~Hadoop
2.6.5
完全分布式集群搭建和测试
192.168.1.111namenode192.168.1.115datanode2192.168.1.116datanode3java环境:jdk-8u101-Linux-x64.gzhadoop版本:hadoop-
2.6.5
冰清雪酷
·
2017-12-28 02:10
hadoop
Hadoop伪分布式集群搭建
作者:帅气陈吃苹果1、下载Hadoop压缩包wgethttp://mirrors.hust.edu.cn/apache/hadoop/common/hadoop-
2.6.5
/hadoop-
2.6.5
.tar.gz2
陈贤靖
·
2017-12-19 00:00
hadoop
分布式
集群
hadoop
Hadoop下载与配置下载解压即可,下载地址:https://pan.baidu.com/s/1i57ZXqt配置环境变量:在系统变量中新建变量:HADOOP_HOME,值:E:\Hadoop\hadoop-
2.6.5
yuanshuai1136
·
2017-12-16 22:55
异常解决:util.NativeCodeLoader: Unable to load native-hadoop library for your platform
Unabletoloadnative-hadooplibraryforyourplatform…usingbuiltin-Javaclasseswhereapplicable解决方法:在hadoop-
2.6.5
hongXkeX
·
2017-12-10 03:14
Spring
3.3.9exportGRADLE_HOME=/opt/gradle/gradle-3.3exportGRADLE_HOME=/opt/gradle/gradle-4.1exportHADOOP_HOME=/opt/hadoop
2.6.5
exportJAVA_HOME
百炼
·
2017-12-10 02:07
Xenomai在Ubuntu中的安装-实时内核更换
环境:-操作系统安装于VMware下的Ubuntu14.04内核版本3.14.17安装的新内核版本3.14.44-xenomai版本
2.6.5
首先是下载xenomai源码,为了和其他的程序兼容我们选择xenomai2.6
Simple_learner
·
2017-12-04 20:05
嵌入式Linux学习
日常学习
Igh
Hadoop二次排序
这篇文章涉及到的概念有:自定义Key自定义分区规则自定义排序规则自定义分组规则实验环境操作系统:Ubuntu16.04LTSHadoop版本:ApacheHadoop
2.6.5
JDK:JDK1.7问题描述
ecjtusbs
·
2017-11-22 19:05
hadoop
基础
Hadoop 安装和使用
环境操作系统:Ubuntu14.04Hadoop版本:Hadoop
2.6.5
JDK版本:OpenJDK1.7创建Hadoop用户创建用户sudouseradd-mhadoop为新用户设置密码sudopasswdhadoop
深度沉迷学习
·
2017-11-12 17:31
【数据挖掘】4-hadoop-
2.6.5
-src.tar.gz编译
编译hadoop-
2.6.5
.tar.gz,需要一下软件将所有软件安装在/usr/local/src目录下jdk-7u25-linux-x64.tar.gzapache-ant-1.9.4-bin.tar.gzfindbugs
风泽茹岚
·
2017-11-08 23:22
数据挖掘
Hadoop启动的时候,发现Datanode启动不了,解决办法
(3)解决办法:找到data和name配置的dir路径,找到hdfs-site.xml文件(cdhadoop-
2.6.5
/etc/hadoop/)dfs.name.dir/home/cc/hadoop/
陈 超
·
2017-11-07 14:04
开发工具
深度学习
centos 7 安装+hadoop
2.6.5
环境部署(伪分布式)
x86_64-Everything-1503-013.linux系统远程连接工具SecureCRT74.java环境JDKjdk-8u151-linux-x64.tar5.hadoop软件包hadoop-
2.6.5
chanBigData
·
2017-11-02 21:05
面试题--精选Hadoop选择题
mapreduce.framework.nameD、yarn.resourcemanager.address解答:dfs.replication是HDFS集群的副本个数,一般放置在hdfs-site.xml2、Hadoop-
2.6.5
中琦2513
·
2017-10-26 09:42
Hadoop
hadoop
2.6.5
linux安装
hadooplinux安装流程今天在自己的阿里云上安装了hadoop,安装过程中遇到了一些问题,特此做下笔记记录下。1、下载安装包(下载地址)http://mirror.bit.edu.cn/apache/hadoop/common/在安装hadoop之前先配置下SSH免密码登录查看ssh版本,通过命令ssh-version进行验证,如果出现与下图相似的信息就代表已经安装了SSH了.下面开始看看如
阿杜_ardo
·
2017-10-23 22:23
hadoop
hadoop搭建之hadoop安装
1.下载hadoop,推荐去官网下载:请点击官网地址(我下载的是
2.6.5
版本的)2,把它进行拷贝到linux中;3,在usr下解压其压缩文件命令【tar-zxvf+文件名】4,删除压缩包命令【rm-rf
张今天
·
2017-10-23 12:05
——Hadoop集群
Hadoop
2.6.5
Windows环境下安装
打包好的已配置好的hadoop
2.6.5
其中包括重要的几个dll文件是hadoop不自带的。
土豆拍死马铃薯
·
2017-10-22 17:02
大数据
上一页
7
8
9
10
11
12
13
14
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他