使用Maven创建Hadoop工程

操作系统:Ubuntu

环境要求:JDK

Maven简介

可以通过一小段描述信息来管理项目的构建,报告和文档的软件项目管理工具,其使用起来十分便捷,公司项目采用Maven的比例越来越大。

如何安装、配置

下载并解压

Maven的官方下地址为:http://maven.apache.org/download.cgi
点击进入后选择apache-maven-3.5.2-bin.tar.gz(我的版本),然后点击下载。
然后对其进行解压并重命名(个人解压到~/下)

tar -zxvf apache-maven-3.5.2-bin.tar.gz -C ~/
cd ~/
mv apache-maven-3.5.2-bin.tar.gz maven

更改源(换为阿里的源)

更改为阿里的源可以使其更快速的运行。
然后通过文件进入到计算机/xxx/maven/conf 目录下。以gedit方式打开settings.xml,找到下图蓝色部分,将其注释。

使用Maven创建Hadoop工程_第1张图片
所需更改

注释后添加(阿里的源):


        nexus-aliyun
        *
        nexus aliyun
        http://maven.aliyun.com/nexus/content/groups/public

创建项目并配置

先打开IDEA,点击create new project,配置好JDK

使用Maven创建Hadoop工程_第2张图片
创建工程

GroupID是项目组织的唯一标识符,实际对应JAVA包的结构,ArtfactID是项目的唯一标识符。

使用Maven创建Hadoop工程_第3张图片
ID填写

然后就会出现初始界面,这时选择File下的Settings

使用Maven创建Hadoop工程_第4张图片
settings设置

此时就可以在xml下通过几行代码来插入各种jar包了,现在演示导入hadoop的所有jar包,hadoop需要hadoop-commond与Hadoop HDFS,我们一般通过maven repository来看怎么写导入的xml
maven repository官网: http://mvnrepository.com

使用Maven创建Hadoop工程_第5张图片
打开网页搜索所需
使用Maven创建Hadoop工程_第6张图片
进入后点击所需版本号
使用Maven创建Hadoop工程_第7张图片
复制Maven代码
使用Maven创建Hadoop工程_第8张图片
返回进行项目配置

使用同样方法对Hadoop HDFS进行导入,然后进入src下的java目录创建class并编写代码,就可以愉快的进行hadoop的操作,以后对于hbase的操作也和这个差不多。大家自己摸索着进行学习。

Crape Diem

你可能感兴趣的:(使用Maven创建Hadoop工程)