Hadoop整合SpringBoot时，出现jar包冲突问题的解决

2020-01-03（周五·晴天）

开发工具：

IDEA .2019-2
Hadoop 2.9.2
Maven
SpringBoot 1.5.8
JDK 1.8

问题描述

本次项目要求整合springboot和hadoop系统，完成一个简单的个人文件存储系统，效果图如下：

但是在整合，springboot与hadoop时，启动项目，报错：
java.lang.IllegalStateException: Detected both log4j-over-slf4j.jar AND bound slf4j-log4j12.jar on the class path, preempting StackOverflowError.

成因分析

通过日志中的报错信息，可以推测是jar包冲突引起的。存在多个 slf4j-log4j12.jar 等。
后来，通过查阅相关博客，发现，其中，还存在的原因有：
在hadoop-common的jar包中的servlet-api，log4j, slf4j-log4j12, jaxb-impl这四个相关依赖
以及在 “hadoop-client”的jar包中的 “servlet-api，log4j, slf4j-log4j12, jsr305 ， jsp-api”这五个相关依赖
与tomcat-embed-jasper的依赖冲突引起。
因为博主项目中自己使用的有log4j,所有需要除去其中的log4j的依赖，各位朋友项目可能不需要除去这些依赖，请视情况而定。

解决办法

在相关依赖中除去多余的冲突jar.

 <!--hadoop公共依赖-->
        <dependency>
            <groupId>org.apache.hadoop</groupId>
            <artifactId>hadoop-common</artifactId>
            <version>${hadoop.version}</version>
            <exclusions>
                    <exclusion>
                        <groupId>org.slf4j</groupId>
                        <artifactId>slf4j-log4j12</artifactId>
                    </exclusion>
                    <exclusion>
                        <groupId>log4j</groupId>
                        <artifactId>log4j</artifactId>
                    </exclusion>
                    <exclusion>
                        <groupId>javax.servlet</groupId>
                        <artifactId>servlet-api</artifactId>
                    </exclusion>
                <exclusion>
                    <groupId>com.sun.xml.bind</groupId>
                    <artifactId>jaxb-impl</artifactId>
                </exclusion>
            </exclusions>
        </dependency>
        <!--hadoop client 依赖-->
        <dependency>
            <groupId>org.apache.hadoop</groupId>
            <artifactId>hadoop-hdfs</artifactId>
            <version>${hadoop.version}</version>
            <exclusions>
                <exclusion>
                    <groupId>org.slf4j</groupId>
                    <artifactId>slf4j-log4j12</artifactId>
                </exclusion>
                <exclusion>
                    <groupId>log4j</groupId>
                    <artifactId>log4j</artifactId>
                </exclusion>
                <exclusion>
                    <groupId>javax.servlet</groupId>
                    <artifactId>servlet-api</artifactId>
                </exclusion>
                <exclusion>
                    <groupId>com.google.code.findbugs</groupId>
                    <artifactId>jsr305</artifactId>
                </exclusion>
                <exclusion>
                    <artifactId>jsp-api</artifactId>
                    <groupId>javax.servlet.jsp</groupId>
                </exclusion>
            </exclusions>

        </dependency>

后续问题：

按照上面所提到的步骤去解决，发现项目可以正常启动。但是，访问页面时，再次报错。

javax.el.ExpressionFactory.newInstance()Ljavax/el/ExpressionFactory;
从错类型，大致可以分析得出，是因为缺少页面解析的原因。于是，再度查阅相关博客后，发现我们还需要再导入一个jsp的依赖

 		<dependency>
            <groupId>javax.servlet.jsp</groupId>
            <artifactId>jsp-api</artifactId>
            <version>2.2</version>
            <scope>provided</scope>
        </dependency>

至此，项目就可以正常访问了。