Mysql_JDBC OutOfMemoryError

via: http://hi.baidu.com/cbngcimzsxbfiud/item/845d523b85d67cffdf22210b

 

MySQL的JDBC OutOfMemoryError: Java heap space异常
        MySql数据库通过JDBC对大表进行查询时抛出java.lang.OutOfMemoryError: Java heap space异常。这是因为默认情况下，MySQL的JDBC驱动会一下子把所有row都读取下来，这在一般情况下是最优的，因为可以减少Client-Server的通信开销。但是这样也有一个问题，当数据库查询结果很大时，特别当不能全部放进内存时，就会产生性能问题。

本来，JDBC api里在Connection、Statement和ResultSet上都有设置fetchSize的方法，但是MySQL的JDBC驱动都不支持，无论你怎么设fetchSize，ResultSet都会一次性从Server读取数据。在MySQL的官方论坛上也有多个这样的问题，总结一下解决办法如下：

1.MySQL版本在5.0以上，MySQL的JDBC驱动更新到最新版本(至少5.0以上)
2.Statement一定是TYPE_FORWARD_ONLY的，并发级别是CONCUR_READ_ONLY(即创建Statement的默认参数)
3.以下两句语句选一即可：
    1).statement.setFetchSize(Integer.MIN_VALUE);
    2).((com.mysql.jdbc.Statement)stat).enableStreamingResults();

这样会一行一行地从Server读取数据，因此通信开销很大，但内存问题可以解决。官方的说法是不支持fetchSize不是MySQL的JDBC驱动的问题，而是MySQL本身就不支持。而商用数据库Oracle或DB2都是支持fetchSize的，从这里也可以看出两者的考量不同。
考虑到应用程序利用JDBC跨数据库的特性可以,通过判断mySql连接特殊处理:
                if(conn.getClass().getName().indexOf("mysql")>0){
                 //com.mysql.jdbc.Driver
                  stmt.setFetchSize(Integer.MIN_VALUE);
                }