JDBC-day03(BLOB类型字段,批量插入)

四:操作BLOB类型字段

1.MySQL BLOB类型

  • 在MySQL中,BLOB是一个二进制大型对象,是一个可以存储大量数据的容器,它能容纳不同大小的数据。可以用来存储图片,视频等

  • 插入BLOB类型的数据必须使用PreparedStatement,因为BLOB类型的数据无法使用字符串拼接写的。

  • MySQL的四种BLOB类型(除了在存储的最大信息量上不同外,他们是等同的)
    JDBC-day03(BLOB类型字段,批量插入)_第1张图片

  • 实际使用中根据需要存入的数据大小定义不同的BLOB类型。

  • 如果在指定了相关的Blob类型以后,还报错:xxx too large,那么在mysql的安装目录下,找my.ini文件加上如下的配置参数: max_allowed_packet=16M。同时注意:修改了my.ini文件之后,需要重新启动mysql服务。

2.向数据表customer中插入Blob类型的字段

public class BlobTest {
	@Test
	public void testInsert() throws Exception {
		Connection conn = null;                          
		PreparedStatement ps = null;
		try {
			conn = JDBC_Utils.getConnection();
			String sql = "insert into customers(name,email,birth,photo)values(?,?,?,?)";
			
			ps = conn.prepareStatement(sql);
			
			ps.setObject(1, "张杰");
			ps.setObject(2, "[email protected]");
			ps.setObject(3, "1992-09-08");
			FileInputStream is = new FileInputStream(new File("zhangjie.jpg"));
			//如果文件大于1MB,可能会报xxx too large错误,解决方法参照上面的解决方式
			ps.setBlob(4, is);
			
			ps.execute();
		} catch (Exception e) {
			e.printStackTrace();
		}finally {
			JDBC_Utils.closeResource(conn, ps);
		}
			
	}
}

注:在工作目录下要有zhangjie.jpg,否则会提示找不到文件

3.查询数据表customer中的Blob字段

	@Test
	public void testQuery(){
		Connection conn = null;      
		PreparedStatement ps = null;
		ResultSet rs = null; 
		InputStream is = null;
		FileOutputStream fos = null;
		try { 
			conn = JDBC_Utils.getConnection();
			String sql = "select id,name,email,birth,photo from customers where id = ?"; 
			ps = conn.prepareStatement(sql);
			ps.setInt(1,21);
			
			rs = ps.executeQuery(); 
			if(rs.next()) { 
				//使用列的别名来查找
				int id = rs.getInt("id");
				String name = rs.getString("name");
				String email = rs.getString("email"); 
				Date birth = rs.getDate("birth");
				
				Customer customer = new Customer(id,name,email,birth);
				System.out.println(customer); 
				
				//将Blob类型的字段下载下来,以文件的形式保留到本地
				Blob photo = rs.getBlob("photo");
				is = photo.getBinaryStream();
				fos = new FileOutputStream("singer.jpg");
				byte[] buffer = new byte[1024];
				int len;
				while((len = is.read(buffer)) != -1) { 
					fos.write(buffer, 0, len);
				}
			}
		} catch (Exception e) {
			e.printStackTrace();
		}finally {
			try { 
				if(is != null) 
					is.close(); 
			} catch (IOException e) {
				e.printStackTrace();
			}
			try { 
				if(fos != null) 
					fos.close();
			} catch (IOException e) {
				e.printStackTrace();
			}
			JDBC_Utils.closeResource(conn, ps, rs); 
		
		}
		
	}

五:批量插入

1.批量操作

当需要成批插入或者更新记录时,可以采用Java的批量更新机制,这一机制允许多条语句一次性提交给数据库批量处理。通常情况下比单独提交处理更有效率

JDBC的批量处理语句包括下面三个方法:

  • addBatch(String):添加需要批量处理的SQL语句或是参数;
  • executeBatch():执行批量处理语句;
  • clearBatch():清空缓存的数据

通常我们会遇到两种批量执行SQL语句的情况:

  • 多条SQL语句的批量处理;
  • 一个SQL语句的批量传参;

2.高效的批量插入

  • 使用PreparedStatement实现批量数据操作
  • update,delete本身就具有批量操作的效果
  • 此时的批量操作,主要指批量插入

例: 题目向goods表添加100万条数据

 CREATE TABLE goods(
 id INT PRIMARY KEY AUTO_INCREMENT,       
 NAME VARCHAR(25)
);
import java.sql.Connection;                                      
import java.sql.PreparedStatement;

import org.junit.Test;

import com.jdbc.util.JDBC_Utils;

public class InsertTest {
	//方式一:使用Statement批量插入数据(略)
	//方式二:使用PreparedStatement批量插入数据
	@Test
	public void testInsert1() {
		Connection conn = null;
		PreparedStatement ps = null;
		try {
			long start = System.currentTimeMillis();
			conn = JDBC_Utils.getConnection();
			String sql = "insert into goods(name)values(?)";
			ps = conn.prepareStatement(sql);
			for(int i = 1;i <= 1000000;i++) {
				ps.setObject(1,"name_" + i);
				
				ps.execute();
			}
			long end = System.currentTimeMillis();
			System.out.println("插入花费时间为:" + (end - start) + "毫秒");//1350941毫秒---8473毫秒---5857毫秒
		} catch (Exception e) {
			e.printStackTrace();
		}finally {
			JDBC_Utils.closeResource(conn, ps);
		}	
	}
}

方式三:使用addBatch(),executeBatch(),clearBatch()批量插入数据

  • mysql服务器默认关闭批处理,需要通过在url后添加?rewriteBatchedStatements=true来进行开启,不是mysqld的配置文件,是数据库连接的配置文件,即jdbc.properties

  • mysql驱动需要5.1.37及以上版本

    @Test
    public void testInsert2() {
    	Connection conn = null;                                                        
    	PreparedStatement ps = null;
    	try { 
    		long start = System.currentTimeMillis();
    		conn = JDBC_Utils.getConnection();
    		String sql = "insert into goods(name)values(?)"; 
    		ps = conn.prepareStatement(sql);
    		for(int i = 1;i <= 1000000;i++) {
    			ps.setObject(1,"name_" + i);
    			//1."攒"SQL
    			ps.addBatch();
    			if(i % 500 == 0) {
    				//2.执行batch
    				ps.executeBatch();
    				//3.清空batch
    				ps.clearBatch(); 
    			}
    		}
    		long end = System.currentTimeMillis();
    		System.out.println("插入花费时间为:" + (end - start) + "毫秒");
    	} catch (Exception e) {
    		e.printStackTrace();
    	}finally {
    		JDBC_Utils.closeResource(conn, ps);
    	}
    }
    
    
    

方式四:设置连接不允许自动提交数据

	@Test
	public void testInsert3() {
		Connection conn = null;          
		PreparedStatement ps = null;
		try {
			long start = System.currentTimeMillis();
			conn = JDBC_Utils.getConnection();
			//设置不允许自动提交,默认执行SQL,就自动提交到数据库
			conn.setAutoCommit(false);
			String sql = "insert into goods(name)values(?)";
			ps = conn.prepareStatement(sql);
			for(int i = 1;i <= 1000000;i++) {
				ps.setObject(1,"name_" + i);
				//1."攒"SQL
				ps.addBatch();
				if(i % 500 == 0) {
					//2.执行batch
					ps.executeBatch();
					//3.清空batch
					ps.clearBatch();
				}
			}
			//提交数据
			conn.commit();
			long end = System.currentTimeMillis();
			System.out.println("插入花费时间为:" + (end - start) + "毫秒");
		} catch (Exception e) {
			e.printStackTrace();
		}finally {
			JDBC_Utils.closeResource(conn, ps);
		}
	}


其中可能会出现不少的小问题,请多多包含
感谢大家的支持,关注,评论,点赞!
参考资料:尚硅谷_宋红康_JDBC核心技术

你可能感兴趣的:(Java,java,JDBC)