第25章 JDBC核心技术第5节:批量插入分页查询

5.1 批量执行SQL语句

当需要成批插入或者更新记录时,可以采用Java的批量更新机制,这一机制允许多条语句一次性提交给数据库批量处理。通常情况下比单独提交处理更有效率

JDBC的批量处理语句包括下面三个方法:

  • addBatch(String):添加需要批量处理的SQL语句或是参数;
  • executeBatch():执行批量处理语句;
  • clearBatch():清空缓存的数据

通常我们会遇到两种批量执行SQL语句的情况:

  • 多条SQL语句的批量处理;
  • 一个SQL语句的批量传参;

5.2 高效的批量插入

举例:向数据表中插入20000条数据

  • 数据库中提供一个goods表。创建如下:
CREATE TABLE goods(
id INT PRIMARY KEY AUTO_INCREMENT,
NAME VARCHAR(20)
);

5.2.1 实现层次一:使用Statement

Connection conn = JDBCUtils.getConnection();
Statement st = conn.createStatement();
for(int i = 1;i <= 20000;i++){
	String sql = "insert into goods(name) values('name_' + "+ i +")";
	st.executeUpdate(sql);
}

5.2.2 实现层次二:使用PreparedStatement

long start = System.currentTimeMillis();
Connection conn = JDBCUtils.getConnection();
String sql = "insert into goods(name)values(?)";
PreparedStatement ps = conn.prepareStatement(sql);
for(int i = 1;i <= 20000;i++){
	ps.setString(1, "name_" + i);
	ps.executeUpdate();
}
long end = System.currentTimeMillis();
System.out.println("花费的时间为:" + (end - start));//82340
JDBCUtils.closeResource(conn, ps);

5.2.3 实现层次三

/*
 * 修改1:使用 addBatch() / executeBatch() / clearBatch()
 * 修改2:mysql服务器默认是关闭批处理的,我们需要通过一个参数,让mysql开启批处理的支持。
 * 		 ?rewriteBatchedStatements=true 写在配置文件的url后面
 * 修改3:使用更新的mysql 驱动:mysql-connector-java-5.1.37-bin.jar
 * 
 */
@Test
public void testInsert1() throws Exception{
	long start = System.currentTimeMillis();
	Connection conn = JDBCUtils.getConnection();
	String sql = "insert into goods(name)values(?)";
	PreparedStatement ps = conn.prepareStatement(sql);
	for(int i = 1;i <= 1000000;i++){
		ps.setString(1, "name_" + i);
		//1.“攒”sql
		ps.addBatch();
		if(i % 500 == 0){
			//2.执行
			ps.executeBatch();
			//3.清空
			ps.clearBatch();
		}
	}
	long end = System.currentTimeMillis();
	System.out.println("花费的时间为:" + (end - start));//20000条:625  1000000条:14733  
	JDBCUtils.closeResource(conn, ps);
}

5.2.4 实现层次四

/*
* 层次四:在层次三的基础上操作
* 使用Connection 的 setAutoCommit(false)  /  commit()
*/
@Test
public void testInsert2() throws Exception{
	long start = System.currentTimeMillis();
	Connection conn = JDBCUtils.getConnection();
	//1.设置为不自动提交数据
	conn.setAutoCommit(false);
	String sql = "insert into goods(name)values(?)";
	PreparedStatement ps = conn.prepareStatement(sql);
	for(int i = 1;i <= 1000000;i++){
		ps.setString(1, "name_" + i);
		//1.“攒”sql
		ps.addBatch();
		if(i % 500 == 0){
			//2.执行
			ps.executeBatch();
			//3.清空
			ps.clearBatch();
		}
	}
	//2.提交数据
	conn.commit();
	long end = System.currentTimeMillis();
	System.out.println("花费的时间为:" + (end - start));//1000000条:4978 
	JDBCUtils.closeResource(conn, ps);
}

5.3 分页查询

首先编写分页的sql语句:

select * from students limit 20,10;
-- 第1页 0
-- 第2页 10
-- 第3页 20
-- 第n页 (n-1)*10
package com.hanker.jdbc2;

import java.sql.Connection;
import java.sql.PreparedStatement;
import java.sql.ResultSet;

import com.hanker.jdbc1.DBUtil;

/**
 * 分页查询,数据库的表数据量大的时候,不能直接取出所有数据,一次读取一页数据,当用户点击下一页再查询下一页数据;
 * 不是一次把数据库表的所有数据都查询出来, 如果500万行数据. 结合我们前面学习的数据库知识,
 * 加索引,特别是where条件的列, 唯一索引,主键索引,hash索引,复合索引(最左前缀原则);
 * 注意模糊查询注意%的位置,否则索引不起作用.
 */
public class Demo2 {
	public static void main(String[] args) {
		int pageNo = 1;  //第几页
		int pageSize  =10; //每页多少行
		pageSelect(pageNo,pageSize);
	}

	public static void pageSelect(int pageNo,int pageSize) {
		//每页显示10行数据, 查询第二页数据
		Connection conn = null;
		PreparedStatement stmt = null;
		ResultSet rs = null;
		try {
			conn  = DBUtil.getConnection();
			String sql = "select ksh,xm,xb,csrq,zymc,cc from students limit ?,?";
			stmt = conn.prepareStatement(sql);
			stmt.setInt(1, (pageNo-1)*pageSize);
			stmt.setInt(2, pageSize);
			rs = stmt.executeQuery();
			System.out.println("考生号\t姓名\t性别\t生日\t专业\t学历");
			while(rs.next()) {
				String ksh = rs.getString("ksh");
				String xm = rs.getString("xm");
				String xb = rs.getString("xb");
				String csrq = rs.getString("csrq");
				String zymc = rs.getString("zymc");
				String cc = rs.getString("cc");
				System.out.println(ksh+"\t"+xm+"\t"+xb+"\t"+csrq+"\t"+zymc+"\t"+cc);
			}
		} catch (Exception e) {
			e.printStackTrace();
		}finally {
			DBUtil.closeAll(rs, stmt, conn);
		}
	}
}
发布了91 篇原创文章 · 获赞 43 · 访问量 14万+

猜你喜欢

转载自blog.csdn.net/kongfanyu/article/details/105206790