批量插入

1. 批量执行SQL语句

当需要成批插入或者更新记录时,可以采用Java的批量更新机制,这一机制允许多条语句一次性提交给数据库批量处理。通常情况下比单独提交处理更有效率

JDBC的批量处理语句包括下面三个方法:

  • addBatch(String):添加需要批量处理的SQL语句或是参数;
  • executeBatch():执行批量处理语句;
  • clearBatch():清空缓存的数据

通常我们会遇到两种批量执行SQL语句的情况:

  • 多条SQL语句的批量处理;
  • 一个SQL语句的批量传参;

2. 高效的批量插入

举例:向数据表中插入20000条数据

数据库中提供一个goods表。创建如下:

CREATE TABLE goods(id INT PRIMARY KEY AUTO_INCREMENT,NAME VARCHAR(20));
Connection conn = JDBCUtils.getConnection();Statement st = conn.createStatement();for(int i = 1;i <= 20000;i++){ String sql = "insert into goods(name) values('name_' + "+ i +")"; st.executeUpdate(sql);}

long start = System.currentTimeMillis();  Connection conn = JDBCUtils.getConnection();  String sql = "insert into goods(name)values(?)";PreparedStatement ps = conn.prepareStatement(sql);for(int i = 1;i <= 20000;i++){ ps.setString(1, "name_" + i); ps.executeUpdate();}  long end = System.currentTimeMillis();System.out.println("花费的时间为:" + (end - start));//82340JDBCUtils.closeResource(conn, ps);
/* * 修改1: 使用 addBatch() / executeBatch() / clearBatch() * 修改2:mysql服务器默认是关闭批处理的,我们需要通过一个参数,让mysql开启批处理的支持。 *    ?rewriteBatchedStatements=true 写在配置文件的url后面 * 修改3:使用更新的mysql 驱动:mysql-connector-java-5.1.37-bin.jar *  */@Testpublic void testInsert1() throws Exception{ long start = System.currentTimeMillis();   Connection conn = JDBCUtils.getConnection();   String sql = "insert into goods(name)values(?)"; PreparedStatement ps = conn.prepareStatement(sql);   for(int i = 1;i <= 1000000;i++){  ps.setString(1, "name_" + i);     //1.“攒”sql  ps.addBatch();  if(i % 500 == 0){   //2.执行   ps.executeBatch();   //3.清空   ps.clearBatch();  } }   long end = System.currentTimeMillis(); System.out.println("花费的时间为:" + (end - start));//20000条:625                                                                         //1000000条:14733     JDBCUtils.closeResource(conn, ps);}
/** 层次四:在层次三的基础上操作* 使用Connection 的 setAutoCommit(false)  /  commit()*/@Testpublic void testInsert2() throws Exception{ long start = System.currentTimeMillis();   Connection conn = JDBCUtils.getConnection();   //1.设置为不自动提交数据 conn.setAutoCommit(false);   String sql = "insert into goods(name)values(?)"; PreparedStatement ps = conn.prepareStatement(sql);   for(int i = 1;i <= 1000000;i++){  ps.setString(1, "name_" + i);     //1.“攒”sql  ps.addBatch();     if(i % 500 == 0){   //2.执行   ps.executeBatch();   //3.清空   ps.clearBatch();  } }   //2.提交数据 conn.commit();   long end = System.currentTimeMillis(); System.out.println("花费的时间为:" + (end - start));//1000000条:4978    JDBCUtils.closeResource(conn, ps);}

更多相关文章

  1. MySQL 5.7.9 服务无法启动-“NET HELPMSG 3534”的解决方法
  2. ES6 变量声明,箭头函数,数组方法,解构赋值,JSON,类与继承,模块化练习
  3. 浅谈Java中Collections.sort对List排序的两种方法
  4. Python list sort方法的具体使用
  5. python list.sort()根据多个关键字排序的方法实现
  6. android上一些方法的区别和用法的注意事项
  7. android实现字体闪烁动画的方法
  8. Android中dispatchDraw分析
  9. Android四大基本组件介绍与生命周期

随机推荐

  1. Android TextView显示文字过长时添加阴影
  2. 基于原生 EditText+span 实现的 Android
  3. android学习笔记(7)AbsoluteLayout+Frame
  4. Android本地化简称对应表
  5. 转贴 Android 开发之旅:又见Hello World!
  6. android GPS开发实践
  7. Android 滑动侧边栏(Sliding Menu)第一种实
  8. android的四层体系结构,基于mvc三层结构浅
  9. Android图片转换
  10. Android实现用代码简单安装和卸载APK的方