Java大批量数据导入到Oracle…

最新推荐文章于 2023-10-26 10:01:24 发布

置顶惜_月

最新推荐文章于 2023-10-26 10:01:24 发布

阅读量3.7k

点赞数

CC 4.0 BY-SA版权

分类专栏： Java Oracle 文章标签： oracle 数据存储大数据量

本文链接：https://blog.youkuaiyun.com/hlf1203/article/details/14167103

Java 同时被 2 个专栏收录

29 篇文章

订阅专栏

Oracle

11 篇文章

订阅专栏

本文介绍了一种使用JDBC批处理操作进行大批量数据快速导入的方法，通过禁用自动提交并批量执行SQL插入语句，显著提高了数据导入效率。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

近来在做一些大批量数量导入数据库的操作，学习了一种简单的方式，与大家分享交流：

http://saluya.iteye.com/blog/1420821查看MyEclipse内存的，大家参见一下。

我是利用JDBC自己的Batch操作来控制插入条数，然后实现大批量快速导入数据：

下面是普通插入方式：

public boolean insert(Code c) {
       Stringsql = "insert into testCode values(?,?)";
      conn = ConnectionUtil.getConnection();
      try {
         psmt = conn.prepareStatement(sql);
          psmt.setString(1,c.getAcaCode());
         psmt.setString(2, c.getRefCode());
    int a =psmt.executeUpdate();
   if(a==1){
    return true;
    }
  } catch (SQLException e){
   e.printStackTrace();
  }finally{
   try {
    psmt.close();
    conn.close();
   } catch(SQLException e) {
    e.printStackTrace();
   }
  }
  return false;
}

这种方式，插入数据库不超过1000条还好，但是如果数据量超过100万，就不行了，几个小时可能都没执行完成，所以下面的方式将超乎想象的缩短时间：

     public boolean insert1(String[] arr1,String[]arr2) {
  String sql = "insert intotestCode values(?,?)";
  conn =ConnectionUtil.getConnection();
  try {
    conn.setAutoCommit(false);
   psmt = conn.prepareStatement(sql);
    for(int i = 0;i
    psmt.setString(1, arr1[i]);
    psmt.setString(2, arr2[i]);
    psmt.addBatch();
    if(i00==0||i==arr1.length-1){
     psmt.executeBatch();
     conn.commit();
    }
   }
   return true;
  } catch (SQLException e){
   try {
    conn.rollback();
   } catch(SQLException e1) {
    //TODO Auto-generated catch block
    e1.printStackTrace();
   }
   e.printStackTrace();
  }finally{
   try {
    if(psmt!=null){
     psmt.close();
    }
    if(conn!=null){
     conn.close();
    }
   } catch(SQLException e) {
    e.printStackTrace();
   }
  }
  return false;
}