• java向数据库批量插入数据


    话不多说,代码附上。

        // 配置文件获取数据库信息
        @Value("${spring.datasource.url}")
        private String url;
        @Value("${spring.datasource.driver-class-name}")
        private String driver;
        @Value("${spring.datasource.username}")
        private String user;
        @Value("${spring.datasource.password}")
        private String password;
    public void batcheInsert(List<Map<String,Object>>listMap, String tableName){
            try {
                String sql = "";
                String sqlStr1 = "INSERT INTO "+tableName+" (";
                String sqlStr2=  ") VALUES (";
                String sqlStr3 = ")";
                String sqlKey = "";
                String sqlValue = "";
                for (Object key: listMap.get(0).keySet() ) {
                    sqlKey+= key + ",";
                    sqlValue += "?,";
                }
                sqlKey = sqlKey.substring(0,sqlKey.length() -1);
                sqlValue = sqlValue.substring(0,sqlValue.length() -1);
                sql = sqlStr1 + sqlKey + sqlStr2 + sqlValue + sqlStr3;
                logger.info("拼接的insert into SQL:" + sql);
    
                Connection conn = getConnection();
                conn.setAutoCommit(false);
                //构造预处理statement
                PreparedStatement pst = conn.prepareStatement(sql);
                int count = 0;
                int index = 1;
                for(int i = 1;i <= listMap.size();i++){
                    for (Object val: listMap.get(i-1).values() ) {
                        pst.setString((index++),nullToNull(val));
                    }
                    index = 1;
                    pst.addBatch();
                    //每10000次提交一次
                    if(i % 10000 == 0){//可以设置不同的大小;
                        ++count;
                        pst.executeBatch();
                        conn.commit();
                        pst.clearBatch();
                    }
                }
                // 最后插入不足1w条的数据
                pst.executeBatch();
                conn.commit();
                logger.info("批次提交次数:" + ++count);
                pst.close();
                conn.close();
            } catch (SQLException e) {
                e.printStackTrace();
            }
        }
    public Connection getConnection() {//建立返回值为Connectiong的方法
            Connection con = null;//声明Connection对象
            try {//加载数据库驱动类
                Class.forName(driver);
                System.out.println("数据库驱动加载成功");
            } catch (ClassNotFoundException e) {
    
                e.printStackTrace();
            }
            try {//通过访问数据库的URL获取数据库连接对象
                con = DriverManager.getConnection(url, user, password);
                System.out.println("数据库连接成功");
    
            } catch (SQLException e) {
    
                e.printStackTrace();
            }
            return con;//按方法要求返回一个Connectiong对象
        }
  • 相关阅读:
    Xpath语法与lxml库的用法
    Selenium--使用参考
    PhantomJS的替代品--无头浏览器(Headless Chrome)
    为什么只有一个元素的tuple要加逗号?
    反爬利器--设置代理服务器
    LeetCode 221. 最大正方形 | Python
    LeetCode 572. 另一个树的子树 | Python
    LeetCode 98. 验证二叉搜索树 | Python
    LeetCode 45. 跳跃游戏 II | Python
    LeetCode 25. K 个一组翻转链表 | Python
  • 原文地址:https://www.cnblogs.com/LittleMaster/p/13092456.html
Copyright © 2020-2023  润新知