批量添加数据的方法

最新推荐文章于 2021-11-18 15:41:45 发布

xulong5000

最新推荐文章于 2021-11-18 15:41:45 发布

阅读量1.5k

点赞数

CC 4.0 BY-SA版权

分类专栏：大数据性能优化 SQL server 文章标签：大数据添加

本文链接：https://blog.youkuaiyun.com/xulong5000/article/details/90235981

SQL server 同时被 3 个专栏收录

27 篇文章

订阅专栏

性能优化

17 篇文章

订阅专栏

大数据

9 篇文章

订阅专栏

本文介绍了一种使用SqlBulkCopy批量导入大量数据至数据库的方法，通过将DataTable数据直接写入目标表，显著提高了数据导入效率。文章详细展示了如何映射源表和目标表的字段，并设置了批处理大小和超时时间，确保了操作的稳定性和性能。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

在一些大量数据导入数据库的情况下使用，性能提高很大，需要注意几点

一：方法的参数是一个datatable。这个表的字段结构必须要实际库中表的结构一致，否则添加失败。

二：需要指定表名。tablename就是表名

/// <summary>
        /// 批量插入文件流水数据
        /// </summary>
        /// <param name="dt"></param>
        /// <returns></returns>
        public int BulkCopyDataToDB(DataTable dtItems)
        {
            try
            {
                string tableName = "LV_OrderList";
                //插入原始数据到数据库中
                using (SqlBulkCopy bulkCopy = new SqlBulkCopy(ConfigurationManager.ConnectionStrings["YekCMS"].ToString()))
                {
                    bulkCopy.DestinationTableName = tableName;//要插入的表的表名
                    bulkCopy.ColumnMappings.Add("orderId", "[orderId]");
                    if (dtItems.Columns.Contains("arg1"))
                    {
                        bulkCopy.ColumnMappings.Add("arg1", "[arg1]");
                    }
                    if (dtItems.Columns.Contains("arg2"))
                    {
                        bulkCopy.ColumnMappings.Add("arg2", "[arg2]");
                    }
                    bulkCopy.ColumnMappings.Add("categoryName", "[categoryName]");
                    bulkCopy.ColumnMappings.Add("productId", "[productId]");
                    bulkCopy.ColumnMappings.Add("productName", "[productName]");
                    bulkCopy.ColumnMappings.Add("oughtAmount", "[oughtAmount]");
                    bulkCopy.ColumnMappings.Add("paymentStatus", "[paymentStatus]");
                    bulkCopy.ColumnMappings.Add("productType", "[productType]");
                    bulkCopy.ColumnMappings.Add("buName", "[buCode]");
                    bulkCopy.ColumnMappings.Add("orderStatus", "[orderStatus]");
                    bulkCopy.ColumnMappings.Add("mediaId", "[mediaId]");
                    bulkCopy.ColumnMappings.Add("comm_type", "[comm_type]");
                    bulkCopy.ColumnMappings.Add("comm_status", "[comm_status]");
                    bulkCopy.ColumnMappings.Add("comm_rate", "[comm_rate]");
                    bulkCopy.ColumnMappings.Add("commission", "[commission]");
                    bulkCopy.ColumnMappings.Add("order_amout", "[order_amout]");
                    bulkCopy.ColumnMappings.Add("balance_status", "[balance_status]");
                    bulkCopy.ColumnMappings.Add("distribution_source", "[distribution_source]");
                    bulkCopy.ColumnMappings.Add("createDate", "[createDate]");
                    bulkCopy.BulkCopyTimeout = 600;
                    bulkCopy.BatchSize = 10000;
                    bulkCopy.WriteToServer(dtItems);
                }

                return 1;
            }
            catch
            {
                return 0;
            }
        }