Использование SqlBulkInsert в производственных приложениях

Question

В настоящее время мы разрабатываем приложение, которое генерирует свыше 5-10 000 строк данных в конкретной таблице для каждого сеанса пользователя. В настоящее время мы используем текстовые команды sql для вставки каждой строки данных за раз, поэтому операция сохранения может занять до минуты. Мы играем с использованием SqlBulkInserts и видим, что время сокращается до менее 500 мс. Кто-нибудь возражает против использования SqlBulkInserts в производственном приложении, где многие пользователи будут использовать эту систему?

Answer 1

Я никогда не сталкивался с проблемой с SqlBulkCopy с набором опций tableLock и другим пользователем, который был заблокирован из-за него. Опция TableLock повышает эффективность вставки из того, о чем говорили многие люди, и просто ее использование показало мне.

Мой типичный метод:

public void Bulk(String connectionString, DataTable data, String destinationTable) 
{ 
    using (SqlConnection connection = new SqlConnection(connectionString)) 
    { 
     using (SqlBulkCopy bulkCopy = 
      new SqlBulkCopy 
      (
      connection, 
      SqlBulkCopyOptions.TableLock | 
      SqlBulkCopyOptions.FireTriggers | 
      SqlBulkCopyOptions.UseInternalTransaction, 
      null 
      )) 
     { 
      bulkCopy.BatchSize = data.Rows.Count; 
      bulkCopy.DestinationTableName = String.Format("[{0}]", destinationTable); 
      connection.Open(); 
      bulkCopy.WriteToServer(data); 
     } 
    } 
} 

Answer 2

Я думаю, что это правильный путь, если вашему приложению действительно нужно произвести столько записей за сеанс.

Answer 3

Перед реализацией с использованием SqlBulkInsert, попробуйте создать INSERT запрос динамически выглядеть следующим образом:

insert into MyTable (Column1, Column2) 
select 123, 'abc' 
union all 
select 124, 'def' 
union all 
select 125, 'yyy' 
union all 
select 126, 'zzz' 

Это будет только один вызов базы данных, которая должна работать гораздо быстрее. Для конкатенации строки SQL убедитесь, что вы используете класс StringBuilder.