Что такое максимальное количество наборов параметров, которые могут быть добавлены в пакетное обновление PreparedStatement?

Question

мне нужно выполнить более 100000 операторы вставки, как следующий через JDBC:

Connection connection = datasource.getConnection(); 
String sql = "Insert Into Table (ColA, ColB) Values(?, ?)"; 
String[][] params = /*some array*/ 

PreparedStatement statement = connection.prepareStatement(sql); 
for(String[] var : params) 
{ 
    statement.setString(1, var[0]); 
    statement.setString(2, var[1]); 
    statement.addBatch(); 
}  

statement.executeBatch(); 

Я думал, что это будет общий вопрос, но я не могу найти какой-либо определенный ответ на этот вопрос. Это проект кросс-базы данных.

Answer 1

Я думаю, что единственным ограничением будет рабочее пространство и память на диске. см. это обсуждение: http://social.msdn.microsoft.com/Forums/en/sqldataaccess/thread/d16af627-d374-4ac2-ba6d-017729fe3206

Вы должны иметь возможность имитировать это с помощью единичного теста (JUnit). Управление этим путем транзакции также сэкономит вам большую головную боль, если он умрет на полпути.

Answer 2

Это, вероятно, не общий вопрос, потому что есть другие способы сделать это. Мое личное предложение состояло в том, чтобы создать хранимую процедуру, которая принимает подготовленные данные (например, XML-документ) и делает это в истинном пакетном формате.

Answer 3

Это будет зависеть от вашего параметра MAX_ALLOWED_PACKET в MySQL (если это то, что вы используете).

Максимальный размер пакета max для MySQL составляет 16 МБ на клиенте.

Вы можете обновить значение либо:

[mysqld] 
max_allowed_packet=64M 

или

mysql --max_allowed_packet=64M 

http://dev.mysql.com/doc/refman/5.5/en/packet-too-large.html

Конечно это если вы используете MySQL. Другие базы данных могут иметь разные настройки.

Answer 4

Это действительно зависит от нескольких факторов, в которых работает приложение. Поскольку вы в основном имеете дело со String, вы должны иметь возможность получить строку Integer.MAX_VALUE [всегда 2147483647 (2^31 - 1] по спецификации Java, максимальный размер массива, который класс String использует для внутреннего хранилище] или половину вашего максимального размера кучи (так как каждый символ имеет два байта), в зависимости от того, что меньше. Убедитесь, что в дизайне вашего приложения использование jvm в куче не превышает выделенное или вы получите ошибку в памяти.