Удаление записей из Oracle 11g с помощью JDBC

Question

Мне нужно удалить 10 000 записей из таблицы, содержащей 9 миллионов записей. Идентификаторы, которые должны быть удалены, будут получены из сложного запроса и сохранены в коллекции Java.

У меня есть 3 подхода к осуществлению этого

1) Создайте подготовленное заявление, и добавить 10000 заявлений в партии и выполнить его.

заявление будет выглядеть следующим образом

Delete from <table_name> where id=?; 

2) Написать в «» запрос, а не использовать «=» в пакете.

При этом 10 000 идентификаторов могут быть созданы как значения, разделенные запятой, в Java-коде и добавлены в запрос. Или 10000 идентификаторов вставляются во временную таблицу и делают выбор из этой таблицы в подзапросе.

Delete from <table_name> where id in (<CSV>); 
       or 
Delete from <table_name> where id in (select id from <temp_table>); 

В таблице нет ограничений и указателей. И я не могу добавить его, потому что я работаю над существующей таблицей.

Первый вариант требует времени для завершения. Он работал в течение 15 часов и до сих пор не завершен.

Answer 1

ГДЕ ... В (...) - это путь.

Предложение IN может ссылаться на временную таблицу, которую вы заполнили (ваша оригинальная идея), или может содержать любое выбранное (фиксированное) число? параметры. Это уменьшит количество обращений в db на коэффициент, равный выбранному числу, но не обязательно одному. Идите по своей коллекции и обработайте ее кусками.

Answer 2

Попробуйте вот так.

Delete from <table_name> where 
    id in (1, 2, 3, ... ,1000) 
    or id in (1001, 1002, ... , 2000) 
    .... 

Answer 3

У вас первая версия имеет предел 1000 значений и имеет тенденцию не работать хорошо. Второй подход может работать лучше, но вы должны иметь глобальную временную таблицу и заполнять ее, это дополнительный шаг.

Вы можете преобразовать свою коллекцию Java в коллекцию Oracle. Вы можете создать свой собственный тип таблицы для этого, но есть встроенные, такие как ODCINUMBERLIST, которые вы можете использовать здесь. Вы можете считать, что в качестве таблицы собираете экспрессию.

Детали могут незначительно отличаться в зависимости от типа коллекции Java, но план есть что-то вроде:

ArrayDescriptor aDesc = ArrayDescriptor.createDescriptor("SYS.ODCINUMBERLIST", 
    conn); 
oracle.sql.ARRAY oraIDs = new oracle.sql.ARRAY(aDesc, conn, yourJavaCollectinOfIDs); 

cStmt = (OracleCallableStatement) conn.prepareCall(
    "Delete from <table_name> 
    where id in (select column_value from table(?))"); 
cStmt.setArray(1, oraIDs); 
cStmt.execute(); 

Если он уже не простой массив, Вам нужно будет преобразовать коллекцию Java в массив в вызов; например если вы используете ArrayList под названием yourArrayList, вы могли бы сделать:

oracle.sql.ARRAY oraIDs = new oracle.sql.ARRAY(aDesc, conn, yourArrayList.toArray()); 

Вы по-прежнему страдают от отсутствия первичного ключа или индекса, но это даст Oracle лучший шанс, чтобы оптимизировать его, чем список CSV (или несколько списков CSV OR'd вместе, так как у вас более 1000 идентификаторов).

Answer 4

Вы не должны использовать первый вариант, выполнив 10000 операторов из вашего java-кода.

Создание временной таблицы - хорошая идея.Но большую часть времени вы не можете иметь предложение IN (...) с более чем 1000 наименованиями. Таким образом, ваш подход с CSV может не сработать.

Вы можете пойти на

Delete from <table_name> where id in (select id from <temp_table>); 

, но этот путь не оптимизирован либо. Было бы лучше, чтобы изменить delete заявления в этом:

Delete from <table_name> m where exists (select id from <temp_table> t where m.id = t.id); 

Но если вы делаете такие операции часто настоятельно рекомендуется добавить некоторые ограничения и индексы к вам <table_name> и даже к вашим <temp_table>. Это увеличит время выполнения вашей операции, как очарование.