HQL - Как копировать/перемещать данные в нескольких разделах из одной таблицы в другую

Question

У меня есть таблица (main_table), которая разделена на разделы и хранит историю записей с флагом, чтобы указать, удалена ли запись или нет. У меня есть другая таблица9del_table), которая имеет ту же схему, что и main_table, но хранит только удаленные записи за день (delete_falg = 'Y').

В качестве процесса мне необходимо ежедневно перемещать записи, доступные в del_table, в main_table. Я пытаюсь написать команду LOAD DATA INPATH, которая может перемещать данные, доступные в соответствующих разделах del_table, в соответствующие разделы main_table, но ни одна из моих попыток не работает. Пожалуйста, дайте мне знать, можно ли достичь этого, используя команду LOAD DATA INPATH, с указанием отдельных разделов?

Я пытаюсь ниже шагов, но это не удается во 2-й шаг: установить нестрогое улья свойство:

НАГРУЗКИ INPATH DATA '...../del_table /' в таблице main_table раздела (partition_col_name)

Answer 1

Вам нужно использовать данные займа в пути?

Если вы не можете сделать следующее https://cwiki.apache.org/confluence/display/Hive/Tutorial#Tutorial-DynamicpartitionInsert

Это регенерировать весь стол ежедневно, хотя.

Answer 2

Попробуйте установить это свойство первым:

set hive.exec.dynamic.partition.mode=nonstrict; 

затем запустить команду:

LOAD DATA INPATH '...../del_table/' into table main_table partition(partition_col_name) 

Для получения дополнительной информации Вы можете обратиться к этой ссылке: Partition