Использование нескольких уровней разделов в Hive

Question

Мне интересно, возможно ли следующее. У меня есть данные в Hive, разделенные по дате и журналу, но у меня также есть данные, которые не попадают под конкретный регистратор.

например.

date=2012-01-01/logger=1/part000 
date=2012-01-01/logger=1/part001 
date=2012-01-01/logger=2/part000 
date=2012-01-01/logger=2/part001 
date=2012-01-01/part000 

Я создал таблицу:

create table mytable (
    ... 
) 
partitioned by (date string, logger int) 
.... 
; 

и добавлены разделы:

alter table mytable add partition (date='2012-01-01', logger=1) location '/user/me/date=2012-01-01/logger=1/'; 
... 

Я могу запрашивать данные в перегородках, но я не могу запрашивать данные в файле date=2012-01-01/part000. Можно ли включить этот файл без его соответствия разделу?

Спасибо

Answer 1

Аарон, как вам удалось получить такую ​​структуру? Обычно, если отсутствует ключ раздела, то в этом случае создается раздел под названием __HIVE_DEFAULT_PARTITION__.