Поддерживает ли Presto Hive SerDe?

Я установил Presto, и он работал очень хорошо с CDH4. Проблема в том, что у меня таблица Hive была определена с помощью ROW FORMAT SERDE. И Престо, похоже, не может его использовать. Сообщение об ошибке выглядит следующим образом:Поддерживает ли Presto Hive SerDe?

Query 20131119_061350_00003_bpk58 failed: MetaException(message:org.apache.hadoop.hive.serde2.SerDeException SerDe myquery.hive.serde.JSONSerDe does not exist)

Итак, поддерживается ли SerDe в Presto?

Большое спасибо.

источник

2013-11-19 Yellow Duck

вам нужно добавить json-serde-1.1.7-jar-with-dependencies.jar в ваш путь к классу.

источник

2013-11-24 22:14:01

Вы имели в виду SerDe, я написал? В противном случае, можете ли вы немного объяснить, как фондовый json-serde-1.1.7-jar-with-dependencies.jar будет понимать мое настроенное чтение JSON? –

Добавить SerDe в каталог plugin/hive-cdh4 в каталоге установки.

источник

2013-11-25 18:50:50

Итак, Presto сможет загрузить его автоматически? Большое спасибо. –

Да, плагин Hive автоматически получит доступ к любым банкам в своем каталоге (обратите внимание, что это должен быть каталог плагина, а не основной каталог lib). –

С января 2016 года я не смог загрузить Serde таким образом на EMR Persto-Sandbox (разъем hive-hadoop2 и serde - com.bizo.hive.serde.csv.CSVSerde). Я закончил использовать запас CSV serde – etov

Поддерживает ли Presto Hive SerDe?

ответ

Смежные вопросы