Эффективность обновлений улей (версия 0.14)

Question

Как Hive эффективно обрабатывает обновления на столбцах, которые не разделены?

Предположим, я хочу обновить строку для конкретной транзакции (не секционированной), как Hive обработает ее внутренне. Из того, что я понимаю, Hive сначала начнет поиск этого (что медленно), а затем обновит этот конкретный раздел (если есть), где хранится эта конкретная строка, содержащая этот транзакт. Даже если это предоставит пользователю абстракцию для обновления данных, но действительно ли будет эффективно выполнять множество обновлений?

Answer 1

Обновление уровня строки может быть неэффективным в hadoop, поскольку hasoop предназначен для большой обработки данных. Однако из версии Hive версии 0.14 поддерживаются обновления уровня строк в таблицах Hive, поддерживающих ACID. Ознакомьтесь с учебным пособием по улусу для получения дополнительной информации о том, как реализовать обновления уровня строк. https://cwiki.apache.org/confluence/display/Hive/LanguageManual+DML#LanguageManualDML-Update