Я хочу добавить уникальное значение в таблицу hive, когда я вхожу в какую-либо запись, это значение не должно повторяться во всей таблице улья. Я не могу найти никаких решений или каких-либо функций для этого. В моем случае я хочу ввести запись в улей с помощью свиньи latin. Пожалуйста помоги.Добавить уникальное значение в таблице hive
ответ
HIVE не предоставляет базу данных РСУБД, такую как ограничения.
Предлагаемый подход с использованием PIG Script представлен ниже. 1. Загрузить данные 2. Применить DISTINCT к данным 3. Хранить данные в месте 4. Создавать таблицу внешнего улья в том же месте.
Шаг 3 и 4 можно комбинировать, если вы можете использовать HCATALOG, который позволяет вам напрямую хранить данные в таблице Hive.
вы можете поделиться ссылкой? – animal
[1]: https://pig.apache.org/docs/r0.7.0/piglatin_ref2.html#DISTINCT [2]: https://hive.apache.org/javadocs/hcat-r0.5.0/loadstore .html –
Как это относится к запросу OP? –
вы посмотрите на это? https://github.com/manojkumarvohra/hive-hilo, как представляется, обеспечивает способ генерации порядковых номеров в улье с использованием алгоритма hi/lo
Можете ли вы привести примеры? Это поможет мне лучше понять это. – animal
- 1. Добавить только уникальное значение
- 2. Postgres добавить уникальное ограничение
- 3. счетчика уникальное значение во всей таблице [MySQL]
- 4. Как добавить уникальное значение в RDD spark
- 5. Уникальное генерирование ключей в Hive/Hadoop
- 6. INSERT в таблице Hive
- 7. Поиск уникальных значений в таблице hive
- 8. Уникальное значение одного столбца
- 9. Laravel Validator уникальное значение
- 10. Уникальное значение сочетание в MySQL
- 11. Extjs добавить уникальное значение combobox для хранения
- 12. Neo4j добавить уникальное значение для массива недвижимости
- 13. mySQL выбрать отдельный и добавить уникальное значение
- 14. Как добавить значение в таблице
- 15. Уникальное значение в таблице с использованием EF4 и блокировки
- 16. Ссылка на MySQL не уникальное значение в родительской таблице
- 17. Удалить столбец в таблице hive
- 18. Уникальное значение в excel
- 19. Как вставить и получить десятичное значение в таблице hive
- 20. Как сделать обновление в таблице Hive?
- 21. Hive, SQL: возвращает значение COUNT из NULL для каждого из 100 + столбцов в таблице Hive
- 22. MYSQL - получить уникальное минимальное значение
- 23. получить уникальное значение из таблицы
- 24. Ссылка на уникальное поле в другой таблице
- 25. Как добавить только уникальное значение в массив JavaScript?
- 26. Уникальное значение для каждой кнопки
- 27. Perl: уникальное значение Grep
- 28. Mongodb уникальное значение
- 29. Уникальное значение столбца в django
- 30. Уникальное значение в непервичном поле
Сколько у вас контроля над вставками? знаете ли вы максимальный размер партии? –
@DuduMarkovitz за один раз я paarsing только один файл. – animal
Любые причины не использовать 'row_number() over()'? –