У нас есть две системы: одна автономная система (производительность здесь не важна), где задания MapReduce запускаются в кластере HBase. Другое - это онлайн-система (здесь очень важна функция Performace), где API читается из того же кластера HBase. Но поскольку задания MapReduce работают на одном кластере, в онлайн-системе возникают проблемы с производительностью. Поэтому мы пытаемся настроить отдельный кластер HBase для автономной системы, который является репликацией нескольких имен фамилий из исходного кластера. Итак, на источнике запускается тяжелая работа MapReduce. На реплицированном кластере работает только онлайн-система, обеспечивающая максимальную производительность. Мой вопрос здесь :: Нельзя использовать функцию Snap shot в HBase для того, чтобы сделать то же самое? Я также хотел знать, в чем разница между ними?Репликация против моментального снимка в HBase
0
A
ответ
1
Если вы используете функцию моментального снимка для mapreduce, он также будет тратить процессор, память и диск io на узлы кластера hbase. Таким образом, если диск io или cpu является узким местом для вас, лучшим решением является отдельный кластер для работы с mapreduce.
+0
Да, диск io или cpu беспокоит меня. мы выбираем другой кластер. Похоже ли, если мы используем Snapshot для загрузки данных в новый кластер, также будут проблемы с производительностью в исходном кластере? – sai
Смежные вопросы
- 1. Кэширование против моментального снимка в SSRS
- 2. AVCaptureVideoPreviewLayer: снятие моментального снимка
- 3. Надежность моментального снимка
- 4. CloudFormation без моментального снимка
- 5. Выполнение моментального снимка UICollectionViewCell
- 6. Реализация моментального снимка в FRP
- 7. Выполнение моментального снимка среды ruby
- 8. EXC_BAD_ACCESS вокруг трамплина-моментального снимка
- 9. Что такое функция моментального снимка?
- 10. EBS - Восстановление из моментального снимка
- 11. Изменить свойство моментального снимка Softlayer
- 12. GlusterFS ошибка создания моментального снимка
- 13. Восстановление тома из моментального снимка
- 14. Отображение моментального снимка видеоролика PHP
- 15. Как создать патч из снимка моментального снимка в чемодане?
- 16. разностных между Hbase копией и командой снимка
- 17. Отключить «Сохранение моментального снимка» в NetBeans
- 18. Вопросы об использовании моментального снимка в Maven2
- 19. IcCube - местоположение моментального снимка в общей папке
- 20. Скорость моментального снимка управления в Matlab
- 21. Ошибка MVFS в представлении моментального снимка
- 22. Создание моментального снимка в распределенной архитектуре
- 23. Создание моментального снимка виртуальной машины в Azure
- 24. Как отменить операцию моментального снимка в softlayer?
- 25. Пометка текущего моментального снимка артефакта в artifactory
- 26. Какова функция моментального снимка в Кассандре?
- 27. Дизайн базы данных для моментального «моментального снимка» данных?
- 28. Репликация HBase в псевдораспределенном режиме
- 29. Импорт снимка Hbase из HDFS
- 30. Временная метка моментального снимка SSRS 2008
Этот [статья из Cloudera] (http://blog.cloudera.com/blog/2013/03/introduction-to-apache-hbase-snapshots/) содержит подробные снимки, а также перечисляет ваш конкретный сценарий (последний один по списку вариантов использования). Надеюсь, это поможет – vmachan