2016-07-29 4 views
0

Нам нужен КЭП двигатель, который может работать на больших наборов данных, так что я имел взгляд через альтернативы, как FLiNK, Ignite и т.д.реализация Apache Ignite СЕР с большими наборами данных

Когда я был на Ignite, я увидел, что выполнение запроса апи воспламенить в недостаточно подходит для работы над большими данными. Причина в том, что многие данные не могут быть сохранены в кеш (недостаточный объем памяти: требуется 2 ТБ). Я просмотрел сквозную и сквозную запись, но полезная нагрузка данных (не ключ) не запрашивается с Predicates (для ex SQLPredicate).

Мой вопрос: Я что-то пропустил или это действительно так?

Thx

ответ

1

Ignite - это встроенная система памяти по дизайну. Хранилище кешей (чтение/запись) позволяет хранить данные на диске, но запросы обрабатываются только с данными в памяти.

, что многие данные не могут быть сохранены в кэше (недостаточный объем памяти: требуется 2 ТБ)

Почему нет? Ignite - это распределенная система, возможно построить кластер с более чем 2 ТБ объединенной оперативной памяти.

+0

Он сгруппирован, я знаю, но нехватка памяти зависит от финансовых ограничений. Я думаю, что это не хорошее решение, такое как Apache Flink в этом состоянии. – Neron

Смежные вопросы