Elasticearch массовый импорт из mongodb

Question

Как импортировать данные из mongodb в elasticsearch без oplog? У меня есть набор данных 20 ГБ. Я использую elasticsearch не для данных реального времени , а поиск в архивной базе данных.

Answer 1

Elasticsearch не является базой данных, поэтому данные не могут быть «импортированы» как таковые. Его система индексирования, поэтому вам нужно создать требуемые индексы из своего исходного набора данных.

Как вы это сделаете, это будет зависеть от структуры и дизайна ваших данных о манго и того, как вы хотите создать вам индексы Elasticsearch.

Есть некоторые опции, описанные в этом посте:

http://techhari.blogspot.ie/2013/11/data-import-options-with-elasticsearch.html

В очень простых условиях, вам нужно создать скрипт, который будет запрашивать данные Монго и затем поместить это в запрос HTTP, бьющий API Elasticsearch и создать необходимые индексы.